Chi tiết công việc Data Engineer_Hanoi tại Công ty TNHH Diksha Technologies
Mô tả công việc
Thiết kế, xây dựng và vận hành các hệ thống xử lý dữ liệu phục vụ hoạt động phân tích, báo cáo và khai thác
dữ liệu.
Phát triển, tối ưu các pipeline ETL/ELT nhằm thu thập, chuyển đổi và tích hợp dữ liệu từ nhiều nguồn khác
nhau.
Xây dựng, quản lý và tối ưu Data Warehouse, Data Lake theo kiến trúc hệ thống của dự án.
Phát triển các luồng xử lý dữ liệu batch và/hoặc streaming, đảm bảo hiệu năng và khả năng mở rộng.
Tối ưu truy vấn SQL, hiệu suất xử lý dữ liệu và tài nguyên hệ thống.
Kiểm tra chất lượng dữ liệu, đảm bảo tính chính xác, toàn vẹn và nhất quán của dữ liệu.
Phối hợp với các nhóm Data Analyst, BI, BA và đội ngũ phát triển để đáp ứng yêu cầu nghiệp vụ.
Giám sát, xử lý sự cố trong quá trình vận hành pipeline và xây dựng tài liệu kỹ thuật liên quan.Yêu cầu tuyển dụng
Có từ 2 năm kinh nghiệm làm việc ở vị trí Data Engineer hoặc vị trí tương đương.
Tốt nghiệp chuyên ngành Công nghệ thông tin, Khoa học máy tính, Hệ thống thông tin hoặc các ngành liên
quan.
Thành thạo SQL và có kinh nghiệm lập trình Python, Java hoặc Scala.
Có kinh nghiệm xây dựng, triển khai và vận hành các quy trình ETL/ELT.
Có kiến thức về cơ sở dữ liệu quan hệ, mô hình dữ liệu và Data Warehouse.
Có kinh nghiệm sử dụng một hoặc nhiều công nghệ như Apache Spark, Kafka, Airflow, Hadoop hoặc các
nền tảng dữ liệu tương đương.
Có tư duy phân tích, kỹ năng giải quyết vấn đề và khả năng làm việc nhóm tốt.
Ưu tiên ứng viên có kinh nghiệm trong lĩnh vực ngân hàng, tài chính hoặc các hệ thống dữ liệu lớn.
Có khả năng đọc hiểu tài liệu kỹ thuật bằng tiếng Anh
