Data Engineer

MÔ TẢ CÔNG VIỆC:

- Thiết kế và phát triển mở rộng các job xử lý dữ liệu

- Giám sát dữ liệu, chạy và migrate, chuyển đổi dữ liệu giữa các datasource.

- Đảm bảo chất lượng dữ liệu.

- Chịu trách nhiệm bảo trì, cải thiện, làm sạch và thao tác dữ liệu, khắc phục các sự cố tồn tại

- Tối ưu hóa CSDL và duy trì nâng cấp các chuẩn kiến trúc của dữ liệu

- Xây dựng các tài liệu Thiết kế tổng thể, giải pháp, Thiết kế chi tiết, tài liệu Giám sát.

- Nghiên cứu công nghệ mới.

- Xây dựng framework xử lý dữ liệu.

- Giám sát số liệu, phân tích để đưa ra các cải tiến hệ thống và quy trình xử lý dữ liệu.

- Phát triển các báo cáo ad-hoc.

- Thiết kế, implement, hỗ trợ các dữ liệu quan trọng và dữ liệu theo thời gian thực

YÊU CẦU:

- Có kinh nghiệm làm việc trong mảng Data Engineer từ 1.5 năm.

- Kiến thức về lập trình, cấu trúc dữ liệu & giải thuật.

- Kiến thức về lập trình lưu trữ, xử lý dữ liệu phân tán, xử lý dữ liệu lớn (Hadoop, Spark, Elastic Search...)

- Kiến thức về xây dựng luồng xử lý dữ liệu (batch processing, stream procesing, ...)

- Kiến thức về các loại CSDL (RDBMS, Graph Databases, NoSQL Products, ...)

- Kiến thức về thiết kế, tổ chức Data warehouse (snow schema, star schema, ...)

- Kiến thức về thiết kế, tổ chức luồng xử lý dữ liệu (batch processing, stream procesing,...)

- Ưu tiên có kinh nghiệm CD trong Oracle