Job description for Data Engineer at Công ty TNHH Công nghệ và Thương mại Lifesup
MÔ TẢ CÔNG VIỆC:
- Thiết kế và phát triển mở rộng các job xử lý dữ liệu
- Giám sát dữ liệu, chạy và migrate, chuyển đổi dữ liệu giữa các datasource.
- Đảm bảo chất lượng dữ liệu.
- Chịu trách nhiệm bảo trì, cải thiện, làm sạch và thao tác dữ liệu, khắc phục các sự cố tồn tại
- Tối ưu hóa CSDL và duy trì nâng cấp các chuẩn kiến trúc của dữ liệu
- Xây dựng các tài liệu Thiết kế tổng thể, giải pháp, Thiết kế chi tiết, tài liệu Giám sát.
- Nghiên cứu công nghệ mới.
- Xây dựng framework xử lý dữ liệu.
- Giám sát số liệu, phân tích để đưa ra các cải tiến hệ thống và quy trình xử lý dữ liệu.
- Phát triển các báo cáo ad-hoc.
- Thiết kế, implement, hỗ trợ các dữ liệu quan trọng và dữ liệu theo thời gian thực
YÊU CẦU:
- Có kinh nghiệm làm việc trong mảng Data Engineer từ 1.5 năm.
- Kiến thức về lập trình, cấu trúc dữ liệu & giải thuật.
- Kiến thức về lập trình lưu trữ, xử lý dữ liệu phân tán, xử lý dữ liệu lớn (Hadoop, Spark, Elastic Search...)
- Kiến thức về xây dựng luồng xử lý dữ liệu (batch processing, stream procesing, ...)
- Kiến thức về các loại CSDL (RDBMS, Graph Databases, NoSQL Products, ...)
- Kiến thức về thiết kế, tổ chức Data warehouse (snow schema, star schema, ...)
- Kiến thức về thiết kế, tổ chức luồng xử lý dữ liệu (batch processing, stream procesing,...)
- Ưu tiên có kinh nghiệm CD trong Oracle
