MỤC ĐÍCH CHỨC DANH
- Chịu trách nhiệm dẫn dắt đội ngũ Data Engineer trong việc thiết kế, phát triển, vận hành và tối ưu các nền tảng, luồng tích hợp và xử lý dữ liệu của DWH; bảo đảm dữ liệu được thu thập, chuyển đổi và cung cấp một cách ổn định, chính xác và hiệu quả phục vụ các nhu cầu báo cáo, phân tích và khai thác dữ liệu. Chịu trách nhiệm định hướng kỹ thuật, nâng cao năng lực đội ngũ và bảo đảm chất lượng triển khai các giải pháp dữ liệu theo kiến trúc đã được phê duyệt.
MÔ TẢ CÔNG VIỆC
1. Thiết kế và phát triển nền tảng dữ liệu
- Thiết kế, phát triển và tối ưu các luồng ETL/ELT để thu thập, chuyển đổi và nạp dữ liệu từ nhiều hệ thống nguồn vào Data Warehouse, Data Lake hoặc Lakehouse.
- Thiết kế kiến trúc xử lý dữ liệu, cơ chế lưu trữ và tích hợp dữ liệu đáp ứng yêu cầu về khả năng mở rộng, hiệu năng và độ tin cậy.
- Xây dựng và vận hành các data pipeline phục vụ nhu cầu phân tích, báo cáo và khai thác dữ liệu của tổ chức.
- Đảm bảo tính chính xác, đầy đủ và nhất quán của dữ liệu xuyên suốt toàn bộ vòng đời xử lý.
2. Dẫn dắt kỹ thuật và tiêu chuẩn phát triển
- Định hướng giải pháp kỹ thuật và kiến trúc triển khai cho các dự án dữ liệu.
- Đánh giá, rà soát và phê duyệt thiết kế kỹ thuật, mã nguồn và giải pháp triển khai của đội ngũ Data Engineer.
- Xây dựng, duy trì và cải tiến các tiêu chuẩn phát triển, coding standards, data engineering best practices và quy trình vận hành.
- Hướng dẫn, đào tạo và hỗ trợ các thành viên trong nhóm nâng cao năng lực chuyên môn.
3. Vận hành và tối ưu hệ thống dữ liệu
- Giám sát, phân tích và tối ưu hiệu năng các hệ thống xử lý dữ liệu, ETL/ELT jobs và data pipelines.
- Thực hiện troubleshooting, phân tích nguyên nhân gốc rễ và xử lý các sự cố liên quan đến dữ liệu hoặc hệ thống.
- Chủ động đề xuất các giải pháp nâng cấp, tối ưu chi phí và hiện đại hóa nền tảng dữ liệu.
4. Quản lý triển khai và phối hợp dự án
- Xây dựng tài liệu kỹ thuật, tài liệu triển khai, vận hành và hỗ trợ chuyển giao hệ thống.
- Chuẩn bị deployment package và thực hiện triển khai trên các môi trường DEV, UAT và Production.
- Phối hợp với các đội ngũ Data Architecture, BI, Application Development, Infrastructure, Security và các đơn vị nghiệp vụ để đảm bảo triển khai thành công các giải pháp dữ liệu.
- Hỗ trợ quản lý tiến độ, phân công công việc và đảm bảo chất lượng đầu ra của đội ngũ Data Engineering.
5. Nghiên cứu và đổi mới công nghệ
- Đánh giá các công nghệ, công cụ và nền tảng dữ liệu mới nhằm nâng cao hiệu quả vận hành và phát triển.
- Thúc đẩy việc áp dụng các thực hành DataOps, CI/CD, tự động hóa kiểm thử và giám sát dữ liệu.
- Đề xuất các cải tiến về kiến trúc dữ liệu, quy trình phát triển và vận hành.
