Trách nhiệm
Tham gia phát triển các sản phẩm nội bộ về xây dựng hệ thống dữ liệu trong mạng viễn thông như Datalake house, hệ thống giám sát chất lượng dịch vụ di động/cố định.
Tham gia nghiên cứu triển khai các công nghệ mới trong hệ sinh thái big data.
Thiết kế và phát triển mở rộng các job xử lý dữ liệu
Giám sát dữ liệu, chạy và migrate, chuyển đổi dữ liệu giữa các datasources bằng batch và streaming.
Bảo trì, cải thiện, làm sạch và thao tác dữ liệu, khắc phục các sự cố tồn tại. Tối ưu hóa CSDL và duy trì nâng cấp các chuẩn kiến trúc của dữ liệu
Đảm bảo chất lượng dữ liệu, kết quả mô hình, báo cáo định kỳ tự động.
Chịu trách nhiệm bảo trì, cải thiện, làm sạch và thao tác dữ liệu, khắc phục các sự cố tồn tại.
Thiết kế API giao tiếp với các hệ thống nội bộ, hợp tác với các nhóm khác để tích hợp giải pháp xây dựng sản phẩm hoàn thiện.
Đóng gói và triển khai trên môi trường Product với docker và docker-compose.
Xây dựng các tài liệu Thiết kế tổng thể, giải pháp, Thiết kế chi tiết, tài liệu Giám sát, theo quy trình DS/AI.
Tham gia nghiên cứu triển khai các công nghệ mới trong hệ sinh thái big data.
Thiết kế và phát triển mở rộng các job xử lý dữ liệu
Giám sát dữ liệu, chạy và migrate, chuyển đổi dữ liệu giữa các datasources bằng batch và streaming.
Bảo trì, cải thiện, làm sạch và thao tác dữ liệu, khắc phục các sự cố tồn tại. Tối ưu hóa CSDL và duy trì nâng cấp các chuẩn kiến trúc của dữ liệu
Đảm bảo chất lượng dữ liệu, kết quả mô hình, báo cáo định kỳ tự động.
Chịu trách nhiệm bảo trì, cải thiện, làm sạch và thao tác dữ liệu, khắc phục các sự cố tồn tại.
Thiết kế API giao tiếp với các hệ thống nội bộ, hợp tác với các nhóm khác để tích hợp giải pháp xây dựng sản phẩm hoàn thiện.
Đóng gói và triển khai trên môi trường Product với docker và docker-compose.
Xây dựng các tài liệu Thiết kế tổng thể, giải pháp, Thiết kế chi tiết, tài liệu Giám sát, theo quy trình DS/AI.
Yêu cầu
Có kinh nghiệm từ 2 năm trở lên với vị trí tương đương
Tốt nghiệp ĐH chuyên ngành: Khoa học dữ liệu, Khoa học máy tính, CNTT, Toán học ứng dụng, Điện tử viễn thông hoặc chuyên ngành khác liên quan.
Kiến thức về lập trình, cấu trúc dữ liệu và giải thuật, lý thuyết đồ thị.
Kiến thức về xác suất thống kê, đại số tuyến tính, giải tích.
Kiến thức về các loại CSDL (RDBMS, Graph Databases, NoSQL Products, ...).
Kiến thức về thiết kế, tổ chức DWH (snow schema, star schema, ...)
Kiến thức về thiết kế, tổ chức luồng xử lý dữ liệu (batch processing, stream procesing,...)
Kỹ năng lập trình thành thạo Java, Python, Scala, SQL.
Kỹ năng đọc bài báo khoa học và lập trình lại các thuật toán, giải pháp đề xuất trong bài báo khoa học.
Kỹ năng triển khai với các nền tảng containerization (Docker, Kubernetes) là một điểm cộng.
Có kỹ năng về xử lý dữ liệu phân tán, xử lý dữ liệu lớn (Hadoop, Spark, Elastic Search,...) là một điểm cộng.
Có kinh nghiệm làm việc với các thư viện python: numpy, matplotlib/seaborn, pandas, scikit learn, Jupyter notebook, v.v.
Có kinh nghiệm trong xây dựng kiến trúc, phát triển, triển khai các giải pháp phân tích dữ liệu là một điểm cộng.
Tốt nghiệp ĐH chuyên ngành: Khoa học dữ liệu, Khoa học máy tính, CNTT, Toán học ứng dụng, Điện tử viễn thông hoặc chuyên ngành khác liên quan.
Kiến thức về lập trình, cấu trúc dữ liệu và giải thuật, lý thuyết đồ thị.
Kiến thức về xác suất thống kê, đại số tuyến tính, giải tích.
Kiến thức về các loại CSDL (RDBMS, Graph Databases, NoSQL Products, ...).
Kiến thức về thiết kế, tổ chức DWH (snow schema, star schema, ...)
Kiến thức về thiết kế, tổ chức luồng xử lý dữ liệu (batch processing, stream procesing,...)
Kỹ năng lập trình thành thạo Java, Python, Scala, SQL.
Kỹ năng đọc bài báo khoa học và lập trình lại các thuật toán, giải pháp đề xuất trong bài báo khoa học.
Kỹ năng triển khai với các nền tảng containerization (Docker, Kubernetes) là một điểm cộng.
Có kỹ năng về xử lý dữ liệu phân tán, xử lý dữ liệu lớn (Hadoop, Spark, Elastic Search,...) là một điểm cộng.
Có kinh nghiệm làm việc với các thư viện python: numpy, matplotlib/seaborn, pandas, scikit learn, Jupyter notebook, v.v.
Có kinh nghiệm trong xây dựng kiến trúc, phát triển, triển khai các giải pháp phân tích dữ liệu là một điểm cộng.
Giới thiệu công ty
Gợi ý việc tương tự
Tuyển Data Engineer tại Thành Công (Tân Phú)
CÔNG TY CỔ PHẦN DỆT MAY- ĐẦU TƯ- THƯƠNG MẠI THÀNH CÔNG · Hồ Chí Minh
Thương lượngXem →
[R&D] Data Engineer
BOSCH AUTOMOTIVE R&D CENTER IN HCMC · Hồ Chí Minh
Thương lượngXem →
Data Engineer
HOME CREDIT VIETNAM - EXPLORE YOUR DREAM TEAM · Phú Thọ
Thương lượngXem →
(HN/HCM) Senior Data Engineer
NAVIGOS SEARCH'S CLIENT · Hà Nội
Thương lượngXem →
Big Data Engineer (Junior - Middle)
Thương lượng
