Valtech là một agency kỹ thuật số toàn cầu, hỗ trợ các tổ chức cải thiện trải nghiệm khách hàng và phát triển hoạt động kinh doanh số. Công ty kết hợp công nghệ, tiếp thị, dữ liệu và AI để hỗ trợ các sáng kiến thương mại, chuyển đổi số doanh nghiệp và nâng cao hiệu quả tiếp thị. Với các đội ngũ và văn phòng trên khắp thế giới, Valtech đồng hành cùng các doanh nghiệp trong chiến lược số, đổi mới trải nghiệm và ứng dụng dữ liệu vào thực tiễn để định hình tương lai số hiệu quả hơn.
Kỹ sư dữ liệu cấp cao – Làm việc từ xa tại Bồ Đào Nha
Kỹ sư dữ liệu cấp cao tại Valtech, phát triển các nền tảng dữ liệu đám mây hỗ trợ phân tích, AI và các sản phẩm dữ liệu vận hành. Vai trò này bao quát các pipeline có khả năng mở rộng, kiến trúc lakehouse, GenAI và các hệ thống học máy.
Mô tả
- Kiến trúc, phát triển và cải tiến các nền tảng dữ liệu đám mây hỗ trợ phân tích, AI và các sản phẩm dữ liệu
- Xây dựng các pipeline đáng tin cậy theo lô, streaming và gần thời gian thực cho thông tin có cấu trúc và phi cấu trúc
- Phát triển các quy trình thu thập, chuyển đổi, tuyển chọn và cung cấp dữ liệu
- Triển khai thiết kế lakehouse và kiến trúc medallion bằng Databricks hoặc Fabric
- Tạo các tập dữ liệu đã được tuyển chọn cho phân tích, học máy, mô hình hóa nhân quả, tối ưu hóa, GenAI, RAG và các ứng dụng dựa trên tác tử
- Áp dụng MLflow, Unity Catalog, Azure ML và các công cụ nền tảng tương đương để hỗ trợ các hệ thống AI vận hành
- Tạo mô hình dữ liệu và điều phối quy trình bằng Airflow, dbt, Databricks Workflows, Azure Data Factory hoặc các công cụ tương đương
- Thiết lập các phương pháp quản trị dữ liệu, theo dõi nguồn gốc, đảm bảo chất lượng, kiểm soát truy cập và khả năng quan sát
- Theo dõi độ mới của dữ liệu, độ tin cậy của pipeline, hiệu suất SLA, khả năng mở rộng, hiệu quả và chi phí
- Cung cấp API, đầu vào tính năng và các endpoint phân tích cho các ứng dụng học máy và AI ở phía sau
- Làm rõ và hoàn thiện nhu cầu kinh doanh thông qua hợp tác và phân tích với các bên liên quan
- Làm việc chặt chẽ với các nhà khoa học dữ liệu, kỹ sư ML, chuyên viên phân tích, đội ngũ nền tảng và các bên liên quan trong kinh doanh
- Thúc đẩy việc áp dụng các sản phẩm dữ liệu và phát triển các thực hành về dữ liệu và AI
Yêu cầu
- Có kinh nghiệm thực tế chuyên sâu với Apache Spark và Delta Lake
- Kỹ năng lập trình Python và SQL vững vàng
- Có kinh nghiệm rõ ràng trong việc xây dựng pipeline theo lô, streaming và các nền tảng dữ liệu cấp độ sản xuất
- Nắm vững các nguyên tắc về mô hình hóa dữ liệu, chất lượng và quản trị dữ liệu
- Có kinh nghiệm thực tế với các dịch vụ dữ liệu AWS và Databricks Lakehouse, hoặc Microsoft Azure/Fabric cùng các công cụ liên quan
- Có kinh nghiệm với kiến trúc lakehouse và các hệ thống dữ liệu phân tán
- Hiểu rõ về khả năng mở rộng, độ tin cậy và hiệu suất của pipeline
- Tò mò và có năng lực giải quyết vấn đề tốt
- Có kinh nghiệm hợp tác trong các nhóm liên chức năng
- Có kinh nghiệm trong môi trường Agile hoặc tư vấn là một lợi thế
- Biết về Snowflake hoặc GCP là một lợi thế nhưng không bắt buộc
- Có chuyên môn về AWS và Azure/Fabric, GenAI và các hệ thống dữ liệu AI, CI/CD cho pipeline dữ liệu và hạ tầng dưới dạng mã là mong muốn nhưng không bắt buộc
- Có thêm kinh nghiệm với Kafka, tối ưu hóa Spark, các khối lượng công việc phân tích nâng cao và học máy, hoặc các nền tảng phân tích quy mô lớn là một lợi thế
Phúc lợi
- Linh hoạt làm việc từ xa và kết hợp, tùy theo quốc gia
- Cơ hội phát triển nghề nghiệp thông qua việc luân chuyển quốc tế và các chương trình phát triển chuyên môn
- Cơ hội học hỏi với các công cụ hiện đại, chương trình đào tạo và chuyên gia trong ngành
- Gói đãi ngộ cạnh tranh