Valtech
Valtech
Valtech là một agency kỹ thuật số toàn cầu, hỗ trợ các tổ chức cải thiện trải nghiệm khách hàng và phát triển hoạt động kinh doanh số. Công ty kết hợp công nghệ, tiếp thị, dữ liệu và AI để hỗ trợ các sáng kiến thương mại, chuyển đổi số doanh nghiệp và nâng cao hiệu quả tiếp thị. Với các đội ngũ và văn phòng trên khắp thế giới, Valtech đồng hành cùng các doanh nghiệp trong chiến lược số, đổi mới trải nghiệm và ứng dụng dữ liệu vào thực tiễn để định hình tương lai số hiệu quả hơn.

Kỹ sư Dữ liệu Cấp cao, Làm việc từ xa tại Bulgaria

Xây dựng nền tảng dữ liệu đám mây và quy trình dữ liệu tại Valtech để phục vụ phân tích, AI và các sản phẩm dữ liệu. Làm việc với AWS, Databricks và các môi trường đám mây khác, bao gồm các trường hợp ứng dụng GenAI.

Mô tả

  • Tạo và cải tiến nền tảng dữ liệu đám mây phục vụ phân tích, AI và các sản phẩm dữ liệu.
  • Xây dựng các quy trình xử lý theo lô, trực tuyến và gần thời gian thực đáng tin cậy bằng Spark và Delta Lake.
  • Phát triển quy trình tiếp nhận, chuyển đổi và tuyển chọn dữ liệu có cấu trúc và phi cấu trúc.
  • Áp dụng kiến trúc lakehouse cùng các lớp medallion bronze, silver và gold.
  • Hỗ trợ di chuyển khối lượng công việc giữa các đám mây, bao gồm tái nền tảng hóa quy trình dữ liệu và mô hình dữ liệu.
  • Tạo bộ dữ liệu sẵn sàng triển khai cho phân tích, học máy, mô hình nhân quả và tối ưu hóa.
  • Phát triển quy trình dữ liệu cho ứng dụng GenAI, bao gồm LLM, RAG, luồng dữ liệu vector và kiến trúc tác tử.
  • Sử dụng Databricks MLflow, Unity Catalog hoặc công cụ tương đương.
  • Tạo mô hình dữ liệu logic và vật lý.
  • Điều phối quy trình bằng Databricks Workflows, Airflow, dbt hoặc công cụ tương đương.
  • Sử dụng các mô hình kiến trúc hướng sự kiện và xử lý luồng.
  • Quản lý quản trị dữ liệu, nguồn gốc, chất lượng và quyền truy cập bằng Unity Catalog, AWS Lake Formation, Microsoft Purview, GCP Dataplex hoặc công cụ tương tự.
  • Theo dõi mức độ cập nhật dữ liệu, độ tin cậy của quy trình và hiệu suất SLA.
  • Cung cấp dữ liệu qua API, đầu vào đặc trưng và điểm cuối phân tích.
  • Cải thiện hiệu suất, khả năng mở rộng và hiệu quả chi phí của quy trình dữ liệu và hạ tầng.
  • Làm rõ nhu cầu của các bên liên quan, xem xét lại yêu cầu và đề xuất phương án thay thế.
  • Phối hợp với nhà khoa học dữ liệu, kỹ sư ML, chuyên viên phân tích, đội ngũ nền tảng và các bên liên quan trong kinh doanh.
  • Hỗ trợ các nhóm áp dụng sản phẩm dữ liệu và đóng góp vào các phương thức làm việc chung.

Yêu cầu

  • Có kinh nghiệm ở vị trí Kỹ sư Dữ liệu Cấp cao.
  • Có kinh nghiệm thực tiễn vững chắc với Apache Spark và Delta Lake.
  • Thành thạo Python và SQL.
  • Có kinh nghiệm thực tế đã được chứng minh trong xây dựng quy trình xử lý theo lô, quy trình xử lý luồng và nền tảng dữ liệu vận hành thực tế.
  • Nắm vững mô hình hóa dữ liệu, chất lượng dữ liệu và quản trị dữ liệu.
  • Có kinh nghiệm thực hành sâu rộng với Databricks Lakehouse Platform.
  • Có chuyên môn sâu về ít nhất một nền tảng đám mây lớn: AWS, GCP hoặc Azure/Fabric.
  • Sẵn sàng và có khả năng làm việc trên nhiều nền tảng đám mây.
  • Có kinh nghiệm với kiến trúc lakehouse và hệ thống phân tán.
  • Hiểu rõ khả năng mở rộng, độ tin cậy và hiệu suất.
  • Ham học hỏi, có khả năng giải quyết vấn đề và hợp tác tốt trong công việc liên chức năng.
  • Thoải mái khi phản biện các yêu cầu kinh doanh.
  • Linh hoạt và quan tâm đến việc làm việc trên nhiều nền tảng.
  • Có kinh nghiệm Agile hoặc tư vấn là một lợi thế.
  • Có thêm kinh nghiệm về nền tảng đám mây hoặc di chuyển lên đám mây là một lợi thế.
  • Có kinh nghiệm với Snowflake là một lợi thế.
  • Có kinh nghiệm với GenAI và hệ thống dữ liệu AI, bao gồm quy trình RAG, cơ sở dữ liệu vector và chuẩn bị dữ liệu LLM, là một lợi thế.
  • Có kinh nghiệm về CI/CD cho quy trình dữ liệu và hạ tầng dưới dạng mã, bao gồm Terraform và CloudFormation, là một lợi thế.
  • Có kinh nghiệm với công cụ xử lý luồng như Kafka, tối ưu hóa Spark hoặc nền tảng ML và thử nghiệm là một lợi thế.
  • Có kinh nghiệm xây dựng sản phẩm dữ liệu hoặc nền tảng phân tích quy mô lớn là một lợi thế.

Phúc lợi

  • Thỏa thuận làm việc linh hoạt, bao gồm lựa chọn kết hợp tại văn phòng và từ xa, cùng 25 ngày nghỉ phép.
  • Hỗ trợ một phần chi phí đi lại và thẻ Multisport.
  • Bảo hiểm sức khỏe cao cấp giúp thuận tiện tiếp cận các dịch vụ chăm sóc sức khỏe.
  • Hỗ trợ chi phí đào tạo kỹ thuật và các kỹ năng khác, khóa học và chứng chỉ.
  • Lộ trình phát triển nghề nghiệp cá nhân dựa trên đánh giá hiệu suất.
  • Chương trình chăm sóc bản thân với tư vấn tâm lý và các buổi trao đổi nhóm.
  • Văn phòng tiện nghi, chú trọng năng suất làm việc.
  • Sự kiện nhóm và các buổi gặp gỡ toàn công ty.
  • Cơ hội phát triển chuyên môn.
  • Văn hóa làm việc được định hướng bởi các giá trị chung.
  • Cơ hội nghề nghiệp quốc tế.
  • Văn hóa hòa nhập với hỗ trợ về khả năng tiếp cận.

Việc làm liên quan

Intetics

Kỹ sư dữ liệu ML, làm việc từ xa tại Romania

Intetics

Xây dựng hạ tầng dữ liệu thời gian thực, đồ thị và chuỗi thời gian phục vụ phân tích hiệu suất vận động viên. Hỗ trợ đánh giá học máy và các hệ thống AI cho khách hàng của Intetics tại Hoa Kỳ.

Mở