Sigma Software Group
Sigma Software Group
1.001 – 5.000 Nhân viên
Chăm sóc sức khỏeÔ tôTư vấn
Sigma Software Group là một công ty tư vấn công nghệ đa quốc gia được thành lập vào năm 2002. Các đội ngũ của công ty cung cấp dịch vụ phát triển phần mềm, thiết kế đồ họa, kiểm thử và hỗ trợ kỹ thuật cho khách hàng trong các lĩnh vực như ô tô, chăm sóc sức khỏe, viễn thông, hàng không, ngân hàng, trò chơi điện tử, bất động sản và quảng cáo. Công ty tuyển dụng các chuyên gia công nghệ thông tin để tham gia những dự án kỹ thuật phức tạp, đồng thời hỗ trợ phát triển chuyên môn thông qua hoạt động cố vấn và học tập liên tục. Cơ hội làm việc từ xa là một phần trong mô hình làm việc của công ty, với các dự án phục vụ những tổ chức như AstraZeneca, Scania và SAS.

Kỹ sư dữ liệu cấp cao, chuyển đổi sang Databricks

Chuyển nền tảng phân tích bán lẻ quy mô doanh nghiệp từ BigQuery sang Databricks Lakehouse. Xây dựng pipeline PySpark mở rộng, kiến trúc medallion và nền tảng dữ liệu đám mây được quản trị.

Mô tả

  • Hỗ trợ chuyển đổi nền tảng phân tích quy mô lớn từ BigQuery sang Databricks.
  • Thiết kế và xây dựng kiến trúc Lakehouse có khả năng mở rộng bằng Databricks và Delta Lake.
  • Đánh giá các khối lượng công việc ETL và ELT hiện có, đồng thời xác định phương án chuyển đổi.
  • Xây dựng và tối ưu pipeline xử lý khối lượng lớn dữ liệu bán lẻ và dữ liệu phân tích.
  • Triển khai chiến lược xử lý tăng dần và các khuôn khổ chuyển đổi có khả năng mở rộng.
  • Phát triển và duy trì giải pháp xử lý dữ liệu Spark bằng PySpark.
  • Thiết kế và duy trì các lớp medallion Bronze, Silver và Gold.
  • Áp dụng các biện pháp quản trị và bảo mật dữ liệu bằng Unity Catalog.
  • Phối hợp với các nhóm Khoa học dữ liệu, Phân tích, Sản phẩm và Kỹ thuật khách hàng.
  • Đóng góp vào các cuộc thảo luận về kiến trúc và thiết kế giải pháp kỹ thuật.
  • Tạo các thành phần nền tảng dữ liệu có thể tái sử dụng và tiêu chuẩn kỹ thuật.
  • Rà soát mã và cải thiện độ tin cậy, khả năng bảo trì của nền tảng.
  • Khắc phục sự cố và tối ưu các khối lượng công việc SQL và Spark phức tạp.
  • Hỗ trợ triển khai lên môi trường thực tế và hiện đại hóa nền tảng.

Yêu cầu

  • Có ít nhất năm năm kinh nghiệm chuyên môn ở vị trí Kỹ sư dữ liệu.
  • Có kỹ năng lập trình Python vững vàng và thành thạo SQL nâng cao.
  • Có kinh nghiệm thực tiễn với Databricks trong môi trường thương mại.
  • Nắm vững Apache Spark, đặc biệt là PySpark.
  • Có kinh nghiệm thiết kế và xây dựng nền tảng dữ liệu đám mây hiện đại.
  • Có kinh nghiệm phát triển pipeline ETL và ELT, cùng các giải pháp xử lý dữ liệu quy mô lớn.
  • Có kinh nghiệm thực tiễn với Delta Lake.
  • Có kinh nghiệm với Spark Declarative Pipelines.
  • Có kinh nghiệm giám sát cụm, phân tích chỉ số và tối ưu hiệu suất.
  • Hiểu rõ kiến trúc xử lý dữ liệu phân tán.
  • Hiểu các khái niệm về kho dữ liệu và mô hình hóa dữ liệu chiều.
  • Có kinh nghiệm với Airflow hoặc công cụ điều phối tương đương.
  • Có kinh nghiệm tối ưu các khối lượng công việc SQL phân tích phức tạp.
  • Có kinh nghiệm áp dụng CI/CD cho nền tảng kỹ thuật dữ liệu.
  • Có kỹ năng khắc phục sự cố và tối ưu hiệu suất.
  • Có khả năng phối hợp hiệu quả với các nhóm đa chức năng, quốc tế.
  • Có trình độ tiếng Anh từ trung cấp cao trở lên.

Phúc lợi

  • Có thể làm việc từ xa.
  • Có cơ hội học tập liên tục.
  • Có cơ hội phát triển cùng công nghệ.
  • Tạo ra tác động thiết thực thông qua công việc kỹ thuật.
  • Làm việc với các dự án quốc tế phức tạp.

Việc làm liên quan

Intetics

Kiến trúc sư dữ liệu cấp cao (nói tiếng Pháp)

Intetics

Định hình kiến trúc dữ liệu có khả năng mở rộng và nền tảng SQL Server cho Intetics. Vai trò bao gồm quản trị dữ liệu, tích hợp REST và kiểm thử triển khai.

Mở
Sedona Digital

Kỹ sư dữ liệu cấp cao, làm việc từ xa tại Romania | Sedona Digital

Sedona Digital

Xây dựng và hỗ trợ nền tảng dữ liệu PySpark, SQL và Databricks cho khách hàng trong lĩnh vực bảo hiểm của Sedona Digital. Phát triển quy trình dữ liệu, đối soát, chất lượng dữ liệu và giải pháp dữ liệu đám mây.

Mở
Intetics

Kỹ sư dữ liệu ML, làm việc từ xa tại Romania

Intetics

Xây dựng hạ tầng dữ liệu thời gian thực, đồ thị và chuỗi thời gian phục vụ phân tích hiệu suất vận động viên. Hỗ trợ đánh giá học máy và các hệ thống AI cho khách hàng của Intetics tại Hoa Kỳ.

Mở
AllCloud

Kỹ sư dữ liệu thành thạo tiếng Hebrew

AllCloud

Xây dựng nền tảng lakehouse AWS, quy trình dữ liệu và giải pháp AI cho khách hàng tư vấn đám mây của AllCloud. Thiết kế kiến trúc có khả năng mở rộng và hỗ trợ khách hàng hiện đại hóa hệ thống dữ liệu.

Mở
Globaldev Group

Kỹ sư dữ liệu backend làm việc từ xa – Ukraine

Globaldev Group
201 – 500 Nhân viên
Hậu cầnSaaSTư vấn

Xây dựng các pipeline dữ liệu, mô hình dữ liệu và hạ tầng backend có khả năng mở rộng cho các sản phẩm dữ liệu không ngừng phát triển. Làm việc với dbt, Snowflake, Databricks, các nền tảng điều phối và công cụ kỹ thuật GenAI.

Mở