Sigma Software Group là một công ty tư vấn công nghệ đa quốc gia được thành lập vào năm 2002. Các đội ngũ của công ty cung cấp dịch vụ phát triển phần mềm, thiết kế đồ họa, kiểm thử và hỗ trợ kỹ thuật cho khách hàng trong các lĩnh vực như ô tô, chăm sóc sức khỏe, viễn thông, hàng không, ngân hàng, trò chơi điện tử, bất động sản và quảng cáo. Công ty tuyển dụng các chuyên gia công nghệ thông tin để tham gia những dự án kỹ thuật phức tạp, đồng thời hỗ trợ phát triển chuyên môn thông qua hoạt động cố vấn và học tập liên tục. Cơ hội làm việc từ xa là một phần trong mô hình làm việc của công ty, với các dự án phục vụ những tổ chức như AstraZeneca, Scania và SAS.
Kỹ sư dữ liệu (Azure, Spark) — Làm việc từ xa tại Ukraine
Xây dựng nền tảng dữ liệu Azure và các quy trình dữ liệu có khả năng mở rộng, phục vụ phân tích, báo cáo và ra quyết định dựa trên dữ liệu. Phát triển quy trình Spark và hoạt động xử lý dữ liệu đáng tin cậy, phối hợp với nhiều nhóm.
Mô tả
- Xây dựng nền tảng dữ liệu và quy trình dữ liệu có khả năng mở rộng, đáng tin cậy, phục vụ nhu cầu phân tích và vận hành.
- Tạo quy trình xử lý dữ liệu bằng các khung phân tán như Apache Spark và PySpark trên Databricks.
- Góp phần phát triển nền tảng dữ liệu đám mây bằng các dịch vụ Azure, bao gồm Data Factory, Synapse, Microsoft Fabric, Databricks, Event Hub và Azure Data Lake Storage.
- Tích hợp và xử lý dữ liệu nội bộ lẫn bên ngoài, đồng thời duy trì tính nhất quán, chất lượng và độ tin cậy.
- Chịu trách nhiệm về độ tin cậy, hoạt động giám sát và hiệu suất của quy trình dữ liệu.
- Phối hợp với chuyên viên phân tích, nhà khoa học dữ liệu và kỹ sư để chuyển nhu cầu kinh doanh và phân tích thành các giải pháp dữ liệu vững chắc.
- Cải thiện các phương pháp kỹ thuật dữ liệu, bao gồm tiêu chuẩn quy trình dữ liệu, kiểm thử và độ tin cậy trong vận hành.
- Đánh giá và hỗ trợ đưa các công cụ, công nghệ vào môi trường kỹ thuật dữ liệu.
Yêu cầu
- Có ít nhất bốn năm kinh nghiệm thực tế trong lĩnh vực kỹ thuật dữ liệu hoặc xây dựng nền tảng xử lý dữ liệu.
- Sử dụng SQL thành thạo và có kinh nghiệm Python vững chắc trong phát triển, duy trì các quy trình dữ liệu.
- Có kinh nghiệm với các khung xử lý phân tán như Apache Spark hoặc PySpark; kinh nghiệm với Databricks là một lợi thế lớn.
- Có kinh nghiệm thực tế trong thiết kế và triển khai quy trình dữ liệu đám mây, ưu tiên trên Azure.
- Đã thiết kế quy trình dữ liệu và mô hình dữ liệu cho các hệ thống phân tích ở quy mô sản xuất.
- Hiểu về thiết kế ETL/ELT, mô hình hóa thứ nguyên và các nguyên tắc kho dữ liệu.
- Có kinh nghiệm với kiến trúc hồ dữ liệu hiện đại và các định dạng như Parquet, JSON.
- Đã sử dụng các công cụ điều phối quy trình như Airflow.
- Có kinh nghiệm phát triển cơ sở dữ liệu và tối ưu hóa hiệu suất.
- Có khả năng thiết kế giải pháp dữ liệu dễ bảo trì, có khả năng mở rộng và không cần nhiều giám sát.
- Có khả năng giao tiếp và phối hợp hiệu quả.
- Có trình độ tiếng Anh đủ để sử dụng trong công việc chuyên môn.
- Có kinh nghiệm với các kho dữ liệu đám mây như Snowflake, BigQuery hoặc Redshift.
- Có kinh nghiệm với công nghệ truyền dữ liệu liên tục như Event Hub, Kafka hoặc Spark Streaming.
- Có kinh nghiệm với Delta Lake hoặc các công nghệ lakehouse khác.
- Am hiểu các phương pháp CI/CD và quy trình phát triển dựa trên Git.
- Có kinh nghiệm làm việc trong môi trường phát triển linh hoạt (agile).
Phúc lợi
- Làm việc từ xa.