Optiveum là công ty tuyển dụng và tư vấn tập trung vào các dịch vụ nhân sự và CNTT, với hơn 20 năm kinh nghiệm trong những lĩnh vực này. Công ty kết nối các chuyên gia với những cơ hội làm việc theo dự án và lâu dài, bao gồm cả vị trí từ xa và tại văn phòng, đồng thời hợp tác với khách hàng ở Ba Lan và các thị trường quốc tế. Hoạt động tuyển dụng của công ty bao phủ các lĩnh vực CNTT, tài chính, kế toán, sản xuất, logistics và marketing, hỗ trợ các tổ chức tìm kiếm nhân tài cũng như các ứng viên đang theo đuổi cơ hội nghề nghiệp tiếp theo.
Kỹ sư dữ liệu Databricks cấp cao – Hợp đồng làm việc từ xa tại Ba Lan
Xây dựng các quy trình dữ liệu Databricks có khả năng mở rộng và giải pháp xử lý dữ liệu bằng Python cho các khách hàng công nghệ của Optiveum. Làm việc với AWS, Azure và Google Cloud Platform trên các tập dữ liệu phức tạp và kiến trúc dựa trên nền tảng đám mây.
Mô tả
- Tạo các giải pháp xử lý Databricks cho những tập dữ liệu lớn và đa dạng
- Phát triển và cải thiện các quy trình dữ liệu Python bằng công nghệ cloud-native
- Phối hợp với các kiến trúc sư giải pháp để thiết lập và duy trì các tiêu chuẩn kỹ thuật dữ liệu
- Duy trì tính toàn vẹn, bảo mật và khả năng mở rộng của dữ liệu trên các môi trường đám mây
- Thiết kế kiến trúc có khả năng mở rộng cho các khối lượng công việc dữ liệu phức tạp trên AWS, Azure và Google Cloud Platform
- Áp dụng các framework dữ liệu hiện đại, phương pháp lập trình và nguyên tắc DevOps
Yêu cầu
- Có kinh nghiệm thực tế trong lĩnh vực kỹ thuật dữ liệu thương mại và thành thạo Databricks
- Kỹ năng Python nâng cao để tự động hóa và chuyển đổi dữ liệu
- Có kinh nghiệm thương mại với ít nhất một nền tảng đám mây lớn: AWS, Azure hoặc Google Cloud Platform
- Kỹ năng giao tiếp bằng văn bản và lời nói hiệu quả
- Thành thạo tiếng Anh và tiếng Ba Lan ở trình độ nâng cao
- Nắm vững SQL, bao gồm tối ưu hóa truy vấn và mô hình hóa dữ liệu
- Có kiến thức thực tế về các phương pháp DevOps, quy trình CI/CD và các công cụ Infrastructure as Code như Terraform hoặc Bicep
- Có kinh nghiệm với các công nghệ truyền dữ liệu theo thời gian thực, bao gồm Kafka hoặc Spark Streaming
- Hiểu biết về các nền tảng lưu trữ đám mây như Data Lake, Snowflake hoặc Synapse
- Có kinh nghiệm thực tế với PySpark để xử lý dữ liệu phân tán
- Có các chứng chỉ chuyên môn phù hợp, chẳng hạn như Databricks Certified Data Engineer Associate hoặc các chứng chỉ dữ liệu đám mây