CI&T là công ty chuyển đổi công nghệ toàn cầu được thành lập vào năm 1995, hỗ trợ các tổ chức hiện đại hóa cách họ xây dựng, vận hành và tương tác thông qua các sản phẩm và dịch vụ số. Các lĩnh vực hoạt động của công ty bao gồm hiện đại hóa ứng dụng, giải pháp đám mây, AI và phân tích dữ liệu, trải nghiệm khách hàng, thiết kế sản phẩm, tư vấn chiến lược và trải nghiệm nhập vai. Với chuyên môn phục vụ các ngành như tư vấn, chăm sóc sức khỏe và tiếp thị, CI&T kết hợp năng lực công nghệ và kinh doanh để hỗ trợ các tổ chức theo đuổi tăng trưởng và vận hành hiệu quả hơn.
Kỹ sư dữ liệu Azure Databricks — CI&T, Brazil làm việc kết hợp
Xây dựng các đường ống dữ liệu có khả năng mở rộng với Azure và Databricks tại CI&T, một công ty chuyển đổi công nghệ. Làm việc với các sáng kiến Data Lakehouse, ETL/ELT và phân tích dữ liệu.
Mô tả
- Thiết kế và cải tiến các đường ống có khả năng mở rộng với Azure Databricks và Azure Data Factory
- Xây dựng quy trình ETL/ELT bao quát việc thu thập, chuyển đổi và cung cấp dữ liệu
- Triển khai Medallion Architecture và các giải pháp Data Lakehouse trên các lớp Bronze, Silver và Gold
- Tạo các giải pháp dữ liệu bằng PySpark, Spark SQL, SQL và Python
- Sử dụng Delta Lake để hỗ trợ chất lượng, tính nhất quán, hiệu năng và độ tin cậy của dữ liệu
- Phát triển và hoàn thiện các mô hình dữ liệu cho các trường hợp sử dụng về trí tuệ kinh doanh và phân tích
- Kết nối nhiều nguồn và hệ thống dữ liệu khác nhau, bao gồm cơ sở dữ liệu quan hệ và API
- Phối hợp với các nhóm BI, khoa học dữ liệu, kỹ thuật và kinh doanh
- Tuân thủ các thực hành về đảm bảo chất lượng, quản trị dữ liệu, kiểm soát phiên bản và CI/CD
- Áp dụng các công cụ AI tạo sinh và trợ lý lập trình để nâng cao hiệu quả và chất lượng phát triển
- Hỗ trợ các chương trình chuyển đổi và hiện đại hóa toàn cầu liên quan đến đám mây, dữ liệu và trí tuệ nhân tạo
Yêu cầu
- Có kinh nghiệm thực tế đã được chứng minh với vai trò Kỹ sư dữ liệu trong môi trường sản xuất
- Có kinh nghiệm thực hành chuyên sâu với Azure Databricks
- Có kỹ năng nâng cao về PySpark và Apache Spark, bao gồm xử lý và tối ưu các tập dữ liệu lớn
- Thành thạo SQL ở cấp độ nâng cao
- Có kinh nghiệm thực tế sử dụng Python cho kỹ thuật dữ liệu
- Có kinh nghiệm xây dựng và điều phối đường ống với Azure Data Factory
- Hiểu về ETL/ELT và Medallion Architecture trên các lớp Bronze, Silver và Gold
- Có kinh nghiệm với Delta Lake và môi trường Data Lakehouse
- Có kiến thức về mô hình hóa dữ liệu chiều và dữ liệu quan hệ
- Có kinh nghiệm với Git và các thực hành kiểm soát phiên bản, ưu tiên Bitbucket
- Có kiến thức về các công cụ và thực hành CI/CD, bao gồm Azure Pipelines hoặc Azure DevOps
- Có kinh nghiệm với các cơ sở dữ liệu quan hệ như SQL Server hoặc Oracle
- Có cách tiếp cận thực tế, phân tích và tập trung vào giải pháp trong công việc
- Có khả năng tự điều tra vấn đề và đề xuất cải tiến
- Ưu tiên có kinh nghiệm với phương pháp Kimball và các mô hình đa chiều; Azure Purview hoặc các công cụ quản trị và lập danh mục dữ liệu khác; Azure DevOps cho đường ống dữ liệu; các công nghệ truyền dữ liệu như Spark Structured Streaming hoặc Azure Event Hubs; Erwin hoặc công cụ tương đương; GitHub Copilot, Databricks Assistant hoặc các công cụ AI tương tự; và các chứng chỉ Azure DP-203 hoặc Databricks
Phúc lợi
- Bảo hiểm y tế và nha khoa
- Trợ cấp bữa ăn và thực phẩm
- Hỗ trợ chi phí chăm sóc trẻ em
- Nghỉ phép chăm sóc con mở rộng
- Quyền sử dụng các phòng tập và nhà cung cấp dịch vụ sức khỏe, thể chất và tinh thần thông qua Wellhub (Gympass) và TotalPass
- Chia sẻ lợi nhuận và thưởng theo kết quả (PLR)
- Bảo hiểm nhân thọ
- Cơ hội học tập liên tục thông qua CI&T University
- Tham gia câu lạc bộ giảm giá
- Tài nguyên trực tuyến miễn phí hỗ trợ sức khỏe thể chất, tinh thần và hạnh phúc
- Khóa học về thai kỳ và vai trò làm cha mẹ có trách nhiệm
- Hợp tác với các nhà cung cấp khóa học trực tuyến
- Nền tảng học ngôn ngữ
- Hỗ trợ tuyển dụng và điều chỉnh phù hợp cho người khuyết tật
- Đội ngũ chuyên trách về sức khỏe và hạnh phúc
- Chuyên gia về hòa nhập và các nhóm cộng đồng tương đồng