Leega là một công ty tư vấn công nghệ tại Mỹ Latinh, tập trung vào phân tích dữ liệu, giải pháp đám mây và chuyển đổi số. Các dịch vụ của công ty bao gồm phát triển ứng dụng, học máy, phân tích quản lý rủi ro và hỗ trợ các tổ chức hiện đại hóa môi trường dữ liệu. Leega hợp tác với Google Cloud, AWS và Microsoft Azure, giúp doanh nghiệp cải thiện việc quản lý dữ liệu và ứng dụng công nghệ đám mây. Công ty cũng tự nhận là tổ chức đầu tiên trong khu vực được Google Cloud chứng nhận về Phân tích dữ liệu.
Kỹ sư dữ liệu GCP cấp trung tại Leega (Làm việc từ xa)
Gia nhập Leega với vai trò Kỹ sư dữ liệu GCP, xây dựng các pipeline có khả năng mở rộng và nền tảng dữ liệu hiện đại. Làm việc với Databricks, Spark, ETL/ELT và các kiến trúc Lakehouse.
Mô tả
- Xây dựng và duy trì các pipeline dữ liệu ETL/ELT có khả năng mở rộng
- Quản lý việc nhập, chuyển đổi và phân phối dữ liệu trong môi trường GCP
- Phát triển các giải pháp Databricks với Spark và PySpark
- Thiết kế và cải tiến các kiến trúc Data Lake, Data Warehouse và Lakehouse
- Kết nối API, cơ sở dữ liệu, nền tảng truyền dữ liệu trực tuyến và các nguồn dữ liệu khác
- Duy trì chất lượng dữ liệu, quản trị dữ liệu và độ tin cậy của nền tảng
- Theo dõi hiệu suất và giảm chi phí hạ tầng đám mây
- Phối hợp với các nhóm BI, Phân tích và Khoa học dữ liệu
Yêu cầu
- Có ít nhất bốn năm kinh nghiệm chuyên môn về Kỹ thuật dữ liệu
- Có kinh nghiệm thực tế với các dịch vụ Google Cloud như BigQuery, Cloud Storage hoặc Dataflow
- Có kinh nghiệm sử dụng Databricks và Spark để xử lý dữ liệu phân tán
- Kỹ năng Python và SQL vững vàng
- Có kinh nghiệm về mô hình hóa dữ liệu quan hệ và dữ liệu chiều
- Có kinh nghiệm điều phối pipeline bằng Airflow hoặc các công cụ tương đương
- Có kiến thức thực hành về Git và các phương pháp kiểm soát phiên bản
- Có kinh nghiệm làm việc với Delta Lake
- Có kiến thức về Terraform để triển khai hạ tầng dưới dạng mã
- Có kinh nghiệm sử dụng Docker
- Có kiến thức về các công nghệ truyền dữ liệu trực tuyến như Kafka hoặc Pub/Sub
- Có chứng chỉ GCP hoặc Databricks
- Có kinh nghiệm thiết kế kiến trúc Lakehouse
- Quen thuộc với các nền tảng BI bao gồm Power BI, Looker hoặc Tableau
- Hiểu về quản trị dữ liệu và Luật Bảo vệ Dữ liệu Chung của Brazil (LGPD)
- Trình độ tiếng Anh trung cấp hoặc nâng cao
Phúc lợi
- Có cơ hội phát triển chuyên môn liên tục
- Vị trí làm việc hoàn toàn từ xa
- Chào đón ứng viên là người khuyết tật