Beyond Soluções là công ty tư vấn công nghệ phục vụ thị trường tài chính thông qua các đội ngũ triển khai linh hoạt, tư vấn kỹ thuật và các dịch vụ ứng dụng phần mềm. Được thành lập vào năm 2017, công ty kết hợp các nhóm chuyên môn với hoạt động tư vấn công nghệ và giải pháp nhân sự, bao gồm Hunting và Outsourcing 2.0. Sản phẩm số hóa quy trình tiếp nhận khách hàng của công ty sử dụng trí tuệ nhân tạo để giúp các tổ chức dịch vụ tài chính tiếp nhận khách hàng nhanh chóng và an toàn hơn, đồng thời nâng cao hiệu quả vận hành, hỗ trợ tuân thủ và rút ngắn thời gian đưa sản phẩm ra thị trường.
Kỹ sư Dữ liệu Cấp cao — Làm việc từ xa tại Brazil
Vị trí kỹ sư dữ liệu cấp cao làm việc từ xa, hỗ trợ Monte Bravo xây dựng các quy trình dữ liệu và kiến trúc lakehouse. Sử dụng Python, PySpark, AWS và dbt để phát triển một nền tảng tài chính đổi mới.
Mô tả
- Phát triển các ứng dụng Python và quy trình dữ liệu sẵn sàng cho môi trường production
- Xử lý các tập dữ liệu dung lượng lớn trong môi trường phân tán bằng PySpark
- Xây dựng, quản lý và kiểm soát các phép biến đổi dữ liệu bằng dbt
- Điều phối quy trình dữ liệu bằng Airflow
- Sử dụng GitHub để quản lý phiên bản, pull request, review mã nguồn và tích hợp CI/CD
- Làm việc với các dịch vụ AWS như Lambda, CloudWatch, S3, Redshift và Aurora
- Triển khai và sử dụng Apache Iceberg
- Áp dụng các mô hình Data Lakehouse và Medallion Architecture
- Thực hiện các quy trình ETL và ELT
- Góp phần xây dựng một nền tảng tài chính đổi mới từ đầu mà không bị ràng buộc bởi hệ thống kỹ thuật cũ
Yêu cầu
- Có kinh nghiệm thực tế với Python trong việc xây dựng các ứng dụng và quy trình dữ liệu hiệu năng cao, dễ bảo trì
- Có kinh nghiệm sử dụng PySpark để xử lý các tập dữ liệu phân tán quy mô lớn
- Kỹ năng SQL nâng cao
- Có kinh nghiệm xây dựng và kiểm soát các phép biến đổi dữ liệu bằng dbt
- Nắm vững Airflow để điều phối quy trình dữ liệu
- Có kinh nghiệm chuyên sâu với GitHub, bao gồm quản lý phiên bản, pull request, review mã nguồn và tích hợp CI/CD
- Am hiểu các dịch vụ AWS, đặc biệt là Lambda, CloudWatch, S3, Redshift và Aurora
- Có kinh nghiệm với Apache Iceberg
- Hiểu về Data Lakehouse và Medallion Architecture
- Có kinh nghiệm với quy trình ETL và ELT
- Có kinh nghiệm với Databricks là một lợi thế
- Biết Kafka là một lợi thế, đặc biệt trong phát triển producer và nhắn tin hướng sự kiện
Phúc lợi
- Có cơ hội phát triển chuyên môn xuyên suốt từ đầu đến cuối
- Môi trường làm việc hỗ trợ và lành mạnh
- Tham gia các dự án thực tế có tác động ý nghĩa
- Văn hóa khuyến khích đổi mới, tinh thần làm chủ kỹ thuật và tính tự chủ
- Cơ hội xây dựng một nền tảng từ đầu mà không bị ràng buộc bởi hệ thống kỹ thuật cũ
- Được tiếp cận các công cụ hàng đầu, các thông lệ tốt đã được thiết lập và những phương pháp đổi mới