EUROPEAN DYNAMICS
EUROPEAN DYNAMICS
501 – 1.000 Nhân viên
Hậu cầnTiếp thịTư vấn
EUROPEAN DYNAMICS phát triển phần mềm chính phủ điện tử và cung cấp dịch vụ CNTT cho các cơ quan, tổ chức và doanh nghiệp lớn trên toàn thế giới. Danh mục sản phẩm và dịch vụ của công ty bao gồm hệ thống đăng ký hộ tịch và đăng ký kinh doanh điện tử, hệ thống quản lý dữ liệu tài chính, nền tảng mua sắm công, giải pháp đám mây, tư vấn, phát triển phần mềm theo yêu cầu và dịch vụ thuê ngoài. Công ty cũng đầu tư vào hoạt động nghiên cứu và phát triển, tập trung vào các công nghệ thông tin và truyền thông mới nổi, đồng thời tham gia các dự án quốc tế. Với hoạt động tại hơn 47 quốc gia, EUROPEAN DYNAMICS chú trọng chất lượng và bảo mật trong các sản phẩm và dịch vụ của mình.

Kỹ sư Phân tích Cơ sở dữ liệu Cấp cao

Xây dựng và tối ưu hóa các quy trình dữ liệu bằng dbt, PySpark và Apache Iceberg cho các dự án công nghệ khu vực công tại châu Âu. Vị trí làm việc kết hợp tại Brussels, tại văn phòng công ty hoặc cơ sở của khách hàng.

Mô tả

  • Xây dựng các quy trình và luồng chuyển đổi dữ liệu đáng tin cậy, có khả năng mở rộng.
  • Cải thiện hiệu năng dự án dbt và rút ngắn thời gian thực thi.
  • Tạo và ghi chép các bước kiểm tra chất lượng dữ liệu và kiểm soát trong dbt.
  • Thiết lập kiểm thử hồi quy và xác thực tự động để duy trì chất lượng, tính nhất quán của đầu ra quy trình dữ liệu.
  • Chia sẻ các phương pháp trong nhóm để duy trì và phát triển dự án dbt.
  • Chuyển đổi yêu cầu nghiệp vụ và tài liệu phân tích thành các quy trình chuyển đổi dữ liệu có thể vận hành.
  • Phối hợp tại chỗ với nhóm Phát triển và đội ngũ CNTT của một khách hàng lớn.

Yêu cầu

  • Có bằng đại học về Khoa học Máy tính, Công nghệ Thông tin, Kỹ thuật Hệ thống hoặc lĩnh vực liên quan, cùng ít nhất 12 năm kinh nghiệm CNTT phù hợp.
  • Có kinh nghiệm thực tiễn sử dụng dbt, ưu tiên dbt Core, để thiết kế, duy trì, kiểm thử, lập tài liệu và mở rộng các dự án chuyển đổi phân tích dữ liệu trong môi trường sản xuất.
  • Có kinh nghiệm về kỹ thuật phân tích dữ liệu và mô hình hóa dữ liệu hiện đại, bao gồm kiến trúc phân lớp, macro có thể tái sử dụng, kiểm soát chất lượng dữ liệu và CI/CD.
  • Có kinh nghiệm viết các phép chuyển đổi PySpark để xử lý dữ liệu quy mô lớn; biết tối ưu hóa tác vụ Spark là một lợi thế.
  • Có kinh nghiệm thực tiễn với Apache Iceberg, bao gồm thay đổi phân vùng và lược đồ, quản lý ảnh chụp dữ liệu và truy cập dữ liệu theo thời điểm.
  • Có kinh nghiệm với các công cụ điều phối và lập lịch tác vụ như Dagster.
  • Có kiến thức chuyên sâu về SAS ETL và các hệ thống mã cũ; kinh nghiệm chuyển quy trình SAS sang dbt là một lợi thế lớn.
  • Thành thạo SQL, bao gồm các phép chuyển đổi phức tạp, tối ưu hóa hiệu năng và xử lý tăng dần.
  • Hiểu rõ cách thực thi Apache Spark, phân vùng, tối ưu hóa bố cục tệp và tinh chỉnh hiệu năng.
  • Có kiến thức chuyên sâu về xác thực, đối soát và kiểm thử dữ liệu khi chuyển hệ thống cũ sang dbt và PySpark.
  • Có kiến thức về quản lý phiên bản và phát triển cộng tác, bao gồm Git, đánh giá mã, quản lý bản phát hành và quy trình triển khai tự động.
  • Sử dụng tiếng Anh thành thạo.

Phúc lợi

  • Mức lương cạnh tranh dựa trên năng lực và kinh nghiệm.
  • Có thể chọn làm việc theo hợp đồng hoặc nhận gói đãi ngộ đầy đủ.
  • Quy trình ứng tuyển được bảo mật.
  • Môi trường làm việc quốc tế, đa ngôn ngữ và đa văn hóa.
  • Cơ hội việc làm bình đẳng.

Việc làm liên quan

EUROPEAN DYNAMICS

Kỹ sư Phân tích Cơ sở dữ liệu Cấp cao

EUROPEAN DYNAMICS
501 – 1.000 Nhân viên
Hậu cầnTiếp thịTư vấn

Xây dựng các quy trình dữ liệu có khả năng mở rộng bằng dbt, PySpark và Iceberg. Hỗ trợ các tổ chức châu Âu thông qua kỹ thuật phân tích dữ liệu, kiểm thử và chuyển đổi từ các hệ thống SAS cũ.

Mở