EUROPEAN DYNAMICS
EUROPEAN DYNAMICS
EUROPEAN DYNAMICS พัฒนาซอฟต์แวร์รัฐบาลอิเล็กทรอนิกส์และให้บริการด้านไอทีแก่หน่วยงาน องค์กร และบริษัทขนาดใหญ่ทั่วโลก ผลิตภัณฑ์และบริการของบริษัทครอบคลุมระบบทะเบียนราษฎร์และทะเบียนธุรกิจอิเล็กทรอนิกส์ ระบบจัดการข้อมูลทางการเงิน แพลตฟอร์มจัดซื้อจัดจ้างภาครัฐ โซลูชันคลาวด์ บริการให้คำปรึกษา การพัฒนาซอฟต์แวร์ตามความต้องการ และบริการเอาต์ซอร์สซิ่ง นอกจากนี้ บริษัทยังลงทุนด้านการวิจัยและพัฒนา โดยมุ่งเน้นเทคโนโลยีสารสนเทศและการสื่อสารเกิดใหม่ รวมทั้งมีส่วนร่วมในโครงการระหว่างประเทศ ด้วยการดำเนินงานในกว่า 47 ประเทศ EUROPEAN DYNAMICS ให้ความสำคัญกับคุณภาพและความปลอดภัยในผลิตภัณฑ์และบริการของบริษัท

วิศวกรวิเคราะห์ฐานข้อมูลอาวุโส

สร้างและปรับปรุงไปป์ไลน์ข้อมูลด้วย dbt, PySpark และ Apache Iceberg สำหรับโครงการเทคโนโลยีภาครัฐในยุโรป ทำงานแบบไฮบริดในกรุงบรัสเซลส์ โดยปฏิบัติงานที่สำนักงานบริษัทหรือสถานที่ของลูกค้า

รายละเอียด

  • สร้างไปป์ไลน์และเวิร์กโฟลว์การแปลงข้อมูลที่เชื่อถือได้และรองรับการขยายขนาด
  • ปรับปรุงประสิทธิภาพของโปรเจกต์ dbt และลดเวลาในการประมวลผล
  • สร้างและจัดทำเอกสารการตรวจสอบคุณภาพข้อมูลและการทดสอบควบคุมใน dbt
  • ตั้งค่าการทดสอบรีเกรสชันและการตรวจสอบความถูกต้องแบบอัตโนมัติ เพื่อรักษาคุณภาพและความสม่ำเสมอของผลลัพธ์จากไปป์ไลน์
  • แบ่งปันแนวปฏิบัติของทีมในการดูแลและพัฒนาโปรเจกต์ dbt
  • แปลงข้อกำหนดทางธุรกิจและเอกสารการวิเคราะห์ให้เป็นไปป์ไลน์การแปลงข้อมูลที่พร้อมใช้งาน
  • ทำงานร่วมกับทีมพัฒนาและทีมไอทีของลูกค้ารายใหญ่ ณ สถานที่ปฏิบัติงาน

คุณสมบัติ

  • วุฒิปริญญาตรีด้านวิทยาการคอมพิวเตอร์ เทคโนโลยีสารสนเทศ วิศวกรรมระบบ หรือสาขาที่เกี่ยวข้อง พร้อมประสบการณ์ด้านไอทีที่เกี่ยวข้องอย่างน้อย 12 ปี
  • มีประสบการณ์ใช้งาน dbt จริง โดยเฉพาะ dbt Core เพื่อออกแบบ ดูแล ทดสอบ จัดทำเอกสาร และขยายโปรเจกต์การแปลงข้อมูลเพื่อการวิเคราะห์ในระบบใช้งานจริง
  • มีประสบการณ์ด้านวิศวกรรมข้อมูลเชิงวิเคราะห์และการสร้างแบบจำลองข้อมูลสมัยใหม่ รวมถึงสถาปัตยกรรมแบบแบ่งชั้น มาโครที่นำกลับมาใช้ได้ การควบคุมคุณภาพข้อมูล และ CI/CD
  • มีประสบการณ์เขียนการแปลงข้อมูลด้วย PySpark สำหรับการประมวลผลข้อมูลขนาดใหญ่ หากปรับแต่งงาน Spark ให้มีประสิทธิภาพได้จะเป็นข้อได้เปรียบ
  • มีประสบการณ์ใช้งาน Apache Iceberg รวมถึงการเปลี่ยนแปลงพาร์ทิชันและสคีมา การจัดการสแนปช็อต และการย้อนดูข้อมูลตามเวลา
  • มีประสบการณ์ใช้เครื่องมือจัดลำดับงานและกำหนดเวลา เช่น Dagster
  • มีความรู้เชิงลึกเกี่ยวกับ SAS ETL และฐานโค้ดรุ่นเก่า การย้ายเวิร์กโฟลว์ SAS ไปยัง dbt จะเป็นข้อได้เปรียบอย่างมาก
  • มีทักษะ SQL เป็นเลิศ รวมถึงการแปลงข้อมูลที่ซับซ้อน การปรับปรุงประสิทธิภาพ และการประมวลผลแบบเพิ่มเฉพาะข้อมูลใหม่
  • เข้าใจการทำงานของ Apache Spark การแบ่งพาร์ทิชัน การปรับเลย์เอาต์ไฟล์ และการปรับแต่งประสิทธิภาพเป็นอย่างดี
  • มีความรู้เชิงลึกด้านการตรวจสอบความถูกต้อง การกระทบยอด และการทดสอบข้อมูลเมื่อย้ายระบบเดิมไปยัง dbt และ PySpark
  • มีความรู้ด้านการควบคุมเวอร์ชันและการพัฒนาร่วมกัน รวมถึง Git การรีวิวโค้ด การจัดการรีลีส และไปป์ไลน์การปรับใช้แบบอัตโนมัติ
  • ใช้ภาษาอังกฤษได้อย่างคล่องแคล่ว

สวัสดิการ

  • ค่าตอบแทนที่แข่งขันได้ตามคุณสมบัติและประสบการณ์
  • เลือกทำงานตามสัญญาหรือรับแพ็กเกจค่าตอบแทนพร้อมสวัสดิการครบถ้วนได้
  • กระบวนการสมัครงานเป็นความลับ
  • สภาพแวดล้อมการทำงานระดับนานาชาติที่ใช้หลายภาษาและมีความหลากหลายทางวัฒนธรรม
  • โอกาสในการจ้างงานอย่างเท่าเทียม

งานที่เกี่ยวข้อง

EUROPEAN DYNAMICS

วิศวกรวิเคราะห์ฐานข้อมูลอาวุโส

EUROPEAN DYNAMICS

สร้างไปป์ไลน์ข้อมูลที่รองรับการขยายระบบด้วย dbt, PySpark และ Iceberg สนับสนุนสถาบันในยุโรปผ่านงานวิศวกรรมข้อมูลเชิงวิเคราะห์ การทดสอบ และการย้ายระบบจาก SAS รุ่นเก่า

เปิด