
GFT Technologies เป็นบริษัทเทคโนโลยีและการเปลี่ยนผ่านสู่ดิจิทัลที่ดำเนินงานในด้านการให้คำปรึกษา การประกันภัย และความปลอดภัยทางไซเบอร์ แพลตฟอร์ม Cookiebot ช่วยให้องค์กรต่าง ๆ รวบรวมและจัดการความยินยอมของผู้ใช้ พร้อมสนับสนุนการปฏิบัติตามกฎระเบียบด้านความเป็นส่วนตัว เช่น GDPR และ CCPA โซลูชันของบริษัทได้รับการออกแบบให้ผสานรวมกับสภาพแวดล้อมดิจิทัลที่มีอยู่ และมีลูกค้ามากกว่า 600,000 รายทั่วโลกใช้งานเพื่อจัดการข้อมูลส่วนบุคคลได้อย่างโปร่งใสและควบคุมได้ดียิ่งขึ้น
วิศวกรข้อมูล Azure Databricks ระดับกลาง/อาวุโส – ทำงานทางไกลจากโคลอมเบีย
ออกแบบและเพิ่มประสิทธิภาพไปป์ไลน์ข้อมูลและสถาปัตยกรรมคลาวด์บน Azure และ Databricks ที่ GFT Technologies จัดเตรียมข้อมูลที่เชื่อถือได้สำหรับการวิเคราะห์ ปัญญาประดิษฐ์ และแมชชีนเลิร์นนิง
รายละเอียด
- ออกแบบ สร้าง และเพิ่มประสิทธิภาพสถาปัตยกรรมข้อมูลบน Azure และ Databricks
- นำกระบวนการ ETL และ ELT มาใช้เพื่อผสานรวมข้อมูลจากหลายแหล่ง
- ออกแบบและจัดการสถาปัตยกรรม Data Lake และ Lakehouse
- ตรวจสอบไปป์ไลน์ข้อมูลเพื่อให้มั่นใจถึงความสอดคล้อง คุณภาพ การตรวจสอบย้อนกลับ และความปลอดภัย
- จัดเตรียมและเพิ่มประสิทธิภาพชุดข้อมูลสำหรับการวิเคราะห์ขั้นสูง การรายงาน และโมเดลแมชชีนเลิร์นนิง
- ทำงานร่วมกับทีม BI การวิเคราะห์ และวิทยาศาสตร์ข้อมูลเพื่อปรับปรุงการเข้าถึงข้อมูล
- กำหนดและนำการกำกับดูแลข้อมูลและการควบคุมคุณภาพมาใช้
- นำกระบวนการบูรณาการอย่างต่อเนื่องและการส่งมอบอย่างต่อเนื่องมาใช้กับโซลูชันข้อมูล
- ออกแบบโซลูชันที่ปรับขนาดได้สำหรับการประมวลผลแบบกระจายและข้อมูลปริมาณมาก
- ระบุแนวทางปรับปรุงที่ช่วยเพิ่มประสิทธิภาพด้านต้นทุน ประสิทธิภาพการทำงาน และเวลาในการประมวลผล
- ประเมินเทคโนโลยีใหม่และแนวปฏิบัติที่ดีเพื่อพัฒนาแพลตฟอร์มข้อมูล
คุณสมบัติ
- วุฒิปริญญาด้านวิศวกรรมระบบ วิศวกรรมอุตสาหการ วิศวกรรมอิเล็กทรอนิกส์ วิศวกรรมเมคคาทรอนิกส์ หรือสาขาที่เกี่ยวข้อง
- มีประสบการณ์สามถึงห้าปีในตำแหน่งวิศวกรข้อมูล
- มีทักษะ SQL ระดับสูง
- มีประสบการณ์ใช้ Python หรือ Scala
- มีประสบการณ์ด้านการประมวลผลแบบกระจายโดยใช้ PySpark
- มีประสบการณ์กับ Azure Databricks
- มีประสบการณ์กับ Azure Data Factory
- มีประสบการณ์กับ Azure Data Lake Storage Gen2 (ADLS Gen2)
- มีความรู้เกี่ยวกับ Delta Lake
- มีประสบการณ์กับสถาปัตยกรรม Lakehouse
- มีความรู้เกี่ยวกับสถาปัตยกรรม Medallion
- มีประสบการณ์ด้านการสร้างแบบจำลองข้อมูลเชิงมิติ
- มีประสบการณ์กับฐานข้อมูลเชิงสัมพันธ์
- มีประสบการณ์กับฐานข้อมูล NoSQL
- มีความรู้ด้านการกำกับดูแลและคุณภาพข้อมูล
- มีประสบการณ์กับ Unity Catalog
- มีประสบการณ์กับ Delta Live Tables (DLT)
- มีความรู้เกี่ยวกับ Great Expectations
- มีประสบการณ์ด้านการประมวลผลสตรีมผ่าน Event Hubs
- มีประสบการณ์กับ Azure DevOps และ Git
- มีความรู้เกี่ยวกับ Entra ID
- มีความรู้เกี่ยวกับ RBAC
- มีทักษะ Power BI
- มีทักษะ Visual Studio Code
- มีประสบการณ์ด้านการผสานรวมข้อมูลและกระบวนการ ETL/ELT
- มีประสบการณ์ด้านการวิเคราะห์และการสร้างแบบจำลองข้อมูล
- หากมีใบรับรอง Azure Data Engineering จะได้รับการพิจารณาเป็นพิเศษ
- หากมีประสบการณ์ในโครงการปัญญาประดิษฐ์และแมชชีนเลิร์นนิง จะได้รับการพิจารณาเป็นพิเศษ
- หากมีความรู้ด้าน DataOps และระบบอัตโนมัติของแพลตฟอร์มข้อมูล จะได้รับการพิจารณาเป็นพิเศษ
สวัสดิการ
- เวลาทำงานที่ยืดหยุ่น
- ทำงานทางไกล
- แผนพัฒนาอาชีพเฉพาะบุคคล
- โปรแกรมฝึกอบรม
- ทำงานในทีมสหสาขาวิชาชีพ
- ทีมงานระดับโลกที่มีความหลากหลาย
- โครงการที่มีผลกระทบสูงร่วมกับลูกค้าชั้นนำในอุตสาหกรรม