Avanade ให้บริการเครื่องมือจัดการลิงก์บนคลาวด์และเครื่องมือเชื่อมต่อทางดิจิทัลสำหรับธุรกิจ แพลตฟอร์มรองรับการย่อลิงก์ URL ลิงก์ที่มีแบรนด์ รหัส QR รวมถึงรูปแบบ Dynamic และ GS1 Digital Link หน้า Landing Page สำหรับอุปกรณ์เคลื่อนที่ นามบัตรดิจิทัล การติดตามแคมเปญ UTM การวิเคราะห์ลิงก์ API และการผสานรวมต่าง ๆ ความสามารถเหล่านี้ช่วยให้ทีมการตลาด ทีมพัฒนา และทีมบริการลูกค้าสร้าง จัดการ และวัดผลการโต้ตอบกับลูกค้าผ่านช่องทางดิจิทัล พร้อมฟีเจอร์ด้านความปลอดภัยและการปฏิบัติตามข้อกำหนดสำหรับองค์กร
ที่ปรึกษาวิศวกรข้อมูล – Databricks และ Azure (ปฏิบัติงานที่เมลเบิร์น)
สร้างไปป์ไลน์ข้อมูล Azure ที่รองรับการขยายตัวและการแปลงข้อมูลด้วย PySpark บน Databricks สนับสนุนโครงการวิเคราะห์ข้อมูลและวิทยาศาสตร์ข้อมูลในธุรกิจบริการทางการเงิน
รายละเอียด
- สร้างและปรับปรุงไปป์ไลน์นำเข้าข้อมูลที่รองรับการขยายตัวด้วย Azure Data Factory, Databricks และ Apache Spark
- พัฒนาและดูแลโน้ตบุ๊ก PySpark สำหรับการเตรียม แปลง และเพิ่มคุณค่าข้อมูลเพื่อสนับสนุนโครงการวิทยาศาสตร์ข้อมูล
- ทำงานร่วมกับนักวิทยาศาสตร์ข้อมูลเพื่อทำความเข้าใจข้อกำหนดและส่งมอบชุดข้อมูลที่มีโครงสร้างและเชื่อถือได้ตามกำหนด
- จัดทำการควบคุมคุณภาพข้อมูล กฎการตรวจสอบความถูกต้อง และกระบวนการติดตามตรวจสอบ
- เชื่อมต่อและประมวลผลแหล่งข้อมูลแบบมีโครงสร้าง กึ่งมีโครงสร้าง และไม่มีโครงสร้าง
- นำมาตรฐานด้านความปลอดภัย การกำกับดูแล และการปฏิบัติตามข้อกำหนดของธนาคารมาใช้กับโซลูชันข้อมูล
- ปรับแต่งเวิร์กโหลด Azure Spark เพื่อเพิ่มประสิทธิภาพและควบคุมต้นทุน
- มีส่วนร่วมในการตรวจสอบโค้ด การออกแบบโซลูชัน และกิจกรรม Agile
- จัดทำเอกสารเกี่ยวกับไปป์ไลน์ เวิร์กโฟลว์ และการตัดสินใจด้านเทคนิค
คุณสมบัติ
- มีประสบการณ์ทำงานจริงกับ Azure Databricks อย่างน้อยสามปี
- มีความเชี่ยวชาญด้าน Apache Spark โดยเฉพาะ PySpark สำหรับการประมวลผลแบบกระจาย
- มีประสบการณ์กับ Azure Data Factory, Azure Synapse, Azure Blob Storage และ Delta Lake
- เข้าใจกระบวนการ ETL/ELT การสร้างแบบจำลองข้อมูล และหลักการของคลังข้อมูล
- ใช้ Python และ/หรือ Scala สำหรับการประมวลผลข้อมูล
- หากมีประสบการณ์กับเวิร์กโฟลว์ CI/CD โดยใช้ Azure DevOps, Git และ Terraform จะได้รับการพิจารณาเป็นพิเศษ
- คุ้นเคยกับ SQL, NoSQL และสถาปัตยกรรมดาต้าเลค
- เข้าใจแนวปฏิบัติด้านการกำกับดูแล ความปลอดภัย และการปฏิบัติตามข้อกำหนดของข้อมูลในธุรกิจบริการทางการเงิน
- มีทักษะการวิเคราะห์และการแก้ปัญหาที่ดี
- สื่อสารกับผู้มีส่วนได้ส่วนเสียได้อย่างมีประสิทธิภาพ
- ทำงานร่วมกับทีมข้ามสายงานได้อย่างมีประสิทธิผล
- มีแนวคิดแบบ Agile และมีประสบการณ์กับ Scrum หรือสภาพแวดล้อมที่คล้ายกัน
- ถือสัญชาติออสเตรเลีย
- มีสิทธิ์ยื่นขอการตรวจสอบประวัติด้านความมั่นคง
- หากมีวุฒิปริญญาตรีหรือปริญญาโทด้านวิทยาการคอมพิวเตอร์ ระบบสารสนเทศ วิศวกรรมศาสตร์ หรือสาขาที่เกี่ยวข้องจะได้รับการพิจารณาเป็นพิเศษ
- หากมีใบรับรอง Databricks Certified Data Engineer Associate หรือ Professional จะได้รับการพิจารณาเป็นพิเศษ
- หากมีประสบการณ์ในธุรกิจธนาคารหรือบริการทางการเงินจะได้รับการพิจารณาเป็นอย่างยิ่ง