
Scicom Infrastructure Services เป็นบริษัทที่ปรึกษาและให้บริการด้านเทคโนโลยี ซึ่งช่วยองค์กรทั้งภาครัฐและเอกชนบริหารจัดการและพัฒนาสภาพแวดล้อมด้านไอที งานของบริษัทครอบคลุมการบริหารประสิทธิภาพองค์กร สถาปัตยกรรม การบริหารโครงการ การจัดการโครงสร้างพื้นฐานและแอปพลิเคชัน รวมถึงบริการที่มีการบริหารจัดการ บริษัทยังทำงานร่วมกับ AppDynamics, BigPanda, Datadog และ AWS ในด้านการตรวจสอบประสิทธิภาพ การเชื่อมโยงเหตุการณ์และระบบอัตโนมัติ การตรวจสอบคลาวด์ และการจัดการบริการไอที Scicom ให้การสนับสนุนการปฏิบัติงานตลอด 24 ชั่วโมงสำหรับโครงสร้างพื้นฐานทั่วโลก โปรไฟล์ของบริษัทระบุว่าทีมทำงานในแวดวงเทคโนโลยีองค์กร SaaS และ B2B โปรดตรวจสอบตำแหน่งงานที่เปิดรับในปัจจุบันเพื่อดูรายละเอียดเกี่ยวกับบทบาทและการรับสมัคร
วิศวกรข้อมูล Databricks ด้านสัญญาข้อมูล OCDS
เชื่อมผู้มีส่วนเกี่ยวข้องด้านการจัดซื้อกับทีมวิศวกรรมเพื่อกำหนดสัญญาข้อมูลสำหรับโครงการ Databricks ขนาดใหญ่ สร้างไปป์ไลน์และการควบคุมที่สอดคล้องกับ OCDS เพื่อให้ข้อมูลสัญญามีมาตรฐานและเชื่อถือได้
รายละเอียด
- เชื่อมทีมธุรกิจ สัญญา กำกับดูแล และวิศวกรรมในโครงการติดตั้ง Databricks ขนาดใหญ่
- เป็นผู้นำการประชุมเชิงปฏิบัติการเพื่อรวบรวมความต้องการร่วมกับผู้มีส่วนเกี่ยวข้องด้านการจัดซื้อ โครงการ การวิเคราะห์ การกำกับดูแล และเทคนิค
- สร้างและดูแลสัญญาข้อมูลที่กำหนดวิธีแลกเปลี่ยนข้อมูลระหว่างผู้ผลิตและผู้ใช้ข้อมูล
- แปลงความต้องการทางธุรกิจเป็นเรื่องราวผู้ใช้ เกณฑ์การยอมรับ ผังกระบวนการ การจับคู่ข้อมูล ข้อกำหนดส่วนติดต่อ และข้อกำหนดทางวิศวกรรม
- วิเคราะห์ระบบต้นทาง สำรวจลักษณะข้อมูล ประเมินช่องว่าง และจับคู่ฟิลด์ต้นทางกับโครงสร้างปลายทาง
- เปรียบเทียบข้อมูลการจัดซื้อปัจจุบันกับโครงสร้างที่ OCDS กำหนด
- ประสานให้เจ้าของข้อมูล ผู้ผลิต ผู้ใช้ สถาปนิก และทีมกำกับดูแลหาข้อสรุปร่วมกัน
- ติดตามความต้องการตั้งแต่การสร้างแบบจำลองข้อมูล การนำไปใช้ การทดสอบ จนถึงการยอมรับงาน
- ประเมินผลกระทบของการเปลี่ยนแปลงที่เสนอที่มีต่อผลิตภัณฑ์ข้อมูล รายงาน การเชื่อมต่อระบบ และกรณีใช้งานด้านการวิเคราะห์
- ช่วยเตรียมและดำเนินการทบทวน backlog วางแผน sprint สาธิต ทดสอบ และรับรองจากผู้มีส่วนเกี่ยวข้อง
- ประยุกต์ใช้ OCDS กับข้อมูลการจัดซื้อและสัญญาภาครัฐตั้งแต่การวางแผนจนถึงการนำไปใช้
- ดูแลการจับคู่ข้อมูลสำหรับรุ่นที่เผยแพร่ ระเบียน แพ็กเกจ ตัวระบุ องค์กร คู่สัญญา รายการ สิ่งสำคัญตามกำหนดเวลา เอกสาร ธุรกรรม การแก้ไข และองค์ประกอบที่เกี่ยวข้องของ OCDS
- ใช้สคีมา รายการรหัส กฎการตรวจสอบ และแนวทางการนำ OCDS ไปใช้
- ระบุกรณีที่จำเป็นต้องใช้ส่วนขยาย OCDS และบันทึกสมมติฐาน กฎ การจับคู่ ข้อยกเว้น และส่วนขยายที่เกี่ยวข้อง
- สร้างระเบียนสัญญาจากรุ่นที่เผยแพร่ของธุรกรรม และกำหนดวิธีจัดการการแก้ไข การอัปเดต การยกเลิก การแก้ข้อผิดพลาด และการเปลี่ยนแปลงย้อนหลัง
- ตรวจสอบข้อมูลที่แปลงแล้วกับสคีมา JSON ของ OCDS และแก้ไขข้อมูลการจัดซื้อที่ขาด ไม่ถูกต้อง ไม่สอดคล้อง หรือไม่เป็นไปตามข้อกำหนด
- สนับสนุนการเผยแพร่ แลกเปลี่ยน วิเคราะห์ หรือใช้ข้อมูลสัญญาที่เป็นมาตรฐานภายในองค์กร
- สร้าง ทดสอบ และดูแลไปป์ไลน์ Databricks ด้วย Apache Spark, PySpark, Python และ SQL
- นำเข้าข้อมูลการจัดซื้อทั้งแบบมีโครงสร้างและกึ่งมีโครงสร้างจาก JSON, CSV, XML, Parquet ฐานข้อมูล API และไฟล์ แล้วแปลงข้อมูล
- สร้างชั้น Bronze, Silver และ Gold ด้วยสถาปัตยกรรม medallion
- พัฒนาแบบจำลองข้อมูลแบบปรับมาตรฐาน แบบมิติ แบบวิเคราะห์ และแบบอิง OCDS
- ใช้ Delta Lake เพื่อบังคับใช้และพัฒนาสคีมา จัดการเวอร์ชัน รองรับการตรวจสอบ และประมวลผลข้อมูลอย่างเชื่อถือได้
- สร้างวิธีการที่นำกลับมาใช้ซ้ำได้เพื่อแปลงข้อมูลการจัดซื้อจากต้นทางให้เป็นผลลัพธ์ที่เข้ากันได้กับ OCDS
- สร้างการนำเข้าข้อมูลทั้งแบบเป็นชุดและแบบเพิ่มเฉพาะข้อมูลใหม่หรือข้อมูลที่เปลี่ยนแปลง
- ใช้เครื่องมือ Databricks ที่เหมาะสม รวมถึง Workflows, notebooks, jobs, Auto Loader, Delta Live Tables หรือ Lakeflow
- สร้างการเชื่อมต่อ REST API สำหรับนำเข้าข้อมูลต้นทางและส่งข้อมูลไปยังระบบปลายทาง
- ทำให้การตรวจสอบคุณภาพข้อมูล การกระทบยอด ความครบถ้วน และการเป็นไปตามข้อกำหนดทำงานโดยอัตโนมัติ
- ช่วยติดตั้ง Unity Catalog สำหรับเมทาดาทา ความเป็นเจ้าของ สายข้อมูล การควบคุมการเข้าถึง และการค้นพบข้อมูล
- ปรับปรุง Spark jobs, SQL queries, คลัสเตอร์ การแบ่งพาร์ทิชัน ขนาดไฟล์ และการจัดวางข้อมูล
- มีส่วนร่วมในการตรวจทานโค้ด การทดสอบอัตโนมัติ CI/CD การปรับใช้ การติดตามระบบ และการสนับสนุนระบบจริง
- วินิจฉัยความล้มเหลวของไปป์ไลน์ ข้อมูลไม่ตรงกัน และปัญหาด้านประสิทธิภาพ
- กำหนดกฎที่วัดผลได้สำหรับความถูกต้อง ความครบถ้วน ความสมบูรณ์ตามเกณฑ์ ความทันเวลา ความสอดคล้อง และความไม่ซ้ำของข้อมูล
- สร้างการควบคุมการตรวจสอบสำหรับฟิลด์ OCDS ตัวระบุ วันที่ จำนวนเงิน สกุลเงิน องค์กร การจัดประเภท และความสัมพันธ์ของสัญญา
- สร้างแดชบอร์ดหรือรายงานเกี่ยวกับการปฏิบัติตามสัญญาข้อมูลและผลลัพธ์ด้านคุณภาพข้อมูล
- กำหนดวิธีตรวจจับและจัดการการเปลี่ยนแปลงของสคีมา
- ติดตามสายข้อมูลการจัดซื้อผ่านการแปลงใน Databricks ไปยังผลิตภัณฑ์ปลายทาง
- ทำงานร่วมกับทีมกำกับดูแลเพื่อกำหนดเจ้าของ ผู้ดูแล การจัดประเภท ระยะเวลาเก็บรักษา และนโยบายการเข้าถึง
- จัดการข้อมูลการจัดซื้อและข้อมูลผู้ขายที่ละเอียดอ่อนตามข้อกำหนดด้านความปลอดภัยและความเป็นส่วนตัว
- ดูแลร่องรอยการตรวจสอบด้วยกฎที่บันทึกไว้ การจับคู่ข้อมูลที่มีการกำกับเวอร์ชัน ผลการตรวจสอบ และประวัติการเปลี่ยนแปลง
คุณสมบัติ
- ปริญญาตรีด้านวิทยาการคอมพิวเตอร์ ระบบสารสนเทศ การวิเคราะห์ข้อมูล การวิเคราะห์ธุรกิจ วิศวกรรม การบริหารรัฐกิจ การจัดการห่วงโซ่อุปทาน หรือสาขาที่เกี่ยวข้อง
- มีประสบการณ์รวมอย่างน้อยห้าปีในงานวิศวกรรมข้อมูล การวิเคราะห์ข้อมูล การวิเคราะห์ธุรกิจ หรือการบูรณาการข้อมูล
- มีประสบการณ์ภาคปฏิบัติในการติดตั้งหรือใช้ Open Contracting Data Standard (OCDS)
- มีประสบการณ์สร้าง จัดทำเอกสาร เจรจา หรือดูแลสัญญาข้อมูล
- มีประสบการณ์จับคู่ข้อมูลการจัดซื้อหรือสัญญากับสคีมา OCDS
- เข้าใจอย่างลึกซึ้งเกี่ยวกับรุ่นที่เผยแพร่ ระเบียน สคีมา รายการรหัส ตัวระบุ ขั้นตอนสัญญา และวิธีตรวจสอบของ OCDS
- มีประสบการณ์ใช้งาน Databricks โดยตรงอย่างน้อยสามปี
- มีทักษะสูงด้าน Apache Spark, PySpark, Python, SQL, Delta Lake, ไปป์ไลน์ ETL/ELT การสร้างแบบจำลองข้อมูล JSON และ JSON Schema, REST API การตรวจสอบคุณภาพข้อมูล และการจับคู่ต้นทางกับปลายทาง
- มีประสบการณ์เก็บรวบรวมความต้องการและแปลงเป็นข้อกำหนดทางวิศวกรรมที่นำไปดำเนินการได้
- สื่อสารกับคู่ร่วมงานทั้งสายเทคนิคและไม่ใช่สายเทคนิคได้ชัดเจน
- มีประสบการณ์จัดทำเรื่องราวผู้ใช้ เกณฑ์การยอมรับ กฎธุรกิจ พจนานุกรมข้อมูล ข้อกำหนดส่วนติดต่อ และเอกสารกระบวนการ
- มีทักษะการวิเคราะห์ การแก้ปัญหา การอำนวยความสะดวก และการจัดทำเอกสารที่ดี
- มีประสบการณ์ส่งมอบงานในทีม Agile
- พิจารณาเป็นพิเศษ: มีพื้นฐานด้านการจัดซื้อภาครัฐ สัญญาภาครัฐ เงินสนับสนุน การจัดหา ข้อมูลผู้ขาย หรือข้อมูลทางการเงิน
- พิจารณาเป็นพิเศษ: มีประสบการณ์สร้างส่วนขยาย OCDS หรือปรับใช้ OCDS ให้เหมาะกับความต้องการขององค์กร
- พิจารณาเป็นพิเศษ: คุ้นเคยกับการจัดประเภทการจัดซื้อ ตัวระบุองค์กร การประกวดราคา การมอบสัญญา การแก้ไข สิ่งสำคัญตามกำหนดเวลา ธุรกรรม และการดำเนินสัญญา
- พิจารณาเป็นพิเศษ: มีใบรับรอง Databricks Certified Data Engineer Associate หรือ Professional
- พิจารณาเป็นพิเศษ: มีประสบการณ์กับ Unity Catalog, Delta Live Tables, Lakeflow, Databricks Workflows, Structured Streaming, บริการคลาวด์, Azure Data Factory, ADLS Gen2, AWS Glue, Amazon S3, Snowflake, dbt, Kafka, Airflow, Power BI, ตัวตรวจสอบ JSON Schema, กรอบงานตรวจสอบคุณภาพข้อมูลอัตโนมัติ การจัดการเมทาดาทาหรือข้อมูลหลัก สายข้อมูล การกำกับดูแลข้อมูลอ้างอิง CI/CD, Git, Azure DevOps, GitHub Actions, Jenkins หรือ Terraform
- พิจารณาเป็นพิเศษ: มีประสบการณ์ร่วมส่งมอบโครงการข้อมูลขนาดใหญ่ระดับรัฐบาลกลาง รัฐบาลมลรัฐ รัฐบาลท้องถิ่น หรือองค์กรที่อยู่ภายใต้การกำกับดูแล
- พิจารณาเป็นพิเศษ: คุ้นเคยกับข้อกำหนดด้านการจัดหา การจัดซื้อ การรายงาน ความโปร่งใส หรือข้อมูลเปิดของรัฐบาลกลาง
- สามารถมีส่วนร่วมในการอภิปรายทั้งด้านวิศวกรรมและการวิเคราะห์ธุรกิจ
- เข้าใจสัญญาข้อมูลและความรับผิดชอบระหว่างผู้ผลิตกับผู้ใช้ข้อมูลเป็นอย่างดี
- สามารถแปลงกระบวนการจัดซื้อที่ซับซ้อนให้เป็นโครงสร้างข้อมูลและกฎการแปลงที่ชัดเจน
- ใส่ใจในการตีความสคีมา รายการรหัส คำจำกัดความทางธุรกิจ และข้อกำหนดการตรวจสอบ
- มีความสามารถในการอำนวยความสะดวกให้ผู้มีส่วนเกี่ยวข้องและแก้ไขความขัดแย้งได้ดี
- สามารถค้นหาช่องว่างและความกำกวมก่อนที่จะก่อให้เกิดข้อบกพร่องทางวิศวกรรม
- มุ่งมั่นต่อการจัดทำเอกสาร การตรวจสอบย้อนกลับ การกำกับดูแล และคุณภาพข้อมูล
- สามารถทำงานอย่างมีประสิทธิภาพในทีม Databricks ขนาดใหญ่ที่มีหลายสาขาความเชี่ยวชาญ
สวัสดิการ
- ประกาศรับสมัครไม่ได้ระบุสวัสดิการ สิทธิประโยชน์ หรือค่าตอบแทนเพิ่มเติม
งานที่เกี่ยวข้อง
ไม่พบงาน
ลองปรับหรือล้างตัวกรองเพื่อค้นหาโอกาสเพิ่มเติม