資深資料工程師 - 馬拉松石油公司，聖安東尼奧，德州
負責設計可擴充的 Azure 資料管線與雲端解決方案，支援馬拉松石油公司的營運。 您將參與資料架構建置、強化治理與安全性，並指導其他工程師。
說明
- 建置、強化並調校可擴充的資料管線與雲端資料解決方案
- 在資料工程計畫中應用 Azure Data Lake、Synapse Analytics、Azure Functions 和 Databricks
- 與分析、產品、架構、治理及業務相關人員合作，將需求轉化為可擴充的解決方案
- 設計並改善資料擷取、匯入與轉換工作流程
- 為複雜且高容量的資料集開發資料架構
- 交付複雜的資料管線，同時套用資料安全與隱私控制措施
- 運用開源技術與雲端技術執行複雜的資料品質與處理工作
- 在重大事件期間提供專業技術支援
- 跨部門協調，以維持可靠的資料整合
- 持續改善資料處理實務，同時推動一致性與工程標準
- 處理複雜的資料挑戰，並參與策略性資料基礎架構規劃
- 主導資料解決方案的品質保證與測試活動
- 指導並支援經驗較少的資料工程師
- 透過技術審查協助定義工程標準、可重複使用的模式與解決方案設計
職位要求
- 必須具備資訊科技或相關領域的學士學位
- 必須具備至少五年相關資料工程經驗
- 熟悉 Python、SQL、Spark 與協調工具，包括 Azure Data Factory 和／或 Databricks Workflows
- 具備大數據技術與分散式運算架構經驗，例如 Hadoop 和 Spark
- 了解 AWS、Azure 或 Google Cloud Platform 上的雲端資料平台及相關服務
- 能夠建立並管理資料治理政策、程序與標準
- 具備透過 ETL 程序、管線與資料匯入架構整合資料的經驗
- 能夠設計並實作可擴充的資料模型
- 了解完整資料生命週期中的資料作業
- 能夠套用資料隱私實務，並管理存取權限與同意協議
- 深入了解資料品質維度、方法與最佳實務
- 了解資料隱私法規、網路安全實務與資料安全技術
- 熟悉監控與可觀測性工具及實務
- 了解 DevOps 方法
- 具備一般程式設計能力
- 具備中繼資料管理解決方案經驗
- 了解 NoSQL 資料庫
- 了解即時資料處理
福利待遇
- 醫療、視力與牙科保險
- 帶薪休假
- 401(k) 配對提撥
- 帶薪育嬰假
- 教育費用補助
- 酌情發放的公司年度獎金