
ViX 串流平台資深資料工程師
為 TelevisaUnivision 的 ViX 串流平台打造可擴充的批次與即時資料管線,支援分析、機器學習及產品計畫。 推動資料平台發展,協助各團隊將業務需求轉化為技術方案。
說明
- 使用 Airflow、Python、SQL 和 dbt 建置並維護可擴充的批次資料管線。
- 透過 Dataflow 將 Pub/Sub 中的事件資料導入 Cloud Storage 和 BigQuery,建立即時資料擷取管線。
- 開發並改善分析資料倉儲中的維度模型和工作流程。
- 負責管線從設計、建置、測試、部署到正式環境支援的完整流程。
- 確保整個資料生態系統中的資料品質、完整性、安全性和可用性。
- 與產品經理、資料科學家、分析師和工程團隊合作,將業務需求轉化為技術方案。
- 參與資料架構討論,並為平台的長期發展方向提供建議。
- 尋找改善流程和提升營運效率的方法。
- 調校儲存、處理和編排,以提升速度、擴充能力並控制成本。
- 監控並解決管線和平台問題,參與事故檢討。
- 落實治理、可觀測性、測試和 CI/CD 的良好實務。
- 透過技術支援、程式碼審查和知識分享指導初階資料工程師。
- 協助制定架構決策和工程標準。
- 參與技術面試,並協助打造實力堅強的資料工程團隊。
職位要求
- 具備電腦科學、工程、資訊系統或相關技術領域的學士或碩士學位。
- 至少 7 年資料工程、資料倉儲或大數據環境相關經驗。
- 具備進階 Python 和 SQL 技能。
- 具備端對端建置並負責正式環境資料管線的經驗。
- 具備豐富的 Google Cloud Platform 經驗,包括 BigQuery、Cloud Storage、Pub/Sub、Dataflow 和 Cloud Composer;亦接受具備 AWS 經驗者。
- 具備使用 Airflow、dbt 等工作流程編排和資料轉換工具的經驗。
- 具備建立即時或近即時資料管線的經驗。
- 深入了解資料倉儲實務,包括關聯式和維度建模。
- 具備使用 Pulumi 或 Terraform 等基礎架構即程式碼工具的經驗。
- 充分了解 Spark 等分散式資料處理框架。
- 具備出色的分析、疑難排解和問題解決能力。
- 必須獲准在美國工作。
- 申請人目前必須獲准在美國全職工作。
- 將查核工作和教育經歷。
福利待遇
- 帶薪休假
- 學費補助
- 健康與員工支援計畫
- 401(k) 退休儲蓄計畫
- 人壽及其他保險計畫
- 醫療、牙科和視力保險選項
- 平等就業機會




