Talan 是一家全球性的顧問與科技公司，致力於協助各類組織運用創新轉變營運方式與決策模式。其業務涵蓋資料管理與治理、人工智慧、網路安全及雲端平台，並提供旨在支援企業建立韌性商業模式與改善營運的解決方案。Talan 與 Microsoft、SAP、Oracle 及 Salesforce 等科技生態系統合作，服務能源、運輸及金融服務等產業。公司團隊遍布五大洲的 18 個國家，結合企業顧問與 SaaS 領域的專業能力，協助客戶將資料與科技轉化為實際的商業成果。
大數據開發工程師 - Talan（遠端，西班牙）
為國際技術顧問集團 Talan 開發 Spark、Scala 和 SQL 資料湖管道。 支援市場風險資料處理、生產營運和敏捷交付。
說明
- 使用 Apache Spark、Scala 和 SQL 建立、強化並支援資料湖管道
- 為高容量資料集開發可擴充的處理解決方案
- 透過 Control-M 和 Airflow 協調批次工作流程及其相依性
- 交付市場風險資料的擷取、轉換、驗證和發布流程
- 提升 Spark 工作負載的效能、可靠性和可擴充性
- 審查技術和功能需求，識別差距並提出解決方案
- 協助規劃交付，並與跨職能團隊有效合作
- 處理生產事故並調查其根本原因
- 持續協助改善營運流程
- 與敏捷小組、功能相關方和生產支援團隊合作
- 運用軟體工程和資料開發實務，交付可靠且易於維護的生產解決方案
職位要求
- 至少兩年大數據、資料湖或雲端資料平台專業經驗
- 具備使用 Apache Spark、Scala 和 SQL 進行大規模資料處理的實務經驗
- 了解資料湖架構、資料品質控制、資料血緣和生產級管道
- 具備出色的分析和解決問題能力
- 具備優良的溝通與協作能力
- 能夠與技術和功能相關方合作
- 以積極主動且適應性強的方式應對技術挑戰
- 英語 C1 或同等專業流利程度
- 具備 Control-M 和 Airflow 經驗者佳
- 具備 Databricks、Azure 和 AWS 經驗者佳
- 具備 YARN 和雲端運算環境經驗者佳
- 具備 CI/CD、GitHub、Jenkins 和 SonarQube 經驗者佳
- 具備銀行生產環境、營運監控和 ServiceNow 背景者佳
- 了解市場風險流程者佳，包括損益、估值、風險指標和監管報告資料流
福利待遇
- 永久全職聘用
- 職涯發展和晉升機會
- 持續學習機會
- 多元文化的國際化工作環境
- 私人醫療保險
- 人壽保險
- 透過彈性薪酬計畫提供午餐卡和交通卡
- 線上語言課程
- 用於遠端工作的 Smart Office Pack
- 完全遠端工作，並可彈性在西班牙境內任何地點工作
