遠端資料架構師(Informatica IDMC)— Capco,巴西
負責設計 ETL/ELT 管線與 IDMC/CDI 整合的遠端資料架構師。 Capco 是服務金融服務與能源產業的全球科技與商業顧問公司。
說明
- 設計並持續演進 Informatica IDMC/CDI 整合解決方案
- 為企業與雲端環境建置可擴充的 ETL/ELT 管線
- 制定開發、架構、命名、參數化及可重複使用元件的標準
- 建立並審查對應、任務、任務流程及整合架構
- 制定批次、增量、CDC 與近即時資料擷取策略
- 設計涵蓋資料庫、API、檔案、SaaS 應用程式、資料倉儲、資料湖及湖倉平台的整合方案
- 運用進階 SQL 和 Python 建置並最佳化解決方案
- 實施並指導效能調校,包括下推最佳化
- 制定錯誤處理、記錄、稽核、核對及可觀測性標準
- 針對資料架構與模型設計決策提供建議
- 規劃 IDMC 解決方案的 CI/CD 工作流程及部署策略
- 審查程式碼並維護工程標準與最佳實務
- 調查並解決重大正式環境問題
- 參與估算、技術規劃及實作方案制定
- 將業務與功能需求轉化為可擴充的技術解決方案
- 主導與客戶、架構師及利害關係人的技術討論
- 為初階及中階同事提供技術指導與導師協助
- 評估 IDMC 新功能並建議架構與流程改善
職位要求
- 具備豐富的 Informatica IDMC/IICS 經驗,尤其是 Cloud Data Integration(CDI)
- 具備進階 ETL/ELT 解決方案架構設計與開發經驗
- 具備進階 SQL 技能,包括查詢最佳化及大型資料集處理
- 具備扎實的 Python 技能,可用於自動化、整合及資料處理
- 具備資料倉儲、資料湖及湖倉架構經驗
- 具備雲端平台經驗;以 Microsoft Azure 為佳
- 具備 Databricks、Snowflake 或其他新式資料平台經驗
- 具備 REST 與 SOAP API 整合經驗
- 了解批次、近即時及事件驅動整合模式
- 具備 Git、CI/CD 及自動化部署經驗
- 具備效能調校及複雜管線疑難排解經驗
- 了解資料安全、治理及品質
- 具備制定開發標準與最佳實務的經驗
- 能夠提供技術領導與導師協助
- 具備良好的客戶及利害關係人溝通與關係建立能力
- 能在高度複雜的環境中獨立工作
- 最好具備至少六年資料整合、ETL/ELT 或資料工程經驗,擁有經驗證的 Informatica IDMC/CDI 專業能力,並曾交付中高複雜度解決方案
- 優先條件:其他 IDMC 模組、PowerCenter 遷移至 IDMC、進階 Azure、Snowflake、dbt、Spark/PySpark、Delta Lake、Kafka、Terraform、受監管產業經驗、Informatica/Azure/Databricks/Snowflake 認證,以及進階或流利的英文能力
福利待遇
- 重視多元共融的文化
- 設有內部共融與社會責任委員會,涵蓋女性、身心障礙者、黑人、LGBTQIAPN+ 族群、家長及不同世代等團體
- 機會對所有人開放
- 支持專業成長與職涯發展
