資深資料工程師(IBM DataStage ETL 與 SQL/PLSQL)— 浦那混合辦公
為支付商務打造 IBM DataStage 與 Snowflake 資料管線、模型及報表資料集。 與產品、業務、架構及技術團隊合作,支援可擴充的整合、分析及 AI 應用情境。
說明
- 參與每日站會,並與產品經理、產品分析師及業務相關人士協調。
- 釐清產品功能、報表、分析及 AI 應用情境的資料需求。
- 將業務需求轉化為技術資料解決方案。
- 開發並改善 Snowflake 管線、轉換流程、語意模型、Cortex AI 解決方案、資料品質檢查及報表資料集。
- 與架構師及技術團隊合作規劃解決方案設計。
- 設計資料模型、語意檢視、API 及管線。
- 訂定來源至目標的對應方式及資料治理需求。
- 評估解決方案設計的效能、可擴充性及安全性。
- 使用 IBM DataStage 開發並支援企業級 ETL 解決方案及資料管線。
- 依循企業架構標準提供可靠的資料整合。
- 建立可擴充的管線並改善資料移轉。
- 支援資料倉儲、資料湖及 Lakehouse 平台。
- 支援企業分析與報表作業。
- 與業務及技術團隊協作。
- requirementsPlaceholder
職位要求
- 具備至少六年相關工作經驗。
- 熟悉 IBM DataStage 11.7 或更新版本的實務操作,包括平行作業、序列器、參數集、監控、管理及效能調校。
- 具備進階 SQL 與 PL/SQL 開發技能。
- 具備豐富的 Oracle 與 DB2 經驗。
- 使用 DataStage 及企業級管線設計、開發、測試、部署並支援複雜的 ETL/ELT 解決方案。
- 建置可重複使用的 DataStage ETL 架構,包括參數化作業、由中繼資料驅動的解決方案及自動化工作流程。
- 將業務及技術需求轉化為可擴充的 ETL 設計與資料整合解決方案。
- 使用 DataStage 執行資料擷取、轉換、驗證、清理、核對及載入。
- 透過 DataStage 整合 Oracle、DB2、SQL Server、Snowflake、平面檔案、XML、JSON、Parquet 及雲端儲存。
- 能夠處理涵蓋結構化、半結構化及非結構化資料的多個來源與目標系統。
- 精通 Unix shell 指令碼,並具備 Airflow 或 Astronomer 等工作流程協調工具的經驗。
- 具備 Snowflake 管線、轉換流程、語意模型、Cortex AI 解決方案、資料品質檢查及報表資料集的經驗。
- 具備資料倉儲、資料湖及 Lakehouse 平台的經驗。
- 具備支付處理經驗者佳。
- 具備處理 PCI 或 PII 敏感資料的經驗者佳。
- 具備敏捷開發經驗者佳。
福利待遇
- 可取得面向全球市場的職涯發展機會。
- 探索跨境職務與發展機會。
- 加入具備全球視野的共融團隊。
- 向業界專家學習並發展職涯。
