
自由工作資料工程師(Snowflake 遷移)
將 Emeria 的英國分析平台從 Azure Synapse 遷移至 Snowflake,重建資料擷取管線並轉換 T-SQL 預存程序。 工作涵蓋資料一致性檢查、運用 LLM 協助轉換程式碼,以及知識移交。
說明
- 負責管理 15 條 Azure Data Factory 管線,並使用 Fivetran、CDC 或增量擷取指令碼重建資料擷取流程。
- 將約 200 個 T-SQL 預存程序轉換為 Snowflake,並由輕量級 Spark 層提供支援。
- 使用 LLM 工具加快程式碼轉換和測試建立。
- 平行執行流程並核對資料,使其與現有報表一致。
- 記錄工作內容並向英國團隊移交知識。
- 協助將英國分析平台從 Azure Synapse 遷移至 Snowflake、Fivetran 和 Airflow(MWAA)。
職位要求
- 熟練掌握 Snowflake 和 Airflow。
- 具備將 T-SQL 或 MS SQL 預存程序轉換為 Snowflake 的實務經驗,包括 SCD2、交易、迴圈和 MERGE。
- 近期曾在遷移專案中使用 LLM 翻譯程式碼並產生測試。
- 深入了解增量資料擷取方法,例如 delta 和 watermark。
- 英語流利。
- 能獨立工作並採取積極主動的工作方式。
- 了解 Spark 或 PySpark、Fivetran、Azure Synapse 或 Data Factory 者尤佳。
福利待遇
- 遠端工作。
- 此項目可能延長。
相關職缺

