首席 Snowflake 資料工程師(合約)—曼徹斯特混合辦公
主導 Insight Investment 受治理的 Snowflake 資料平台建置。 打造資料管道、資料標準與分析能力,支援 AI 應用。
說明
- 協助設計並建置以 Snowflake 及相關工具為基礎,穩健且可擴充的資料平台。
- 推動 Insight 資料策略,並向主管與交付團隊分享成果。
- 制定適用於全公司的資料擷取、治理、轉換、儲存與存取規範。
- 提升 ELT 管道的效能。
- 設定進階分析與 AI 工具,促進其應用。
- 與雲端工程團隊合作,擴大基礎架構即程式碼的使用。
- 確保技術設計符合內部資料、隱私、安全與法規遵循政策。
- 追蹤 Snowflake 與大數據領域的發展,並推薦實用的新技術。
- 在資料平台團隊中協作,運用敏捷實務交付雲端解決方案。
- 與業務團隊合作,並參與安全系統開發生命週期(S-SDLC)的各個階段。
職位要求
- 熟悉 Snowflake 功能,包括虛擬倉儲、Tasks 和 Streams、Snowpipe、Snowpark、分散式 UDF 與預存程序、Time Travel 及複製。
- 具備端對端 Snowpark 管道交付經驗;具備 PySpark、Polars 或 Dask 等可轉用框架的經驗亦適用。
- 熟悉使用 Jinja 範本的 DBT,或同類資料轉換框架。
- 熟悉 Python,包括建置工具、自動化測試框架與良好的工程實務。
- 熟悉 SQL,包括針對 Snowflake 最佳化的查詢。
- 具備 CI/CD 管道經驗,並熟悉 GitHub Actions、TeamCity 或 Artifactory 等工具。
- 主動且能獨立解決問題。
- 能清楚傳達抽象或複雜的想法與解決方案。
- 重視良好的軟體工程原則與高品質成果。
- 具備在敏捷團隊工作並以迭代方式交付成果的經驗。
- 能與終端使用者、利害關係人、團隊及同事合作。
- 有意拓展技術知識,並鼓勵團隊採用新技術或新方法。
- 願意為錯誤負責,並與同事一同處理、學習及持續改善。
- Docker。
- Java 或 Scala。
- 具備使用 Kafka、Pulsar 或 Azure Event Hubs 等技術的事件串流經驗。
- 具備與 Collibra 整合的經驗。
- Apache Iceberg。
- Apache Arrow。
- PySpark。
- 具備 AI 工程經驗,熟悉 Snowflake AI、LangChain、LlamaIndex 或 Pinecone 等技術。
相關職缺
找不到職缺
嘗試調整或清除篩選條件,以查看更多機會。
