73 Strings 資深資料工程師——混合辦公，印度
負責為 73 Strings 私募資本估值平台建置安全的批次與串流資料管線。 使用 Azure、Databricks、Snowflake 及 CI/CD 基礎架構進行跨領域協作。
說明
- 開發並執行支援估值與監控的管線、整合及資料倉儲系統
- 負責生產資料流，從來源擷取、轉換、對帳到交付給客戶
- 管理以 GitHub 為基礎的工作流程，包括自動化測試以及持續整合與部署
- 參與持續演進的平台架構，涵蓋資料擷取、處理與交付層
- 使用資料庫、API、事件串流和半結構化資料建立並運行批次與串流管線
- 實作變更資料擷取與增量載入，支援排序、刪除、重播及緩慢變化維度
- 在 Snowflake、Microsoft SQL Server 和 Databricks 中開發獎牌式架構資料集與維度模型
- 在資料發布前落實資料契約、對帳檢查及資料列層級隔離
- 負責資料工作負載的 GitHub 流程和 CI/CD，包括測試、程式碼審查、環境升級及基礎架構即程式碼部署
- 診斷生產資料事件，並將產品、估值和客戶需求轉化為可靠的營運管線
職位要求
- 至少 10 年生產環境資料系統工程經驗
- 精通 Snowflake 或 Databricks 等主要資料平台，包括資料建模、效能調校和成本管理
- 熟練使用 Python 和 SQL 開發及測試資料管線
- 具備變更資料擷取與事件處理經驗，包括排序、重播與結構描述演進
- 具備 Azure 實務經驗，熟悉 Databricks、ADLS 和私有網路連線
- 具備使用 GitHub 和 CI/CD 管理資料工作負載的經驗，熟悉 GitHub Actions 或同類平台
- 了解資料品質、對帳、監控與生產事件回應
- 具備建置安全多租戶資料平台的經驗，包括租戶隔離、存取控制和資料保護
- 優先考慮：熟悉 Databricks Lakeflow、Auto CDC、Declarative Automation Bundles 和 DQX，或具備同等 Snowflake 能力
- 優先考慮：熟悉 Debezium、Kafka Connect 或 Confluent Kafka
- 優先考慮：熟悉 Apache Airflow 或同類工作流程協調器
- 優先考慮：熟悉 Kafka 或 Spark Structured Streaming、Apache Iceberg 或 Delta Sharing，以及 dbt
- 優先考慮：具備私募市場資料經驗，例如估值、基金、投資組合公司或資本活動資料
- 能直接與客戶技術團隊合作，並與現場工程、產品及其他利害關係人協作
福利待遇
- 支持性的工作環境
- 有機會主動承擔責任並推動改善
- 持續進行專業學習的機會
- 重視協作的團隊文化