資深資料工程師（Databricks）
負責 Ellis Porter 移民法律業務及負責任 AI 計畫的 Databricks 資料管線、治理與平台營運。 為律所各團隊打造可靠、可信賴的資料產品。
說明
- 建置並維護 Databricks 資料擷取管線，從 Ellis Porter 的業務系統匯入資料。
- 自動執行資料品質檢查並核對資料來源，找出缺漏、不正確或重複的記錄。
- 設計並建置銀層與金層資料層。
- 提供受治理的資料產品，用於報表、跨系統比對及身分解析。
- 管理日常平台營運，包括工作排程、監控、警示、資料新鮮度、存取控制及成本最佳化。
- 維護執行手冊、測試復原程序，並記錄平台支援知識。
- 使用 Azure DevOps 管理 CI/CD 管線，以及開發、測試和正式環境的部署。
- 針對資料平台以外的 Azure 基礎架構需求，與 Ellis Porter 的 IT 供應商協調。
- 保護記錄系統、設定適當的使用者存取權限，並在部署前確認授權及平台限制。
- 與業務利害關係人合作，將其需求轉化為實用且可靠的資料解決方案。
- 為敏感的客戶與案件資料制定並實施保密、保留、最小權限存取及稽核控制措施。
- 透過資料遮罩、評估資料集及人工核准，支援範圍明確的 AI 與合作夥伴試行計畫。
- 評估現有 Databricks 平台、尋找改善方式，並協助拓展資料職能。
- 與資料服務與產品經理，以及業務、應用程式、IT 和資安利害關係人合作，討論架構及自建或採購決策。
- 執行管理階層指派的其他職務。
職位要求
- 具備電腦科學、工程或相關領域學士或碩士學位，或同等實務經驗。
- 至少四年資料工程經驗。
- 至少兩年在正式環境中建置及營運 Databricks 解決方案的實作經驗。
- 具備使用 Unity Catalog 管理 Delta 資料表上的多工作 Lakeflow Jobs 經驗。
- 強烈優先考慮具備宣告式自動化套件（先前稱為 Databricks Asset Bundles）或同等基礎架構即程式碼部署經驗者。
- 能夠說明自己建置的正式環境資料管線，包括設計選擇、故障及營運挑戰。
- 能與非技術合作夥伴清楚溝通，並將工程決策連結至業務影響。
- 熟練 Python，包括使用 pytest 進行測試及套件封裝。
- 具備 PySpark 經驗者優先。
- 具備扎實的 SQL 及維度建模能力，包括向 BI 工具提供受治理的資料集。
- 具備建置 REST API 和 SaaS 資料擷取管線的經驗，包括處理分頁、速率限制、結構描述變更及憑證輪替。
- 具備以 Git 為基礎的 CI/CD 工作流程經驗。
- 具備 Azure DevOps 經驗者加分。
- 具備 AI 輔助開發工具經驗，包括在部署前審查、測試及驗證產生的程式碼。
- 具備 Lakeflow 管線、受管理連接器、實體解析或記錄連結經驗者加分。
- 具備資料平台 Azure 資源管理經驗者加分，最好熟悉基礎架構即程式碼。
- 所有工作都必須在美國境內執行。
福利待遇
- 有機會從事具挑戰性、多元且有成就感的工作，支持鼓舞人心的使命。
- 加入由聰明、有創意且敬業的移民專業人士組成的團隊；團隊重視彼此尊重、協作的工作關係。
- 包容的律所文化，重視多元觀點、背景、身分及經歷。
- 以人為本的職場政策與彈性工時安排，包括遠端工作機會。
- 具競爭力的薪酬。
- 健康、牙科、視力及人壽保險。
- 提供雇主配對提撥的 401(k) 退休儲蓄計畫。
- 優渥的帶薪休假。
- 在 Troy 或 Ann Arbor 辦公室現場工作的員工可穿著休閒服裝。
- 在 Troy 或 Ann Arbor 辦公室現場工作的員工可享用免費餐點。
- 在 Troy 或 Ann Arbor 辦公室現場工作的員工，定期有機會體驗國際美食與文化。
