資深 AWS 技術主管,資料工程——浦那現場辦公
負責為企業客戶設計與交付可擴展的 AWS 資料平台。 使用 SQL、Python、Spark 與基礎設施自動化,建立安全的批次與串流資料管道。
說明
- 設計符合企業標準的 AWS 資料工程解決方案
- 使用 AWS 原生技術與開放原始碼技術開發並最佳化批次與串流資料管道
- 為分析工作負載建立 SQL 轉換與 Python 管道
- 針對可擴展性、效能與成本效益進行資料建模
- 管理從開發到正式環境支援的資料工程工作
- 提升效能、控制成本並規劃平台容量
- 透過根因分析診斷複雜的資料管道與正式環境故障
- 交付符合安全性、可靠性與可擴展性要求的解決方案
- 與架構師、產品負責人及客戶利害關係人合作
- 將業務與分析需求轉化為可靠的 AWS 資料解決方案
- 提供技術估算、實作指導與取捨分析
- 支援解決方案規劃與技術設計審查
- 應用並改善編碼標準、文件與資料工程實務
- 參與程式碼審查與持續改進工作
- 維持符合 AWS、安全性與法規要求
職位要求
- 具備 6 至 10 年專業工作經驗
- 熟悉 AWS 資料服務,包括 Amazon S3、Glue、Athena 與 Redshift,並具備豐富的實務操作經驗
- 設計雲原生 AWS 資料湖與資料倉儲架構
- 深入理解批次與串流資料管道設計
- 建立可擴展且具備容錯能力的資料擷取與轉換工作流程
- 使用進階 SQL 進行轉換、彙總、分析與效能調校
- 處理 Amazon Redshift 與 Athena 中的大型資料集
- 為資料工程應用程式撰寫符合正式環境品質要求的 Python 程式碼
- 建立可重複使用的 ETL 元件、工具與管道
- 應用資料建模、轉換與效能最佳化原則
- 使用 Spark、PySpark 或同類型分散式處理框架
- 處理結構化、半結構化與非結構化資料
- 理解結構描述設計、分割與查詢最佳化
- 使用 Terraform 及/或 CloudFormation 實作基礎設施即程式碼
- 建立並維護資料平台的 CI/CD 管道
- 使用 Docker 與 ECS/EKS 等容器化工作負載
- 對解決方案品質、效能與正式環境穩定性負責
- 與架構師、DevOps、QA 及業務利害關係人有效溝通
- 擁有電腦科學、資訊系統、資料工程或相關科系的學士或碩士學位
- 持有 AWS Data Analytics 或 Solutions Architect 認證,並具備所列認證中的任兩項
- 擁有 Databricks、Snowflake 或其他雲端資料平台認證者優先
- 能夠在印度標準時間 12:00–21:00 或 14:00–23:00 任一時段工作
