資料工程師 I – Netomi(印度遠端)
加入 Netomi,擔任資料工程師 I,為其企業級代理式 AI 客戶體驗平台打造可擴展的資料管道與分析能力。 此職位將支援資料產品、即時洞察與產品品質相關工作。
說明
- 使用 Spark、Databricks、Airflow 和 Snowflake 等平台,設計並交付安全、可靠且可擴展的資料管道。
- 建立用於擷取結構化與非結構化資料的 ETL 與 ELT 工作流程。
- 進行探索性資料分析,以識別趨勢、驗證資料品質,並為資料產品與商業決策提供依據。
- 與資料科學家、分析師和軟體工程師合作,建立支援可靠分析與即時洞察的模型。
- 開發易於維護的 Python 應用程式,並以完整的單元測試和整合測試提供支援。
- 在敏捷協作的團隊中,負責從頭到尾交付功能。
- 與資料科學、產品、工程和客戶成功團隊的相關利害關係人合作,主導複雜的資料與趨勢分析。
- 評估產品營運計畫,並建立及分發評分卡與報告。
- 運用客戶與商業資料發掘並推動新的機會。
- 協助制定處理產品品質問題的政策、流程和工具。
職位要求
- 具備計算機科學、工程或相關領域的學士或碩士學位。
- 至少兩年資料工程或後端軟體開發的實務經驗。
- 熟悉關聯式資料庫,包括 RDS、MySQL 和 PostgreSQL。
- 具備使用 Apache Kafka 或 RabbitMQ 建立非同步、解耦系統的經驗。
- 精通 Python 和 SQL,並具備使用 Apache Airflow、Luigi 或 Prefect 等資料管道編排工具的經驗。
- 具備 AWS Redshift、GCP BigQuery、Snowflake 或 Databricks 等雲端資料平台的豐富經驗。
- 熟悉資料建模、資料倉儲和分散式系統。
- 了解 DevOps 實務,包括 CI/CD、基礎設施即程式碼,以及 Docker 或 Kubernetes 容器化。
- 接觸過 AI/ML 支援的解決方案,或有興趣與資料科學團隊合作。
- 了解 GDPR 和 HIPAA 等資料安全與隱私要求。
- 熟悉提示工程,以及以 LLM 為基礎的系統如何使用資料並與資料互動。
