初級資料工程師,聖保羅(混合辦公)
建置 ETL/ELT 管道、整合方案與 AWS 資料解決方案。 加入一家專注於技術與數位轉型的招募顧問公司。
說明
- 建置並維護基礎的 ETL/ELT 管道
- 串接來自檔案、API 和資料庫的資料
- 清理、轉換並驗證資料
- 撰寫 Python 和 SQL 指令碼以自動化工作
- 協助整理資料湖和資料倉儲
- 監控管道並處理已知問題
- 記錄工作流程和作業程序
- 遵循資料品質、安全性和版本控制的良好實務
- 與技術團隊和業務團隊合作
- 準備儀表板資料集、檢查指標並維護簡易視覺化內容
職位要求
- 能使用 SQL 查詢、連接、彙總和子查詢,並了解基本的查詢最佳化
- 能使用 Pandas 和 Boto3 撰寫 Python ETL/ELT 指令碼
- 了解 Shell 指令碼基礎和自動化
- 熟悉 PostgreSQL 或 MySQL 等關聯式資料庫,並基本了解 DynamoDB 等 NoSQL 資料庫
- 了解 ETL/ELT、資料管道、資料建模、資料湖和資料倉儲
- 具備 AWS 基礎知識,包括 S3、RDS、Glue、Athena 和 Lambda
- 了解 IAM、雲端安全性和 CloudWatch 基礎
- 具備使用 AWS 服務的經驗
- 能使用 Git 管理分支、提交變更和提出合併請求,並處理基本的合併衝突
- 具備使用 pytest 撰寫單元測試的基礎經驗
- 了解使用 Airflow 或 Step Functions 編排工作流程的基礎知識
- 能記錄技術工作,並驗證資料品質與完整性
- 具備 Power BI、Amazon QuickSight 或其他 BI 工具的使用經驗或相關知識者佳
- 具備分析思維、組織能力、清晰的溝通能力,並樂於學習及提升技術能力
福利待遇
- 承包商合作形式(PJ)
- 混合辦公安排
- 有機會加入領先的雲端解決方案與數位轉型公司
- 有機會精進技術能力,並逐步承擔更多自主職責
相關職缺
找不到職缺
嘗試調整或清除篩選條件,以查看更多機會。
