AWS数据工程师（中级/高级）– 巴西远程
GFT Technologies 诚聘远程 AWS 数据工程师。负责构建数据管道、维度模型和治理实践，并支持面向分析与 AI 的 Lakehouse 架构。
描述
- 使用 ETL 工具组织、收集和处理海量数据。
- 将客户业务目标转化为信息管理和商业智能策略。
- 运行数据管道，并通过安全访问控制保护信息。
- 基于收集的数据开发并发布指标和仪表板。
- 维护数据质量，确保各流程中的数据完整性。
- 通过 Lakehouse 架构、治理、质量管理以及分析和 AI 用例准备，支持数据平台现代化。
- 为业务团队、仪表板和报告创建维度模型。
- 负责完整的数据生命周期，包括数据摄取、处理、存储、转换、使用和治理。
任职要求
- 具备中级或高级数据工程和 AWS 经验。
- 具备使用 ETL 工具和 Python 或 PySpark 收集、转换及加载数据的实践经验。
- 熟悉 AWS Glue、EMR、Athena、SNS、Lambda、Step Functions、S3、Lake Formation、IAM 和 CloudWatch。
- 了解 NoSQL 数据建模，以及 MongoDB、DynamoDB 和 Hadoop 等数据库。
- 了解基于 Apache Iceberg 的 Lakehouse 架构，包括分析表管理、版本控制、模式演进、分区和性能调优。
- 具备使用 Athena、Trino、Presto 或 Spark SQL 等大规模数据查询引擎的经验。
- 能够调优查询，并使用 Parquet 和 ORC 列式格式。
- 了解维度建模概念，包括事实、维度、粒度、键、层级、指标和 KPI。
- 具备处理结构化、半结构化和非结构化数据的经验。
- 具备执行单元测试和性能测试的经验。
- 了解云安全实践、访问控制和监控。
- 拥有 AWS Practitioner 和 AWS Data Engineer 认证者优先。
- 具备数据质量和可观测性经验者优先。
- 具备 Terraform 和 CloudWatch 经验者优先。
- 了解 Data Mesh 者优先。
- 了解将 AI 应用于数据者优先。
福利待遇
- 灵活福利卡，可自主选择资金的使用方式和场景。
- 支持本科、研究生、MBA 和语言学习的奖学金。
- 鼓励并支持职业认证的相关项目。
- 弹性工作时间。
- 具有竞争力的薪酬。
- 通过结构化职业发展计划支持年度绩效评估。
- 提供国际职业发展机会。
- 可使用 Wellhub 和 TotalPass。
- 私人养老金计划。
- 育儿援助。
- 医疗保险。
- 牙科保险。
- 人寿保险。