
远程开发工程师(美国)
为 Attain Talent 的 CMS 现代化项目构建 AWS 和 Databricks 数据管道。 设计支持医疗分析、报告和合规的数据湖仓架构。
描述
- 参与美国医疗保险和医疗补助服务中心(CMS)的现代化项目。
- 构建并维护支持分析和报告的 ETL/ELT 数据管道。
- 使用 Python、SQL 和 PySpark,在 Databricks 与 Delta Lake 中创建数据处理工作流。
- 为复杂医疗数据和企业分析开发可扩展的数据湖仓架构。
- 与数据架构师、自动化测试工程师、质量保证分析师及业务分析师合作,制定转换逻辑和集成标准。
- 创建可复用的数据摄取、质量检查和异常处理工具。
- 优化 AWS 和 Databricks 处理作业,提升速度、可靠性和扩展能力,并提高成本效率。
- 参与架构设计、数据建模以及版本控制的数据管道开发。
- 维护治理、元数据和数据沿袭文档,以支持审计、合规及 FISMA 报告。
- 与 DevOps 团队协调,使用 GitHub、Databricks Repos 等相关工具将数据管道接入 CI/CD 工作流。
- 调查根本原因,并解决暂存、集成和生产环境中的数据问题。
任职要求
- 具备扎实的开发工程技能。
- 具备使用 AWS 和 Databricks 构建数据摄取、转换及处理管道的经验。
- 具备 Delta Lake 数据湖仓架构经验。
- 熟练掌握 Python、SQL 和 PySpark。
- 了解可扩展的数据湖仓架构。
- 具备架构设计和数据建模经验。
- 具备开发版本控制数据管道的经验。
- 了解数据治理、元数据管理和数据沿袭文档。
- 具备使用 GitHub、Databricks Repos 或相关工具将数据管道集成到 CI/CD 工作流的经验。
- 具备调查根本原因并解决暂存、集成和生产环境数据问题的经验。
福利待遇
- 医疗、牙科和视力保险、远程医疗服务及保密的员工援助计划。
- 每年至少 3.5 周带薪休假,年限越长假期越多,另有 11 天带薪节假日。
- 入职满六个月后,可参加 401(k) 计划;雇主对符合条件的薪酬最高匹配 4%。
- 公司支付基本人寿保险、意外身故及伤残保险,以及短期和长期伤残保险费用。
- 入职满六个月后,符合条件的员工可参加职业发展和学费报销计划;每项计划每年最高提供 1,500 美元,须经批准。





