Kiwi 信用风险数据工程师——多米尼加共和国远程办公
负责 Kiwi 为贷款决策提供支持的信用风险数据基础设施,涵盖 Snowflake 数据管道、数据质量监控和可复现建模数据集。 该远程职位将支持多米尼加共和国、阿根廷和哥伦比亚的团队。
描述
- 管理完整的信用数据源清单,包括 TransUnion、Clarity、Plaid、Prism,以及内部申请和贷款服务系统
- 明确每个数据源所需的数据、粒度、时效性和目标位置
- 与负责供应商集成的工程师共同制定数据契约
- 确认完整保留供应商原始响应,以满足模型开发和审计需求
- 监控数据源和模型输入的新鲜度、数据量、填充率及架构
- 针对特征填充率下降、供应商字段缺失和数据量异常变化配置告警
- 与数据科学家合作监控生产模型输入的数据漂移
- 调查数据事件、确定根本原因、协调修复并跟踪解决进度
- 负责 Snowflake 数据仓库中的信用风险层,涵盖原始层、暂存层、数据集市层和特征表
- 开发和维护申请、贷款、绩效及供应商数据的管道和转换流程
- 确保建模数据集保持可复现,并避免训练数据泄漏
- 维护支持信用风险仪表板和受治理指标的表
- 开发针对键、重复项、值范围、参照完整性和数据源对账的自动化检查
- 及时维护文档、数据血缘和责任归属登记表
- 通过审查服务级别协议并将数据拉取量与供应商发票进行核对,支持供应商治理
任职要求
- 至少四年数据工程或分析工程经验,包括主要负责生产数据平台
- 精通 SQL,并具备扎实的数据建模能力,包括维度模型、缓慢变化数据和时间点快照
- 具备使用云数据仓库的实践经验,优先考虑 Snowflake
- 具有使用 dbt 等转换框架的经验,并熟悉版本控制、代码审查和持续集成实践
- 具备使用 Python 构建数据管道、测试和自动化流程的经验
- 成功实施过数据质量测试和告警,使用过 dbt tests、Great Expectations、Monte Carlo、Elementary 或自定义检查
- 具有使用 Airflow、Dagster 或 Prefect 等编排平台的经验
- 具备强烈的责任意识,能够主动发现问题、追溯根本原因并推动问题解决
- 具备清晰的书面沟通能力,能够编写可靠的数据契约、事件记录和表文档
- 具备西班牙语和英语流利能力者优先,但非必需
- 具备金融科技或贷款、征信机构和银行数据、特征表、训练数据集、模型监控、贷款合规、商业智能工具或 Metabase 经验者优先,但非必需
福利待遇
- 参与对客户和业务增长有直接影响的重要金融产品
- 全面负责 Kiwi 的信用风险数据层,并影响其发展方向
- 处理涵盖数据管道、数据质量、监控和建模数据集的实质性问题
- 加入一个人工智能正逐渐成为团队工作和产品构建核心的工作环境
- 与信用风险、数据科学、工程和产品团队的同事协作
- 完全远程办公
