데이터 엔지니어, 마스터 데이터 및 골든 레코드——스페인 원격 근무
기술 솔루션 기업인 CONVOTIS Iberia의 마스터 데이터를 통합하고 정리하는 데 집중하는 데이터 엔지니어 직무입니다. Airflow, dbt, Python, SQL을 사용해 골든 레코드를 구축합니다.
설명
- 내부 및 외부 API의 데이터를 통합하는 Airflow DAG를 설계하고 개발합니다
- 여러 소스에서 정보를 수집하고 변환 및 검증한 뒤 기업 마스터 데이터 시스템에 적재합니다
- 매칭, 중복 제거, 통합 및 골든 레코드 생성 프로세스를 개발하고 개선합니다
- 변경 사항의 추적 가능성, 통제 및 일관된 적용을 보장하도록 변경 검증 워크플로를 관리합니다
- 문제를 식별하기 위한 데이터 품질 관리, 비즈니스 규칙 및 관측성 메커니즘을 정의합니다
- 소스 간 불일치를 조사하고 비즈니스 팀 및 데이터 팀과 협력해 유효한 정보를 판단합니다
- 솔루션을 유지하고 팀 지식을 보존하기 위해 통합, 규칙 및 의사결정을 문서화합니다
지원 자격
- 데이터 엔지니어링, 통합 또는 마스터 데이터 분야에서 약 4년의 경력. 경력이 더 짧더라도 이에 상응하는 역량, 자율성 및 영향력이 있으면 고려합니다
- Python, dbt 및 SQL을 능숙하게 사용할 수 있어야 합니다
- 프로덕션 환경에서 Airflow DAG를 개발하고 유지 관리한 경험
- 인증, 페이지네이션, 오류 처리, 재시도 및 추적 가능성을 포함한 API 사용 경험
- 데이터 모델링, 정규화, 중복 제거, 매칭 및 엔터티 통합에 대한 지식
- 데이터 출처를 추적하고 소스를 비교하며 비즈니스 규칙을 기술 로직으로 전환할 수 있는 분석 능력
- Git, 테스트, 문서화, 관측성 및 CI/CD에 대한 우수한 실무 역량
복리후생
- 유연한 근무 시간
- 사무실 근무 또는 재택근무 선택 가능
- 건강 보험
- 유연한 보상
- 사내 행사
- 야외 활동
- 레크리에이션 데이
- 패들 경기
- 자유 선택 휴가 제도
- 교육 기회
- 영어 수업
- 자격증 취득 기회
- 사무실 내 커피, 간식 및 테이블 축구