시니어 데이터 개발 엔지니어(원격, 폴란드)
InPost Group에 시니어 데이터 개발 엔지니어로 합류해 유럽 소포 네트워크를 지원하는 안정적인 데이터 플랫폼을 담당합니다. ETL/ELT 파이프라인, Databricks 데이터 레이어 및 품질 관리를 구축하고 최적화해 분석과 자동화를 지원합니다.
설명
- SQL, PySpark 및 Python을 사용해 ETL/ELT 워크플로를 구축하고 유지 관리하며 여러 소스 시스템의 데이터를 통합합니다.
- 테이블, 뷰 및 분석 데이터 모델을 포함한 Databricks, Data Lake 및 Delta Lake 레이어를 생성합니다.
- 데이터 수집 및 변환 워크플로를 자동화하고 조정합니다.
- 검증, 모니터링, 알림 및 인시던트 조사를 통해 데이터의 정확성과 신뢰성을 유지합니다.
- SQL 쿼리, Spark 워크로드 및 스토리지 설계를 개선해 성능, 확장성, 안정성 및 비용 효율성을 향상합니다.
- 분석가, 제품 책임자 및 기타 이해관계자에게 신뢰할 수 있고 운영 환경에 바로 사용할 수 있는 데이터를 제공합니다.
- 데이터 프로세스, 모델, KPI 정의, 종속성, 데이터 계보 및 인시던트 절차에 관한 Confluence 문서를 유지 관리합니다.
- AI 도구를 사용해 제공 속도를 높이되 배포 전에 생성된 코드, 구성 및 문서를 검토합니다.
지원 자격
- 데이터 엔지니어링, 애널리틱스 엔지니어링 또는 데이터 분석 분야에서 최소 2년의 경력.
- ETL/ELT 워크플로를 설계하고 분석 데이터 모델 또는 데이터 레이어를 개발한 경험.
- 모니터링, 문제 해결 및 데이터 품질 보증을 포함한 운영 데이터 프로세스 유지 관리 경험.
- 클라우드 플랫폼, 특히 Microsoft Azure 경험.
- SQL, Python, PySpark 및 Databricks 실무 능력.
- Data Lake 및 Delta Lake 아키텍처와 데이터 모델링 원칙에 대한 이해.
- 개발, 테스트 및 운영 환경에서 Git과 Azure DevOps를 사용한 실무 경험.
- 비즈니스 요구사항을 효과적인 기술 솔루션으로 전환하는 능력.
- 국제적인 환경에서 업무를 수행할 수 있는 고급 영어 커뮤니케이션 능력.
- 분석적이고 논리적이며 세부 사항에 주의를 기울이고 주도적으로 행동하며 시간 압박 속에서 우선순위를 정할 수 있는 능력.
- 복잡한 운영 환경에서 근무한 경험이 있으면 우대.
- 스타 스키마, 팩트 테이블과 디멘션 테이블, 데이터 세분성, 보고 및 분석을 위한 정규화 또는 비정규화를 포함한 차원 모델링 지식이 있으면 우대.
- Databricks 및 Delta Lake 고급 기능에 대한 지식이 있으면 우대.
- Kafka, Structured Streaming 또는 Event Hubs 경험이 있으면 우대.
- 모니터링 및 알림 도구에 익숙하면 우대.
- 데이터 보안, 접근 제어, 메타데이터 관리 및 데이터 계보 원칙에 대한 지식이 있으면 우대.
- Jira와 Confluence 경험 또는 관련 Microsoft Fabric 및 Databricks 인증이 있으면 우대.
- 데이터 엔지니어링, 애널리틱스 엔지니어링 또는 데이터 분석 분야에서 최소 2년의 경력. ETL/ELT 워크플로를 설계하고 분석 데이터 모델 또는 데이터 레이어를 개발한 경험.
복리후생
- 전략적 비즈니스 의사결정을 직접 지원하는 데이터 제품을 담당합니다.
- 다양한 국제적·부서 간 팀에서 경험 많은 전문가들과 협업합니다.
- AI 도구를 포함한 신기술을 실험하고 유용한 혁신을 운영 환경에 적용합니다.
- 업무의 직접적이고 즉각적인 효과를 확인할 수 있습니다.
- B2B 협력 형태입니다.