데이터 엔지니어 - Capital One(뉴욕, 사무실 근무)
Capital One 여행 데이터 팀의 멀티 클라우드 마이그레이션 업무를 주도합니다. Python, Spark, Databricks를 사용해 개인화된 여행 경험을 지원하는 데이터 파이프라인을 구축합니다.
설명
- 애자일 팀과 협력하여 기술 솔루션을 설계, 개발, 테스트, 구현하고 지원합니다
- 개발자, 데이터 분석가, 데이터 과학자를 대상으로 머신러닝, 분산 마이크로서비스, 레이크하우스 아키텍처, 풀스택 시스템 전반을 이끕니다
- Python, Spark, 관계형 및 NoSQL 데이터베이스, Databricks와 Snowflake 같은 클라우드 데이터 웨어하우스를 사용합니다
- 데이터 엔지니어링 동향을 파악하고 신기술을 평가하며, 기술 커뮤니티에 기여하고 데이터 전문가를 멘토링합니다
- 제품 관리자 및 소프트웨어 엔지니어와 협력하여 클라우드 우선 데이터 기능을 제공합니다
- 클라우드 데이터 애플리케이션과 솔루션을 독립적으로 설계, 구축하고 제공합니다
- 코드 품질, 유지 관리성 및 재사용성을 향상하는 엔지니어링 패턴을 수립하고 적용합니다
- 내부 및 외부 이해관계자에게 기술 개념과 데이터 결과를 설명합니다
- 확장 가능하고 복원력이 높으며 운영 효율적인 데이터 파이프라인과 플랫폼을 구축합니다
- 암호화와 세분화된 액세스 제어를 포함한 데이터 보안 관행을 적용합니다
- 여행 데이터 팀의 대규모 멀티 클라우드 마이그레이션에서 중요한 구성 요소를 담당합니다
- Python, Spark, Databricks를 사용해 멀티 클라우드 데이터를 중앙 데이터 레이크로 통합합니다
- 실시간 개인화 추천, 타깃 여행 혜택 및 지능형 사용자 혜택을 지원합니다
지원 자격
- 컴퓨터 과학 또는 관련 정량 분야의 학사 학위 이상
- 인턴십을 제외한 애플리케이션 개발 경력 4년 이상
- 분산 데이터 관련 경력 2년 이상
- SQL 경력 2년 이상
- Python, Java 또는 Scala 경력 2년 이상
- 데이터 파이프라인 설계 및 개발 경력 2년 이상
- 데이터 모델링 및 관계형·비관계형 데이터베이스를 사용한 엔드투엔드 솔루션 설계 경력 1년 이상
- 신규 지원자는 고용주가 제공하는 이민 또는 취업 허가 지원 대상이 아닙니다
- 우대 조건: 애플리케이션 개발 경력 7년 이상
- 우대 조건: 퍼블릭 클라우드에서 워크로드를 설계, 배포 및 운영한 경력 4년 이상
- 우대 조건: EMR, Spark, Glue 또는 Databricks를 사용해 분산 데이터 또는 컴퓨팅 워크로드를 구축하거나 지원한 경력 4년 이상
- 우대 조건: 실시간 또는 스트리밍 데이터 파이프라인을 설계, 구현 및 운영한 경력 4년 이상
- 우대 조건: Monte Carlo, Splunk, Airflow 또는 Dagster 같은 데이터 옵저버빌리티나 오케스트레이션 도구를 사용한 경력 2년 이상
- 우대 조건: NoSQL 데이터베이스에서 비정형 또는 반정형 데이터를 다룬 경력 4년 이상
- 우대 조건: 데이터 웨어하우스 솔루션을 설계하고 지원한 경력 4년 이상
- 우대 조건: 애자일 개발 환경에서 근무한 경력 2년 이상
- 우대 조건: 재사용 가능하고 사용자 중심적인 데이터 제품을 개발한 경력 2년 이상
복리후생
- 성과 기반 인센티브 보상에는 현금 보너스 및/또는 장기 인센티브가 포함될 수 있습니다
- 전반적인 웰빙을 지원하도록 설계된 종합적이고 경쟁력 있는 의료, 재정 및 기타 복리후생을 제공합니다
- 장애가 있는 지원자에게 합리적인 편의를 제공합니다
