Vultr는 개발자와 기업에 온디맨드 컴퓨팅, 스토리지, 네트워킹 및 데이터베이스 서비스를 제공하는 글로벌 클라우드 인프라 기업입니다. 이 플랫폼은 가상 머신, 베어메탈 서버, GPU 가속 인프라, 관리형 데이터베이스, 오브젝트 및 블록 스토리지, Kubernetes, 배포 가능한 마켓플레이스 애플리케이션을 포함합니다. AMD 및 NVIDIA GPU 지원, 고속 네트워크, 32개 이상의 데이터센터 리전에 구축된 인프라를 바탕으로, 개발자 중심의 API와 확장 가능한 클라우드 도구를 통해 소프트웨어, 인공지능 및 고성능 컴퓨팅 워크로드를 지원합니다.
시니어 데이터 엔지니어, BigQuery
Vultr의 글로벌 클라우드 인프라 플랫폼을 위한 안정적인 BigQuery 파이프라인과 거버넌스 데이터셋을 구축합니다. 엔지니어링, 비즈니스 인텔리전스, 데이터 과학 팀과 협력해 전사 분석을 지원합니다.
설명
- 필요에 따라 증분 로드와 변경 데이터 캡처를 활용해 BigQuery로 유입되는 운영 데이터 파이프라인을 구축하고 유지합니다.
- 공유 비즈니스 엔터티와 보고 지표를 포함한 브론즈, 실버, 골드 데이터셋을 생성합니다.
- 소스 시스템과 대상 데이터셋 간 데이터 검증 및 대사를 자동화합니다.
- 업데이트, 삭제, 과거 소스 데이터 수정 사항을 다운스트림 데이터셋에 전파합니다.
- 파이프라인 상태를 모니터링하고 예외 및 스키마 변경을 관리하며 복구 절차와 데이터 계보를 문서화합니다.
- 비즈니스 인텔리전스 및 데이터 과학 팀과 협력해 문서화되고 성능이 우수한 데이터셋을 제공합니다.
- 엔지니어링 팀 및 비즈니스 시스템 담당자와 협력해 소스 데이터 누락을 해결하고 신뢰할 수 있는 데이터 전달 방식을 정의합니다.
- 합의된 엔터프라이즈 아키텍처 내에서 테스트, 배포, 보안, 비용 관리 엔지니어링 표준을 수립하고 적용합니다.
- 기존 파이프라인을 검토하고 반복 가능한 엔지니어링 방식을 정립합니다.
- 우선순위가 높은 보고 요구사항을 위한 프로덕션 데이터셋을 제공합니다.
- 초기 데이터 품질 관리와 모니터링을 도입합니다.
- 과거 소스 데이터 수정 사항이 다운스트림 보고에 정확히 반영되는지 확인합니다.
지원 자격
- 데이터 엔지니어링 경력 5년 이상이며 프로덕션 파이프라인을 담당한 경험이 있어야 합니다.
- 고급 SQL 기술과 탄탄한 Python 역량이 필요합니다.
- 파티셔닝, 클러스터링, 쿼리 성능, 비용 관리를 포함한 BigQuery 프로덕션 경험이 필요합니다.
- dbt, Airflow, Cloud Composer, Dagster 또는 이에 준하는 데이터 변환 및 오케스트레이션 도구 경험이 필요합니다.
- 운영 데이터베이스에서 데이터를 추출하고 증분 로드, 업데이트, 삭제, 백필, 과거 데이터 수정 사항을 관리한 경험이 필요합니다.
- 차원 모델링과 과거 데이터 추적에 대한 높은 이해도가 필요합니다.
- 자동화된 데이터 품질 검사, 대사, 모니터링, 경고, 복구 경험이 필요합니다.
- Git, 코드 리뷰, 자동화 테스트, CI/CD 경험이 필요합니다.
- 엔지니어링, 분석, 비즈니스 팀 전반에서 협업할 수 있어야 합니다.
- MySQL, ClickHouse, Kafka 또는 Google Pub/Sub 경험이 필요합니다.
- Parquet, 스토리지 효율성, Spark 또는 PySpark에 익숙해야 합니다.
- 애플리케이션 코드나 ORM을 통해 데이터 정의와 비즈니스 로직을 추적할 수 있어야 합니다. PHP 지식은 우대합니다.
- Salesforce, NetSuite, Power BI 또는 이에 준하는 시스템 경험이 필요합니다.
- IAM, 서비스 계정, 최소 권한 액세스, 안전한 워크로드 인증에 익숙해야 합니다.
- 메타데이터, 데이터 계보 또는 데이터 관측성 도구 경험이 필요합니다.
- 파이프라인 운영, 인시던트 조사 또는 LLM 애플리케이션을 위한 거버넌스 데이터 액세스에 AI나 자동화를 적용한 경험이 필요합니다.
- 클라우드 인프라, 통신, 데이터센터 또는 기타 자산 집약적 환경에서의 경험이 필요합니다.
복리후생
- 회사가 직원 의료, 치과, 시력 보험료의 100%를 부담합니다.
- 401(k) 납입액의 100%를 회사가 매칭하며, 급여의 최대 4%까지 즉시 귀속됩니다.
- 연간 최대 2,500달러의 전문성 개발 비용을 지원합니다.
- 공휴일 11일, 누적형 유급 휴가 및 이월 제도를 제공합니다.
- 근속 3주년과 10주년에 추가 유급 휴가를 제공합니다.
- 5년마다 한 달의 유급 안식 휴가를 제공합니다.
- 매년 근속 기념 보너스를 제공합니다.
- 원격 근무 사무실 설치비를 첫해 500달러, 이후 매년 400달러 지원합니다.
- 인터넷 비용을 월 최대 75달러까지 지원합니다.
- 헬스장 회원권 비용을 월 최대 50달러까지 지원합니다.
- Wellable 구독료를 회사가 부담합니다.