
시니어 Snowflake 데이터 엔지니어
Meltwater의 분석, 통합, 보고 및 AI 애플리케이션을 지원하는 확장 가능한 Snowflake 데이터 플랫폼을 구축합니다. 안정적인 파이프라인으로 Salesforce와 AWS 데이터를 연결합니다.
설명
- 확장 가능한 Snowflake 데이터 솔루션을 설계하고 유지 관리합니다.
- 데이터베이스, 스키마, 테이블, 뷰, 보안 뷰, 스테이지 및 기타 Snowflake 객체를 생성합니다.
- SQL과 Snowpark를 사용해 프로덕션 환경에 적합한 변환을 개발합니다.
- Snowflake Streams, Tasks, Dynamic Tables, Snowpipe, 증분 처리 및 변경 데이터 캡처를 구현합니다.
- 쿼리, 웨어하우스, 클러스터링, 스토리지, 컴퓨팅 사용량 및 플랫폼 비용을 개선합니다.
- 안전한 데이터 공유와 액세스 제어를 설정합니다.
- 정형 및 반정형 데이터를 위한 안정적인 ETL/ELT 파이프라인을 구축합니다.
- 배치, 증분, 준실시간 및 이벤트 기반 데이터 수집 파이프라인을 개발합니다.
- Salesforce, REST API, SaaS 애플리케이션, AWS, 데이터베이스 및 파일의 데이터를 연결합니다.
- 재사용 가능한 데이터 수집 및 변환 프레임워크를 만듭니다.
- 스키마 변경, 지연 도착 데이터, 재시도, 재생, 조정 및 소스에서 대상으로의 데이터 완전성을 관리합니다.
- 종속성 처리와 장애 관리를 갖춘 오케스트레이션 워크플로를 구축합니다.
- 차원 모델, 팩트 및 차원 테이블, 데이터 마트, 정제된 데이터 세트 및 엔터프라이즈 데이터 모델을 설계합니다.
- 일관된 핵심 비즈니스 엔터티와 지표를 정의합니다.
- 분석, 보고, 운영 애플리케이션 및 AI 워크로드를 위한 데이터 계층을 만듭니다.
- Salesforce 데이터 수집 및 증분 또는 CDC 동기화 파이프라인을 개발해 Snowflake로 데이터를 가져옵니다.
- S3, Lambda, SQS, SNS, EventBridge 및 관련 서비스를 사용해 AWS 데이터 파이프라인을 구축합니다.
- 스테이징, 보관, IAM, 암호화, 시크릿 및 액세스 제어를 포함해 데이터 이동과 파일 수집을 안전하게 처리합니다.
- 데이터 품질 검사, 테스트, 모니터링, 로깅, 지표, 알림 및 운영 대시보드를 자동화합니다.
- 프로덕션 데이터 사고를 조사하고 해결하며 상류 및 하류 영향을 추적합니다.
- 깔끔하고 재사용 가능하며 테스트와 유지 관리가 쉬운 코드를 작성합니다.
- 아키텍처 및 코드 리뷰에 참여합니다.
- 기술 문서, 데이터 매핑 및 운영 지침서를 유지 관리합니다.
- CI/CD 및 자동 배포 방식에 기여합니다.
- 데이터 엔지니어를 멘토링하고 엔지니어링 표준 수립을 지원합니다.
지원 자격
- 데이터 엔지니어링 경력 5년 이상.
- Snowflake 실무 경력 3년 이상.
- 복잡한 변환 및 쿼리 최적화를 포함한 고급 SQL 역량.
- 데이터 처리, 자동화 및 API 통합을 위한 탄탄한 Python 역량.
- 프로덕션급 ETL/ELT 파이프라인 구축 경험.
- Snowflake와 AWS를 통합한 경험.
- Salesforce 또는 유사한 엔터프라이즈 SaaS 플랫폼에서 데이터를 수집한 경험.
- 차원 모델링과 현대적인 데이터 아키텍처에 대한 깊은 이해.
- 증분 처리, CDC 및 데이터 조정 경험.
- 데이터 품질 및 모니터링 프레임워크 구현 경험.
- Git, CI/CD 및 소프트웨어 엔지니어링 모범 사례 활용 경험.
- Snowpark 사용 경험.
- Snowflake Cortex 사용 경험.
- Streams, Tasks, Dynamic Tables, Snowpipe 및 안전한 데이터 공유 경험.
- Salesforce Bulk API, CDC 및 Platform Events 경험.
- AWS Lambda, S3, SQS, SNS, EventBridge 및 Glue 경험.
- dbt 또는 유사한 변환 프레임워크 경험.
- Airflow, Dagster, Prefect 또는 유사한 오케스트레이션 플랫폼 경험.
- Terraform 또는 인프라스트럭처 코드화 경험.
- Snowflake 기반 AI/ML 및 RAG 워크로드 지원 경험.
- Snowflake 자격증 보유 시 우대합니다.
복리후생
- 유연한 유급 휴가.
- 포괄적인 건강 보험.
- 정신 건강, 법률, 재정, 웰빙 및 행동 관련 요구를 지원하는 직원 지원 프로그램.
- 직원과 가족 및 지인을 위한 CalmApp 무료 구독.
- 하이브리드 근무 방식.
- 근속 기간에 따라 늘어나는 가족 휴가.
- 포용적인 커뮤니티.
- 지속적인 전문성 개발 기회.







