P
Databricks 아키텍트 — 미국 원격 근무
Point C는 의료 복지 데이터를 위한 Azure 레이크하우스 플랫폼을 구축할 원격 Databricks 아키텍트를 채용합니다. 이 역할은 청구 데이터 파이프라인, 거버넌스 및 프로덕션 분석 인프라를 담당합니다.
설명
- Databricks, Apache Spark, Delta Lake 및 SQL을 사용해 솔루션 아키텍처와 기술 설계 문서를 기반으로 확장 가능한 데이터 플랫폼을 구축합니다.
- 여러 청구 시스템에 걸친 엔터프라이즈 워크로드를 위해 Bronze, Silver 및 Gold 메달리온 아키텍처를 개발합니다.
- Databricks Workflows, PySpark 및 SQL을 사용해 프로덕션 ETL/ELT 파이프라인을 구축하고 튜닝하며 유지 관리합니다.
- ADF 및 ADLS 수집과 기존 kill-and-fill 차원 패턴을 지원합니다.
- 스키마 진화, 타임 트래블, 파티셔닝 및 최적화를 포함한 데이터 모델과 Delta 테이블을 설계하고 관리합니다.
- 클라우드 스토리지 서비스와 데이터베이스를 연결하는 Azure 솔루션을 설계합니다.
- Unity Catalog, 액세스 제어, 거버넌스, 계보 및 보안 조치를 구현합니다.
- 청구 시스템 데이터 사전을 보고서 및 API용 Unity Catalog 테이블로 변환합니다.
- 플랫폼 성능을 개선하고 비용을 관리하기 위한 전략을 수립하고 실행합니다.
- 데이터 엔지니어, 분석가 및 비즈니스 이해관계자와 협업해 요구사항을 기술 설계로 전환합니다.
- Databricks 노트북, 작업 및 인프라를 위한 CI/CD 프로세스를 수립합니다.
- 프로덕션 파이프라인 문제를 진단하고 플랫폼 안정성 유지를 지원합니다.
지원 자격
- 데이터 엔지니어링 또는 클라우드 엔지니어링 경력 5~7년.
- Databricks 및 Apache Spark에 대한 실무 전문성.
- PySpark 및 SQL 고급 활용 능력.
- Delta Lake 및 메달리온 아키텍처에 대한 높은 수준의 지식.
- 하나 이상의 클라우드 플랫폼, 특히 Azure 경험.
- 데이터 거버넌스, Unity Catalog, IAM/RBAC 및 보안 관행에 대한 이해.
- Git, CI/CD 및 인프라스트럭처 코드화 개념에 대한 경험.
- 데이터 웨어하우징, 차원 모델링 및 분산 데이터 처리에 대한 높은 수준의 지식.
- Azure Data Factory 경험 보유자 우대.
- Terraform 경험 보유자 우대.
- Kafka 또는 기타 스트리밍 기술 경험 보유자 우대.
- Power BI 플랫폼 경험 보유자 우대.
- Databricks 자격증 보유자 우대.
- 엔터프라이즈 데이터 레이크 또는 레이크하우스 설계 경험 보유자 우대.
복리후생
- 의료, 치과, 안과 및 생명보험 보장.
- 고용주 매칭이 제공되는 401(k) 퇴직연금 플랜.
- 건강저축계좌 및 유연지출계좌 선택권.
- 유급 휴가 및 장애 휴가.
- 직원 지원 프로그램.
