Azure Databricks 데이터 엔지니어 — CI&T, 브라질 하이브리드 근무
기술 혁신 기업 CI&T에서 Azure와 Databricks를 활용해 확장 가능한 데이터 파이프라인을 구축합니다. 데이터 레이크하우스, ETL/ELT, 분석 관련 프로젝트에 참여합니다.
설명
- Azure Databricks와 Azure Data Factory를 사용해 확장 가능한 파이프라인을 설계하고 개선합니다
- 수집, 변환, 데이터 제공을 아우르는 ETL/ELT 워크플로를 구축합니다
- Bronze, Silver, Gold 계층 전반에 Medallion Architecture와 데이터 레이크하우스 솔루션을 구현합니다
- PySpark, Spark SQL, SQL, Python으로 데이터 솔루션을 개발합니다
- Delta Lake를 사용해 데이터 품질, 일관성, 성능, 안정성을 지원합니다
- 비즈니스 인텔리전스와 분석 사용 사례를 위한 데이터 모델을 개발하고 개선합니다
- 관계형 데이터베이스와 API를 포함한 다양한 데이터 소스 및 시스템을 연결합니다
- BI, 데이터 과학, 엔지니어링, 비즈니스 팀과 협업합니다
- 품질 보증, 데이터 거버넌스, 버전 관리, CI/CD 관행을 따릅니다
- 생성형 AI 도구와 코딩 어시스턴트를 활용해 개발 효율성과 품질을 높입니다
- 클라우드, 데이터, 인공지능과 관련된 글로벌 혁신 및 현대화 프로그램을 지원합니다
지원 자격
- 프로덕션 환경에서 데이터 엔지니어로 근무한 경험
- Azure Databricks에 대한 풍부한 실무 경험
- 대규모 데이터셋 처리 및 튜닝을 포함한 고급 PySpark와 Apache Spark 역량
- 고급 SQL 역량
- 데이터 엔지니어링에 Python을 활용한 실무 경험
- Azure Data Factory로 파이프라인을 구축하고 오케스트레이션한 경험
- Bronze, Silver, Gold 계층 전반의 ETL/ELT와 Medallion Architecture에 대한 이해
- Delta Lake 및 데이터 레이크하우스 환경 경험
- 차원 모델링과 관계형 데이터 모델링에 대한 지식
- Git 및 버전 관리 관행에 대한 경험, Bitbucket 경험 우대
- Azure Pipelines 또는 Azure DevOps를 포함한 CI/CD 도구와 관행에 대한 지식
- SQL Server 또는 Oracle과 같은 관계형 데이터베이스 경험
- 실용적이고 분석적이며 해결책 중심으로 업무에 임하는 태도
- 문제를 독립적으로 조사하고 개선안을 제안할 수 있는 능력
- 다음 경험이나 자격을 보유한 경우 우대: Kimball 방법론과 다차원 모델, Azure Purview 또는 기타 데이터 거버넌스 및 카탈로그 도구, Azure DevOps를 활용한 데이터 파이프라인, Spark Structured Streaming 또는 Azure Event Hubs와 같은 스트리밍 기술, Erwin 또는 동급 도구, GitHub Copilot·Databricks Assistant 또는 유사한 AI 도구, Azure DP-203 또는 Databricks 인증
복리후생
- 건강 및 치과 보험
- 식사 및 식품 수당
- 육아 지원
- 연장 육아휴직
- Wellhub(Gympass) 및 TotalPass를 통한 헬스장과 건강·웰니스 서비스 이용
- 이익 공유 및 성과 기반 보너스(PLR)
- 생명보험
- CI&T University를 통한 지속적인 학습
- 할인 클럽 회원권
- 신체적·정신적 건강과 웰빙을 지원하는 무료 온라인 리소스
- 임신 및 책임 있는 부모 되기 과정
- 온라인 교육 제공업체와의 제휴
- 언어 학습 플랫폼
- 장애인을 위한 채용 지원 및 편의 제공
- 전담 건강 및 웰빙 팀
- 포용성 전문가 및 직원 친목 그룹
