Instituto de Pesquisas Eldorado는 1999년에 설립된 브라질의 연구개발 기관으로, 조직이 기술 프로젝트를 테스트를 거친 제품과 실용적인 혁신으로 발전시킬 수 있도록 지원합니다. 통신 제품 인증, 실험실 테스트, 자동차·헬스케어·물류·농업·에너지·석유 및 가스 등 다양한 분야를 위한 혁신 컨설팅을 제공합니다. 또한 교육 및 훈련 프로그램을 개발하고, 산업계 및 연구 파트너와 협력하여 기술 역량을 확대하고 있습니다.
데이터 분석가 — PySpark, SQL 및 Power BI
Instituto de Pesquisas Eldorado의 브라질 R&D 센터에서 데이터 파이프라인, 모델, 대시보드를 구축합니다. PySpark, SQL, Databricks, Power BI를 활용합니다.
설명
- REST API, 웹 스크래핑, 레거시 SQL 프로시저 및 파일을 사용해 데이터 수집 파이프라인을 구축하고 배포합니다
- 데이터베이스에 직접 접근할 수 없는 시스템에 읽기 전용 복제를 구현하도록 지원하고 성능 영향을 고려합니다
- PySpark와 SQL로 데이터를 변환합니다
- 처리 비용 및 성능 벤치마크와 효율적인 리소스 산정을 지원합니다
- 메달리온 아키텍처를 사용해 Bronze, Silver, Gold 데이터 계층을 구축하도록 지원합니다
- 레이아웃 변경 감지와 차단 완화 기능을 갖춘 견고한 스크래핑 파이프라인을 구축합니다
- 데이터 중복을 제거하고 정규화하며 품질을 테스트합니다
- 타사 통합을 위한 데이터 계약과 스키마 변경 알림을 구현하도록 지원합니다
- Power BI 대시보드와 보고서를 작성합니다
- 비즈니스 요구사항을 데이터 모델과 명확한 시각화로 구현합니다
- RBAC 정책에 따라 보고서에 행 수준 보안(Row-Level Security)을 적용합니다
- dbt로 데이터 품질 테스트와 선언형 변환을 작성합니다
- Fabric Copilot을 포함한 셀프서비스 분석 기능의 구성을 지원합니다
- 데이터 거버넌스 팀과 협업해 데이터 계보와 분류를 유지합니다
- 파이프라인과 쿼리의 성능 문제를 찾아 해결합니다
- 사용자 승인 테스트를 수행하고 피드백을 반영해 대시보드를 개선합니다
지원 자격
- 컴퓨터 과학, 컴퓨터 공학, 시스템 분석 또는 관련 분야의 학사 학위
- 데이터 엔지니어링, Python 또는 PySpark, SQL 분야의 중급 경력
- Databricks 또는 Spark에 대한 이해
- Azure Data Factory와 같은 오케스트레이션 도구에 대한 이해
- Parquet 및 Delta Lake와 같은 분석 데이터 형식에 대한 이해
- dbt 지식 보유자 우대
- 데이터 파이프라인을 위한 Git 및 CI/CD에 대한 이해
- REST API를 통한 데이터 통합 경험
- 데이터 시각화 실무와 데이터 스토리텔링에 대한 지식
- SQL, API, 파일, Lakehouse, Warehouse 등 다양한 데이터 소스를 다룬 경험
- 행 수준 보안 구현 경험
- 상파울루 출장에 거부감이 없는 분 우대
- 고급 영어 능력 보유자 우대
복리후생
- 모든 지원자에게 동등한 기회 제공
- 다양성과 포용성을 존중하는 근무 환경
- 장애가 있는 지원자도 지원 가능
- 하이브리드 근무 방식
- 경험을 쌓고 중요한 프로젝트에 기여할 기회
- 기관의 연구실 인프라를 이용하고 R&D 프로젝트에 참여할 기회