AWS 데이터 엔지니어(중급/고급) – 브라질 원격
GFT Technologies의 원격 AWS 데이터 엔지니어 직무입니다. 데이터 파이프라인, 차원 모델, 거버넌스 방식을 구축하고 분석 및 AI를 위한 레이크하우스 아키텍처를 지원합니다.
설명
- ETL 도구를 사용해 대량의 데이터를 정리하고 수집 및 처리합니다.
- 고객의 비즈니스 목표를 정보 관리 및 비즈니스 인텔리전스 전략으로 전환합니다.
- 데이터 파이프라인을 운영하고 안전한 접근 제어를 통해 정보를 보호합니다.
- 수집된 데이터에서 지표와 대시보드를 개발하고 게시합니다.
- 프로세스 전반에서 데이터 품질을 유지하고 데이터 무결성을 보존합니다.
- 레이크하우스 아키텍처, 거버넌스, 품질 관리, 분석 및 AI 사용 사례를 위한 준비를 통해 데이터 플랫폼 현대화를 지원합니다.
- 비즈니스 팀, 대시보드 및 보고서를 위한 차원 모델을 생성합니다.
- 수집, 처리, 저장, 변환, 소비 및 거버넌스를 포함한 전체 데이터 수명 주기를 관리합니다.
지원 자격
- 중급 또는 고급 데이터 엔지니어링 및 AWS 경험.
- ETL 도구와 Python 또는 PySpark를 사용해 데이터를 수집, 변환 및 적재한 실무 경험.
- AWS Glue, EMR, Athena, SNS, Lambda, Step Functions, S3, Lake Formation, IAM 및 CloudWatch에 대한 실무 지식.
- NoSQL 데이터 모델링과 MongoDB, DynamoDB, Hadoop 등의 데이터베이스에 대한 지식.
- Apache Iceberg를 사용하는 레이크하우스 아키텍처에 대한 지식. 분석 테이블 관리, 버전 관리, 스키마 진화, 파티셔닝 및 성능 튜닝을 포함합니다.
- Athena, Trino, Presto 또는 Spark SQL과 같은 대규모 데이터 쿼리 엔진 사용 경험.
- 쿼리를 튜닝하고 Parquet 및 ORC 컬럼형 형식을 다룰 수 있는 능력.
- 팩트, 차원, 세분성, 키, 계층 구조, 지표 및 KPI를 포함한 차원 모델링 개념에 대한 지식.
- 정형, 반정형 및 비정형 데이터를 처리한 경험.
- 단위 테스트 및 성능 테스트 수행 경험.
- 클라우드 보안 관행, 접근 제어 및 모니터링에 대한 지식.
- AWS Practitioner 및 AWS Data Engineer 자격증 보유자 우대.
- 데이터 품질 및 옵저버빌리티 경험 보유자 우대.
- Terraform 및 CloudWatch 경험 보유자 우대.
- Data Mesh 지식 보유자 우대.
- 데이터에 AI를 적용하는 방법에 대한 지식 보유자 우대.
복리후생
- 자금의 사용 방식과 장소를 선택할 수 있는 유연한 복지 카드.
- 학부, 대학원, MBA 및 어학 학습을 위한 장학금 지원.
- 전문 자격증 취득을 장려하고 지원하는 프로그램.
- 유연근무제.
- 경쟁력 있는 보상.
- 체계적인 경력 개발 계획에 기반한 연간 성과 평가.
- 국제적인 커리어 성장 기회.
- Wellhub 및 TotalPass 이용.
- 개인연금 제도.
- 육아 지원.
- 의료보험.
- 치과보험.
- 생명보험.