시니어 AWS 데이터 엔지니어 | GFT Technologies | 브라질 원격
GFT Technologies의 시니어 AWS 데이터 엔지니어로서 데이터 파이프라인, 지표 및 Lakehouse 아키텍처를 개발합니다. 분석, 거버넌스 및 인공지능을 위한 데이터 플랫폼 현대화를 추진합니다.
설명
- ETL 도구를 사용해 대규모 데이터를 관리하고 처리합니다.
- 고객의 비즈니스 목표를 정보 관리 및 비즈니스 인텔리전스 전략으로 전환합니다.
- 안정적인 데이터 파이프라인을 유지하고 안전한 정보 액세스를 보장합니다.
- 데이터 품질과 무결성을 보호하면서 지표와 대시보드를 구축하고 게시합니다.
- Lakehouse 아키텍처, 거버넌스, 품질 관리 및 분석과 인공지능을 위한 준비를 통해 데이터 플랫폼 현대화를 지원합니다.
- 비즈니스 팀, 대시보드 및 보고서를 위한 차원 모델을 개발합니다.
- 수집과 처리부터 저장, 변환, 사용 및 거버넌스에 이르는 전체 데이터 수명 주기를 지원합니다.
지원 자격
- 데이터 엔지니어링 및 AWS 분야의 시니어급 경험.
- ETL 도구, Python 및 PySpark를 사용해 데이터를 수집, 변환 및 로드한 실무 경험.
- AWS Glue, EMR, Athena, SNS, Lambda, Step Functions, S3, Lake Formation, IAM 및 CloudWatch에 대한 실무 지식.
- NoSQL 데이터 모델링과 MongoDB, DynamoDB 및 Hadoop 등의 데이터베이스에 대한 지식.
- 테이블 관리, 버전 관리, 스키마 진화, 파티셔닝 및 성능 튜닝을 포함한 Apache Iceberg 기반 Lakehouse 아키텍처에 대한 이해.
- Athena, Trino, Presto 또는 Spark SQL과 같은 대규모 쿼리 엔진 사용 경험. 쿼리 최적화 및 Parquet, ORC와 같은 컬럼형 형식을 포함합니다.
- 팩트, 차원, 세분성, 키, 계층, 지표 및 인디케이터를 포함한 차원 모델링 개념에 대한 지식.
- 정형, 반정형 및 비정형 데이터를 다룬 경험.
- 단위 테스트 및 성능 테스트 수행 경험.
- 클라우드 보안 관행, 액세스 제어 및 모니터링에 대한 지식.
- AWS Practitioner 또는 AWS Data Engineer 자격증 보유자 우대.
- 데이터 품질 및 옵저버빌리티 경험 보유자 우대.
- Terraform 및 CloudWatch와 같은 인프라 코드화 도구 사용 경험 보유자 우대.
- Data Mesh에 대한 지식 보유자 우대.
- 데이터에 인공지능을 적용한 경험 또는 지식 보유자 우대.
- 뛰어난 분석 및 문제 해결 능력.
- 독립적으로 업무를 수행하고 시간을 효과적으로 관리하는 능력.
복리후생
- 자금의 사용 방식과 장소를 선택할 수 있는 유연한 복지 카드.
- 학부, 대학원, MBA 및 어학 학습을 위한 교육 지원.
- 전문 자격증 취득을 장려하는 프로그램.
- 유연한 근무 시간.
- 경쟁력 있는 보상.
- 체계적인 경력 개발 계획을 바탕으로 한 연례 성과 평가.
- 국제적인 경력 성장 기회.
- Wellhub 및 TotalPass 이용.
- 개인 연금 제도.
- 보육 지원.
- 건강 보험.
- 치과 및 생명 보험.
- 필드
