수석 빅데이터 관리자 및 개발 엔지니어 — SMA Solar, 벵갈루루 현장 근무
SMA Solar의 재생에너지 기술 운영을 위해 Hadoop, Kafka, Druid 클러스터를 관리합니다. 데이터 워크플로를 자동화하고 안전한 온프레미스 인프라를 최적화합니다.
설명
- 안정적이고 안전하며 효율적인 온프레미스 빅데이터 환경을 유지한다
- Hadoop, Kafka, Druid 클러스터를 관리하고 최적화한다
- 시스템 상태와 성능을 선제적으로 모니터링한다
- Cloudera Manager와 Splunk를 포함한 모니터링 및 경고 솔루션을 구현하고 유지한다
- 역할 기반 액세스, 암호화 및 규정 준수 제어를 관리한다
- SQL, NiFi, Python 또는 Spark를 사용해 ETL 워크플로, 데이터 전송 및 분석 파이프라인을 구축한다
- 부서 간 팀과 협력해 아키텍처, 업그레이드 및 기술 평가를 수행한다
- 데이터 인프라의 확장성, 안정성 및 성능을 강화한다
- 자동화, 플랫폼 최적화 및 전략적 아키텍처 의사결정을 지원한다
지원 자격
- 온프레미스 Hadoop, Kafka 및 Druid 클러스터 관리 실무 경력 8년 이상
- HDFS, Hive, Spark, Hue 및 NiFi의 엔터프라이즈 환경 경험
- 쿼리 튜닝과 성능 최적화를 포함한 고급 SQL 역량
- 탄탄한 Linux 관리 지식과 클러스터 유지 관리 방식에 대한 이해
- Ansible, Python, Bash 또는 유사한 스크립팅 도구를 사용한 운영 자동화 경험
- 컴퓨터 과학, 공학 또는 관련 분야의 학사 또는 석사 학위 소지자 우대
- ETL 파이프라인 개발 및 다양한 데이터 소스 연결 경험 우대
- 클라우드 빅데이터 플랫폼에 익숙한 지원자 우대, Azure 경험 보유자 선호
- 재해 복구, 고가용성 설계 및 런북 개발에 대한 지식 보유자 우대
- 뛰어난 영어 의사소통 능력과 애자일 부서 간 팀에서 효과적으로 협업할 수 있는 역량 보유자 우대
복리후생
- 유연한 근무 일정
- 원격 근무 옵션
- 파트타임 근무 기회
- 일과 삶의 균형 지원
- 공평한 기회와 다양성을 존중하는 직장
- 전문성 개발 기회
- 인재 관리 프로그램
