데이터 엔지니어
inforcer의 사이버 보안 및 AI 제품을 위한 확장 가능한 데이터 플랫폼, 통합 기능, ETL 파이프라인을 구축합니다. 분석, 자동화, 보고 및 AI 업무를 지원합니다.
설명
- 확장 가능한 데이터 레이크와 현대적인 플랫폼 아키텍처를 설계하고 발전시킵니다.
- 정형 및 비정형 데이터를 위한 스토리지 솔루션을 구축합니다.
- 데이터 거버넌스, 보안 및 규정 준수를 지원합니다.
- 데이터 모델과 스토리지 성능을 개선합니다.
- 내부 및 외부 시스템을 위한 데이터 수집 프레임워크를 개발합니다.
- SaaS 플랫폼, 데이터베이스, API 및 타사 애플리케이션을 통합합니다.
- 배치 및 실시간 데이터 수집을 구현합니다.
- 데이터 동기화와 변경 데이터 캡처를 관리합니다.
- ETL/ELT 파이프라인을 만들고 유지 관리합니다.
- 원시 데이터를 신뢰할 수 있는 비즈니스 활용 데이터셋으로 변환합니다.
- 파이프라인 성능을 모니터링하고 문제에 선제적으로 대응합니다.
- 데이터 플랫폼 전반의 안정성, 확장성 및 자동화를 높입니다.
- 데이터 검증과 품질 관리 체계를 마련합니다.
- 중요한 파이프라인에 모니터링과 알림을 설정합니다.
- 데이터 문제를 조사하고 근본 원인을 파악합니다.
- 플랫폼 가용성과 데이터 무결성을 유지합니다.
- 비즈니스 이해관계자, 분석가, 엔지니어 및 리더와 협업합니다.
- 보고, 분석 및 AI 업무에 신뢰할 수 있는 데이터를 제공합니다.
- 데이터 아키텍처와 플랫폼 로드맵 수립에 기여합니다.
- 솔루션을 문서화하고 올바른 엔지니어링 관행을 장려합니다.
지원 자격
- 데이터 엔지니어 또는 유사 직무에서 입증된 실무 경험.
- 탄탄한 SQL 역량과 대규모 데이터셋 처리 경험.
- 상업 환경에서 ETL/ELT 파이프라인을 구축한 경험.
- 데이터 통합 및 수집 프레임워크 개발 경험.
- 탄탄한 Python 개발 역량.
- 클라우드 데이터 환경에서 근무한 경험.
- 데이터 모델링 및 데이터베이스 설계 원칙에 대한 지식.
- Microsoft Azure 및 Azure Data Lake Storage(ADLS) 사용 경험.
- Azure Data Factory, Databricks, Apache Spark, dbt 또는 Airflow 사용 경험.
- Azure Synapse Analytics 또는 Snowflake 사용 경험.
- 버전 관리에 Git을 사용한 경험.
- REST API 통합 및 이벤트 기반 아키텍처 작업 경험.
- Kafka 또는 기타 스트리밍 기술에 대한 지식.
- 변경 데이터 캡처(CDC) 패턴에 대한 이해.
- 데이터 거버넌스 및 마스터 데이터 관리 관행에 대한 지식.
- 기술 및 비기술 이해관계자와 명확하게 소통할 수 있는 능력.
복리후생
- 지속적인 고속 성장과 충분한 학습 지원.
- 높은 신뢰와 자율성을 바탕으로 업무의 영향력을 발휘할 수 있는 환경.
- 투명하고 솔직한 소통을 중시하는 문화.
- 뛰어난 동료들과 함께하는 글로벌 팀.
- 매월 진행되는 팀 사교 행사.
- 뛰어난 기여를 인정하는 직원 포상 프로그램.
- 포용적이고 다양성을 존중하는 직장.
