데이터 엔지니어(Python 및 AWS)
540의 미 육군 재정 시스템 현대화 사업을 위해 Python 및 AWS 데이터 파이프라인을 구축합니다. 안전하고 확장 가능한 데이터 변환과 거버넌스 개선에 기여합니다.
설명
- 소프트웨어 개발 수명 주기 전반에서 안정적인 데이터 파이프라인을 구축하고 문제를 해결합니다.
- 미 육군의 레거시 재정 시스템 현대화를 지원하고 워크로드를 AWS로 마이그레이션합니다.
- 정형 및 반정형 데이터를 수집, 변환, 검증, 전달하는 Python 워크플로를 만듭니다.
- AWS Glue, Lambda, S3, CloudWatch를 활용해 클라우드 네이티브 솔루션을 개발합니다.
- 여러 시스템, API, 파일 형식의 데이터를 연결합니다.
- 대규모 데이터 세트를 처리하고 파이프라인 성능과 확장성을 개선합니다.
- 데이터 통합, 저장, 성능, 확장성을 위한 기술 설계에 참여합니다.
- 자동화 테스트, 로깅, 모니터링, 오류 처리를 추가합니다.
- 소프트웨어 엔지니어링 및 DataOps 관행을 활용해 유지 관리와 재사용이 쉬운 코드를 작성합니다.
- 엔지니어, 아키텍트, 이해관계자와 협력해 요구사항을 소프트웨어로 구현합니다.
- 안전한 데이터 처리, 접근 제어, 거버넌스 및 국방부(DoW) 규정 준수를 지원합니다.
- 코드 리뷰와 애자일 개발에 참여합니다.
- 데이터 변환, 파이프라인 프로세스, 기술적 의사결정을 문서화합니다.
- 워크플로를 개선하고 수작업을 줄이며 육군의 데이터 생태계를 강화합니다.
지원 자격
- 미국 본토(알래스카와 하와이 제외)에서 원격으로 근무하고, 어느 정도 유연성을 유지하면서 미 동부 시간대에 맞춰 근무할 수 있어야 합니다.
- 연간 약 3~4회의 간헐적 출장에 대응할 수 있어야 합니다.
- 미국 시민권자이며 국방부(DoW) 기밀 등급 보안 인가를 받을 수 있어야 합니다.
- 데이터 엔지니어링, 소프트웨어 개발, 데이터 통합 또는 관련 분야에서 2년 이상의 경력이 있어야 합니다.
- Python 데이터 변환, 스크립트 또는 워크플로 자동화를 만든 경험이 있어야 합니다.
- 데이터 파이프라인 및 ETL/ELT 프로세스를 구축, 유지 관리 또는 문제 해결한 실무 경험이 있어야 합니다.
- API를 사용하고 X12, JSON, 플랫 파일 또는 고정 폭 파일을 다룬 경험이 있어야 합니다.
- AWS 실무 경험이 있어야 하며, 특히 Glue, Lambda, S3, CloudWatch Logs 사용 경험이 필요합니다.
- 대규모 데이터 세트와 데이터 처리 또는 성능 관련 과제에 익숙해야 합니다.
- 데이터 구조, 데이터 모델링, 데이터 구성 및 변환을 이해해야 합니다.
- Pytest 또는 유사한 프레임워크로 자동화 테스트를 작성하고 유지 관리한 경험이 있어야 합니다.
- 데이터 검증, 오류 처리, 로깅, 디버깅에 익숙해야 합니다.
- 데이터 보안, 접근 제어, 데이터 품질 원칙을 이해해야 합니다.
- GitLab을 사용한 버전 관리 및 협업 개발 경험이 있어야 합니다.
- 터미널 또는 명령줄 인터페이스를 능숙하게 사용할 수 있어야 합니다.
- 애자일 환경에서 Jira와 Confluence를 사용한 경험이 있어야 합니다.
- 모호한 요구사항, 파일 사양, JSON 구조를 해석할 수 있어야 합니다.
- 뛰어난 문제 해결 능력을 갖추고 기술 및 비기술 이해관계자와 협업할 수 있어야 합니다.
- AWS Cloud Practitioner 이상 자격증을 보유하거나 입사 후 30일 이내에 취득할 수 있어야 합니다.
- CompTIA Security+ 이상 자격증을 보유하거나 입사 후 30일 이내에 취득할 수 있어야 합니다.
- 컴퓨터 과학 또는 관련 공학 분야 학사 학위 소지자를 우대합니다.
복리후생
- 건강, 치과, 안과 보험.
- 유연 지출 계좌(FSA).
- 회사 매칭이 포함된 401(k).
- 회사 부담 생명보험 및 단기·장기 장애 보험.
- 유연한 유급 휴가와 연방 공휴일 휴무.
- 교육, 자격증 취득, 컨퍼런스를 통한 전문성 개발.
- 유료 클라우드 개발자 계정.
- 추천 보너스.
- 주차비 또는 지하철 비용 지원, 니트로 커피, 점심 등 본사 혜택.
- 540 Week, 해커톤, 자선 골프 대회 등 연례 사내 행사.
- 워싱턴 캐피털스와 내셔널스 경기 티켓 이용.