
시니어 엔지니어링 매니저, Spark 런타임 엔지니어링
Snowflake의 Spark 컴파일러 및 런타임 팀을 이끌고 기술 방향을 설정하며 아키텍처, 성능, 안정성을 주도합니다. 탄탄한 엔지니어링 조직을 구축하고 Spark 워크로드의 프로덕션 역량을 발전시킵니다.
설명
- 엔지니어 5~8명을 이끌며 Snowflake의 Spark 워크로드를 위한 프로덕션 컴파일러 및 런타임 기능을 개발합니다.
- Spark 쿼리 컴파일 및 런타임 통합의 기술 방향을 설정합니다.
- 아키텍처를 이끌고 핵심 설계와 코드를 검토하며 복잡한 정확성, 성능, 안정성 문제를 조사합니다.
- 프로파일링, 컴파일 속도 향상, 메타데이터 접근 개선, 쿼리 엔진 팀과의 협업을 통해 워크로드 성능과 비용 효율성을 개선합니다.
- Apache Spark와의 차등 테스트, 회귀 테스트 범위, 미지원 동작 관리 등을 포함해 정확성과 호환성 관행을 수립합니다.
- 관측 가능성, 인시던트 대응, 장애 복구, 안전한 단계적 배포를 아우르는 프로덕션 품질을 책임집니다.
- 엔지니어를 채용하고 코칭 및 육성하며, 피드백 제공, 성과 관리, 경력 성장을 지원합니다.
- 시니어 기술 리더 및 제품 관리팀과 협력해 투자 우선순위를 정하고, 의존성을 조율하며, 로드맵을 추진합니다.
- 대표성 있는 고객 워크로드에서 변경 사항을 테스트하고 호환성, 지연 시간, 안정성, 비용 효율성을 추적합니다.
지원 자격
- 엔지니어를 육성하고 프로덕션 시스템을 제공한 실적을 보유한 직접적인 엔지니어링 관리 경력 2년 이상.
- 소프트웨어 엔지니어링 실무 경력 5년 이상이며, 컴파일러, 쿼리 처리 시스템 또는 런타임 인프라 관련 업무를 상당 기간 수행한 경험.
- 컴파일러 아키텍처와 IR 변환, 관계형 쿼리 처리, 언어 의미론 및 타입 시스템, 런타임 통합 등 관련 분야에 대한 깊은 전문성.
- Scala, Java, C++ 또는 이에 준하는 구현 언어에 능숙하고 프로덕션 코드를 검토하며 기술 결정을 이끌 수 있는 역량.
- 동시성, 메모리 동작, 성능 분석 등 탄탄한 시스템 기본 지식과 복잡한 프로덕션 문제를 디버깅한 경험.
- 기술 및 고객 요구를 엔지니어링 우선순위로 전환하고 팀과 지역을 넘어 효과적으로 협업하는 역량.
- 우대 사항: Apache Spark 내부 구조, Catalyst, Spark Connect 또는 DataFrame API 경험.
- 우대 사항: 관계 대수, SQL 생성, 쿼리 최적화 또는 데이터베이스 실행 시스템 경험.
- 우대 사항: Scala/JVM 성능, 네이티브 런타임 함수, 메타데이터 캐싱 또는 컴파일 성능 최적화 경험.
- 우대 사항: 데이터 시스템용 호환성 테스트 프레임워크, 차등 테스트, 성능 벤치마크 또는 프로덕션 관측 가능성을 구축한 경험.
- 우대 사항: 고객 도입, 프로덕션 안정화, 단계적 릴리스를 거쳐 시스템을 이끈 경험.




