Snowflake
Snowflake
Snowflake bietet eine cloudbasierte Datenplattform zum Speichern, Verarbeiten und Analysieren von Informationen in großem Maßstab. Die zentrale Architektur unterstützt Unternehmen dabei, Daten zusammenzuführen, komplexe Abfragen effizient auszuführen und verschiedene Workloads zu bewältigen, wenn sich ihre Anforderungen weiterentwickeln. Die Plattform richtet sich an Fachkräfte aus den Bereichen Cloud Computing, Daten, Analytik, Beratung und Marketingtechnologie. Die konkreten Möglichkeiten hängen von den Teams ab, die moderne Dateninfrastrukturen entwickeln und betreuen.

Senior Engineering Manager, Spark-Runtime-Engineering

Leitung des Teams für Spark-Compiler und -Runtime bei Snowflake mit Verantwortung für technische Ausrichtung, Architektur, Leistung und Zuverlässigkeit. Aufbau einer starken Engineering-Organisation und Weiterentwicklung produktionsreifer Funktionen für Spark-Workloads.

Beschreibung

  • Leitung von 5–8 Engineers, die produktionsreife Compiler- und Runtime-Funktionen für Spark-Workloads auf Snowflake entwickeln.
  • Festlegung der technischen Ausrichtung für die Kompilierung von Spark-Abfragen und die Runtime-Integration.
  • Steuerung der Architektur, Prüfung kritischer Entwürfe und Codeänderungen sowie Untersuchung komplexer Probleme bei Korrektheit, Leistung und Zuverlässigkeit.
  • Verbesserung der Workload-Leistung und Kosteneffizienz durch Profiling, schnellere Kompilierung, besseren Metadatenzugriff und Zusammenarbeit mit Query-Engine-Teams.
  • Festlegung von Praktiken für Korrektheit und Kompatibilität, einschließlich Differenzialtests gegen Apache Spark, Regressionstests und Umgang mit nicht unterstütztem Verhalten.
  • Verantwortung für die Produktionsqualität in den Bereichen Observability, Reaktion auf Vorfälle, Fehlerbehebung und sichere Rollouts.
  • Einstellung, Coaching und Weiterentwicklung von Engineers; Feedback geben, Leistung steuern und berufliche Entwicklung unterstützen.
  • Zusammenarbeit mit technischen Führungskräften und dem Produktmanagement, um Investitionen zu priorisieren, Abhängigkeiten abzustimmen und die Roadmap umzusetzen.
  • Änderungen anhand repräsentativer Kunden-Workloads testen und Kompatibilität, Latenz, Zuverlässigkeit und Kosteneffizienz verfolgen.

Anforderungen

  • Mindestens 2 Jahre direkte Erfahrung im Engineering-Management, mit nachweislicher Erfahrung in der Weiterentwicklung von Engineers und der Bereitstellung von Produktionssystemen.
  • Mindestens 5 Jahre praktische Erfahrung in der Softwareentwicklung, darunter umfangreiche Arbeit an Compilern, Query-Processing-Systemen oder Runtime-Infrastruktur.
  • Fundierte Expertise in einem relevanten Bereich, etwa Compilerarchitektur und IR-Transformationen, relationale Query-Verarbeitung, Sprachsemantik und Typsysteme oder Runtime-Integration.
  • Sicherer Umgang mit Scala, Java, C++ oder einer vergleichbaren Implementierungssprache sowie die Fähigkeit, Produktionscode zu prüfen und technische Entscheidungen zu steuern.
  • Starke Systemkenntnisse, einschließlich Nebenläufigkeit, Speicherverhalten und Leistungsanalyse, sowie Erfahrung bei der Fehlerbehebung komplexer Produktionsprobleme.
  • Fähigkeit, technische Anforderungen und Kundenbedürfnisse in Engineering-Prioritäten zu übersetzen und team- sowie standortübergreifend effektiv zusammenzuarbeiten.
  • Von Vorteil: Erfahrung mit Apache-Spark-Interna, Catalyst, Spark Connect oder DataFrame-APIs.
  • Von Vorteil: Erfahrung mit relationaler Algebra, SQL-Generierung, Query-Optimierung oder Datenbankausführungssystemen.
  • Von Vorteil: Erfahrung mit Scala-/JVM-Leistung, nativen Runtime-Funktionen, Metadaten-Caching oder der Optimierung der Kompilierungsleistung.
  • Von Vorteil: Erfahrung mit dem Aufbau von Kompatibilitätstest-Frameworks, Differenzialtests, Leistungsbenchmarks oder Produktions-Observability für Datensysteme.
  • Von Vorteil: Erfahrung darin, Systeme bis zur Kundenakzeptanz, Produktionsreife und Einführung in gestaffelten Releases zu führen.

Ähnliche Stellen

Pebl

Senior Engineering Manager, Wachstum

Pebl
501 – 1.000 Mitarbeitende
BeratungGesundheitswesenRecht

Leite Pebls KI-natives Growth-Engineering-Team und entwickle Plattformfunktionen für globales Recruiting, Payroll und Personalmanagement. Gestalte Initiativen zur Kundengewinnung und -bindung mit React, TypeScript und AWS und übernimm technische Führungsverantwortung.

Öffnen
Plaid

Senior Engineering Manager, Consumer-Onboarding bei Plaid

Plaid
501 – 1.000 Mitarbeitende
APIB2BFintech

Leite das Engineering-Team hinter Plaids einheitlicher Finanz-Onboarding-Plattform und den Link-Erlebnissen für Verbraucher. Führe das Team durch die Plattformkonsolidierung und halte zugleich das stark frequentierte Onboarding zuverlässig.

Öffnen
U.S. Bank

Software-Engineering-Manager für kommerzielle Zahlungen

U.S. Bank

Leiten Sie Engineering-Teams, die Produkte für kommerzielle Zahlungen, Firmenkarten, Geschäftsausgaben und Finanzintegrationen bei U.S. Bank entwickeln. Verantworten Sie Architektur, Zuverlässigkeit, Produktionsbetrieb und Engineering-Roadmaps.

Öffnen
Lambda

Engineering-Manager für die zentrale Cloud-Plattform

Lambda

Leite das Team, das Lambdas grundlegende Kubernetes- und verteilte Cloud-Dienste für KI-Infrastruktur entwickelt. Die Rolle umfasst Teamentwicklung, technische Umsetzung, Zuverlässigkeit und Betrieb in mehreren Regionen.

Öffnen
A

Leitung Software Engineering (Data Engineering)

Ashurst Perkins Coie
5.001 – 10.000 Mitarbeitende
ComplianceRecht

Verantworten Sie die globale Data-Engineering-Strategie und führen Sie verteilte Teams für Ashurst Perkins Coie US LLP. Entwickeln Sie sichere Datenplattformen, verlässliche Modelle und unternehmensweite Analyseprodukte.

Öffnen