
Applaudo ist ein Nearshore-Softwareentwicklungsunternehmen, das Organisationen dabei unterstützt, ihre Technologie zu modernisieren und die digitale Transformation voranzutreiben. Das 2013 gegründete Unternehmen verbindet Fachwissen in Softwareentwicklung und Beratung in den Bereichen Innovation und Experience Design, Anwendungsentwicklung und -wartung, Qualitätssicherung, Cloud-Lösungen, künstliche Intelligenz, Cybersicherheit, Datenlösungen und Modernisierung von Anwendungen. Applaudo betreut Kunden aus Branchen wie Sport, Medien und Unterhaltung, Einzelhandel, Konsumgüter sowie Finanzdienstleistungen und unterstützt Projekte zur Verbesserung digitaler Produkte, Infrastrukturen und der IT-Bereitstellung. Mit Hauptsitz in Austin, Texas, und einem Büro in San Salvador vereint Applaudo ein Team von 501 bis 1.000 Mitarbeitenden, das Unternehmen in der Technologie- und digitalen Dienstleistungsbranche unterstützt.
Senior Data Engineer Azure Databricks
Entwickle Azure-Databricks- und Python-Datenpipelines für Applaudos KI-gestützte Unternehmenslösungen. Verbinde Unternehmensdatenquellen mit zuverlässigen Data Warehouses und einem zentralen Data Hub.
Beschreibung
- Erstelle und betreibe produktive Datenpipelines mit Azure Databricks und Python.
- Entwickle skalierbare Datentransformationen mit PySpark oder Spark SQL.
- Integriere und verarbeite Daten aus APIs, relationalen Datenbanken, Cloud-Speichern und SFTP.
- Führe Daten aus Ticketing-, CRM-, Marketing-, Einzelhandels- und anderen Unternehmensplattformen in einem zentralen Data Hub zusammen.
- Entwickle und pflege Data-Warehouse-Strukturen, dimensionale Modelle und Data Marts.
- Schreibe, optimiere und pflege SQL-Transformationen.
- Ergänze Prüfungen der Datenqualität und Konsistenzkontrollen.
- Erstelle und pflege ausgehende Datenfeeds für Systeme von Drittanbietern.
- Untersuche Datenabweichungen und behebe Probleme in Datenpipelines.
- Dokumentiere Pipelines, Transformationslogik, Abhängigkeiten und technische Abläufe.
- Kläre gemeinsam mit Kolleginnen, Kollegen und Stakeholdern den Bedarf, zeige Risiken auf und liefere zuverlässige Datenlösungen.
- Informiere frühzeitig über Fortschritte, Hindernisse und mögliche Verzögerungen und schlage nächste Schritte vor.
Anforderungen
- Mindestens fünf Jahre Berufserfahrung im Data Engineering.
- Ausgeprägte praktische Erfahrung mit Azure Databricks.
- Fortgeschrittene Python-Kenntnisse für Datenverarbeitung, Transformationen und die Entwicklung von Pipelines.
- Fundierte Erfahrung mit Apache Spark, einschließlich PySpark und/oder Spark SQL.
- Fortgeschrittene SQL-Kenntnisse, darunter komplexe Transformationen, Datenvalidierung und Optimierung der Abfrageleistung.
- Fundierte Kenntnisse in Data Warehousing und dimensionaler Modellierung, einschließlich Fakten, Dimensionen und Data Marts.
- Erfahrung mit der Anbindung von REST-APIs, relationalen Datenbanken, Cloud-Speichern und SFTP.
- Praktische Erfahrung mit Microsoft-Azure-Datendiensten.
- Erfahrung mit Datenqualitätsprüfungen und der Validierung der Konsistenz zwischen Quellsystemen und Zielmodellen.
- Fähigkeit, Pipeline-Ausfälle zu diagnostizieren und Datenabweichungen zu untersuchen.
- Fähigkeit, selbstständig zu arbeiten, Verantwortung zu übernehmen und Entwicklungs- sowie Dokumentationspraktiken einzuhalten.
- Gute Englischkenntnisse in Wort und Schrift.
- Fähigkeit zur effektiven Zusammenarbeit mit einem Team in den USA.
- Erfahrung mit der Migration von SQL-Workloads zu Azure Databricks ist von Vorteil.
Zusatzleistungen
- Remote-Arbeit.
- Gelegenheit, schnell zu lernen und Verantwortung zu übernehmen.
- Zusammenarbeit mit starken Teams.
- Investitionen in moderne Arbeitsweisen.
- Mitwirkung an einer groß angelegten, KI-nativen Transformation.
Ähnliche Stellen
Keine Stellen gefunden
Passe deine Filter an oder lösche sie, um weitere Möglichkeiten zu finden.