ClickBus
ClickBus
201 – 500 Mitarbeitende
LogistikMarktplatzReisen
ClickBus ist ein Reisemarktplatz, auf dem Menschen Fernbusfahrkarten in Brasilien und Lateinamerika suchen und kaufen können. Die Website und die mobile App verbinden Reisende mit mehr als 200 Busunternehmen und über 4.800 Reisezielen. Funktionen wie ClickOferta und mehrere Zahlungsmethoden unterstützen unterschiedliche Buchungsbedürfnisse. Das Unternehmen konzentriert sich darauf, Fernbusreisen über eine digitale Plattform einfacher planbar und buchbar zu machen.

Data Engineer auf mittlerer Ebene bei ClickBus

Entwickle und optimiere Batch- und Streaming-Datenpipelines für den Busticket-Marktplatz von ClickBus. Arbeite mit AWS, Spark, Airflow, dbt und Verfahren zur Datenqualität, um Leistung, Kosten und Zuverlässigkeit zu verbessern.

Beschreibung

  • Erstelle, pflege und verbessere Batch- und Streaming-Pipelines mit Airflow auf EKS, EMR/Spark und dbt
  • Entwickle Ingestionsprozesse für DMS, APIs, Dateien und Events und organisiere Daten über die Ebenen des Data Lakes hinweg
  • Diagnostiziere und behebe Pipeline-Vorfälle, darunter DAG-Fehler, Verarbeitungsfehler, inkonsistente Kennzahlen und Schema-Probleme
  • Führe Ursachenanalysen durch und empfehle Änderungen, die wiederholte Fehler verhindern
  • Sichere die Datenqualität durch automatisierte Tests, Validierungsprüfungen und Abstimmungsprozesse
  • Entwickle und optimiere Spark- und dbt-Transformationen für bessere Leistung und Kostenkontrolle
  • Optimiere Athena-Abfragen und dbt-Modelle, um Verarbeitungskosten zu senken und Antwortzeiten zu verbessern
  • Implementiere inkrementelle Ladevorgänge mit Append, Overwrite und Merge/Upsert durch konsistente, idempotente Verarbeitung
  • Trage zur technischen Verbesserung und Standardisierung bei, während sich die Datenarchitektur weiterentwickelt
  • Prüfe Code und wende bewährte Verfahren für Versionskontrolle und technische Dokumentation an
  • Arbeite mit den Fachteams zusammen, um sicherzustellen, dass die bereitgestellten Daten die fachlichen Anforderungen erfüllen
  • Überwache Pipeline-Läufe und identifiziere Möglichkeiten zur kontinuierlichen Verbesserung

Anforderungen

  • Nachweisliche Erfahrung als Data Engineer in einer cloudbasierten Umgebung
  • Praktische Erfahrung beim Aufbau und Betrieb von produktiven Datenpipelines
  • Erfahrung in der Fehlerbehebung und Lösung von Datenvorfällen
  • Erfahrung in der Entwicklung analytischer Modelle mit Fakt- und Dimensionstabellen
  • Kenntnisse inkrementeller Ladestrategien und Datenpartitionierung
  • Gute Kenntnisse der AWS-Services einschließlich S3, Athena, IAM und Glue Catalog; EMR ist von Vorteil
  • Erfahrung mit der Erstellung und Pflege von Airflow-DAGs
  • Praktische PySpark-Kenntnisse, einschließlich Joins, Partitionierung und grundlegender Performance-Optimierung
  • Erfahrung mit dbt-Modellierung, inkrementellen Modellen und Tests
  • Sehr gute SQL-Kenntnisse
  • Programmierkenntnisse in Python
  • Erfahrung mit Git

Zusatzleistungen

  • Monatlicher Essens- oder Lebensmittelzuschuss von 1.100 BRL über eine Flash-Karte
  • Monatlicher Homeoffice-Zuschuss von 149 BRL über eine Flash-Karte
  • Monatlicher Zuschuss für flexible Leistungen von 200 BRL über eine Flash-Karte
  • Busonauta-Viajante-Leistung von 2.000 BRL pro Jahr für Busticketkäufe über die App oder Website
  • Fahrtkostenzuschuss
  • Parkplatzleistung
  • SulAmérica-Krankenversicherung ohne Zuzahlungen oder monatliche Prämie
  • Bradesco-Zahnversicherung
  • Kinderbetreuungszuschuss für Mütter und Väter
  • Sechs Monate Mutterschaftsurlaub und 30 Tage Vaterschaftsurlaub
  • Lebensversicherung
  • Zugang zu Wellhub und TotalPass
  • Jährlicher Gewinnbeteiligungsbonus
  • Freier Tag zum Geburtstag
  • Partnerschaft mit Petlove
  • Unterstützung bei Medikamentenkosten
  • Unterstützung für Kinder mit Behinderungen
  • Partnerschaften mit Bildungs- und Freizeiteinrichtungen

Ähnliche Stellen

Mercor

KI-Sicherheit Red Teamer

Mercor
51 – 200 Mitarbeitende

Mercor sucht eine Fachkraft für Red Teaming im Bereich KI-Sicherheit, die fortgeschrittene KI-Systeme mit adversarialen Prompts auf die Probe stellt. Die Tätigkeit umfasst die Dokumentation von Risiken und die Zusammenarbeit mit Forschenden, um die Sicherheit und Ausrichtung von Modellen zu stärken.

Öffnen
Terumo Medical Corporation

Gebietsleiter Interventionssysteme – Philadelphia

Terumo Medical Corporation

Verantwortung für den Vertrieb von Terumo-Interventionssystemen an Krankenhäuser und ambulante Einrichtungen im Raum Philadelphia. Kundenbeziehungen ausbauen, Eingriffe begleiten, Fachpersonal schulen und Vertriebsziele erreichen.

Öffnen
Cross River

Engineering Manager Cloud und verteilte Systeme – Cross River, Jerusalem

Cross River

Führe und unterstütze Engineers beim Aufbau von Fintech-Diensten und Infrastruktur für Zahlungen, Karten, Kredite und Krypto. In dieser hybriden Rolle in Jerusalem liegt der Schwerpunkt auf cloudnativen Systemen und zuverlässiger Engineering-Umsetzung.

Öffnen