
Applaudo to firma zajmująca się nearshore’owym tworzeniem oprogramowania, która pomaga organizacjom modernizować technologie i rozwijać transformację cyfrową. Założona w 2013 roku firma łączy kompetencje w zakresie inżynierii oprogramowania i doradztwa w obszarach innowacji i projektowania doświadczeń, tworzenia i utrzymania aplikacji, zapewniania jakości, rozwiązań chmurowych, sztucznej inteligencji, cyberbezpieczeństwa, rozwiązań danych oraz modernizacji aplikacji. Applaudo obsługuje klientów z sektorów takich jak sport, media i rozrywka, handel detaliczny, towary konsumpcyjne oraz usługi finansowe, wspierając projekty mające na celu usprawnianie produktów cyfrowych, infrastruktury i dostarczania usług IT. Siedziba firmy znajduje się w Austin w Teksasie, a biuro — w San Salvador. Applaudo zatrudnia od 501 do 1 000 pracowników obsługujących firmy z obszaru technologii i usług cyfrowych.
Starszy inżynier danych Azure Databricks
Twórz potoki danych w Azure Databricks i Pythonie dla opartych na AI rozwiązań korporacyjnych Applaudo. Łącz źródła korporacyjne z niezawodnymi hurtowniami i centralnym Data Hub.
Opis
- Twórz i utrzymuj produkcyjne potoki danych za pomocą Azure Databricks i Pythona.
- Opracowuj skalowalne transformacje danych z użyciem PySpark lub Spark SQL.
- Pobieraj i przetwarzaj dane z API, relacyjnych baz danych, pamięci masowej w chmurze i SFTP.
- Łącz dane z systemów obsługi zgłoszeń, CRM, marketingu, handlu detalicznego i innych platform korporacyjnych w centralnym Data Hub.
- Opracowuj i utrzymuj struktury hurtowni danych, modele wielowymiarowe i datamarty.
- Pisz, optymalizuj i utrzymuj transformacje SQL.
- Dodawaj walidacje jakości danych i kontrole spójności.
- Twórz i utrzymuj wychodzące strumienie danych dla systemów zewnętrznych.
- Wykrywaj rozbieżności w danych i rozwiązuj problemy z potokami.
- Dokumentuj potoki, logikę transformacji, zależności i procesy techniczne.
- Współpracuj z kolegami i interesariuszami, aby doprecyzować potrzeby, wskazywać ryzyka i dostarczać niezawodne rozwiązania danych.
- Z wyprzedzeniem informuj o postępach, blokadach i możliwych opóźnieniach oraz proponuj kolejne kroki.
Wymagania
- Co najmniej pięć lat doświadczenia zawodowego w inżynierii danych.
- Duże praktyczne doświadczenie z Azure Databricks.
- Zaawansowana znajomość Pythona do przetwarzania i transformacji danych oraz tworzenia potoków.
- Solidne doświadczenie z Apache Spark, w tym PySpark i/lub Spark SQL.
- Zaawansowana znajomość SQL, w tym złożonych transformacji, walidacji danych i optymalizacji wydajności zapytań.
- Dobra znajomość hurtowni danych i modelowania wielowymiarowego, w tym faktów, wymiarów i datamartów.
- Doświadczenie w łączeniu REST API, relacyjnych baz danych, pamięci masowej w chmurze i SFTP.
- Praktyczne doświadczenie z usługami danych Microsoft Azure.
- Doświadczenie w dodawaniu kontroli jakości danych i walidowaniu spójności między systemami źródłowymi a modelami docelowymi.
- Umiejętność diagnozowania awarii potoków i analizowania rozbieżności w danych.
- Umiejętność samodzielnej pracy, przejmowania odpowiedzialności oraz przestrzegania praktyk inżynierskich i dokumentacyjnych.
- Dobra znajomość angielskiego w komunikacji.
- Umiejętność efektywnej współpracy z zespołem z siedzibą w USA.
- Doświadczenie w migracji obciążeń SQL do Azure Databricks będzie dodatkowym atutem.
Benefity
- Praca zdalna.
- Możliwość szybkiej nauki i przejmowania odpowiedzialności.
- Współpraca z mocnymi zespołami.
- Inwestycje w nowoczesne sposoby pracy.
- Udział w transformacji na dużą skalę opartej na AI.
Powiązane oferty pracy
Nie znaleziono ofert pracy
Spróbuj zmienić lub wyczyścić filtry, aby znaleźć więcej możliwości.