
Applaudo to firma zajmująca się nearshore’owym tworzeniem oprogramowania, która pomaga organizacjom modernizować technologie i rozwijać transformację cyfrową. Założona w 2013 roku firma łączy kompetencje w zakresie inżynierii oprogramowania i doradztwa w obszarach innowacji i projektowania doświadczeń, tworzenia i utrzymania aplikacji, zapewniania jakości, rozwiązań chmurowych, sztucznej inteligencji, cyberbezpieczeństwa, rozwiązań danych oraz modernizacji aplikacji. Applaudo obsługuje klientów z sektorów takich jak sport, media i rozrywka, handel detaliczny, towary konsumpcyjne oraz usługi finansowe, wspierając projekty mające na celu usprawnianie produktów cyfrowych, infrastruktury i dostarczania usług IT. Siedziba firmy znajduje się w Austin w Teksasie, a biuro — w San Salvador. Applaudo zatrudnia od 501 do 1 000 pracowników obsługujących firmy z obszaru technologii i usług cyfrowych.
Starszy inżynier danych Azure Databricks
Twórz potoki danych w Azure Databricks i Pythonie dla korporacyjnych rozwiązań Applaudo opartych na AI. Łącz dane biznesowe w skalowalne i niezawodne centra oraz hurtownie danych.
Opis
- Tworzyć i utrzymywać gotowe do produkcji potoki danych z użyciem Azure Databricks i Pythona.
- Tworzyć skalowalne transformacje za pomocą PySpark lub Spark SQL.
- Pozyskiwać i przetwarzać dane z API, relacyjnych baz danych, pamięci masowej w chmurze i SFTP.
- Łączyć systemy zgłoszeniowe, CRM, platformy marketingowe, sprzedażowe i inne platformy korporacyjne ze scentralizowanym centrum danych.
- Rozwijać i utrzymywać struktury hurtowni danych, modele wymiarowe i data marty.
- Tworzyć, optymalizować i utrzymywać transformacje SQL.
- Dodawać walidacje jakości danych i kontrole spójności.
- Tworzyć i utrzymywać kanały danych wychodzących dla systemów zewnętrznych.
- Analizować rozbieżności w danych i rozwiązywać problemy z potokami.
- Dokumentować potoki, logikę transformacji, zależności i procesy techniczne.
- Współpracować z kolegami i interesariuszami, aby doprecyzowywać wymagania i identyfikować ryzyka.
- Z wyprzedzeniem informować o postępach, przeszkodach i możliwych opóźnieniach oraz proponować działania pomagające dotrzymać terminów.
Wymagania
- Co najmniej pięć lat doświadczenia zawodowego w inżynierii danych.
- Solidne doświadczenie praktyczne z Azure Databricks.
- Zaawansowane umiejętności programowania w Pythonie w zakresie przetwarzania i transformacji danych oraz tworzenia potoków.
- Solidne doświadczenie z Apache Spark, w tym PySpark i/lub Spark SQL.
- Zaawansowana znajomość SQL, w tym złożonych transformacji, walidacji danych i optymalizacji wydajności zapytań.
- Bardzo dobra znajomość hurtowni danych i modelowania wymiarowego, w tym faktów, wymiarów i data martów.
- Doświadczenie w integracji danych z REST API, relacyjnych baz danych, pamięci masowej w chmurze i SFTP.
- Praktyczne doświadczenie z usługami danych Microsoft Azure w zakresie pozyskiwania, przechowywania i przetwarzania danych oraz integracji.
- Doświadczenie we wdrażaniu kontroli jakości danych i sprawdzaniu spójności między systemami źródłowymi a docelowymi modelami danych.
- Umiejętność diagnozowania awarii potoków, analizowania rozbieżności w danych i wdrażania niezawodnych poprawek.
- Dobre umiejętności analityczne, rozwiązywania problemów i organizacji pracy.
- Umiejętność samodzielnej pracy, przejmowania odpowiedzialności oraz stosowania praktyk inżynierskich i standardów dokumentacji.
- Biegła znajomość języka angielskiego i gotowość do współpracy z zespołem z siedzibą w USA.
- Doświadczenie w migracji obciążeń opartych na SQL do Azure Databricks będzie dodatkowym atutem.
Benefity
- Możliwość pracy zdalnej.
- Możliwość szybkiego rozwoju i pracy z mocnymi zespołami.
- Nowoczesne praktyki pracy.
- Możliwość udziału w transformacji opartej na AI na dużą skalę.
Powiązane oferty pracy
Nie znaleziono ofert pracy
Spróbuj zmienić lub wyczyścić filtry, aby znaleźć więcej możliwości.