
Applaudo je nearshore tvrtka za razvoj softvera usmjerena na pomoć organizacijama u modernizaciji tehnologije i napretku digitalne transformacije. Osnovana 2013. godine, tvrtka objedinjuje stručnost u softverskom inženjerstvu i savjetovanju u područjima inovacija i dizajna korisničkog iskustva, razvoja i održavanja aplikacija, osiguranja kvalitete, računalnih rješenja u oblaku, umjetne inteligencije, kibernetičke sigurnosti, podatkovnih rješenja i modernizacije aplikacija. Applaudo pruža usluge klijentima iz sektora sporta, medija i zabave, maloprodaje, robe široke potrošnje i financijskih usluga te podržava projekte koji unapređuju digitalne proizvode, infrastrukturu i isporuku IT usluga. Sa sjedištem u Austinu u Teksasu i uredom u San Salvadoru, Applaudo okuplja tim od 501 do 1.000 zaposlenika koji pružaju usluge poduzećima u području tehnologije i digitalnih usluga.
Viši inženjer podataka za Azure Databricks
Izrada podatkovnih cjevovoda u Azure Databricksu i Pythonu za Applaudova poslovna rješenja pokretana umjetnom inteligencijom. Povezivanje poslovnih izvora s pouzdanim skladištima podataka i centraliziranim podatkovnim središtem.
Opis
- Izrađivati i održavati produkcijske podatkovne cjevovode uz Azure Databricks i Python.
- Izrađivati skalabilne transformacije podataka pomoću PySparka ili Spark SQL-a.
- Prikupljati i obrađivati podatke iz API-ja, relacijskih baza podataka, pohrane u oblaku i SFTP-a.
- Objedinjavati podatke s platformi za upravljanje zahtjevima, CRM-a, marketinga, maloprodaje i drugih poslovnih platformi u centraliziranom podatkovnom središtu.
- Razvijati i održavati strukture skladišta podataka, dimenzijske modele i podatkovne martove.
- Pisati, optimizirati i održavati SQL transformacije.
- Dodavati provjere kvalitete i dosljednosti podataka.
- Izrađivati i održavati izlazne podatkovne tokove za sustave trećih strana.
- Istraživati nepodudarnosti u podacima i rješavati probleme s cjevovodima.
- Dokumentirati cjevovode, logiku transformacija, ovisnosti i tehničke postupke.
- Surađivati s kolegama i dionicima kako bi se razjasnile potrebe, ukazalo na rizike i isporučila pouzdana podatkovna rješenja.
- Pravodobno dijeliti informacije o napretku, preprekama i mogućim kašnjenjima te predlagati sljedeće korake.
Zahtjevi
- Najmanje pet godina profesionalnog iskustva u podatkovnom inženjerstvu.
- Opsežno praktično iskustvo s Azure Databricksom.
- Napredno poznavanje Pythona za obradu i transformaciju podataka te razvoj cjevovoda.
- Dobro poznavanje Apache Sparka, uključujući PySpark i/ili Spark SQL.
- Napredno poznavanje SQL-a, uključujući složene transformacije, provjeru valjanosti podataka i optimizaciju performansi upita.
- Dobro poznavanje skladištenja podataka i dimenzijskog modeliranja, uključujući činjenice, dimenzije i podatkovne martove.
- Iskustvo s povezivanjem REST API-ja, relacijskih baza podataka, pohrane u oblaku i SFTP-a.
- Praktično iskustvo s podatkovnim uslugama Microsoft Azurea.
- Iskustvo s uvođenjem provjera kvalitete podataka i provjerom dosljednosti između izvornih sustava i ciljnih modela.
- Sposobnost dijagnosticiranja kvarova cjevovoda i istraživanja nepodudarnosti u podacima.
- Sposobnost samostalnog rada, preuzimanja odgovornosti i pridržavanja inženjerskih i dokumentacijskih postupaka.
- Dobro poznavanje engleskog jezika u komunikaciji.
- Sposobnost učinkovite suradnje s timom sa sjedištem u SAD-u.
- Iskustvo s migracijom SQL radnih opterećenja na Azure Databricks prednost je.
Pogodnosti
- Rad na daljinu.
- Prilika za brzo učenje i preuzimanje odgovornosti.
- Suradnja s iskusnim timovima.
- Ulaganje u moderne načine rada.
- Sudjelovanje u transformaciji velikih razmjera koja se oslanja na umjetnu inteligenciju.
Povezani poslovi
Nema pronađenih poslova
Pokušajte prilagoditi ili očistiti filtre kako biste pronašli više prilika.