Walmart
Walmart
Walmart je globalna maloprodajna i e-trgovinska kompanija koja opslužuje potrošače putem hipermarketa, diskontnih robnih kuća, trgovina mješovitom robom i internetskog tržišta. Njezinu široku ponudu proizvoda podržavaju velika mreža fizičkih trgovina, izravno poslovanje s potrošačima te logistički sustavi i sustavi opskrbnog lanca potrebni za kretanje proizvoda kroz cijelo poslovanje.

Senior Data Engineer – Bangalore, Indija (rad na lokaciji)

Izrađujte skalabilne paketne i streaming cjevovode te GenAI podatkovne proizvode za Walmartove operacije revizije nakon plaćanja. Poboljšajte točnost plaćanja, usklađivanje, procese naplate i financijsku analitiku.

Opis

  • Izrađujte i održavajte skalabilne paketne, streaming i gotovo stvarnovremenske cjevovode za reviziju nakon plaćanja, integritet plaćanja, usklađivanje dobavljača, operacije naplate i financijsku analitiku.
  • Razvijajte kurirane skupove podataka, semantičke modele, tablice spremne za značajke i ponovno upotrebljive podatkovne proizvode iz sustava faktura, narudžbenica, zaprimanja robe, dobavljača, potraživanja, cijena i plaćanja.
  • Izrađujte ELT, ETL i streaming tijekove rada koristeći SQL, Python, PySpark, Apache Flink, dbt, alate za orkestraciju, platforme za streaming događaja i cloud podatkovne tehnologije.
  • Razvijajte streaming cjevovode i cjevovode za hvatanje promjena podataka s obradom prema vremenu događaja, rukovanjem zakašnjelim podacima, mogućnošću ponovne reprodukcije, idempotentnošću, nadopunama podataka i oporavkom od pogrešaka.
  • Dizajnirajte i upravljajte lakehouse podatkovnim proizvodima koristeći Apache Hudi, Apache Iceberg ili Delta Lake.
  • Uspostavljajte provjere kvalitete podataka, kontrole usklađivanja, provjeru shema, praćenje porijekla podataka, nadzor, upozoravanje i prakse observabilnosti.
  • Surađujte s timovima za financije, reviziju, operacije, proizvode, podatkovnu znanost i inženjerstvo kako biste isporučili podatkovna rješenja spremna za produkciju.
  • Omogućite otkrivanje anomalija, određivanje prioriteta iznimki, revizijska pravila, strojno učenje za bodovanje i GenAI tijekove rada.
  • Izrađujte automatizaciju i podatkovne usluge koje revizorskim timovima pomažu sažeti dokaze, razvrstati iznimke, pružiti kontekst za istragu i smanjiti ručni pregled.
  • Implementirajte obrasce podatkovnog inženjerstva za GenAI, kao što su spremišta dokumenata spremna za dohvat, cjevovodi za embeddinge, integracije s vektorskim bazama podataka, obogaćivanje metapodataka i upravljano dohvaćanje znanja.
  • Poboljšavajte paketna i streaming radna opterećenja u pogledu pouzdanosti, svježine, latencije, upravljanja stanjem, računalne učinkovitosti i upotrebljivosti za nizvodne sustave.
  • Istražujte nepodudarnosti podataka, neuspjehe cjevovoda, neusklađenosti pri usklađivanju i probleme izvornih sustava analizom osnovnog uzroka.

Zahtjevi

  • Prvostupnik računalnih znanosti, inženjerstva, informacijske tehnologije, podatkovnog inženjerstva, analitike, matematike, statistike ili srodne discipline te više od 6 godina relevantnog iskustva; alternativno, magisterij s više od 4 godine ili doktorat s više od 3 godine relevantnog iskustva.
  • Dokazana praktična sposobnost rada sa SQL-om, Pythonom, PySparkom, Apache Flinkom ili usporedivim okvirom za obradu tokova te distribuiranom obradom podataka velikih razmjera.
  • Iskustvo s dbt-om ili usporedivim okvirom za transformaciju, Airflowom ili sličnim alatima za orkestraciju, Kafkom ili ekvivalentnom platformom za streaming događaja te cloud ili poslovnim podatkovnim tehnologijama kao što su BigQuery, Hive ili Spark.
  • Iskustvo u projektiranju, implementaciji i podršci produkcijskih paketnih i streaming cjevovoda, ELT/ETL tijekova rada, podatkovnih modela i ponovno upotrebljivih podatkovnih proizvoda.
  • Dobro poznavanje podatkovnog modeliranja, particioniranja, optimizacije performansi, inkrementalne obrade, CDC-a, evolucije shema, podatkovnih ugovora, upravljanja metapodacima, praćenja porijekla i lakehouse formata uključujući Apache Hudi, Apache Iceberg ili Delta Lake.
  • Iskustvo u isporuci provjera kvalitete podataka, logike usklađivanja, validacijskih okvira, observabilnosti, nadzora, upozoravanja i rješavanja incidenata za produkcijske cjevovode.
  • Iskustvo u razvoju streaming rješenja s obradom prema vremenu događaja, transformacijama sa stanjem, checkpointingom, watermarkingom, obradom tipa exactly-once ili effectively-once te strategijama ponovne reprodukcije ili nadopune podataka.
  • Iskustvo u radu s velikim strukturiranim i polustrukturiranim skupovima podataka iz više izvornih sustava, uključujući operativne podatke s nedosljednim poslovnim definicijama.
  • Izvrsne suradničke vještine i sposobnost rada s timovima za financije, reviziju, operacije, proizvode, podatkovnu znanost i inženjerstvo.
  • Minimalne alternativne kvalifikacije uključuju prvostupnik računalnih znanosti i 3 godine iskustva u softverskom inženjerstvu ili srodnom području; 5 godina iskustva u softverskom inženjerstvu ili srodnom području; ili magisterij računalnih znanosti i 1 godinu iskustva u softverskom inženjerstvu ili srodnom području.
  • Najmanje 2 godine iskustva u podatkovnom inženjerstvu, inženjerstvu baza podataka, poslovnoj inteligenciji ili poslovnoj analitici.

Pogodnosti

  • Poticajne nagrade temeljene na učinku.
  • Rodiljni i roditeljski dopust.
  • Plaćeni dopust.
  • Zdravstvene pogodnosti.

Povezani poslovi

BLACKCLOAK

Voditelj odnosa s velikim klijentima

BLACKCLOAK
11 – 50 Zaposlenici
Kibernetička sigurnostSaaS

Upravljajte odnosima s velikim klijentima u tvrtki BLACKCLOAK, koja štiti rukovoditelje i druge istaknute osobe od hakera, curenja privatnih podataka i krađe identiteta. Potičite zadržavanje klijenata, korištenje proizvoda i rast računa.

Otvori
The Cigna Group

Dvojezični zdravstveni trener, medicinska sestra RN na lokaciji

The Cigna Group

Kao dvojezični zdravstveni trener s licencom RN u Evernorth Workplace Careu podržavat ćete ciljeve povezane sa stresom, dobrobiti i kroničnom skrbi. Dva dana tjedno pružat ćete virtualno savjetovanje, a ostalu skrb na lokaciji u Morgantownu u Sjevernoj Karolini.

Otvori
Endor Labs

Udaljeni arhitekt rješenja za sigurnost aplikacija

Endor Labs

Pomozite poslovnim korisnicima zaštititi razvoj softvera uz pomoć umjetne inteligencije platformom Endor Labs za sigurnost aplikacija i softverskog opskrbnog lanca. Oblikujte rješenja, održavajte demonstracije proizvoda i vodite korisnike kroz uvođenje i prihvaćanje rješenja.

Otvori
VANGARD AG

SAP Analytics Cloud konzultant – izvještavanje, planiranje i AI

VANGARD AG
11 – 50 Zaposlenici
LogistikaMarketingSavjetovanje

Razvijajte rješenja za izvještavanje, planiranje i primjenu AI-ja u SAP Analytics Cloudu te sudjelujte u migracijama u oblak i projektima za javni sektor. Vodite radionice, obučavajte korisnike i sudjelujte u pretprodajnim aktivnostima.

Otvori