LogoFresh Jobs Ahead
Walmart
Walmart
B2CDetaljhandelNetthandel
Walmart er et globalt detaljhandels- og e-handelsselskap som betjener forbrukere gjennom hypermarkeder, lavprisvarehus, dagligvarebutikker og en nettbasert markedsplass. Det brede produkttilbudet støttes av et omfattende nettverk av fysiske butikker, direktesalg til forbrukere samt logistikk- og forsyningskjedesystemene som trengs for å holde varene i bevegelse i hele virksomheten.
LinkedIn
Jobber i bedriften

Senior dataingeniør – Bangalore, India (på stedet)

Bygg skalerbare batch- og streamingpipelines samt GenAI-dataprodukter for Walmarts etterfølgende betalingsrevisjon. Forbedre betalingsnøyaktighet, avstemming, innkrevingsprosesser og finansanalyse.

INIndiaPå stedetHeltidSeniorPåkrevd Språk: engelskDataingeniør
AirflowApacheBigQueryETLKafkaPySparkPythonSkySparkSQL

Beskrivelse

  • Bygg og vedlikehold skalerbare batch-, streaming- og nær-realtidspipelines for etterfølgende betalingsrevisjon, betalingsintegritet, leverandøravstemming, innkrevingsoperasjoner og finansanalyse.
  • Utvikle kuraterte datasett, semantiske modeller, funksjonsklare tabeller og gjenbrukbare dataprodukter fra faktura-, innkjøpsordre-, mottaks-, leverandør-, krav-, pris- og betalingssystemer.
  • Opprett ELT-, ETL- og streamingarbeidsflyter med SQL, Python, PySpark, Apache Flink, dbt, orkestreringsverktøy, plattformer for hendelsesstrømming og skybaserte datateknologier.
  • Utvikle streaming- og endringsdatafangstpipelines med behandling basert på hendelsestid, håndtering av forsinkede data, avspilling, idempotens, tilbakefylling og feilgjenoppretting.
  • Utform og drift lakehouse-dataprodukter ved hjelp av Apache Hudi, Apache Iceberg eller Delta Lake.
  • Etabler datakvalitetskontroller, avstemmingskontroller, skjemavalidering, datalinjer, overvåking, varsling og praksiser for observerbarhet.
  • Samarbeid med økonomi-, revisjons-, drifts-, produkt-, datavitenskaps- og utviklingsteam for å levere produksjonsklare dataløsninger.
  • Muliggjør avviksdeteksjon, prioritering av unntak, revisjonsregler, maskinlæringsbasert poengsetting og GenAI-arbeidsflyter.
  • Opprett automatisering og datatjenester som hjelper revisjonsteam med å oppsummere dokumentasjon, triagere unntak, gi etterforskningskontekst og redusere manuell gjennomgang.
  • Implementer GenAI-mønstre for data engineering, som dokumentlagre klargjort for informasjonsinnhenting, embeddingpipelines, integrasjoner med vektordatabaser, metadataforbedring og styrt kunnskapsinnhenting.
  • Forbedre batch- og streamingarbeidsbelastninger med hensyn til pålitelighet, aktualitet, forsinkelse, tilstandshåndtering, beregningseffektivitet og brukervennlighet i etterfølgende systemer.
  • Undersøk dataavvik, pipelinefeil, avstemmingsavvik og problemer i kildesystemer gjennom årsaksanalyse.

Krav

  • Bachelorgrad i datavitenskap, ingeniørfag, informasjonsteknologi, data engineering, analyse, matematikk, statistikk eller et beslektet fagområde samt minst 6 års relevant erfaring; alternativt mastergrad med minst 4 års erfaring eller ph.d. med minst 3 års relevant erfaring.
  • Dokumentert praktisk erfaring med SQL, Python, PySpark, Apache Flink eller et sammenlignbart rammeverk for strømbearbeiding samt storskala distribuert databehandling.
  • Erfaring med dbt eller et sammenlignbart transformeringsrammeverk, Airflow eller lignende orkestreringsverktøy, Kafka eller en tilsvarende plattform for hendelsesstrømming samt sky- eller virksomhetsdatateknologier som BigQuery, Hive eller Spark.
  • Dokumentert erfaring med å utforme, distribuere og støtte batch- og streamingpipelines i produksjon, ELT/ETL-arbeidsflyter, datamodeller og gjenbrukbare dataprodukter.
  • Solid kunnskap om datamodellering, partisjonering, ytelsesjustering, inkrementell behandling, CDC, skjemautvikling, datakontrakter, metadatahåndtering, datalinjer og lakehouse-formater, inkludert Apache Hudi, Apache Iceberg eller Delta Lake.
  • Erfaring med å levere datakvalitetskontroller, avstemmingslogikk, valideringsrammeverk, observerbarhet, overvåking, varsling og hendelseshåndtering for produksjonspipelines.
  • Erfaring med å utvikle streamingløsninger med behandling basert på hendelsestid, tilstandsfulle transformasjoner, kontrollpunkter, vannmerking, exactly-once eller effectively-once-behandling samt strategier for avspilling eller tilbakefylling.
  • Erfaring med å håndtere store strukturerte og semistrukturerte datasett fra flere kildesystemer, inkludert driftsdata med inkonsistente forretningsdefinisjoner.
  • Gode samarbeidsevner og evne til å arbeide på tvers av økonomi, revisjon, drift, produkt, datavitenskap og utvikling.
  • Alternative minimumskvalifikasjoner inkluderer bachelorgrad i datavitenskap med 3 års erfaring innen programvareutvikling eller et beslektet område; 5 års erfaring innen programvareutvikling eller et beslektet område; eller mastergrad i datavitenskap med 1 års erfaring innen programvareutvikling eller et beslektet område.
  • Minst 2 års erfaring innen data engineering, database engineering, business intelligence eller forretningsanalyse.

Fordeler

  • Prestasjonsbaserte insentivordninger.
  • Svangerskaps- og foreldrepermisjon.
  • Betalt fri.
  • Helsefordeler.

Relaterte jobber

Endless Studios

Læreplanutvikler innen spilldesign (Unity)

Endless Studios
11 – 50 Ansatte
HelsevesenMarkedsføringRådgivning
USUSAFLFlorida
55 $ – 75 $ / time
FjernarbeidKontraktJuniorMellomnivåIngen grad krevesPåkrevd Språk: engelskProgramvareingeniørSpillingeniør
LuaSpringUnity

Utvikle spilldesignundervisning for Floridas yrkesrettede videregående opplæring med Endless Studios’ Endstar-motor. Lag Unity-broleksjoner, vurderinger, lærerveiledninger og veiledninger til bruk i klasserommet.

Åpne