LogoFresh Jobs Ahead
Walmart
Walmart
B2CDetaljhandelE-handel
Walmart är ett globalt detaljhandels- och e-handelsföretag som betjänar konsumenter genom stormarknader, lågprisvaruhus, livsmedelsbutiker och en onlinebaserad marknadsplats. Det breda produktutbudet stöds av ett omfattande nätverk av fysiska butiker, direktförsäljning till konsumenter samt de logistik- och leveranskedjesystem som krävs för att hålla varuflödet i hela verksamheten i gång.
LinkedIn
Jobb på företaget

Senior dataingenjör – Bangalore, Indien (på plats)

Bygg skalbara batch- och streamingpipelines samt GenAI-dataprodukter för Walmarts efterhandsgranskning av betalningar. Förbättra betalningsprecision, avstämning, återvinningsprocesser och ekonomisk analys.

INIndienPå platsHeltidSeniorObligatoriskt Språk: engelskaDataingenjör
AirflowApacheBigQueryETLKafkaMolnPySparkPythonSparkSQL

Beskrivning

  • Bygg och underhåll skalbara batch-, streaming- och nästan realtidspipelines för efterhandsgranskning av betalningar, betalningsintegritet, leverantörsavstämning, återvinningsverksamhet och ekonomisk analys.
  • Utveckla kvalitetssäkrade datamängder, semantiska modeller, funktionella tabeller och återanvändbara dataprodukter från faktura-, inköpsorder-, mottagnings-, leverantörs-, krav-, pris- och betalningssystem.
  • Skapa ELT-, ETL- och streamingarbetsflöden med SQL, Python, PySpark, Apache Flink, dbt, orkestreringsverktyg, plattformar för händelseströmning och molnbaserad datateknik.
  • Utveckla streaming- och förändringsdatainsamlingspipelines med händelsetidsbearbetning, hantering av försenade data, uppspelning, idempotens, återfyllnad och återställning efter fel.
  • Utforma och hantera lakehouse-dataprodukter med Apache Hudi, Apache Iceberg eller Delta Lake.
  • Etablera datakvalitetskontroller, avstämningskontroller, schemavalidering, datahärledning, övervakning, aviseringar och metoder för observerbarhet.
  • Samarbeta med ekonomi-, revisions-, verksamhets-, produkt-, datavetenskaps- och utvecklingsteam för att leverera produktionsklara datalösningar.
  • Möjliggör avvikelsedetektering, prioritering av undantag, revisionsregler, maskininlärningsbaserad poängsättning och GenAI-arbetsflöden.
  • Skapa automatisering och datatjänster som hjälper revisionsteam att sammanfatta underlag, sortera undantag, ge utredningssammanhang och minska manuell granskning.
  • Implementera GenAI-mönster för data engineering, såsom dokumentlager för informationshämtning, embeddingspipelines, integrationer med vektordatabaser, metadataanrikning och styrd kunskapshämtning.
  • Förbättra batch- och streamingarbetslaster vad gäller tillförlitlighet, aktualitet, svarstid, tillståndshantering, beräkningseffektivitet och användbarhet för efterföljande system.
  • Utred dataavvikelser, pipelinefel, avstämningsskillnader och problem i källsystem genom grundorsaksanalys.

Krav

  • Kandidatexamen i datavetenskap, ingenjörsvetenskap, informationsteknik, data engineering, analys, matematik, statistik eller ett närliggande område samt minst 6 års relevant erfarenhet; alternativt masterexamen med minst 4 års erfarenhet eller doktorsexamen med minst 3 års relevant erfarenhet.
  • Dokumenterad praktisk erfarenhet av SQL, Python, PySpark, Apache Flink eller ett jämförbart ramverk för strömbearbetning samt storskalig distribuerad databearbetning.
  • Erfarenhet av dbt eller ett jämförbart transformeringsramverk, Airflow eller liknande orkestreringsverktyg, Kafka eller en motsvarande plattform för händelseströmning samt moln- eller företagsdatateknik som BigQuery, Hive eller Spark.
  • Dokumenterad erfarenhet av att utforma, driftsätta och stödja batch- och streamingpipelines i produktion, ELT/ETL-arbetsflöden, datamodeller och återanvändbara dataprodukter.
  • Goda kunskaper i datamodellering, partitionering, prestandajustering, inkrementell bearbetning, CDC, schemautveckling, datakontrakt, metadatastrategi, datahärledning och lakehouse-format inklusive Apache Hudi, Apache Iceberg eller Delta Lake.
  • Erfarenhet av att leverera datakvalitetskontroller, avstämningslogik, valideringsramverk, observerbarhet, övervakning, aviseringar och incidenthantering för pipelines i produktion.
  • Erfarenhet av att utveckla streaminglösningar med händelsetidsbearbetning, tillståndsbaserade transformationer, kontrollpunkter, vattenmärkning, exakt en gång eller i praktiken exakt en gång-bearbetning samt strategier för uppspelning eller återfyllnad.
  • Erfarenhet av att hantera stora strukturerade och semistrukturerade datamängder från flera källsystem, inklusive verksamhetsdata med inkonsekventa affärsdefinitioner.
  • God samarbetsförmåga och förmåga att arbeta tvärs över ekonomi, revision, verksamhet, produkt, datavetenskap och utveckling.
  • Alternativa minimikvalifikationer omfattar kandidatexamen i datavetenskap med 3 års erfarenhet av programvaruutveckling eller relaterat arbete; 5 års erfarenhet av programvaruutveckling eller relaterat arbete; eller masterexamen i datavetenskap med 1 års erfarenhet av programvaruutveckling eller relaterat arbete.
  • Minst 2 års erfarenhet av data engineering, databasutveckling, business intelligence eller affärsanalys.

Förmåner

  • Prestationsbaserade incitamentsprogram.
  • Mammaledighet och föräldraledighet.
  • Betald ledighet.
  • Hälsoförmåner.

Relaterade jobb

enovetic ag

UX/UI-designerare, mobilförst-produkter

enovetic ag
201 – 500 Anställda
FörsäkringarHälso- och sjukvårdKonsultverksamhet
DETysklandHybridHeltidMellannivåSeniorObligatoriskt Språk: tyskaObligatoriskt Språk: engelskaProduktdesigner

Utforma mobilförst pensions- och pensionssparandeprodukter på enovetic och skapa enhetliga digitala upplevelser tillsammans med Business, Product och Engineering. Bidra till eplix Suite med användarinsikter, designsystem och nära samarbete mellan team.

Öppna