Expleo Group
Expleo Group
Expleo Group er en global partner innen ingeniørtjenester, teknologi og rådgivning som hjelper organisasjoner med å omstille driften, utvikle komplekse produkter og forbedre produksjons- og kvalitetsprosesser. Arbeidet omfatter blant annet rådgivning, forsvar og logistikk, med kompetanse innen kunstig intelligens, digitalisering og cybersikkerhet. Expleo ble grunnlagt i 1966 og kombinerer mer enn fem tiår med erfaring med et team på 18 000 eksperter i 29 land for å støtte innovasjon og operasjonell ytelse.

Dataingeniør, PySpark og Databricks

Bygg PySpark- og SQL-pipelines på Databricks, og lag pålitelige, styrte datasett for analyse- og maskinlæringsteam i Chennai.

Beskrivelse

  • Utvikle ETL- og ELT-pipelines med PySpark og SQL for databehandling i stor skala
  • Bygg og optimaliser Databricks-arbeidsflyter, inkludert notebooks, jobber og klyngekonfigurasjoner
  • Samarbeid med analyse- og maskinlæringsteam om å levere rene, dokumenterte datasett
  • Følg med på pipelineytelsen, løs feil og oppretthold datakvalitet og integritet
  • Etabler beste praksis for datastyring og plattformen
  • Bidra til designgjennomganger og arkitekturbeslutninger

Krav

  • Ha 4–6 års praktisk erfaring innen data engineering eller et beslektet fagområde
  • Bruk PySpark trygt til distribuert behandling i stor skala
  • Bruk avansert SQL, inkludert spørringsoptimalisering, vindusfunksjoner, CTE-er og komplekse joins
  • Ha solid erfaring med Databricks, Delta Lake og arbeidsflyter; Unity Catalog er en fordel
  • Ha erfaring med AWS- eller Azure-skyplattformer
  • Ha kjernekompetanse innen PySpark, SQL, Databricks, AWS, Azure, Python og Git
  • Erfaring med strømmingsverktøy som Apache Kafka eller Spark Streaming er en fordel
  • Kjennskap til maskinlæringspipelines og arbeidsflyter for feature engineering er en fordel

Relaterte jobber

Saga

Forretningsutviklingsrepresentant, Tyskland (fjernarbeid)

Saga

Hjelp Saga med å vokse innen juridisk teknologi i Tyskland ved å skape kvalifiserte salgsmuligheter for AI-tilbudet. Rollen kombinerer oppsøkende kontakt, partnerutvikling og representasjon på arrangementer innen juridisk teknologi.

Åpne