LogoFresh Jobs Ahead
Valtech
Valtech
5 001 – 10 000 Ansatte
Sponsor for H1B-visumMarkedsføringRådgivningSaaS
Valtech er et globalt digitalbyrå som hjelper organisasjoner med å forbedre kundeopplevelser og utvikle den digitale virksomheten sin. Arbeidet deres kombinerer teknologi, markedsføring, data og KI for å støtte handelsinitiativer, digital transformasjon i virksomheter og bedre markedsføringsresultater. Med team og kontorer over hele verden samarbeider Valtech med selskaper om digital strategi, innovasjon innen kundeopplevelser og praktisk bruk av data for å forme mer effektive digitale fremtider.
LinkedIn
Jobber i bedriften

Senior dataingeniør, fjernarbeid fra Bulgaria

Bygg skybaserte dataplattformer og datapipelines hos Valtech for analyse, KI og dataprodukter. Jobb med AWS, Databricks og andre skymiljøer, også med bruksområder for generativ KI.

BGBulgariaFjernarbeidHeltidSeniorPåkrevd Språk: engelskDataingeniør
AirflowApacheAWSAzureDistribuerte systemerGoogle Cloud PlatformKafkaPythonSkySparkSQLTerraformUnity

Beskrivelse

  • Opprett og forbedre skybaserte dataplattformer for analyse, KI og dataprodukter.
  • Bygg pålitelige pipelines for batchbehandling, strømming og data nær sanntid med Spark og Delta Lake.
  • Utvikle arbeidsflyter for innlasting, transformering og kuratering av strukturerte og ustrukturerte data.
  • Bruk lakehouse-arkitektur og medallionlagene bronze, silver og gold.
  • Bidra til å migrere arbeidslaster mellom skyer, inkludert omplattformering av pipelines og datamodeller.
  • Klargjør datasett for produksjonssetting innen analyse, maskinlæring, kausal modellering og optimalisering.
  • Utvikle datapipelines for generativ KI, inkludert LLM-er, RAG, vektordataflyter og agentarkitekturer.
  • Bruk Databricks MLflow, Unity Catalog eller tilsvarende verktøy.
  • Opprett logiske og fysiske datamodeller.
  • Koordiner arbeidsflyter med Databricks Workflows, Airflow, dbt eller tilsvarende verktøy.
  • Bruk arkitekturmønstre for hendelsesstyring og strømming.
  • Administrer datastyring, dataopprinnelse, datakvalitet og tilgangskontroller med Unity Catalog, AWS Lake Formation, Microsoft Purview, GCP Dataplex eller lignende verktøy.
  • Overvåk hvor oppdaterte dataene er, hvor pålitelige pipelineene er, og SLA-ytelsen.
  • Tilgjengeliggjør data via API-er, feature-inndata og analytiske endepunkter.
  • Forbedre ytelse, skalerbarhet og kostnadseffektivitet for pipelines og infrastruktur.
  • Avklar interessentenes behov, utfordre kravene og anbefal alternativer.
  • Samarbeid med dataforskere, ML-ingeniører, analytikere, plattformteam og forretningsinteressenter.
  • Hjelp team med å ta i bruk dataprodukter og bidra til felles arbeidsmetoder.

Krav

  • Erfaring som senior dataingeniør.
  • Solid praktisk erfaring med Apache Spark og Delta Lake.
  • Gode ferdigheter i Python og SQL.
  • Dokumentert erfaring med å bygge batch- og strømmepipelines og dataplattformer i produksjon.
  • Solid kunnskap om datamodellering, datakvalitet og datastyring.
  • Omfattende praktisk erfaring med Databricks Lakehouse Platform.
  • Dyp ekspertise innen minst én større skyplattform: AWS, GCP eller Azure/Fabric.
  • Vilje og evne til å jobbe på tvers av skyplattformer.
  • Erfaring med lakehouse-arkitekturer og distribuerte systemer.
  • God forståelse av skalerbarhet, pålitelighet og ytelse.
  • Nysgjerrighet, evne til problemløsning og en samarbeidsorientert tilnærming til tverrfaglig arbeid.
  • Komfortabel med å utfordre forretningskrav.
  • Tilpasningsevne og interesse for å jobbe på tvers av plattformer.
  • Erfaring med smidige arbeidsformer eller konsulentarbeid er en fordel.
  • Erfaring med flere skyplattformer eller skymigrering er en fordel.
  • Erfaring med Snowflake er en fordel.
  • Erfaring med generativ KI og KI-datasystemer, inkludert RAG-pipelines, vektordatabaser og klargjøring av LLM-data, er en fordel.
  • Erfaring med CI/CD for datapipelines og infrastruktur som kode, inkludert Terraform og CloudFormation, er en fordel.
  • Erfaring med strømmingsverktøy som Kafka, Spark-optimalisering eller ML- og eksperimenteringsplattformer er en fordel.
  • Erfaring med å bygge dataprodukter eller analyseplattformer i stor skala er en fordel.

Fordeler

  • Fleksible arbeidsordninger, inkludert hybridarbeid, og 25 feriedager.
  • Delvis subsidiert transport og Multisport-kort.
  • Omfattende helseforsikring som gir enkel tilgang til helsetjenester.
  • Finansiering av teknisk og annen kompetanseutvikling, kurs og sertifiseringer.
  • En personlig karriereutviklingsplan basert på medarbeidersamtaler.
  • Et egenomsorgsprogram med psykologsamtaler og gruppediskusjoner.
  • Et komfortabelt kontor med fokus på produktivitet.
  • Teameventer og firmaarrangementer.
  • Muligheter for faglig utvikling.
  • En kultur som bygger på felles verdier.
  • Internasjonale karrieremuligheter.
  • En inkluderende kultur med støtte for tilgjengelighet.

Relaterte jobber