Valtech är en global digital byrå som hjälper organisationer att förbättra kundupplevelser och utveckla sina digitala verksamheter. Företagets arbete förenar teknik, marknadsföring, data och AI för att stödja handelsinitiativ, digital transformation i företag och bättre marknadsföringsresultat. Med team och kontor över hela världen samarbetar Valtech med företag kring digital strategi, innovationsdrivna upplevelser och praktisk användning av data för att forma mer effektiva digitala framtider.
Senior dataingenjör – distansarbete i Portugal
Senior dataingenjör på Valtech som utvecklar molnbaserade dataplattformar för analys, AI och datadrivna produktionslösningar. Rollen omfattar skalbara datapipelines, lakehouse-arkitektur, GenAI och maskininlärningssystem.
Beskrivning
- Arkitektera, utveckla och förbättra molnbaserade dataplattformar som stödjer analys, AI och dataprodukter
- Skapa tillförlitliga batch-, streaming- och nästan realtidsbaserade pipelines för strukturerad och ostrukturerad information
- Utveckla arbetsflöden för dataimport, transformering, bearbetning och tillgängliggörande
- Implementera lakehouse-design och medallion-arkitektur med Databricks eller Fabric
- Ta fram kvalitetssäkrade dataset för analys, maskininlärning, kausal modellering, optimering, GenAI, RAG och agentbaserade applikationer
- Använd MLflow, Unity Catalog, Azure ML och jämförbara plattformsverktyg för att stödja AI-system i produktion
- Skapa datamodeller och samordna arbetsflöden med Airflow, dbt, Databricks Workflows, Azure Data Factory eller jämförbara verktyg
- Etablera arbetssätt för datastyrning, datahärkomst, kvalitet, åtkomstkontroll och observerbarhet
- Följ upp dataaktualitet, pipeline-tillförlitlighet, SLA-prestanda, skalbarhet, effektivitet och kostnader
- Tillhandahålla API:er, feature-indata och analytiska slutpunkter för efterföljande maskininlärnings- och AI-applikationer
- Tydliggöra och vidareutveckla verksamhetens behov genom samarbete med intressenter och analys
- Arbeta nära data scientists, ML-ingenjörer, analytiker, plattformsteam och verksamhetens intressenter
- Bidra till att dataprodukter börjar användas och utveckla arbetssätt inom data och AI
Krav
- Praktisk erfarenhet av Apache Spark och Delta Lake
- Goda kunskaper i programmering med Python och SQL
- Dokumenterad erfarenhet av att bygga batch- och streamingpipelines samt dataplattformar av produktionskvalitet
- Goda kunskaper i principer för datamodellering, datakvalitet och datastyrning
- Praktisk erfarenhet av antingen AWS-datatjänster och Databricks Lakehouse eller Microsoft Azure/Fabric och relaterade verktyg
- Erfarenhet av lakehouse-arkitekturer och distribuerade datasystem
- God förståelse för pipeline-skalbarhet, tillförlitlighet och prestanda
- Nyfikenhet och välutvecklad problemlösningsförmåga
- Erfarenhet av samarbete i tvärfunktionella team
- Erfarenhet av agila miljöer eller konsultverksamhet är meriterande
- Kännedom om Snowflake eller GCP är meriterande men inget krav
- Kompetens inom AWS och Azure/Fabric, GenAI- och AI-datasystem, CI/CD för datapipelines samt infrastructure as code är önskvärd men inget krav
- Ytterligare erfarenhet av Kafka, Spark-optimering, avancerad analys och maskininlärningsarbetslaster eller storskaliga analysplattformar är värdefull
Förmåner
- Flexibelt distans- och hybridarbete beroende på land
- Karriärutveckling genom internationell mobilitet och program för professionell utveckling
- Möjligheter att lära sig aktuella verktyg genom utbildning och branschexperter
- Konkurrenskraftigt ersättningspaket