GFT Technologies er en teknologi- og digitaliseringsvirksomhed, der arbejder med rådgivning, forsikring og cybersikkerhed. Cookiebot-platformen hjælper organisationer med at indsamle og administrere brugersamtykke, samtidig med at den understøtter overholdelsen af databeskyttelsesregler, herunder GDPR og CCPA. Virksomhedens løsninger er udviklet til at integreres med eksisterende digitale miljøer og bruges af mere end 600.000 kunder verden over til at håndtere personoplysninger med større gennemsigtighed og kontrol.
Dataingeniør på mellem-/seniorniveau inden for Azure Databricks – fjernarbejde i Colombia
Design og optimer datapipelines og cloudarkitekturer i Azure og Databricks hos GFT Technologies. Forbered pålidelige data til analyse, kunstig intelligens og maskinlæring.
Beskrivelse
- Designe, bygge og optimere dataarkitekturer baseret på Azure og Databricks
- Implementere ETL- og ELT-processer til integration af flere informationskilder
- Designe og administrere Data Lake- og Lakehouse-arkitekturer
- Overvåge datapipelines for at sikre konsistens, kvalitet, sporbarhed og sikkerhed
- Forberede og optimere datasæt til avanceret analyse, rapportering og maskinlæringsmodeller
- Samarbejde med BI-, analyse- og datavidenskabsteams om at forbedre adgangen til information
- Definere og implementere datastyring og kvalitetskontroller
- Implementere processer for kontinuerlig integration og kontinuerlig levering af dataløsninger
- Designe skalerbare løsninger til distribueret behandling og store datamængder
- Identificere forbedringer, der optimerer omkostninger, ydeevne og behandlingstider
- Evaluere nye teknologier og bedste praksis for at videreudvikle dataplatformen
Krav
- Uddannelse inden for systemteknik, industriteknik, elektronik, mekatronik eller et beslægtet område
- Tre til fem års erfaring som dataingeniør
- Avancerede SQL-kundskaber
- Erfaring med Python eller Scala
- Erfaring med distribueret behandling ved hjælp af PySpark
- Erfaring med Azure Databricks
- Erfaring med Azure Data Factory
- Erfaring med Azure Data Lake Storage Gen2 (ADLS Gen2)
- Kendskab til Delta Lake
- Erfaring med Lakehouse-arkitekturer
- Kendskab til Medallion-arkitekturen
- Erfaring med dimensionsmodellering
- Erfaring med relationsdatabaser
- Erfaring med NoSQL-databaser
- Kendskab til datastyring og datakvalitet
- Erfaring med Unity Catalog
- Erfaring med Delta Live Tables (DLT)
- Kendskab til Great Expectations
- Erfaring med streamingbehandling via Event Hubs
- Erfaring med Azure DevOps og Git
- Kendskab til Entra ID
- Kendskab til RBAC
- Gode kundskaber i Power BI
- Gode kundskaber i Visual Studio Code
- Erfaring med dataintegration og ETL-/ELT-processer
- Erfaring med dataanalyse og modellering
- Azure-certificeringer inden for data engineering er en fordel
- Erfaring med projekter inden for kunstig intelligens og maskinlæring er en fordel
- Kendskab til DataOps og automatisering af dataplatforme er en fordel
Fordele
- Fleksible arbejdstider
- Fjernarbejde
- Personlig karriereudviklingsplan
- Uddannelsesprogrammer
- Arbejde i tværfaglige teams
- Mangfoldigt globalt team
- Projekter med stor betydning for førende kunder i forskellige brancher