The Codest
The Codest
51 – 200 Medarbejdere
LogistikRådgivningSundhedsvæsen
The Codest er en international softwareudviklingsvirksomhed med hovedkontor i Storbritannien og teknologihubs i Polen. Virksomheden udvikler digitale produkter og udvider kundernes ingeniørteams med erfarne udviklere inden for backend- og frontendudvikling, cloud engineering og data engineering. The Codest samarbejder med større virksomheder, scaleups og softwareleverandører om projektudvikling og bemandingsforstærkning. Kunderne omfatter virksomheder inden for fintech, e-handel og adtech.

Senior dataingeniør inden for Databricks

Byg Databricks-platforme og datapipelines på afstand fra Polen. Bidrag til en kundevendt bankapp for en stor japansk finanskoncern.

Beskrivelse

  • Byg og vedligehold skalerbare Databricks-dataplatforme og datapipelines.
  • Samarbejd med tværfaglige teams om at sikre pålidelige og let tilgængelige data til analyser og business intelligence.
  • Brug lakehouse-lagene Bronze, Silver og Gold til at implementere Medallion Architecture.
  • Skab rammer for datakvalitet med automatiserede tests og overvågning.
  • Brug time travel, vacuum-operationer og Z-ordering i Delta Lake.
  • Udvikl og vedligehold komplekse ETL/ELT-pipelines til store daglige datasæt.
  • Opsæt CI/CD-arbejdsgange for datapipelines med Databricks Asset Bundles eller tilsvarende værktøjer.
  • Byg løsninger til batch- og realtidsbehandling med Structured Streaming og Delta Live Tables.
  • Forbedr Spark-jobbenes ydeevne og omkostningseffektivitet gennem automatisk skalering af klynger og ressourcestyring.
  • Integrer Databricks-API'er med eksterne systemer.
  • Design skalerbare dataarkitekturer med Unity Catalog, Delta Lake og Apache Spark.
  • Byg data mesh-arkitekturer med styring og sporing af dataafstamning.
  • Bidrag til en kundevendt bankapplikation for en førende finanskoncern i Japan.

Krav

  • Have mindst seks års erfaring med data engineering.
  • Have dokumenteret erfaring med at designe og implementere datapipelines og ETL/ELT-arbejdsgange til produktionsmiljøer.
  • Være dygtig til Python, PySpark og SQL.
  • Have omfattende praktisk erfaring med AWS Glue, Lambda, Redshift og S3.
  • Kende værktøjer til datastyring og datahåndtering, herunder Unity Catalog og AWS SageMaker Unified Studio.
  • Have erfaring med datamigreringer og modernisering af ældre systemer.
  • Kommunikere effektivt på engelsk.
  • Databricks Certified Professional Data Engineer-certificering eller tilsvarende er en fordel.
  • Erfaring med containerisering og orkestreringsværktøjer som Docker og Kubernetes er en fordel.

Fordele

  • Arbejd i et samarbejdsorienteret og engagerende miljø.
  • Få muligheder for faglig udvikling.
  • Bidrag til et internationalt bankapp-projekt.
  • Arbejd på afstand.

Relaterede job

Saga

Forretningsudviklingsrepræsentant, Tyskland (fjernarbejde)

Saga

Hjælp Saga med at vækste sin juridiske teknologiforretning i Tyskland ved at skabe kvalificerede salgsmuligheder for virksomhedens AI-løsning. Rollen kombinerer opsøgende kontakt, partnerudvikling og repræsentation ved events inden for juridisk teknologi.

Åbn
Wella Company

Praktikant inden for rapportering og business intelligence (12 måneders lønnet praktik)

Wella Company
5.001 – 10.000 Medarbejdere
DetailhandelFremstillingSkønhed

Bliv en del af Wellas globale forsyningskædeteam i en lønnet fjernpraktik med fokus på dashboards, dataanalyse og automatisering af rapportering. Få praktisk erfaring med Power BI, Excel, SQL og værktøjer til automatisering af arbejdsgange.

Åbn