LogoFresh Jobs Ahead
Sigma Software Group
Sigma Software Group
1 001 – 5 000 Anställda
FordonHälso- och sjukvårdKonsultverksamhet
Sigma Software Group är ett multinationellt teknikkonsultföretag som grundades 2002. Företagets team erbjuder programvaruutveckling, grafisk design, testning och teknisk support till kunder inom bland annat fordonsindustrin, hälso- och sjukvård, telekommunikation, flyg, bank, spel, fastigheter och reklam. Företaget anställer IT-specialister för att arbeta med komplexa tekniska projekt och främjar yrkesutveckling genom mentorskap och kontinuerligt lärande. Distansarbete ingår i företagets arbetsmodell, och projekten riktar sig till organisationer som AstraZeneca, Scania och SAS.
LinkedIn
Jobb på företaget

Senior dataingenjör, Databricks-migrering

Migrera företagsövergripande detaljhandelsanalys från BigQuery till Databricks Lakehouse. Bygg skalbara PySpark-pipelines, medallion-arkitektur och styrda molnbaserade dataplattformar.

RORumänienDistansHeltidSeniorObligatoriskt Språk: engelskaDataingenjör
AirflowApacheBigQueryETLMolnPySparkPythonSparkSQLUnity

Beskrivning

  • Hjälp till att migrera en storskalig analysplattform från BigQuery till Databricks.
  • Utforma och bygg skalbara Lakehouse-arkitekturer med Databricks och Delta Lake.
  • Utvärdera befintliga ETL- och ELT-arbetsflöden och ta fram migrationsstrategier.
  • Bygg och optimera pipelines för stora volymer detaljhandels- och analysdata.
  • Implementera strategier för inkrementell bearbetning och skalbara ramverk för datatransformering.
  • Utveckla och underhåll lösningar för databearbetning med Spark och PySpark.
  • Utforma och underhåll medallion-lagren Bronze, Silver och Gold.
  • Tillämpa metoder för datastyrning och säkerhet med Unity Catalog.
  • Samarbeta med team inom datavetenskap, analys, produkt och kundteknik.
  • Bidra till arkitekturdiskussioner och utformning av tekniska lösningar.
  • Skapa återanvändbara komponenter för dataplattformar och tekniska standarder.
  • Granska kod och förbättra plattformens tillförlitlighet och underhållbarhet.
  • Felsöka och optimera komplexa SQL- och Spark-arbetsbelastningar.
  • Stödja produktionssättningar och modernisering av plattformen.

Krav

  • Minst fem års yrkeserfarenhet som dataingenjör.
  • Goda kunskaper i Python och avancerad kompetens i SQL.
  • Kommersiell, praktisk erfarenhet av Databricks.
  • Goda kunskaper i Apache Spark, särskilt PySpark.
  • Erfarenhet av att utforma och bygga moderna molnbaserade dataplattformar.
  • Erfarenhet av att utveckla ETL- och ELT-pipelines samt lösningar för storskalig databearbetning.
  • Praktisk erfarenhet av Delta Lake.
  • Erfarenhet av Spark Declarative Pipelines.
  • Erfarenhet av att övervaka kluster, analysera mätvärden och optimera prestanda.
  • Förståelse för arkitekturer för distribuerad databearbetning.
  • Förståelse för datalagerkoncept och dimensionell modellering.
  • Erfarenhet av Airflow eller ett jämförbart orkestreringsverktyg.
  • Erfarenhet av att optimera komplexa analytiska SQL-arbetsbelastningar.
  • Erfarenhet av att tillämpa CI/CD-metoder på plattformar för datateknik.
  • God förmåga att felsöka och optimera prestanda.
  • Förmåga att samarbeta effektivt med tvärfunktionella, internationella team.
  • Engelska på minst övre medelnivå.

Förmåner

  • Distansarbete är möjligt för anställda.
  • Möjligheter till kontinuerligt lärande.
  • Möjligheter att utvecklas tillsammans med tekniken.
  • Meningsfull påverkan genom ingenjörsarbete.
  • Arbete med komplexa internationella projekt.

Relaterade jobb

Intetics

ML-dataingenjör, distansarbete från Rumänien

Intetics
501 – 1 000 Anställda
Hälso- och sjukvårdKonsultverksamhetLogistik
BGBulgarienESSpanienPLPolenPTPortugalRORumänienSKSlovakienDistansHeltidMellannivåSeniorObligatoriskt Språk: engelskaDataingenjör
AWSEC2GoGraphQLgRPCIoTKafkaMongoDBPostgresPrometheusPulsarPythonSparkSQL

Bygg infrastruktur för realtidsdata, grafer och tidsserier för idrottares prestationer. Stöd utvärdering av maskininlärning och AI-system för en Intetics-kund i USA.

Öppna
AllCloud

Dataingenjör med hebreiska

AllCloud
201 – 500 Anställda
Sponsor för H1B-visumHälso- och sjukvårdKonsultverksamhetLogistik
RORumänienDistansHeltidMellannivåSeniorObligatoriskt Språk: engelskaObligatoriskt Språk: hebreiskaDataingenjör
AirflowAmazon RedshiftAWSETLKafkaKubernetesMikrotjänsterMolnPythonSparkSQL

Bygg AWS-baserade lakehouse-plattformar, datapipelines och AI-lösningar för AllClouds molnkonsultkunder. Utforma skalbara arkitekturer och hjälp kunder att modernisera sina datasystem.

Öppna