Sigma Software Group är ett multinationellt teknikkonsultföretag som grundades 2002. Företagets team erbjuder programvaruutveckling, grafisk design, testning och teknisk support till kunder inom bland annat fordonsindustrin, hälso- och sjukvård, telekommunikation, flyg, bank, spel, fastigheter och reklam. Företaget anställer IT-specialister för att arbeta med komplexa tekniska projekt och främjar yrkesutveckling genom mentorskap och kontinuerligt lärande. Distansarbete ingår i företagets arbetsmodell, och projekten riktar sig till organisationer som AstraZeneca, Scania och SAS.
Dataingenjör (Azure, Spark) – distansarbete i Ukraina
Bygg skalbara Azure-dataplattformar och datapipelines för analys, rapportering och datadrivna beslut. Utveckla Spark-arbetsflöden och tillförlitlig databearbetning i samarbete med flera team.
Beskrivning
- Bygg skalbara och tillförlitliga dataplattformar och datapipelines för analytiska och operativa behov.
- Skapa arbetsflöden för databearbetning med distribuerade ramverk som Apache Spark och PySpark på Databricks.
- Bidra till att utveckla molndataplattformen med Azure-tjänster, däribland Data Factory, Synapse, Microsoft Fabric, Databricks, Event Hub och Azure Data Lake Storage.
- Integrera och bearbeta interna och externa data med bibehållen konsekvens, kvalitet och tillförlitlighet.
- Ansvara för datapipelines tillförlitlighet, övervakning och prestanda.
- Samarbeta med analytiker, datavetare och ingenjörer för att omvandla verksamhetens och analysens behov till robusta datalösningar.
- Förbättra arbetssätt inom data engineering, bland annat standarder för datapipelines, testning och driftsäkerhet.
- Utvärdera och bidra till införandet av verktyg och teknik för data engineering-miljön.
Krav
- Ha minst fyra års praktisk erfarenhet av data engineering eller av att bygga plattformar för databearbetning.
- Använda SQL med säkerhet och ha goda kunskaper i Python för utveckling och underhåll av datapipelines.
- Ha erfarenhet av distribuerade ramverk för databearbetning, till exempel Apache Spark eller PySpark; erfarenhet av Databricks är en stor fördel.
- Ha praktisk erfarenhet av att utforma och implementera datapipelines i molnet, helst på Azure.
- Ha utformat datapipelines och datamodeller för analytiska system i produktionsskala.
- Förstå ETL/ELT-design, dimensionell modellering och principer för datalager.
- Ha erfarenhet av moderna data lake-arkitekturer och format som Parquet och JSON.
- Ha använt verktyg för arbetsflödesorkestrering, till exempel Airflow.
- Ha erfarenhet av databasutveckling och prestandaoptimering.
- Kunna utforma skalbara och lättunderhållna datalösningar med minimal handledning.
- Kommunicera och samarbeta effektivt.
- Ha engelska på professionell arbetsnivå.
- Ha erfarenhet av molnbaserade datalager som Snowflake, BigQuery eller Redshift.
- Ha erfarenhet av strömningstekniker som Event Hub, Kafka eller Spark Streaming.
- Ha erfarenhet av Delta Lake eller andra lakehouse-tekniker.
- Känna till CI/CD-arbetssätt och Git-baserade utvecklingsflöden.
- Ha erfarenhet av att arbeta i agila utvecklingsmiljöer.
Förmåner
- Arbeta på distans.