Sigma Software Group är ett multinationellt teknikkonsultföretag som grundades 2002. Företagets team erbjuder programvaruutveckling, grafisk design, testning och teknisk support till kunder inom bland annat fordonsindustrin, hälso- och sjukvård, telekommunikation, flyg, bank, spel, fastigheter och reklam. Företaget anställer IT-specialister för att arbeta med komplexa tekniska projekt och främjar yrkesutveckling genom mentorskap och kontinuerligt lärande. Distansarbete ingår i företagets arbetsmodell, och projekten riktar sig till organisationer som AstraZeneca, Scania och SAS.
Dataingenjör på mellannivå (Azure, Spark) – distansarbete i Polen
Bygg dataplattformar i Azure och skalbara pipelines för analys och drift. Utveckla Spark-arbetsflöden, datamodeller och tillförlitliga molnlösningar för data.
Beskrivning
- Bygg skalbara och tillförlitliga dataplattformar och pipelines för analys och drift
- Utveckla distribuerade dataflöden med Apache Spark, PySpark och Databricks
- Utöka molnplattformen med Azure Data Factory, Synapse, Event Hub och Azure Data Lake Storage
- Skapa datamodeller för analys, rapportering och vidare användning
- Integrera och bearbeta data från flera källor med bibehållen kvalitet och enhetlighet
- Övervaka och förbättra pipelineprestanda, tillförlitlighet och skalbarhet
- Samarbeta med analytiker, datavetare och ingenjörer för att omsätta krav i lösningar
- Stärka metoder för data engineering, testning och driftsäkerhet
- Utvärdera och införa verktyg och tekniker i data engineering-ekosystemet
Krav
- Minst fyra års praktisk erfarenhet av data engineering eller utveckling av databehandlingsplattformar
- Goda kunskaper i SQL
- Gedigen erfarenhet av att utveckla pipelines i Python
- Erfarenhet av distribuerade ramverk som Apache Spark eller PySpark; Databricks är meriterande
- Praktisk erfarenhet av att utforma och implementera pipelines i molnmiljöer; Azure är meriterande
- Erfarenhet av analytiska system i produktionsskala och datamodellering
- Kunskap om ETL/ELT-design, dimensionsmodellering och principer för datalager
- Erfarenhet av modern data lake-arkitektur och format som Parquet och JSON
- Kännedom om verktyg för arbetsflödesorkestrering, till exempel Airflow
- Erfarenhet av att utveckla och optimera databaser
- Förmåga att utforma skalbara lösningar med begränsad handledning
- God samarbets- och kommunikationsförmåga
- Professionella kunskaper i engelska
Förmåner
- Möjligheter till professionell utveckling
- Stöttande arbetsmiljö
- Konkurrenskraftiga förmåner
- Möjlighet att arbeta på distans