Sigma Software Group er et multinasjonalt teknologikonsulentselskap som ble grunnlagt i 2002. Teamene i selskapet leverer programvareutvikling, grafisk design, testing og teknisk støtte til kunder innen blant annet bilindustrien, helsesektoren, telekommunikasjon, luftfart, bank, spill, eiendom og reklame. Selskapet ansetter IT-spesialister til å arbeide med komplekse tekniske prosjekter og støtter faglig utvikling gjennom veiledning og kontinuerlig læring. Fjernarbeid er en del av arbeidsmodellen, og prosjektene betjener organisasjoner som AstraZeneca, Scania og SAS.
Dataingeniør på mellomnivå (Azure, Spark) – fjernarbeid i Polen
Bygg dataplattformer i Azure og skalerbare datapipelines for analyse og drift. Utvikle Spark-arbeidsflyter, datamodeller og pålitelige skyløsninger for data.
Beskrivelse
- Bygg skalerbare og pålitelige dataplattformer og datapipelines for analyse og drift
- Utvikle distribuerte databehandlingsflyter med Apache Spark, PySpark og Databricks
- Utvid skyplattformen med Azure Data Factory, Synapse, Event Hub og Azure Data Lake Storage
- Opprett datamodeller for analyse, rapportering og videre bruk
- Integrer og behandle data fra flere kilder samtidig som kvalitet og konsistens ivaretas
- Overvåk og forbedre pipelineytelse, pålitelighet og skalerbarhet
- Samarbeid med analytikere, data scientists og ingeniører for å omsette krav til løsninger
- Styrk praksis for data engineering, testing og driftsstabilitet
- Vurder og ta i bruk verktøy og teknologier i data engineering-økosystemet
Krav
- Minst fire års praktisk erfaring med data engineering eller utvikling av databehandlingsplattformer
- Gode SQL-ferdigheter
- Solid erfaring med utvikling av datapipelines i Python
- Erfaring med distribuerte rammeverk som Apache Spark eller PySpark; Databricks er en fordel
- Praktisk erfaring med å utforme og implementere datapipelines i skymiljøer; Azure er en fordel
- Erfaring med analytiske systemer i produksjonsskala og datamodellering
- Kunnskap om ETL/ELT-design, dimensjonal modellering og prinsipper for datavarehus
- Erfaring med moderne data lake-arkitekturer og formater som Parquet og JSON
- Kjennskap til verktøy for arbeidsflytorkestrering, som Airflow
- Erfaring med utvikling og optimalisering av databaser
- Evne til å utforme skalerbare løsninger med begrenset oppfølging
- Gode samarbeids- og kommunikasjonsevner
- Profesjonelle engelskkunnskaper
Fordeler
- Muligheter for faglig utvikling
- Støttende arbeidsmiljø
- Konkurransedyktige fordeler
- Mulighet for fjernarbeid