LogoFresh Jobs Ahead
Sigma Software Group
Sigma Software Group
1 001 – 5 000 Ansatte
BilindustriHelsevesenRådgivning
Sigma Software Group er et multinasjonalt teknologikonsulentselskap som ble grunnlagt i 2002. Teamene i selskapet leverer programvareutvikling, grafisk design, testing og teknisk støtte til kunder innen blant annet bilindustrien, helsesektoren, telekommunikasjon, luftfart, bank, spill, eiendom og reklame. Selskapet ansetter IT-spesialister til å arbeide med komplekse tekniske prosjekter og støtter faglig utvikling gjennom veiledning og kontinuerlig læring. Fjernarbeid er en del av arbeidsmodellen, og prosjektene betjener organisasjoner som AstraZeneca, Scania og SAS.
LinkedIn
Jobber i bedriften

Senior dataingeniør

Bygg skybaserte dataplattformer og nesten sanntids-pipelines, samtidig som du moderniserer Spark- og PySpark-arbeidsbelastninger. Led innføringen av AI-verktøy og agentbaserte arbeidsflyter, og bidra til teknisk forskning og utvikling.

PLPolenFjernarbeidHeltidSeniorPåkrevd Språk: engelskDataingeniør
AirflowApacheAWSAzureETLGoogle Cloud PlatformKafkaMikrotjenesterPySparkPythonSkySparkSQLTerraform

Beskrivelse

  • Bygg skalerbare, skybaserte dataplattformer fra den første utformingen til produksjon.
  • Utvikle pipelines for datainnhenting med nesten sanntidsbehandling ved hjelp av hendelsesstyrte mønstre.
  • Fastsett og oppretthold plattformstandarder for datasjøer, lakehouse-løsninger, medallion-arkitektur og datakontrakter.
  • Forbedre Spark- og PySpark-skript for bedre ytelse og vedlikehold.
  • Etabler praksis for kodekvalitet, testing og CI/CD på tvers av datapipelines.
  • Frem bruken av AI-verktøy og agentbaserte arbeidsflyter i Data Engineering-teamet.
  • Sørg for datakvalitet, observerbarhet, skalerbarhet og pålitelighet på tvers av plattformer og pipelines.
  • Lag selvbetjeningsverktøy og mikrotjenester som gjør plattformen enklere å bruke.
  • Samarbeid med team innen produkt, maskinlæring og datavitenskap.
  • Bidra til arkitekturbeslutninger samt teknisk forskning og utvikling.

Krav

  • Minst fem års yrkeserfaring innen data engineering.
  • Gode ferdigheter i Python- og SQL-utvikling.
  • Praktisk erfaring med Apache Spark og PySpark, inkludert spørringsoptimalisering og ytelsesjustering.
  • Erfaring med Databricks eller Snowflake.
  • Praktisk erfaring med minst én større skyplattform: Azure, AWS eller GCP.
  • Erfaring med verktøy for strømming, som Kafka eller Spark Structured Streaming.
  • Forståelse av ETL/ELT-mønstre, datamodellering og datavarehus.
  • Erfaring med orkestreringsverktøy som Apache Airflow eller Azure Data Factory.
  • Kjennskap til Infrastructure as Code-verktøy, inkludert Terraform.
  • Forståelse av produksjonssystemer, blant annet observerbarhet, skalerbarhet, pålitelighet og ytelse.
  • Evne til å lede tekniske initiativer selvstendig fra idé til levering.
  • Gode kommunikasjons- og samarbeidsevner.
  • Engelsk på øvre mellomnivå eller høyere.

Fordeler

  • Mulighet for å arbeide eksternt.

Relaterte jobber

TetraScience

Senior dataingeniør innen vitenskap (Tyskland, fjernarbeid)

TetraScience
51 – 200 Ansatte
Sponsor for H1B-visumHelsevesenLogistikkRådgivning
ATØsterrikeCHSveitsDETysklandGBStorbritanniaIEIrlandPLPolen
140 000 $ – 200 000 $ / år
FjernarbeidHeltidSeniorPåkrevd Språk: engelskDataingeniør
AWSEC2JavaScriptNode.jsPythonReactSkySQLTypeScript

Bygg AI-baserte integrasjoner og dataprodukter for TetraSciences kunder innen livsvitenskap. Ta i bruk vitenskapelige løsninger på tvers av sky-, lokale og hybride miljøer.

Åpne