LogoFresh Jobs Ahead
Sigma Software Group
Sigma Software Group
1001 – 5000 Töötajad
AutotööstusNõustamineTervishoid
Sigma Software Group on 2002. aastal asutatud rahvusvaheline tehnoloogiaalase nõustamise ettevõte. Selle meeskonnad pakuvad tarkvaraarendust, graafilist disaini, testimist ja tehnilist tuge klientidele muu hulgas autotööstuse, tervishoiu, telekommunikatsiooni, lennunduse, panganduse, mängutööstuse, kinnisvara ja reklaami valdkonnas. Ettevõte värbab IT-spetsialiste töötama keerukate inseneriprojektidega ning toetab professionaalset arengut mentorluse ja pideva õppimise kaudu. Kaugtöövõimalused on osa ettevõtte töökorraldusest ning projektid teenindavad selliseid organisatsioone nagu AstraZeneca, Scania ja SAS.
LinkedIn
Töökohad ettevõttes

Vanemandmeandmeinsener, Databricksi migratsioon

Vii ettevõtte jaemüügi analüütikaplatvorm BigQueryst üle Databricks Lakehouse’i. Loo skaleeritavad PySparki andmetöötlusvood, medallion-arhitektuur ja hallatud pilveandmeplatvormid.

RORumeeniaKaugtööTäistööaegSeeniorNõutav Keel: ingliseAndmeinsener
AirflowApacheBigQueryETLPilvPySparkPythonSparkSQLUnity

Kirjeldus

  • Aita viia suuremahuline analüütikaplatvorm BigQueryst üle Databricksi.
  • Kavanda ja ehita skaleeritavaid Lakehouse’i arhitektuure Databricksi ja Delta Lake’iga.
  • Hinda olemasolevaid ETL- ja ELT-töökoormusi ning määra migratsiooniviisid.
  • Ehita ja optimeeri andmetöötlusvooge suurte jaemüügi- ja analüüsiandmete mahtude jaoks.
  • Rakenda järkjärgulise töötlemise strateegiaid ja skaleeritavaid teisendusraamistikke.
  • Arenda ja halda Sparkil põhinevaid andmetöötluslahendusi PySparkiga.
  • Kavanda ja halda Bronze’i, Silveri ja Goldi medallion-kihte.
  • Rakenda Unity Catalogi abil andmehalduse ja turbe tavasid.
  • Tee koostööd andmeteaduse, analüütika, toote ja klienditehnika tiimidega.
  • Osale arhitektuurialastes aruteludes ja tehniliste lahenduste kavandamises.
  • Loo korduskasutatavaid andmeplatvormi komponente ja inseneritöö standardeid.
  • Vaata kood üle ning paranda platvormi töökindlust ja hooldatavust.
  • Tuvasta keerukate SQL-i ja Sparki töökoormuste probleeme ning optimeeri neid.
  • Toeta tootmiskeskkonda juurutamist ja platvormi moderniseerimist.

Nõuded

  • Sul on vähemalt viieaastane töökogemus andmeinsenerina.
  • Sul on tugevad Pythoni programmeerimisoskused ja väga hea SQL-i oskus.
  • Sul on praktiline kommertskogemus Databricksiga.
  • Tunned hästi Apache Sparki, eriti PySparki.
  • Sul on kogemus tänapäevaste pilvepõhiste andmeplatvormide kavandamise ja ehitamisega.
  • Sul on kogemus ETL- ja ELT-andmetöötlusvoogude ning suuremahuliste andmetöötluslahenduste arendamisega.
  • Sul on praktiline kogemus Delta Lake’iga.
  • Sul on kogemus Spark Declarative Pipelinesiga.
  • Sul on kogemus klastrite jälgimise, mõõdikute analüüsimise ja jõudluse optimeerimisega.
  • Mõistad hajutatud andmetöötluse arhitektuure.
  • Mõistad andmehoidlate põhimõtteid ja dimensioonmodelleerimist.
  • Sul on kogemus Airflow’ või samaväärse orkestreerimistööriistaga.
  • Sul on kogemus keerukate analüütiliste SQL-töökoormuste optimeerimisega.
  • Sul on kogemus CI/CD-tavade rakendamisega andmeplatvormidel.
  • Oskad lahendada probleeme ja optimeerida jõudlust.
  • Töötad tulemuslikult valdkondadeülestes rahvusvahelistes tiimides.
  • Sinu inglise keele oskus on vähemalt kesktasemest kõrgem.

Hüved

  • Töötajatel on võimalik teha kaugtööd.
  • Pideva õppimise võimalused.
  • Võimalus areneda tehnoloogiavaldkonnas.
  • Sisukas mõju inseneritöö kaudu.
  • Töö keerukate rahvusvaheliste projektidega.

Seotud töökohad

AllCloud

Heebrea keelt kõnelev andmeinsener

AllCloud
201 – 500 Töötajad
H1B viisa sponsorLogistikaNõustamineTervishoid
RORumeeniaKaugtööTäistööaegKesktaseSeeniorNõutav Keel: ingliseNõutav Keel: heebreaAndmeinsener
AirflowAmazon RedshiftAWSETLKafkaKubernetesMikroteenusedPilvPythonSparkSQL

Loo AWS-i lakehouse-platvorme, andmetöötlusvooge ja tehisintellekti lahendusi AllCloudi pilvekonsultatsiooni klientidele. Kavanda skaleeritavaid arhitektuure ja aita klientidel oma andmesüsteeme ajakohastada.

Ava