Coretek
Coretek
Coretek je ponudnik upravljanih storitev Microsoft Azure na ekspertni ravni in svetovalno podjetje za oblačne tehnologije, ki nudi storitve organizacijam v državni upravi, zdravstvu, proizvodnji in finančnih storitvah. Njegovo delo obsega selitev v oblak, posodobitev aplikacij, avtomatizacijo DevOps, upravljanje delovnih okolij, kibernetsko varnost ter rešitve umetne inteligence, zgrajene s tehnologijama Azure OpenAI in strojnega učenja. Coretek zagotavlja tudi storitve varnosti in opazljivosti z uporabo platform, kot sta Palo Alto in Dynatrace, ter partnerstev s podjetjema Imprivata in Citrix. Multidisciplinarna ekipa podjetja strankam pomaga posodobiti infrastrukturo, okrepiti varnost ter razviti praktične zmogljivosti na področju oblaka in umetne inteligence.

Inženir za podatke Azure — hibridno v Indiji

Za Coretek gradite in upravljajte zanesljive paketne in pretočne podatkovne cevovode v okolju Azure. Razvijajte upravljane podatkovne modele, nadzore kakovosti in produkcijske poteke dela, ki podpirajo poslovne in tehnične ekipe.

Opis

  • Načrtovanje, izdelava in vzdrževanje idempotentnih, opazljivih in obnovljivih paketnih ter pretočnih podatkovnih cevovodov
  • Izdelava analitičnih podatkovnih modelov, vključno z dimenzijskimi shemami, semantičnimi plastmi in kuriranimi podatkovnimi marti
  • Povezovanje operativnih podatkovnih baz, API-jev SaaS, datotek in tokov dogodkov ob upravljanju sprememb shem ter pozno prispelih podatkov
  • Vgrajevanje preverjanj ažurnosti, obsega, edinstvenosti in referenčne celovitosti podatkov v cevovode
  • Vzpostavljanje postopkov opozarjanja in eskalacije ob napakah cevovodov
  • Upravljanje produkcijskih cevovodov z nadzorom, dežurnim odzivom na incidente, analizo temeljnega vzroka in naknadnim polnjenjem podatkov
  • Izboljševanje zmogljivosti in nadzor stroškov s particioniranjem, gručenjem, določanjem velikosti datotek ter dimenzioniranjem podatkovnega skladišča ali gruče
  • Uporaba nadzora različic, pregledov kode, CI/CD, avtomatiziranega testiranja in infrastrukture kot kode
  • Uveljavljanje nadzora dostopa, zaščite osebnih podatkov, hrambe, sledljivosti in revizijskih zahtev v sodelovanju z varnostnimi ekipami ter ekipami za skladnost
  • Sodelovanje z analitiki, podatkovnimi znanstveniki in produktnimi inženirji pri vzpostavljanju trajnih podatkovnih pogodb
  • Vzdrževanje aktualnih podatkovnih slovarjev, zapisov sledljivosti in operativnih priročnikov cevovodov

Zahteve

  • Najmanj pet let izkušenj z izdelavo produkcijskih podatkovnih cevovodov
  • Bogate praktične izkušnje s Pythonom za podatkovno inženirstvo, vključno s testiranjem, pakiranjem in pregledovanjem kode
  • Praktično znanje API-jev PySpark DataFrame in SQL, velikih združevanj in agregacij, particioniranja, vedenja operacij shuffle ter diagnosticiranja v uporabniškem vmesniku Spark
  • Napredno znanje SQL, vključno z okenskimi funkcijami, analizo načrta poizvedb in uglaševanjem zmogljivosti
  • Praktične izkušnje z Azure Data Factory, Databricks, Synapse ali Fabric ter ADLS
  • Dobro poznavanje podatkovnega modeliranja, ki vključuje normalizacijo, zvezdne sheme in počasi spreminjajoče se dimenzije
  • Izkušnje z razvojnimi poteki dela na osnovi Gita in dostavo prek CI/CD
  • Odlične komunikacijske veščine, vključno s sposobnostjo razložiti težave s cevovodi netehničnim deležnikom
  • Izjemne analitične sposobnosti in sposobnost reševanja problemov, vključno z analizo temeljnega vzroka
  • Bogate izkušnje z delom s strankami v svetovalnem tehničnem okolju
  • Izkušnje s pretočnimi podatki s Kafko ali Event Hubs
  • Izkušnje z uporabo Delta Lake ali Iceberg
  • Izkušnje s Terraformom ali Bicepom za infrastrukturo kot kodo ter Dockerjem ali Kubernetesom za kontejnerizacijo
  • Izkušnje z delom v reguliranih okoljih, ki vključujejo HIPAA, SOC 2, PCI ali GDPR
  • Izkušnje z izdelavo podatkovnih platform za strojno učenje ali podporo cevovodom značilk
  • Sposobnost upravljanja več projektov za stranke in pravočasne izvedbe kakovostnega dela
  • Izkušnje z uporabo Azure DevOps ali GitHuba za nadzor izvorne kode in dostavne cevovode

Sorodna delovna mesta

Wikimedia Foundation

Senior Android Software Engineer (Contract, US Remote) – Wikimedia Foundation

Wikimedia Foundation

Build and improve Android experiences for Wikipedia readers around the world. Deliver accessible, scalable mobile features for Wikimedia’s free knowledge projects.

Odpri