Optiveum je regrutacijska i konzultantska tvrtka usmjerena na usluge u području ljudskih resursa i IT-a, s više od 20 godina iskustva u tim područjima. Tvrtka povezuje stručnjake s projektnim i stalnim prilikama za rad na daljinu i na lokaciji te surađuje s klijentima u Poljskoj i na međunarodnim tržištima. Njezine aktivnosti zapošljavanja obuhvaćaju IT, financije, računovodstvo, proizvodnju, logistiku i marketing, pružajući podršku organizacijama koje traže talente i kandidatima koji žele ostvariti svoju sljedeću profesionalnu priliku.
Senior podatkovni inženjer za Databricks – ugovor na daljinu u Poljskoj
Izrađujte skalabilne podatkovne cjevovode i rješenja za obradu podataka u Databricksu koristeći Python za tehnološke klijente tvrtke Optiveum. Radite s platformama AWS, Azure i Google Cloud Platform na složenim skupovima podataka i arhitekturama temeljenima na oblaku.
Opis
- Izrađivati rješenja za obradu velikih i raznolikih skupova podataka u Databricksu
- Razvijati i poboljšavati podatkovne cjevovode u Pythonu koristeći tehnologije izvorne za oblak
- Surađivati s arhitektima rješenja na uspostavljanju i održavanju standarda podatkovnog inženjerstva
- Održavati integritet, sigurnost i skalabilnost podataka u različitim oblačnim okruženjima
- Projektirati skalabilne arhitekture za složena podatkovna opterećenja na platformama AWS, Azure i Google Cloud Platform
- Primjenjivati moderne podatkovne okvire, programerske prakse i načela DevOpsa
Zahtjevi
- Dokazano komercijalno iskustvo u podatkovnom inženjerstvu i praktično poznavanje Databricksa
- Napredno znanje Pythona za automatizaciju i transformaciju podataka
- Komercijalno iskustvo s barem jednom glavnom platformom u oblaku: AWS, Azure ili Google Cloud Platform
- Učinkovite pisane i usmene komunikacijske vještine
- Napredno znanje engleskog i poljskog jezika
- Izvrsno poznavanje SQL-a, uključujući optimizaciju upita i modeliranje podataka
- Radno poznavanje DevOps praksi, CI/CD cjevovoda i alata za Infrastructure as Code, kao što su Terraform ili Bicep
- Iskustvo s tehnologijama strujanja podataka u stvarnom vremenu, uključujući Kafku ili Spark Streaming
- Poznavanje platformi za pohranu u oblaku, kao što su Data Lake, Snowflake ili Synapse
- Praktično iskustvo s PySparkom za distribuiranu obradu podataka
- Relevantni stručni certifikati, poput certifikata Databricks Certified Data Engineer Associate ili certifikata za podatke u oblaku