SSC HR Solutions este o firmă de consultanță în resurse umane care oferă servicii complete și a fost înființată în 2006. Compania ajută organizațiile să își gestioneze forța de muncă pe întregul parcurs al ciclului de viață al angajaților, de la recrutare și administrarea personalului până la încetarea raporturilor de muncă, prin servicii adaptate nevoilor specifice de dezvoltare a talentelor. SSC HR Solutions desfășoară activități în Egipt, Emiratele Arabe Unite, Arabia Saudită și Bahrain și colaborează cu organizații din domeniile consultanței, logisticii și sănătății pentru a răspunde nevoilor de personal și a sprijini dezvoltarea sustenabilă a afacerilor.
Inginer de date senior – Apache Spark (La distanță, Egipt)
Condu dezvoltarea și optimizarea fluxurilor batch Apache Spark pentru procesarea scalabilă a datelor. Structurează datele din lakehouse și contribuie la menținerea unor fluxuri de lucru analitice fiabile.
Descriere
- Dezvoltă și operează fluxuri de date batch de volum mare, care rămân eficiente și economice pe măsură ce seturile de date se extind.
- Creează și menține sarcini de procesare a datelor scalabile cu Apache Spark.
- Optimizează performanța fluxurilor pentru o execuție fiabilă și eficientă.
- Contribuie la proiectarea modelelor de date orientate spre analiză.
- Structurează datele din lakehouse pentru utilizare practică în sistemele downstream.
- Gestionează programarea automată, monitorizarea și validarea calității datelor.
- Colaborează cu echipele de platformă și produs pentru livrarea unor fluxuri complete de date.
Cerințe
- Experiență practică demonstrată cu Apache Spark, inclusiv optimizarea performanței dincolo de simpla utilizare într-un mediu de notebook gestionat.
- Experiență în proiectarea modelelor de date pentru analiză și structurarea datelor din lakehouse pentru consum în sistemele downstream.
- Experiență cu programarea automată, monitorizarea fluxurilor și validarea calității datelor.
- Capacitatea de a colabora cu echipele de platformă și produs pe fluxuri de date de la un capăt la altul.
- Familiaritate cu Apache Iceberg sau formate deschise comparabile pentru tabele.
- Experiență cu Trino sau un motor de interogare similar.
- Experiență de lucru cu clustere on-premises sau autogestionate.