Seneca Holdings
Seneca Holdings
501 – 1000 Töötajad
LogistikaNõustamineTervishoid
Seneca Holdings on Seneca Nationi investeerimisüksus, mis arendab ja haldab kasumlikke ettevõtteid, et tugevdada Nationi pikaajalist majanduslikku iseseisvust. Selle mitmekesisesse portfelli kuuluvad föderaalvalitsuse lepingute täitmine, keskkonnalahendused ja tervisega seotud teenused. Keskendutakse jätkusuutlikele võimalustele, mis toetavad Seneca kogukonda ja tulevasi põlvkondi.

Vanemandmeinsener – Databricks ja AWS (kaugtöö)

Loo skaleeritavad Databricksi ja AWS-i andmekanalid föderaalvalitsuse lepingulise tegevuse jaoks. Paku analüütikaks valmis andmeid, järgides FISMA High ja mitme rentniku keskkonna nõudeid.

Kirjeldus

  • Loo ja halda skaleeritavaid andmekanaleid AWS-i majutatud Databricks E2 keskkonnas
  • Hangi andmeid relatsioonilistest andmebaasidest, API-dest, välistelt pakkujatelt ja reaalaja voogudest
  • Loo kanalid, mis puhastavad, teisendavad ja koondavad andmeid analüütika ja aruandluse jaoks
  • Arenda ja halda Bronze-, Silver- ja Gold-kihte Databricksi medaljonarhitektuuris
  • Koosta lähte- ja sihtandmete vastendused ning tee ühiktestimist
  • Kirjuta keerukaid SQL-koondpäringuid ning uuri andmeanomaaliaid, kvaliteediprobleeme ja ebakõlasid
  • Rakenda reaalaja ja peaaegu reaalaja andmete neelamist AWS DMS-i ja teiste AWS-i omapäraste teenustega
  • Arenda töötluslahendusi Pythonis või R-is, Sparki, PySparki ja Pandase abil
  • Halda koodi, versioonihaldust ja juurutusi GitLabi ning CI/CD-konveierite kaudu
  • Tööta koos eri valdkondade meeskondadega agiilses tarnetöös
  • Tagada FISMA High ja mitme rentniku keskkonna turbe-, haldus- ja regulatiivsete nõuete täitmine
  • Kasuta tehisintellektil põhinevaid automatiseerimistööriistu andmekanalite arendamise, testimise, valideerimise ja tarnimise toetamiseks

Nõuded

  • Tõendatud praktiline kogemus andmeinseneri või Databricksi arendajana tootmiskasutuseks mõeldud andmekanalite loomisel
  • Põhjalikud teadmised Databricksist AWS-is, sealhulgas E2-arhitektuurist, klastrite seadistamisest, tööde orkestreerimisest ja tööruumi haldusest
  • Praktiline kogemus Apache Sparki, PySparki ja Pandase kasutamisel suuremahulises hajusandmetöötluses
  • Väga hea Pythoni programmeerimisoskus; R-i kogemus tuleb kasuks
  • Kogemus Databricks Auto Loaderi kasutamisel skaleeritavaks inkrementaalseks failide neelamiseks
  • Praktiline kogemus AWS Database Migration Service'i kasutamisel muudatuste hõivamiseks ja reaalaja replikatsiooniks
  • Põhjalikud teadmised Delta Lakest ja Delta tabelitest, sealhulgas skeemi arengust, ajarändest, toimingutest OPTIMIZE, Z-ORDER ja VACUUM
  • Kogemus Amazon RDS-i ja teiste relatsiooniallikatega andmete väljavõtte ja integratsiooni töövoogudes
  • Edasijõudnud SQL-oskused, sealhulgas keerukad ühendamised, aknafunktsioonid, koondamised ja päringute jõudluse häälestamine
  • Medaljonarhitektuuri ja kaasaegsete data lakehouse'i põhimõtete mõistmine
  • Kogemus GitLabi ja CI/CD-konveierite kasutamisel andmeinseneri koodi automaatseks testimiseks, ehitamiseks ja juurutamiseks
  • Kogemus agiilsetes või Scrumi projektides osalemisel

Hüved

  • Konkurentsivõimeline tasu
  • Ravi-, hambaravi-, nägemis-, elu- ja töövõimetuskindlustus
  • Vabatahtlik raske haiguse, haiglaravi ja õnnetusjuhtumikindlustus
  • Tervisehoiukonto ja paindlikud kulukontod
  • 401(k) pensioniplaan
  • Tasustatud puhkuseprogrammid
  • Paindlik töö- ja eraelu tasakaal
  • Professionaalse arengu võimalused
  • Tulemus- ja tunnustusprogrammid
  • Koostöine töökeskkond
  • Rahalised ja mitterahalised hüved Seneca Nationi liikmetele

Seotud töökohad