
Scicom Infrastructure Services on tehnoloogia konsultatsiooni- ja teenuseettevõte, mis aitab avaliku ja erasektori organisatsioonidel hallata ja täiustada oma IT-keskkondi. Ettevõtte tegevus hõlmab ettevõtte jõudluse juhtimist, arhitektuuri, projektijuhtimist, taristu ja rakenduste haldust ning hallatud teenuseid. Samuti teeb ettevõte koostööd AppDynamicsi, BigPanda, Datadogi ja AWS-iga jõudluse seire, sündmuste korrelatsiooni ja automatiseerimise, pilveseire ning IT-teenuste halduse vallas. Scicom pakub ülemaailmsele taristule ööpäevaringset operatiivtuge. Ettevõtte profiili järgi tegutseb selle meeskond ettevõtetehnoloogia, SaaS-i ja B2B-tehnoloogia valdkonnas; ametikohtade ja värbamise kohta vaadake jooksvaid tööpakkumisi.
Databricksi andmeinsener, OCDS-i andmelepingud
Ühendad hankevaldkonna sidusrühmad ja inseneritiimid, et määratleda suure Databricksi programmi andmelepingud. Ehitad OCDS-iga kooskõlas andmetorud ja kontrollid usaldusväärsete ning standarditud lepinguandmete jaoks.
Kirjeldus
- Ühenda äri-, lepinguhalduse, andmehalduse ja inseneritiimid suure Databricksi juurutuse raames.
- Juhi nõuete töötubasid hanke-, programmi-, analüütika-, andmehalduse ja tehniliste sidusrühmadega.
- Loo ja halda andmelepinguid, mis määratlevad, kuidas andmete tootjad ja tarbijad andmeid vahetavad.
- Muuda ärivajadused kasutajalugudeks, vastuvõtukriteeriumiteks, protsessivoogudeks, vastendusteks, liidese spetsifikatsioonideks ja insenerinõueteks.
- Analüüsi lähtesüsteeme, profileeri andmeid, hinda lünki ja vasta lähte väljad sihtstruktuuridega.
- Võrdle praeguseid hankeandmeid OCDS-i nõutud struktuuridega.
- Saavuta üksmeel andmete omanike, tootjate, tarbijate, arhitektide ja andmehalduse tiimide vahel.
- Jälgi nõudeid läbi andmemudeldamise, juurutuse, testimise ja vastuvõtu.
- Hinda, kuidas kavandatavad muudatused mõjutavad andmetooteid, aruandeid, integratsioone ja analüütika kasutusjuhtumeid.
- Aita ette valmistada ja läbi viia tööjärje ülevaateid, sprindiplaneerimist, demosid, testimist ja sidusrühmade heakskiitu.
- Rakenda OCDS-i hanke- ja avaliku sektori lepingute andmetele planeerimisest kuni juurutamiseni.
- Halda OCDS-i väljalasete, kirjete, pakettide, identifikaatorite, organisatsioonide, osapoolte, üksuste, verstapostide, dokumentide, tehingute, muudatuste ja seotud elementide vastendusi.
- Kasuta OCDS-i skeeme, koodiloendeid, valideerimisreegleid ja juurutusjuhiseid.
- Tuvasta OCDS-i laienduste vajadus ning dokumenteeri seotud eeldused, reeglid, vastendused, erandid ja laiendused.
- Koosta lepingukirjeid tehingupõhistest väljalasetetest ning määra, kuidas käsitletakse muudatusi, uuendusi, tühistamisi, parandusi ja ajaloolisi muudatusi.
- Kontrolli teisendatud andmeid OCDS-i JSON-skeemide vastu ning paranda puuduvad, vigased, vastuolulised või nõuetele mittevastavad hankeandmed.
- Võimalda standarditud lepinguandmete avaldamist, vahetamist, analüüsi või sisemist kasutust.
- Loo, testi ja halda Databricksi andmetorusid Apache Sparki, PySparki, Pythoni ja SQL-iga.
- Neela ja teisenda struktureeritud ning poolstruktureeritud hankeandmeid JSON-, CSV-, XML- ja Parquet-failidest, andmebaasidest, API-dest ning failidest.
- Loo medallioni arhitektuuriga Bronze-, Silver- ja Gold-kihid.
- Tööta välja normaliseeritud, dimensioonipõhised, analüütilised ja OCDS-il põhinevad andmemudelid.
- Kasuta Delta Lake’i skeemide jõustamiseks ja arendamiseks, versioonide haldamiseks, auditite toetamiseks ning andmete usaldusväärseks töötlemiseks.
- Loo korduvkasutatavad meetodid lähte hanketõlgenduste muutmiseks OCDS-iga ühilduvaks väljundiks.
- Ehita nii pakett- kui ka järkjärgulist andmete sissevõttu.
- Kasuta sobivaid Databricksi tööriistu, sealhulgas Workflowsi, märkmikke, töid, Auto Loaderit, Delta Live Tablesit või Lakeflow’d.
- Loo REST API ühendused lähteandmete vastuvõtuks ja andmete edastamiseks järgnevatesse süsteemidesse.
- Automatiseeri andmekvaliteedi, kooskõlastamise, täielikkuse ja vastavuse kontrollid.
- Aita juurutada Unity Catalogi metaandmete, omandi, põlvnemise, juurdepääsukontrollide ja andmete avastamise jaoks.
- Paranda Sparki töid, SQL-päringuid, klastreid, partitsioneerimist, failisuurusi ja andmepaigutusi.
- Osale koodiülevaatustes, automatiseeritud testides, CI/CD-s, juurutustes, seires ja tootmistoes.
- Diagnoosi andmetorude tõrkeid, andmete lahknevusi ja jõudlusprobleeme.
- Määra mõõdetavad reeglid andmete täpsuse, täielikkuse, kehtivuse, ajakohasuse, järjepidevuse ja ainulaadsuse jaoks.
- Loo valideerimiskontrollid OCDS-i väljadele, identifikaatoritele, kuupäevadele, summadele, valuutadele, organisatsioonidele, klassifikatsioonidele ja lepingusuhetele.
- Koosta armatuurlaudu või aruandeid andmelepingute järgimise ja andmekvaliteedi tulemuste kohta.
- Sea sisse viisid skeemimuutuste tuvastamiseks ja haldamiseks.
- Jälgi hankeandmete päritolu Databricksi teisenduste kaudu järgnevate toodeteni.
- Määratle koos andmehalduse tiimidega omanikud, haldurid, klassifikatsioonid, säilitustähtajad ja juurdepääsupoliitikad.
- Käsitle tundlikke hanke- ja tarnijaandmeid turva- ja privaatsusnõuete kohaselt.
- Hoia auditijälgi dokumenteeritud reeglite, versioonitud vastenduste, valideerimistulemuste ja muudatuste ajalooga.
Nõuded
- Bakalaureusekraad arvutiteaduses, infosüsteemides, andmeanalüütikas, ärianalüüsis, inseneerias, avalikus halduses, tarneahela juhtimises või seotud erialal.
- Vähemalt viis aastat kombineeritud kogemust andmetehnika, andmeanalüüsi, ärianalüüsi või andmeintegratsiooni valdkonnas.
- Praktiline kogemus Open Contracting Data Standardi (OCDS) juurutamisel või kasutamisel.
- Kogemus andmelepingute loomisel, dokumenteerimisel, läbirääkimisel või haldamisel.
- Kogemus hanke- või lepinguandmete vastendamisel OCDS-i skeemidega.
- OCDS-i väljalasete, kirjete, skeemide, koodiloendite, identifikaatorite, lepingufaaside ja valideerimismeetodite põhjalik tundmine.
- Vähemalt kolm aastat praktilist Databricksi kogemust.
- Tugevad oskused Apache Sparki, PySparki, Pythoni, SQL-i, Delta Lake’i, ETL/ELT-andmetorude, andmemudeldamise, JSON-i ja JSON Schema, REST API-de, andmekvaliteedi valideerimise ning lähte- ja sihtandmete vastendamise alal.
- Kogemus nõuete väljaselgitamisel ja nende muutmisel rakendatavateks insenerispetsifikatsioonideks.
- Selge suhtlus tehniliste ja mittetehniliste partneritega.
- Kogemus kasutajalugude, vastuvõtukriteeriumide, ärireeglite, andmesõnastike, liidese spetsifikatsioonide ja protsessidokumentatsiooni koostamisel.
- Tugevad analüüsi-, tõrkeotsingu-, töötoa juhtimise ja dokumenteerimise oskused.
- Kogemus tööde elluviimisel agiilsetes tiimides.
- Eeliseks on taust riigihangetes, avaliku sektori lepingutes, toetustes, omandamises, tarnija- või finantsandmetes.
- Eeliseks on kogemus OCDS-i laienduste loomisel või OCDS-i kohandamisel organisatsiooni vajadustele.
- Eeliseks on hangete klassifikaatorite, organisatsioonide identifikaatorite, pakkumismenetluste, auhindamiste, muudatuste, verstapostide, tehingute ja lepingu täitmise tundmine.
- Eeliseks on Databricks Certified Data Engineer Associate’i või Professionali sertifikaat.
- Eeliseks on kogemus Unity Catalogi, Delta Live Tablesi, Lakeflow, Databricks Workflowsi, Structured Streamingu, pilveteenuste, Azure Data Factory, ADLS Gen2, AWS Glue, Amazon S3, Snowflake’i, dbt, Kafka, Airflow, Power BI, JSON Schema valideerijate, automatiseeritud andmekvaliteedi raamistike, metaandmete või põhiandmete halduse, päritolu jälgimise, viiteandmete halduse, CI/CD, Giti, Azure DevOpsi, GitHub Actionsi, Jenkinsi või Terraformiga.
- Eeliseks on kogemus suurtes föderaal-, osariigi-, kohaliku omavalitsuse või reguleeritud ettevõtete andmeprogrammides.
- Eeliseks on föderaalsete omandamis-, hanke-, aruandlus-, läbipaistvus- või avaandmete nõuete tundmine.
- Võime panustada nii inseneri- kui ka ärianalüüsi aruteludesse.
- Andmelepingute ning tootjate ja tarbijate vastutuse põhjalik mõistmine.
- Võime muuta keerukad hankemenetlused selgeteks andmestruktuurideks ja teisendusreegliteks.
- Täpsus skeemide, koodiloendite, ärimääratluste ja valideerimisnõuete tõlgendamisel.
- Tugevad sidusrühmade kaasamise ja konfliktide lahendamise oskused.
- Võime leida lünki ja ebaselgusi enne, kui need põhjustavad insenerivigu.
- Pühendumus dokumenteerimisele, jälgitavusele, andmehaldusele ja andmekvaliteedile.
- Võime töötada tulemuslikult suures, eri valdkondade Databricksi tiimis.
Hüved
- Töökuulutuses ei ole märgitud hüvesid, lisasoodustusi ega täiendavat tasu.
Seotud töökohad
Töökohti ei leitud
Rohkemate võimaluste leidmiseks proovige filtreid muuta või tühjendada.