
Scicom Infrastructure Services on teknologia-alan konsultointi- ja palveluyritys, joka auttaa julkisen ja yksityisen sektorin organisaatioita hallinnoimaan ja kehittämään IT-ympäristöjään. Sen toiminta kattaa yritysten suorituskyvyn hallinnan, arkkitehtuurin, projektinhallinnan, infrastruktuurin ja sovellusten hallinnan sekä hallinnoidut palvelut. Yhtiö tekee myös yhteistyötä AppDynamicsin, BigPandan, Datadogin ja AWS:n kanssa suorituskyvyn seurantaan, tapahtumien korrelaatioon ja automaatioon, pilvipalveluiden valvontaan sekä IT-palvelunhallintaan liittyvissä ratkaisuissa. Scicom tarjoaa ympärivuorokautista operatiivista tukea maailmanlaajuiselle infrastruktuurille. Yrityksen profiilin mukaan sen tiimi työskentelee yritys-, SaaS- ja B2B-teknologian parissa; tehtävistä ja rekrytoinnista saa lisätietoja avoimista työpaikoista.
Databricks-data-insinööri, OCDS-datasopimukset
Yhdistät hankintojen sidosryhmät ja tekniset tiimit määrittelemään datasopimuksia laajassa Databricks-ohjelmassa. Rakennat OCDS-yhteensopivia tietoputkia ja laadunvalvontaa luotettavalle ja yhdenmukaiselle sopimusdatalle.
Kuvaus
- Yhdistä liiketoiminnan, sopimushallinnan, hallinnon ja teknisen toteutuksen tiimit laajassa Databricks-toteutuksessa.
- Vedä vaatimustyöpajoja hankinnan, ohjelmajohdon, analytiikan, hallinnon ja teknisten sidosryhmien kanssa.
- Luo ja ylläpidä datasopimuksia, jotka määrittelevät, miten tuottajat ja kuluttajat vaihtavat dataa.
- Muuta liiketoiminnan tarpeet käyttäjätarinoiksi, hyväksymiskriteereiksi, prosessikuvauksiksi, kuvauksiksi, rajapintamäärityksiksi ja teknisiksi vaatimuksiksi.
- Analysoi lähdejärjestelmiä, profiloi dataa, arvioi puutteita ja yhdistä lähdekentät kohderakenteisiin.
- Vertaa nykyistä hankintadataa OCDS:n edellyttämiin rakenteisiin.
- Sovita yhteen datan omistajat, tuottajat, kuluttajat, arkkitehdit ja hallintotiimit.
- Seuraa vaatimuksia tietomallinnuksesta toteutukseen, testaukseen ja hyväksyntään.
- Arvioi, miten ehdotetut muutokset vaikuttavat datatuotteisiin, raportteihin, integraatioihin ja analytiikan käyttötapauksiin.
- Auta valmistelemaan ja vetämään työjonon katselmointeja, sprinttisuunnittelua, esittelyjä, testausta ja sidosryhmien hyväksyntää.
- Sovella OCDS-standardia hankinta- ja julkisten sopimusten dataan suunnittelusta toteutukseen.
- Ylläpidä kuvauksia OCDS-julkaisuista, tietueista, paketeista, tunnisteista, organisaatioista, osapuolista, kohteista, välitavoitteista, asiakirjoista, tapahtumista, muutoksista ja niihin liittyvistä osista.
- Käytä OCDS-skeemoja, koodilistoja, validointisääntöjä ja toteutusohjeita.
- Tunnista OCDS-laajennusten tarve ja kirjaa niihin liittyvät oletukset, säännöt, kuvaukset, poikkeukset ja laajennukset.
- Muodosta sopimustietueita tapahtumajulkaisuista ja määrittele, miten muutokset, päivitykset, peruutukset, korjaukset ja historiatiedot käsitellään.
- Tarkista muunnettu data OCDS JSON -skeemoja vasten ja korjaa puuttuvat, virheelliset, epäyhtenäiset tai vaatimustenvastaiset hankintatiedot.
- Mahdollista yhdenmukaisen sopimusdatan julkaisu, vaihto, analysointi tai sisäinen käyttö.
- Rakenna, testaa ja ylläpidä Databricks-tietoputkia Apache Sparkilla, PySparkilla, Pythonilla ja SQL:llä.
- Lataa ja muunna rakenteista ja puolirakenteista hankintadataa JSON-, CSV-, XML- ja Parquet-tiedostoista, tietokannoista, rajapinnoista ja muista tiedostoista.
- Luo Bronze-, Silver- ja Gold-kerrokset medallion-arkkitehtuurilla.
- Kehitä normalisoituja, dimensio-, analytiikka- ja OCDS-pohjaisia tietomalleja.
- Käytä Delta Lakea skeemojen valvontaan ja kehittämiseen, versioiden hallintaan, auditointien tukemiseen ja luotettavaan tietojenkäsittelyyn.
- Luo uudelleenkäytettäviä menetelmiä, joilla lähteen hankintadata muunnetaan OCDS-yhteensopivaan muotoon.
- Toteuta sekä eräajona että vaiheittain tapahtuvaa datan latausta.
- Käytä tarkoituksenmukaisia Databricks-työkaluja, kuten Workflowsia, muistikirjoja, työtehtäviä, Auto Loaderia, Delta Live Tablesia tai Lakeflow'ta.
- Rakenna REST API -yhteyksiä lähdedatan lataamiseen ja datan toimittamiseen jatkokäyttöön.
- Automatisoi datan laadun, täsmäytyksen, kattavuuden ja vaatimustenmukaisuuden tarkistukset.
- Auta ottamaan Unity Catalog käyttöön metatietojen, omistajuuden, alkuperäketjun, käyttöoikeuksien ja datan löytämisen hallintaan.
- Paranna Spark-töitä, SQL-kyselyjä, klustereita, osiointia, tiedostokokoja ja datan asettelua.
- Osallistu koodikatselmointeihin, automatisoituihin testeihin, CI/CD-prosesseihin, käyttöönottoihin, valvontaan ja tuotantotukeen.
- Selvitä tietoputkien häiriöitä, datan ristiriitoja ja suorituskykyongelmia.
- Määrittele mitattavat säännöt datan tarkkuudelle, kattavuudelle, kelvollisuudelle, ajantasaisuudelle, yhtenäisyydelle ja yksilöllisyydelle.
- Luo validointikontrolleja OCDS-kentille, tunnisteille, päivämäärille, summille, valuutoille, organisaatioille, luokituksille ja sopimussuhteille.
- Luo koontinäyttöjä tai raportteja datasopimusten noudattamisesta ja datan laadun tuloksista.
- Ota käyttöön menetelmiä skeemamuutosten havaitsemiseen ja hallintaan.
- Jäljitä hankintadatan alkuperäketjua Databricks-muunnosten kautta jatkokäytön tuotteisiin.
- Määrittele hallintotiimien kanssa omistajat, vastuuhenkilöt, luokitukset, säilytysajat ja käyttöoikeuskäytännöt.
- Käsittele arkaluonteisia hankinta- ja toimittajatietoja tietoturva- ja tietosuojavaatimusten mukaisesti.
- Ylläpidä auditointijälkiä dokumentoiduilla säännöillä, versioiduilla kuvauksilla, validointituloksilla ja muutoshistorioilla.
Vaatimukset
- Tietojenkäsittelytieteen, tietojärjestelmien, data-analytiikan, liiketoiminta-analyysin, tekniikan, julkishallinnon, toimitusketjun hallinnan tai vastaavan alan kandidaatin tutkinto.
- Vähintään viiden vuoden yhteenlaskettu kokemus data engineeringistä, data-analyysistä, liiketoiminta-analyysistä tai dataintegraatioista.
- Käytännön kokemusta Open Contracting Data Standardin (OCDS) toteuttamisesta tai käytöstä.
- Kokemusta datasopimusten laatimisesta, dokumentoinnista, neuvottelemisesta tai ylläpidosta.
- Kokemusta hankinta- tai sopimusdatan kuvaamisesta OCDS-skeemoihin.
- OCDS-julkaisujen, tietueiden, skeemojen, koodilistojen, tunnisteiden, sopimusvaiheiden ja validointimenetelmien vahva hallinta.
- Vähintään kolmen vuoden käytännön kokemus Databricksistä.
- Vahvat taidot Apache Sparkissa, PySparkissa, Pythonissa, SQL:ssä, Delta Lakessa, ETL/ELT-tietoputkissa, tietomallinnuksessa, JSONissa ja JSON Schemassa, REST API -rajapinnoissa, datan laadun validoinnissa sekä lähde-kohde-kuvauksissa.
- Kokemusta vaatimusten kartoittamisesta ja niiden muuntamisesta toteuttamiskelpoisiksi teknisiksi määrityksiksi.
- Selkeä viestintä teknisten ja muiden kuin teknisten yhteistyökumppaneiden kanssa.
- Kokemusta käyttäjätarinoiden, hyväksymiskriteerien, liiketoimintasääntöjen, tietosanastojen, rajapintamääritysten ja prosessidokumentaation laatimisesta.
- Vahvat analysointi-, ongelmanratkaisu-, fasilitointi- ja dokumentointitaidot.
- Kokemusta työn toimittamisesta ketterissä tiimeissä.
- Eduksi katsotaan tausta julkisissa hankinnoissa, julkisen sektorin sopimuksissa, avustuksissa, hankintatoimessa, toimittaja- tai talousdatassa.
- Eduksi katsotaan kokemus OCDS-laajennusten rakentamisesta tai OCDS:n mukauttamisesta organisaation tarpeisiin.
- Eduksi katsotaan hankintaluokitusten, organisaatiotunnisteiden, kilpailutusten, myöntämisten, muutosten, välitavoitteiden, tapahtumien ja sopimusten toteutuksen tuntemus.
- Eduksi katsotaan Databricks Certified Data Engineer Associate- tai Professional-sertifikaatti.
- Eduksi katsotaan kokemus Unity Catalogista, Delta Live Tablesista, Lakeflow'sta, Databricks Workflowsista, Structured Streamingista, pilvipalveluista, Azure Data Factorysta, ADLS Gen2:sta, AWS Gluesta, Amazon S3:sta, Snowflakesta, dbt:stä, Kafkasta, Airflow'sta, Power BI:stä, JSON Schema -validaattoreista, automatisoiduista datan laatukehyksistä, metatietojen tai ydindatan hallinnasta, alkuperäketjusta, viitetietojen hallinnasta, CI/CD:stä, Gitistä, Azure DevOpsista, GitHub Actionsista, Jenkinsistä tai Terraformista.
- Eduksi katsotaan kokemus osallistumisesta laajoihin liittovaltion, osavaltion, paikallishallinnon tai säännellyn yrityssektorin dataohjelmiin.
- Eduksi katsotaan liittovaltion hankinta-, hankintatoimi-, raportointi-, avoimuus- tai avoimen datan vaatimusten tuntemus.
- Kyky osallistua sekä teknisiin toteutuskeskusteluihin että liiketoiminta-analyysin keskusteluihin.
- Datasopimusten ja tuottajien ja kuluttajien vastuiden vahva ymmärtäminen.
- Kyky muuntaa monimutkaiset hankintaprosessit selkeiksi tietorakenteiksi ja muunnossäännöiksi.
- Huolellisuus skeemojen, koodilistojen, liiketoimintamääritelmien ja validointivaatimusten tulkinnassa.
- Vahvat sidosryhmien fasilitointi- ja ristiriitojenratkaisutaidot.
- Kyky havaita puutteet ja epäselvyydet ennen kuin ne aiheuttavat teknisiä virheitä.
- Sitoutuminen dokumentointiin, jäljitettävyyteen, hallintamalleihin ja datan laatuun.
- Kyky työskennellä tehokkaasti suuressa, monialaisessa Databricks-tiimissä.
Edut
- Työpaikkailmoituksessa ei määritellä etuja, henkilöstöetuja tai lisäkorvausta.
Samankaltaiset työpaikat
Työpaikkoja ei löytynyt
Kokeile suodattimien muuttamista tai tyhjentämistä löytääksesi lisää mahdollisuuksia.