Scicom Infrastructure Services
Scicom Infrastructure Services
11 – 50 Zamestnanci
Sponzor víza H1BB2BPodnikSaaS
Scicom Infrastructure Services je technologická poradenská a servisná spoločnosť, ktorá pomáha organizáciám verejného a súkromného sektora spravovať a zlepšovať ich IT prostredia. Jej činnosť zahŕňa riadenie podnikovej výkonnosti, architektúru, projektový manažment, správu infraštruktúry a aplikácií a riadené služby. Spoločnosť spolupracuje aj so značkami AppDynamics, BigPanda, Datadog a AWS v oblastiach monitorovania výkonnosti, korelácie udalostí a automatizácie, monitorovania cloudu a správy IT služieb. Poskytuje nepretržitú prevádzkovú podporu pre globálnu infraštruktúru. Jej profil opisuje tím pôsobiaci v oblasti podnikových technológií, SaaS a B2B; podrobnosti o pozíciách a nábore nájdete v aktuálnych pracovných ponukách.

Dátový inžinier Databricks pre dátové kontrakty OCDS

Prepájajte odborníkov na verejné obstarávanie s technickými tímami pri tvorbe dátových kontraktov pre rozsiahly program Databricks. Vytvárajte dátové toky a kontroly v súlade s OCDS, ktoré zabezpečia spoľahlivé a štandardizované údaje o zmluvách.

Popis

  • Prepájajte obchodné tímy, tímy pre zmluvy, správu údajov a inžinierstvo v rámci rozsiahlej implementácie Databricks.
  • Veďte workshopy na získavanie požiadaviek so zainteresovanými stranami z oblasti obstarávania, programov, analytiky, správy údajov a technológií.
  • Vytvárajte a udržiavajte dátové kontrakty, ktoré určujú, ako si poskytovatelia a používatelia vymieňajú údaje.
  • Premieňajte obchodné potreby na používateľské príbehy, akceptačné kritériá, procesné toky, mapovania, špecifikácie rozhraní a technické požiadavky.
  • Analyzujte zdrojové systémy, profilujte údaje, vyhodnocujte nedostatky a mapujte zdrojové polia na cieľové štruktúry.
  • Porovnávajte súčasné údaje o obstarávaní so štruktúrami požadovanými štandardom OCDS.
  • Dosahujte dohodu medzi vlastníkmi údajov, poskytovateľmi, používateľmi, architektmi a tímami správy údajov.
  • Sledujte požiadavky počas modelovania údajov, implementácie, testovania a akceptácie.
  • Posudzujte vplyv navrhovaných zmien na dátové produkty, reporty, integrácie a analytické prípady použitia.
  • Pomáhajte pripravovať a viesť revízie backlogu, plánovanie šprintov, ukážky, testovanie a akceptáciu zainteresovanými stranami.
  • Uplatňujte OCDS na údaje o obstarávaní a verejných zákazkách od plánovania až po implementáciu.
  • Udržiavajte mapovania pre vydania, záznamy, balíky, identifikátory, organizácie, strany, položky, míľniky, dokumenty, transakcie, dodatky a súvisiace prvky OCDS.
  • Používajte schémy OCDS, číselníky, validačné pravidlá a pokyny na implementáciu.
  • Určujte, kedy sú potrebné rozšírenia OCDS, a zaznamenávajte súvisiace predpoklady, pravidlá, mapovania, výnimky a rozšírenia.
  • Vytvárajte záznamy o zmluvách z transakčných zverejnení a určujte, ako sa spracujú dodatky, aktualizácie, zrušenia, opravy a historické zmeny.
  • Overujte transformované údaje podľa schém JSON OCDS a opravujte chýbajúce, neplatné, nekonzistentné alebo nevyhovujúce údaje o obstarávaní.
  • Umožňujte zverejňovanie, výmenu, analýzu alebo interné využitie štandardizovaných údajov o zmluvách.
  • Vytvárajte, testujte a udržiavajte dátové toky Databricks pomocou Apache Spark, PySpark, Pythonu a SQL.
  • Načítavajte a transformujte štruktúrované aj pološtruktúrované údaje o obstarávaní z JSON, CSV, XML, Parquet, databáz, API a súborov.
  • Vytvárajte vrstvy Bronze, Silver a Gold pomocou medailónovej architektúry.
  • Vyvíjajte normalizované, dimenzionálne, analytické a na OCDS založené dátové modely.
  • Používajte Delta Lake na presadzovanie a rozvoj schém, správu verzií, podporu auditov a spoľahlivé spracovanie údajov.
  • Vytvárajte opakovane použiteľné postupy na prevod zdrojových údajov o obstarávaní na výstupy kompatibilné s OCDS.
  • Budujte dávkové aj inkrementálne načítavanie údajov.
  • Používajte vhodné nástroje Databricks vrátane Workflows, notebookov, úloh, Auto Loader, Delta Live Tables alebo Lakeflow.
  • Vytvárajte pripojenia k REST API na načítavanie zdrojových údajov a doručovanie údajov nadväzujúcim systémom.
  • Automatizujte kontroly kvality údajov, zosúladenia, úplnosti a zhody.
  • Pomáhajte implementovať Unity Catalog na správu metadát, vlastníctva, pôvodu údajov, riadenia prístupu a vyhľadávania údajov.
  • Zlepšujte úlohy Spark, dotazy SQL, clustre, rozdelenie na partície, veľkosti súborov a usporiadanie údajov.
  • Zapájajte sa do revízií kódu, automatizovaných testov, CI/CD, nasadzovania, monitorovania a podpory produkčného prostredia.
  • Diagnostikujte zlyhania dátových tokov, nesúlad údajov a problémy s výkonom.
  • Stanovujte merateľné pravidlá presnosti, úplnosti, platnosti, aktuálnosti, konzistentnosti a jedinečnosti údajov.
  • Vytvárajte validačné kontroly pre polia OCDS, identifikátory, dátumy, sumy, meny, organizácie, klasifikácie a vzťahy medzi zmluvami.
  • Vytvárajte dashboardy alebo reporty o súlade s dátovými kontraktmi a výsledkoch kvality údajov.
  • Nastavujte postupy na zisťovanie a správu zmien schém.
  • Sledujte pôvod údajov o obstarávaní cez transformácie Databricks až po nadväzujúce produkty.
  • Spolupracujte s tímami správy údajov pri určovaní vlastníkov, správcov, klasifikácií, lehôt uchovávania a zásad prístupu.
  • Zaobchádzajte s citlivými údajmi o obstarávaní a dodávateľoch v súlade s požiadavkami na bezpečnosť a ochranu súkromia.
  • Udržiavajte auditné záznamy s dokumentovanými pravidlami, verzovanými mapovaniami, výsledkami validácie a históriou zmien.

Požiadavky

  • Bakalársky titul v odbore informatika, informačné systémy, dátová analytika, obchodná analýza, inžinierstvo, verejná správa, riadenie dodávateľského reťazca alebo v príbuznom odbore.
  • Aspoň päť rokov kombinovaných skúseností v dátovom inžinierstve, dátovej analýze, obchodnej analýze alebo integrácii údajov.
  • Praktické skúsenosti s implementáciou alebo používaním štandardu Open Contracting Data Standard (OCDS).
  • Skúsenosti s tvorbou, dokumentovaním, dohadovaním alebo udržiavaním dátových kontraktov.
  • Skúsenosti s mapovaním údajov o obstarávaní alebo zmluvách na schémy OCDS.
  • Dôkladná znalosť vydaní, záznamov, schém, číselníkov, identifikátorov, fáz obstarávania a validačných metód OCDS.
  • Aspoň tri roky praktických skúseností s Databricks.
  • Pokročilé znalosti Apache Spark, PySpark, Pythonu, SQL, Delta Lake, dátových tokov ETL/ELT, modelovania údajov, JSON a JSON Schema, REST API, validácie kvality údajov a mapovania zdrojových a cieľových údajov.
  • Skúsenosti so zisťovaním požiadaviek a ich premenou na konkrétne technické špecifikácie.
  • Jasná komunikácia s technickými aj netechnickými partnermi.
  • Skúsenosti s prípravou používateľských príbehov, akceptačných kritérií, obchodných pravidiel, dátových slovníkov, špecifikácií rozhraní a procesnej dokumentácie.
  • Silné analytické schopnosti, riešenie problémov, facilitácia a dokumentovanie.
  • Skúsenosti s prácou v agilných tímoch.
  • Výhodou je prax v oblasti vládneho obstarávania, verejných zákaziek, grantov, akvizície, dodávateľských alebo finančných údajov.
  • Výhodou sú skúsenosti s tvorbou rozšírení OCDS alebo prispôsobovaním OCDS potrebám organizácie.
  • Výhodou je znalosť klasifikácií obstarávania, identifikátorov organizácií, tendrov, zadaných zákaziek, dodatkov, míľnikov, transakcií a realizácie zmlúv.
  • Výhodou je certifikát Databricks Certified Data Engineer Associate alebo Professional.
  • Výhodou sú skúsenosti s Unity Catalog, Delta Live Tables, Lakeflow, Databricks Workflows, Structured Streaming, cloudovými službami, Azure Data Factory, ADLS Gen2, AWS Glue, Amazon S3, Snowflake, dbt, Kafka, Airflow, Power BI, validátormi JSON Schema, automatizovanými rámcami kvality údajov, správou metadát alebo kmeňových údajov, sledovaním pôvodu, správou referenčných údajov, CI/CD, Git, Azure DevOps, GitHub Actions, Jenkins alebo Terraform.
  • Výhodou sú skúsenosti s prácou na rozsiahlych dátových programoch federálnej, štátnej či miestnej správy alebo regulovaných podnikov.
  • Výhodou je znalosť požiadaviek federálneho obstarávania, nákupu, vykazovania, transparentnosti alebo otvorených údajov.
  • Schopnosť prispievať do diskusií o inžinierstve aj obchodnej analýze.
  • Dôkladné pochopenie dátových kontraktov a zodpovednosti poskytovateľov a používateľov údajov.
  • Schopnosť previesť zložité procesy obstarávania na zrozumiteľné dátové štruktúry a pravidlá transformácie.
  • Dôslednosť pri interpretácii schém, číselníkov, obchodných definícií a validačných požiadaviek.
  • Silné schopnosti pri facilitácii zainteresovaných strán a riešení konfliktov.
  • Schopnosť odhaliť nedostatky a nejasnosti skôr, než spôsobia chyby v inžinierskom riešení.
  • Záväzok k dokumentácii, sledovateľnosti, správe údajov a ich kvalite.
  • Schopnosť efektívne pracovať vo veľkom multidisciplinárnom tíme Databricks.

Benefity

  • Inzerát neuvádza benefity, výhody ani dodatočnú odmenu.

Súvisiace pracovné ponuky

Nenašli sa žiadne pracovné ponuky

Skúste upraviť alebo vymazať filtre a nájsť ďalšie príležitosti.