Vanhempi data-insinööri, Databricks-migraatio
Sigma Software GroupSiirrä vähittäiskaupan analytiikka-alusta BigQuerystä Databricks Lakehouseen. Rakenna skaalautuvia PySpark-putkia, medallion-arkkitehtuuri ja hallittuja pilvidata-alustoja.
Avaa
Sedona Digital on prosessiohjautuva teknologiakonsultointiyritys, joka palvelee muun muassa terveydenhuollon ja logistiikan alojen organisaatioita. Sen palveluihin kuuluvat teknologiastrategia, data-arkkitehtuuri ja -suunnittelu, tekoäly ja ennakoiva analytiikka, ohjelmistotuotteiden kehittäminen, sovellusten modernisointi, pilvimigraatio, Azure-hallintapalvelut, DevOps ja CI/CD. Yritys tukee myös pilviturvallisuutta, hallinnoituja SOC-toimintoja ja jatkuvaa vaatimustenmukaisuutta auttaen yrityksiä rakentamaan, käyttämään ja suojaamaan dataohjautuvia, pilvinatiivisia teknologiaympäristöjä.
Senior Data Engineer, etätyö Romaniassa | Sedona Digital
Rakenna ja ylläpidä PySpark-, SQL- ja Databricks-dataympäristöjä Sedona Digitalin vakuutusalan asiakkaille. Työskentele tietoputkien, täsmäytysten, tietojen laadun ja pilvipohjaisten dataratkaisujen parissa.
Kuvaus
- Arvioi operatiivisten järjestelmien ja lähdejärjestelmien tiedonsiirtoputkia ja uudista niitä.
- Suunnittele tietokenttien kuvaukset, tiedon alkuperän seuranta, riippuvuudet sekä hallitut siirtymä- ja käyttöönotto-suunnitelmat.
- Luo ja ylläpidä yksityiskohtaisia tietojen täsmäytysprosesseja.
- Paranna PySpark-tietojenkäsittelyä sekä hierarkia- ja koontitoimintoja.
- Lisää testaus, versiointi, metatiedot, havainnoitavuus ja käyttöönoton hallintakäytännöt.
- Tee yhteistyötä liiketoiminnan ja teknisten asiantuntijoiden kanssa tietojen kattavuuden parantamiseksi.
- Arvioi GCP:n datan käsittelyputkien vaihtoehtoja ja osallistu niiden toteutukseen.
- Selvitä mahdollisuuksia hakea kenttäkartoituksia ja viitetietoja suoraan järjestelmistä, kuten Microsoft Dynamics 365:stä.
- Tue raportointihierarkioiden ja suodatuslogiikan muutoksia, mukaan lukien vaikutusten arviointi, testaus ja täsmäytys.
- Luo ja ylläpidä automatisoituja tiedon laadun tarkistuksia, seurantaa ja operatiivisia hallintakeinoja.
- Auta tiimejä ottamaan käyttöön keskitetyt raportointi- ja datakyvykkyydet.
- Laadi teknistä dokumentaatiota, päätöslokeja, täsmäytysnäyttöä, poikkeamien selityksiä ja luovutusmateriaaleja.
- Toimita työtä priorisoidun työjonon ja lyhyiden iteratiivisten sprinttien kautta yhdessä insinöörien ja sidosryhmien kanssa.
Vaatimukset
- Vähintään viiden vuoden ammatillinen kokemus data engineering -tehtävistä tai läheiseltä data-alalta, mukaan lukien merkittävä käytännön kokemus tuotantokäytössä olevien dataratkaisujen rakentamisesta ja ylläpidosta.
- Vahva käytännön kokemus PySparkista, SQL:stä ja Databricksista, mukaan lukien tuotantotasoisten tietoputkien kehittäminen ja tuki.
- Käytännön kokemus GCP:n datateknologioista ja tietoputkista.
- Kokemusta tietoputkien testaamisesta ja optimoinnista sekä niiden operatiivisesta tuesta.
- Vahva kokemus dimensio-, perus-/viite- tai hierarkkisen datan mallintamisesta.
- Kokemusta monimutkaisen tietueiden yhdistämisen, tietokenttien kuvausten ja koontilogiikan toteuttamisesta asianmukaisella jäljitettävyydellä.
- Käytännön kokemusta automatisoitujen tiedon laadun tarkistusten ja täsmäytysprosessien toteuttamisesta.
- Kokemusta havainnoitavuudesta, tarkastushistoriasta, versionhallinnasta ja CI/CD:stä data engineering -ratkaisuissa.
- Kokemusta lähdejärjestelmien datan arvioinnista sekä datasopimusten, kenttäkartoitusten, tiedon alkuperän ja riippuvuuksien dokumentoinnista.
- Kokemusta hallittujen datan käsittelyputki- tai alustasiirtymien johtamisesta.
- Kyky selvittää dataongelmia ja selittää selkeästi erot arvoissa, tietuemäärissä, kenttäkartoituksissa ja hierarkioiden tuloksissa.
- Kyky työskennellä suoraan alustatiimien, analyytikoiden ja liiketoiminnan asiantuntijoiden kanssa sekä muuntaa epäselvät raportointi- ja kartoitustarpeet testatuiksi teknisiksi ratkaisuiksi.
- Vahvat viestintätaidot ja kyky laatia tiivistä teknistä dokumentaatiota, päätöslokeja, poikkeamien selityksiä ja luovutusmateriaaleja.
- Oma-aloitteisuutta ja valmiutta työskennellä yhteistyöhön perustuvassa, iteratiivisessa toimitusympäristössä.
- Eduksi katsotaan: Kokemus vakuutusalalta, Lontoon vakuutusmarkkinoilta, jälleenvakuutuksesta, vakuutusmeklaritoiminnasta, jakelusta tai vakuutussopimustason data-ympäristöistä.
- Eduksi katsotaan: Kokemus Microsoft Dynamics 365:n tai vastaavien operatiivisten lähdejärjestelmien integroinnista.
- Eduksi katsotaan: Kokemus Power BI:stä, mukaan lukien semanttiset mallit ja raportoinnin riippuvuudet.
- Eduksi katsotaan: Kokemus hitaasti muuttuvista dimensioista (SCD) ja historiallisten hierarkioiden hallinnasta.
- Eduksi katsotaan: Kokemus monimutkaisten perus-/viitetietojen, tietueiden yhdistämisen ja hierarkiaratkaisujen tukemisesta.
- Eduksi katsotaan: Kokemus historiallisten data- ja raportointipoikkeamien selvittämisestä.
- Eduksi katsotaan: Kokemus hallittujen datasiirtojen, lähdejärjestelmäsiirtymien tai alustamuutosten tukemisesta.
- Eduksi katsotaan: Kokemus hajautetuista Agile-tiimeistä ja yhteistyöstä Isossa-Britanniassa toimivien liiketoiminnan ja teknisten sidosryhmien kanssa.
Samankaltaiset työpaikat
Vanhempi data-arkkitehti (ranskankielinen)
Intetics
Belgia
Ranska
Luxemburg
Puola
Portugali
RomaniaEtätyöKokoaikainenSeniorVaadittu Kieli: englantiVaadittu Kieli: ranskaData-insinööriSuunnittele Inteticsille skaalautuvaa data-arkkitehtuuria ja SQL Server -alustoja. Työhön kuuluu tiedonhallintaa, REST-integraatioita ja toimitusten testausta.
Avaa
ML-data-insinööri, etätyö Romaniassa
Intetics
Bulgaria
EspanjaPuolaPortugaliRomania
SlovakiaEtätyöKokoaikainenKeskitasoSeniorVaadittu Kieli: englantiData-insinööriRakenna reaaliaikaista data-, graafi- ja aikasarjainfrastruktuuria urheilijoiden suorituskyvyn seurantaan. Tue koneoppimisen arviointia ja tekoälyjärjestelmiä yhdysvaltalaiselle Intetics-asiakkaalle.
Avaa
Data-alustan SRE- ja havainnointi-insinööri
Emerging Travel Group
ArmeniaPortugali
Serbia
VietnamEtätyöKokoaikainenKeskitasoSeniorVaadittu Kieli: englantiData-insinööriRakenna havainnointia Trinon, Kubernetesin, tietokantojen, Hadoopin ja Apache Ozonen ympärille. Paranna DORA-mittareita, palvelukohtaisia koontinäyttöjä ja ennakoivaa hälyttämistä.
Avaa
Etätyö Big Data -infrastruktuuri-insinööri
Emerging Travel Group
Vastaat kansainvälisen alustan big data -infrastruktuurista, kuten HDFS:stä, objektitallennuksesta ja Icebergistä. Kehität alustan arkkitehtuuria, kiintiöitä, katalogeja, valvontaa ja toimintavarmuutta.
Avaa