
Derevo er et selskap innen dataanalyse og digital transformasjon som hjelper organisasjoner med å omgjøre data til forretningsinnsikt. Arbeidet omfatter hele analyseforløpet, fra opprettelse og integrering av data til analyse og deling, i tillegg til tiltak for å bygge datadrevne kulturer. Selskapet bruker kunstig intelligens og maskinlæring i analyseløsninger på tvers av bransjer og benytter en nearshore-leveransemodell med globale team, særlig for kunder i USA og Canada. Med mer enn ti års erfaring samarbeider Derevo med teknologileverandører for å støtte organisasjoner gjennom datadrevne endringer. Teamene arbeider med rådgivning, logistikk og markedsføring, og selskapet ansetter på tvers av organisasjonen.
Senior dataingeniør, Microsoft Fabric
Bygg Microsoft Fabric-arkitekturer, lakehouses og datapipelines for Derevos data- og AI-løsninger. Gjør data i stor skala om til innsikt som støtter forretningsbeslutninger.
Beskrivelse
- Bygg og implementer moderne dataarkitekturer av høy kvalitet
- Utvikle analyseløsninger med Big Data-teknologier
- Utform, vedlikehold og optimaliser systemer for parallell behandling
- Bruk beste praksis for lagring og håndtering av datavarehus, datasjøer og lakehouses
- Samle inn, behandle, rense og orkestrere store datamengder
- Integrer og transformer data fra flere strukturerte og semistrukturerte kilder
- Definer tekniske strategier i tråd med forretningsmålene
- Delta i prosjektet og sprintene, og utfør utviklingsarbeid
- Identifiser krav og definer omfanget
- Delta i sprintplanlegging, tekniske arbeidsøkter, workshops og møter med interne team og kunder
- Klassifiser og estimer oppgaver ved hjelp av smidige metoder
- Følg fremdriften i sprinten daglig
- Overhold leveringsfrister og håndter risiko ved å kommunisere forsinkelser raskt
Krav
- Avanserte engelskkunnskaper
- Gode ferdigheter i T-SQL og Spark SQL, inkludert DDL, DML, underspørringer, CTE-er, flere join-operasjoner, aggregeringer, vindusfunksjoner, lagrede prosedyrer, indeksoptimalisering, statistikk og kjøreplaner
- Gode Python-ferdigheter (PySpark), inkludert objektorientert programmering, datastrukturer, kontrollflyt, datainnhenting, DataFrames, UDF-er, tidsvinduer, partisjonering, PEP 8 og modularitet
- Erfaring med JSON og REST API-er for pipelineorkestrering, CI/CD-distribusjoner, dynamisk parameterisering og artefakthåndtering
- Kunnskap om Microsoft Fabric, Lakehouse, OneLake, Delta Lake og ACID-kompatible Delta-tabeller
- Kunnskap om partisjonering, OPTIMIZE, Z-ORDER og tidsreiser
- Kunnskap om datavarehus (Synapse Analytics), klargjorte og serverløse SQL-klynger, stjerne- og snøfnuggskjemaer, transaksjonell T-SQL, isolasjon og automatisk skalering
- Erfaring med CI/CD og livssyklushåndtering ved hjelp av Azure DevOps eller GitHub Actions
- Kunnskap om enhetstesting av datasett, skjemavalidering og automatisert distribusjon av artefakter
- Kunnskap om Monitor Hub og Activator, målepaneler, proaktive varsler og automatiserte runbooks
- Kunnskap om Eventstreams og Eventhouse for inntak av hendelser i sanntid, behandlingsvinduer og inkrementelle aggregeringer
- Kunnskap om datasikkerhet og styring, roller og tillatelser, sikkerhet på rad- og kolonnenivå, dynamisk datamaskering og revisjon
- Generell kunnskap om Azure Data Factory er en fordel
- Gode kommunikasjonsevner, erfaring med squad-basert teamarbeid, initiativ, samarbeid, kontinuerlig læring, ansvarsfølelse, organisering, datarådgivning, kravstyring, kundetilpasset strategi og presentasjon for kunder
Fordeler
- Lovpålagte og ekstra goder
- Muligheter til å utvikle ekspertise innen ulike områder og teknologier
- Tverrfaglig utvikling og nye utfordringer
- Et miljø med rom, tillit og frihet til å skape
- Nødvendig opplæring
- Jobb med banebrytende teknologiprosjekter for multinasjonale kunder
- Fleksibelt fjernarbeid
- Nødvendig arbeidsutstyr
- Verktøy for intern kommunikasjon