Derevo
Derevo
Derevo är ett dataanalys- och digitaliseringsföretag som hjälper organisationer att omvandla data till affärsinsikter. Företagets arbete omfattar hela analysprocessen, från dataskapande och integration till analys och delning, samt insatser för att bygga datadrivna kulturer. Derevo använder AI och maskininlärning i analyslösningar för olika branscher och arbetar med en nearshore-leveransmodell med globala team, särskilt för kunder i USA och Kanada. Med mer än tio års erfarenhet samarbetar Derevo med teknikleverantörer för att stödja organisationer i datadriven förändring. Företagets team arbetar med konsulttjänster, logistik och marknadsföring, och företaget rekryterar inom hela organisationen.

Senior dataingenjör, Microsoft Fabric

Bygg Microsoft Fabric-arkitekturer, lakehouses och datapipelines för Derevos data- och AI-lösningar. Omvandla data i stor skala till insikter som stödjer affärsbeslut.

Beskrivning

  • Bygg och implementera moderna dataarkitekturer av hög kvalitet
  • Utveckla analyslösningar med Big Data-teknik
  • Utforma, underhålla och optimera system för parallell bearbetning
  • Tillämpa bästa praxis för lagring och hantering av datalager, datasjöar och lakehouses
  • Samla in, bearbeta, rensa och orkestrera stora datavolymer
  • Integrera och transformera data från flera strukturerade och halvstrukturerade källor
  • Ta fram tekniska strategier i linje med verksamhetens mål
  • Delta i projektet och dess sprintar genom att utföra utvecklingsarbete
  • Identifiera krav och fastställa omfattningen
  • Medverka i sprintplanering, tekniska arbetspass, workshops och möten med interna team och kunder
  • Klassificera och uppskatta arbetsuppgifter med agila metoder
  • Följa upp sprintens framsteg dagligen
  • Hålla leveransdatum och hantera risker genom att snabbt kommunicera förseningar

Krav

  • Avancerade kunskaper i engelska
  • Mycket goda kunskaper i T-SQL och Spark SQL, inklusive DDL, DML, underfrågor, CTE:er, flera join-operationer, aggregeringar, fönsterfunktioner, lagrade procedurer, indexoptimering, statistik och exekveringsplaner
  • Goda kunskaper i Python (PySpark), inklusive objektorienterad programmering, datastrukturer, kontrollflöde, datainläsning, DataFrames, UDF:er, tidsfönster, partitionering, PEP 8 och modulär kod
  • Erfarenhet av JSON och REST API:er för pipelineorkestrering, CI/CD-driftsättningar, dynamisk parameterisering och artefakthantering
  • Kunskaper om Microsoft Fabric, Lakehouse, OneLake, Delta Lake och ACID-kompatibla Delta-tabeller
  • Kunskaper om partitionering, OPTIMIZE, Z-ORDER och tidsresor
  • Kunskaper om datalager (Synapse Analytics), provisionerade och serverlösa SQL-kluster, stjärn- och snöflingemodeller, transaktionell T-SQL, isolering och automatisk skalning
  • Erfarenhet av CI/CD och livscykelhantering med Azure DevOps eller GitHub Actions
  • Kunskaper om enhetstester av dataset, schemavalidering och automatiserad driftsättning av artefakter
  • Kunskaper om Monitor Hub och Activator, mätvärdespaneler, proaktiva aviseringar och automatiserade körböcker
  • Kunskaper om Eventstreams och Eventhouse för inläsning av händelser i realtid, bearbetningsfönster och inkrementella aggregeringar
  • Kunskaper om datasäkerhet och styrning, roller och behörigheter, säkerhet på rad- och kolumnnivå, dynamisk datamaskering och granskning
  • Allmänna kunskaper om Azure Data Factory är meriterande
  • God kommunikativ förmåga, erfarenhet av teamarbete i en squad, initiativförmåga, samarbetsförmåga, vilja att lära kontinuerligt, ansvarstagande, organisatorisk förmåga, datakonsultation, kravhantering, kundanpassad strategi och förmåga att presentera för kunder

Förmåner

  • Lagstadgade och extra förmåner
  • Möjlighet att utveckla expertis inom olika områden och tekniker
  • Tvärdisciplinär utveckling och nya utmaningar
  • En miljö med utrymme, förtroende och frihet att skapa
  • Nödvändig utbildning
  • Arbete med banbrytande teknikprojekt för multinationella kunder
  • Flexibelt distansarbete
  • Arbetsutrustning
  • Verktyg för intern kommunikation