Keep IT Simple
Keep IT Simple
Keep IT Simple (KIS) er en leverandør av IT-tjenester og -løsninger med base i Silicon Valley, som betjener organisasjoner i hele California og andre steder. Selskapet ble etablert i 1988 og hjelper kunder med å håndtere komplekse teknologibehov gjennom cybersikkerhet, virtualisering, skyløsninger og rådgivning innen nettverksinfrastruktur. Arbeidet omfatter blant annet logistikk, helsesektoren og cybersikkerhet, med vekt på praktisk IT-veiledning, kostnadsbevisste løsninger og rask kundeservice.

Senior dataingeniør for Databricks- og AI-plattformer

Bygg data- og skyplattformer med Databricks for et globalt forsikrings- og kapitalforvaltningsselskap. Støtt styrt analyse, maskinlæring og løsninger for generativ AI.

Beskrivelse

  • Bygg og vedlikehold skalerbare datapipelines og dataprodukter med Databricks, Spark, Python og SQL.
  • Opprett og forbedre batch-, strømme- og sanntidsintegrasjoner på tvers av interne systemer og eksterne datakilder.
  • Implementer Databricks Lakehouse-arkitekturer med Delta Lake og Medallion-mønstre.
  • Lever dataprodukter for analyse, prediktiv modellering, maskinlæring og generativ AI.
  • Samarbeid med dataforskere og AI-ingeniører om å klargjøre, transformere og styre data for AI- og ML-bruksområder.
  • Opprett pipelines for feature engineering og støtt prosesser gjennom maskinlæringens livssyklus.
  • Bygg dataløsninger for RAG, vektor- og semantisk søk samt LLM-applikasjoner.
  • Forbedre Spark-jobber, SQL-arbeidsbelastninger og datarammeverk for ytelse, skalerbarhet og kostnadseffektivitet.
  • Etabler funksjoner for datakvalitet, observerbarhet, dataopphav, styring og overvåking.
  • Oppfyll standarder for personvern, sikkerhet og ansvarlig AI.
  • Støtt CI/CD, Infrastructure as Code og DataOps på dataplattformen.
  • Veiled junioringeniører og frem dyrk gode ingeniørpraksiser.
  • Samarbeid med dataforskere, AI-ingeniører, arkitekter og forretningsinteressenter for å levere pålitelige, styrte dataprodukter.
  • Støtt virksomhetens AI- og generativ AI-initiativer med robuste, sikre og styrte dataplattformer.

Krav

  • Bachelorgrad innen informatikk, informasjonssystemer, ingeniørfag, matematikk eller et beslektet fagområde.
  • Minst 7 års erfaring med data engineering, ETL-utvikling eller storskala dataplattformer.
  • Minst 3 års praktisk erfaring med Databricks og Apache Spark.
  • Gode ferdigheter i Python og SQL samt erfaring med distribuert databehandling.
  • Erfaring med å bygge skybaserte datasjøer, datavarehus og Lakehouse-arkitekturer.
  • Erfaring med å støtte initiativer innen AI, maskinlæring eller avansert analyse.
  • Kunnskap om datamodellering, datastyring og håndtering av virksomhetsdata.
  • Erfaring med å bygge og optimalisere datapipelines i stor skala på AWS, Azure eller Google Cloud.
  • Erfaring med Databricks Delta Lake, Unity Catalog, Delta Live Tables, MLflow, Mosaic AI og Databricks Workflows.
  • Praktisk erfaring med generativ AI, store språkmodeller, RAG, vektordatabaser eller AI-drevne applikasjoner.
  • Kjennskap til LangChain, Semantic Kernel, OpenAI API-er, Hugging Face eller tilsvarende verktøy.
  • Erfaring med feature stores, pipelines for modelltrening og MLOps.
  • Erfaring med Kafka, Event Hub eller andre strømmeteknologier.
  • Databricks Certified Data Engineer Professional eller tilsvarende skysertifisering er en fordel.
  • Ekspertise innen plattformutvikling for Databricks.
  • Erfaring med Apache Spark-utvikling.
  • Ekspertise innen data engineering for AI og maskinlæring.
  • Erfaring med dataløsninger for generativ AI.
  • Erfaring med Lakehouse-arkitektur.
  • Ekspertise innen datamodellering og datavarehus.
  • Ekspertise innen datastyring og sikkerhet.
  • Erfaring med dataobservabilitet og pålitelighetsteknikk.
  • Erfaring med skybaserte dataplattformer på AWS eller Azure.
  • Erfaring med DataOps, CI/CD og automatisering.
  • Erfaring med teknisk ledelse og mentorering.

Fordeler

  • Oppdrag som selvstendig konsulent (PJ).
  • Hybridordning med tre dager i uken på kontoret i Pinheiros, São Paulo.

Relaterte jobber

Terumo Medical Corporation

Regionsjef, salg av Terumo Interventional Systems

Terumo Medical Corporation

Led salg av medisinsk utstyr i en region i North Central New Jersey, og ha ansvar for feltteam og sykehusrelasjoner. Driv regionale inntekter og salgsresultater, og sørg for at markedsføringen av Terumo Interventional Systems-produkter følger gjeldende regler.

Åpne