Keep IT Simple
Keep IT Simple
Keep IT Simple (KIS) is een IT-dienstverlener en aanbieder van IT-oplossingen uit Silicon Valley die organisaties in heel Californië en daarbuiten ondersteunt. Het bedrijf werd opgericht in 1988 en helpt klanten bij complexe technologische vraagstukken op het gebied van cybersecurity, virtualisatie, cloudoplossingen en advies over netwerkinfrastructuur. De dienstverlening omvat onder meer de logistiek, gezondheidszorg en cybersecurity, met de nadruk op praktisch IT-advies, kostenbewuste oplossingen en een snelle klantenservice.

Senior data-engineer voor Databricks- en AI-dataplatforms

Leid het ontwerp van Databricks-dataplatforms voor een wereldwijd verzekerings- en vermogensbeheerbedrijf. Maak cloudanalyses, AI en machine learning, governance en bedrijfsmodernisering mogelijk.

Beschrijving

  • Ontwerp en onderhoud schaalbare datapipelines met Databricks, Spark en cloudtechnologieën.
  • Bouw en optimaliseer frameworks voor batch- en realtimegegevensinname.
  • Creëer herbruikbare engineeringpatronen en versnellers voor dataoplossingen op bedrijfsniveau.
  • Implementeer datakwaliteit, observeerbaarheid, herkomst en governance in het gehele data-ecosysteem.
  • Ondersteun grootschalige initiatieven voor datamodernisering en cloudmigratie.
  • Ontwerp Delta Lake-architecturen en Medallion-datamodellen.
  • Ontwikkel geoptimaliseerde ETL- en ELT-pipelines met Databricks-notebooks, workflows en Delta Live Tables.
  • Stel praktijken vast voor prestatieafstemming, kostenoptimalisatie en workloadbeheer.
  • Gebruik Unity Catalog voor het beheer van datagovernance, beveiliging en metadata.
  • Implementeer CI/CD-pipelines en Infrastructure as Code voor Databricks-implementaties.
  • Ontwerp cloud-native data-architecturen voor Azure en AWS.
  • Integreer bedrijfsbronnen zoals SQL Server, Oracle, API's, SaaS en streamingplatforms.
  • Bouw veerkrachtige, veilige dataservices die hoge beschikbaarheid en noodherstel ondersteunen.
  • Werk samen met infrastructuur- en beveiligingsteams aan cloudbeveiligingsmaatregelen en compliance-normen.
  • Bouw en optimaliseer datap producten voor AI, machine learning en generatieve AI-workloads.
  • Ontwikkel feature-engineeringpipelines en samengestelde datasets voor modeltraining en inferentie.
  • Ondersteun vectordatabases, semantisch zoeken, retrieval-augmented generation en LLM-toepassingen.
  • Werk samen met datawetenschappers en AI-engineers om machine-learningoplossingen in productie te nemen.
  • Pas MLOps- en DataOps-praktijken toe voor schaalbare AI-levering.
  • Leid complexe data-engineeringinitiatieven.
  • Stel architectuurstandaarden, engineeringpraktijken en ontwikkelrichtlijnen vast.
  • Begeleid junior- en medior-engineers.
  • Beoordeel architecturen en geef technische aanbevelingen.
  • Bevorder automatisering, observeerbaarheid en platform-engineeringpraktijken.

Vereisten

  • Bachelordiploma in informatica, informatietechnologie, engineering of een verwant vakgebied.
  • Minimaal 8 jaar ervaring met data-engineering, datawarehousing of de ontwikkeling van dataplatforms.
  • Minimaal 5 jaar hands-onervaring met Databricks en Apache Spark.
  • Ervaring met het ontwerpen en implementeren van clouddataplatforms op ondernemingsniveau.
  • Ervaring met het leiden van technische initiatieven en het begeleiden van engineeringteams.
  • Ervaring met Databricks, Apache Spark (PySpark en Spark SQL), Delta Lake, Delta Live Tables, Unity Catalog, datawarehousing en datamodellering.
  • Ervaring met Python, SQL en PowerShell of scriptautomatisering.
  • Ervaring met Microsoft Azure, AWS en cloud-native opslag- en rekendiensten.
  • Ervaring met SQL Server, Oracle, PostgreSQL en databases.
  • Ervaring met Azure Data Factory, Databricks Workflows, Kafka of event streaming en REST API's.
  • Ervaring met GitHub, Azure DevOps, CI/CD-pipelines, Terraform en Infrastructure as Code.
  • Kennis van monitoring- en waarschuwingstools, frameworks voor datakwaliteit, prestatieoptimalisatie, logging en probleemoplossing.
  • Kennis van datapipelines voor machine learning, feature stores, MLOps, concepten van generatieve AI, vectordatabases, retrieval-augmented generation, AI-governance en principes voor verantwoorde AI.
  • Gewenste certificeringen: Databricks Certified Data Engineer Professional, Azure Data Engineer Associate of AWS Data Analytics.
  • Ervaring in gereguleerde sectoren, bedrijfsbrede datagovernanceprogramma's en AI-integraties in productie is een pré.
  • Strategisch denken, probleemoplossend vermogen, technisch leiderschap, architectuurontwerp, stakeholdermanagement, communicatie- en presentatievaardigheden, continue verbetering, innovatie en AI-adoptie, en bewustzijn van risico's en compliance.

Voordelen

  • Contractvorm: zelfstandig opdrachtnemer (Pessoa Jurídica, PJ).
  • Hybride werkregeling met de mogelijkheid om een deel van de tijd op afstand te werken.

Gerelateerde vacatures

Terumo Medical Corporation

Regionaal verkoopmanager Terumo Interventional Systems

Terumo Medical Corporation

Geef leiding aan de verkoop van medische hulpmiddelen in een regio in Noord-Centraal-New Jersey en stuur buitendienstteams en ziekenhuisrelaties aan. Vergroot de regionale omzet en verkoopprestaties en zorg voor promotie van Terumo Interventional Systems-producten volgens de voorschriften.

Openen