Vultr is een wereldwijd cloudinfrastructuurbedrijf dat ontwikkelaars en bedrijven on-demand computer-, opslag-, netwerk- en databaseservices biedt. Het platform omvat virtuele machines, bare-met al-servers, GPU-versnelde infrastructuur, beheerde databases, object- en blokopslag, Kubernetes en implementeerbare marketplace-applicaties. Met ondersteuning voor AMD- en NVIDIA-GPU's, snelle netwerken en infrastructuur in meer dan 32 datacenterregio's ondersteunt Vultr workloads voor software, kunstmatige intelligentie en high-performance computing via ontwikkelaarsgerichte API's en schaalbare cloudtools.
Senior data-engineer, BigQuery
Bouw betrouwbare BigQuery-pipelines en beheerde datasets voor Vultrs wereldwijde cloudinfrastructuurplatform. Werk samen met Engineering, business intelligence en data science om bedrijfsanalyses te ondersteunen.
Verenigde Staten$ 155.000 – $ 180.000 / jaar
Op afstandVoltijdSeniorVereiste Taal: EngelsData-engineerBeschrijving
- Bouw operationele datapipelines naar BigQuery en onderhoud ze, met waar nodig incrementele ladingen en change data capture.
- Maak bronze-, silver- en gold-datasets, met gedeelde zakelijke entiteiten en rapportagemetingen.
- Automatiseer gegevensvalidatie en afstemming tussen bronsystemen en doeldatasets.
- Verwerk updates, verwijderingen en historische correcties in brongegevens in downstream-datasets.
- Bewaak de gezondheid van pipelines, beheer uitzonderingen en schemaveranderingen, en documenteer herstelprocedures en data-lineage.
- Werk samen met teams voor business intelligence en data science om gedocumenteerde, hoogwaardige datasets te leveren.
- Stem af met Engineering en eigenaren van bedrijfssystemen om hiaten in brongegevens aan te pakken en betrouwbare gegevensoverdrachten te definiëren.
- Stel binnen de afgesproken bedrijfsarchitectuur engineeringstandaarden vast voor testen, implementatie, beveiliging en kostenbeheer, en voer ze uit.
- Beoordeel bestaande pipelines en ontwikkel herhaalbare engineeringpraktijken.
- Lever productieklare datasets voor prioritaire rapportagebehoeften.
- Introduceer eerste controles en monitoring voor datakwaliteit.
- Controleer of historische correcties in brongegevens correct terugkomen in downstream-rapportages.
Vereisten
- Minimaal vijf jaar ervaring in data-engineering, inclusief verantwoordelijkheid voor productiepipelines.
- Gevorderde SQL-vaardigheden en sterke beheersing van Python.
- Ervaring met BigQuery in productie, waaronder partitionering, clustering, queryprestaties en kostenbeheersing.
- Ervaring met tools voor datatransformatie en orkestratie, zoals dbt, Airflow, Cloud Composer, Dagster of vergelijkbare oplossingen.
- Ervaring met het extraheren van gegevens uit operationele databases en het beheren van incrementele ladingen, updates, verwijderingen, backfills en historische correcties.
- Grondige kennis van dimensionele modellering en het bijhouden van historische gegevens.
- Ervaring met geautomatiseerde controles van datakwaliteit, afstemming, monitoring, waarschuwingen en herstel.
- Ervaring met Git, code reviews, geautomatiseerd testen en CI/CD.
- Vermogen om samen te werken met Engineering, analytics en bedrijfsteams.
- Ervaring met MySQL, ClickHouse, Kafka of Google Pub/Sub.
- Bekendheid met Parquet, efficiënt opslaggebruik en Spark of PySpark.
- Vermogen om definities van gegevens en bedrijfslogica te traceren in applicatiecode of een ORM; kennis van PHP is een plus.
- Ervaring met Salesforce, NetSuite, Power BI of vergelijkbare systemen.
- Bekendheid met IAM, serviceaccounts, minimale toegangsrechten en veilige authenticatie van workloads.
- Ervaring met tools voor metadata, data-lineage of data-observability.
- Ervaring met AI of automatisering voor pipelinebeheer, incidentonderzoek of beheerste gegevenstoegang voor LLM-toepassingen.
- Ervaring in cloudinfrastructuur, telecommunicatie, datacenters of een andere omgeving met veel fysieke bedrijfsmiddelen.
Voordelen
- Het bedrijf betaalt 100% van de premies voor de medische, tandheelkundige en oogzorgverzekering van werknemers.
- 401(k)-matching van 100% van de bijdragen tot 4%, met onmiddellijke vesting.
- Jaarlijkse vergoeding van 2.500 dollar voor professionele ontwikkeling.
- 11 feestdagen, opgebouwd betaald verlof en een regeling om verlof mee te nemen.
- Extra betaald verlof bij het drie- en tienjarig jubileum.
- Elke vijf jaar een maand betaald sabbaticalverlof.
- Jaarlijkse jubileumbonus.
- Vergoeding voor de inrichting van een externe werkplek: 500 dollar in het eerste jaar en 400 dollar in elk volgend jaar.
- Internetvergoeding tot 75 dollar per maand.
- Vergoeding voor een sportschoolabonnement tot 50 dollar per maand.
- Door het bedrijf betaald Wellable-abonnement.