Vultr är ett globalt företag inom molninfrastruktur som tillhandahåller dator-, lagrings-, nätverks- och databastjänster på begäran för utvecklare och företag. Plattformen omfattar virtuella maskiner, bare metal-servrar, GPU-accelererad infrastruktur, hanterade databaser, objekt- och blocklagring, Kubernetes samt distribuerbara marknadsplatsapplikationer. Med stöd för AMD- och NVIDIA-GPU:er, snabba nätverk och infrastruktur i fler än 32 datacenterregioner betjänar Vultr arbetsbelastningar inom programvara, artificiell intelligens och högpresterande databehandling genom utvecklarfokuserade API:er och skalbara molnverktyg.
Senior dataingenjör, BigQuery
Bygg tillförlitliga BigQuery-pipelines och styrda datamängder för Vultrs globala molninfrastrukturplattform. Samarbeta med teknik-, business intelligence- och datavetenskapsteam för att stödja företagsanalyser.
Beskrivning
- Bygg och underhåll operativa datapipelines till BigQuery med inkrementella inläsningar och ändringsdatainsamling vid behov.
- Skapa bronze-, silver- och gold-datamängder, inklusive gemensamma affärsenheter och rapporteringsmått.
- Automatisera datavalidering och avstämning mellan källsystem och måldatamängder.
- För vidare uppdateringar, borttagningar och historiska korrigeringar i källdata till nedströmsdatamängder.
- Övervaka pipelinehälsa, hantera undantag och schem ändringar samt dokumentera återställningsrutiner och datalinjering.
- Samarbeta med business intelligence- och datavetenskapsteam för att tillhandahålla dokumenterade datamängder med hög prestanda.
- Samordna med teknikteam och ägare av affärssystem för att åtgärda luckor i källdata och definiera tillförlitliga dataöverlämningar.
- Fastställ och tillämpa tekniska standarder för testning, driftsättning, säkerhet och kostnadshantering inom den överenskomna företagsarkitekturen.
- Granska befintliga pipelines och införa repeterbara tekniska arbetssätt.
- Leverera produktionsdatamängder för prioriterade rapporteringsbehov.
- Införa inledande datakvalitetskontroller och övervakning.
- Verifiera att historiska korrigeringar i källdata återges korrekt i nedströmsrapportering.
Krav
- Minst fem års erfarenhet av data engineering, inklusive ansvar för produktionspipelines.
- Avancerade SQL-kunskaper och goda kunskaper i Python.
- Produktionserfarenhet av BigQuery, inklusive partitionering, klustring, frågeprestanda och kostnadskontroll.
- Erfarenhet av datatransformations- och orkestreringsverktyg som dbt, Airflow, Cloud Composer, Dagster eller motsvarande.
- Erfarenhet av att extrahera data från operativa databaser och hantera inkrementella inläsningar, uppdateringar, borttagningar, återinläsningar och historiska korrigeringar.
- Goda kunskaper i dimensionell modellering och spårning av historiska data.
- Erfarenhet av automatiserade datakvalitetskontroller, avstämning, övervakning, aviseringar och återställning.
- Erfarenhet av Git, kodgranskning, automatiserad testning och CI/CD.
- Förmåga att arbeta över teknik-, analys- och affärsteam.
- Erfarenhet av MySQL, ClickHouse, Kafka eller Google Pub/Sub.
- Kännedom om Parquet, lagringseffektivitet och Spark eller PySpark.
- Förmåga att spåra datadefinitioner och affärslogik genom applikationskod eller en ORM; kunskaper i PHP är meriterande.
- Erfarenhet av Salesforce, NetSuite, Power BI eller jämförbara system.
- Kännedom om IAM, tjänstekonton, åtkomst med minsta möjliga behörighet och säker autentisering av arbetslaster.
- Erfarenhet av verktyg för metadata, datalinjering eller dataobservabilitet.
- Erfarenhet av att använda AI eller automatisering för pipelinehantering, incidentutredning eller styrd dataåtkomst för LLM-applikationer.
- Erfarenhet från molninfrastruktur, telekommunikation, datacenter eller en annan tillgångsintensiv miljö.
Förmåner
- Företaget betalar 100 % av de anställdas premier för sjukvårds-, tandvårds- och synförsäkring.
- 401(k)-matchning på 100 % av inbetalningarna upp till 4 %, med omedelbar intjäning.
- Årlig ersättning på 2 500 USD för kompetensutveckling.
- 11 helgdagar, intjänad betald ledighet och möjlighet att spara outnyttjad ledighet till nästa period.
- Extra betald ledighet vid tre respektive tio års anställning.
- En månads betald sabbatsledighet vart femte år.
- Årlig bonus på anställningsdagen.
- Bidrag till distansarbetsplats på 500 USD första året och 400 USD varje följande år.
- Ersättning för internet på upp till 75 USD per månad.
- Ersättning för gymmedlemskap på upp till 50 USD per månad.
- Företagsbetald Wellable-prenumeration.