Marathon Petroleum Corporation er et energiselskap som driver virksomhet innen raffinering, midstream og detaljhandel. Selskapets raffinerinettverk omfatter 13 raffinerier i USA med en oppgitt kapasitet til å behandle opptil 3 millioner fat råolje per dag. Selskapet utvikler også virksomhet innen fornybart drivstoff ved siden av sin tradisjonelle energivirksomhet, med fokus på å forbedre energieffektiviteten og redusere karbonutslippene.
Senior dataingeniør - Marathon Petroleum, San Antonio, TX
Led utformingen av skalerbare Azure-datapipelines og skyløsninger som støtter Marathon Petroleums virksomhet. Du former dataarkitekturen, styrker styring og sikkerhet og veileder andre ingeniører.
Beskrivelse
- Bygge, forbedre og finjustere skalerbare datapipelines og skybaserte dataløsninger
- Bruke Azure Data Lake, Synapse Analytics, Azure Functions og Databricks i data engineering-initiativer
- Samarbeide med interessenter innen analyse, produkt, arkitektur, styring og virksomhet for å omsette krav til skalerbare løsninger
- Utforme og forbedre arbeidsflyter for datauttrekk, datainnhenting og datatransformasjon
- Utvikle dataarkitektur for komplekse datasett med store datamengder
- Levere avanserte datapipelines samtidig som du bruker kontroller for datasikkerhet og personvern
- Utføre komplekst arbeid med datakvalitet og databehandling ved hjelp av åpen kildekode- og skyteknologier
- Yte spesialisert teknisk støtte under kritiske hendelser
- Koordinere på tvers av avdelinger for å opprettholde pålitelig dataintegrasjon
- Forbedre databehandlingsmetoder kontinuerlig og fremme konsistens og tekniske standarder
- Håndtere komplekse datautfordringer og bidra til strategisk planlegging av datainfrastruktur
- Lede kvalitetssikring og testaktiviteter for dataløsninger
- Veilede og støtte mindre erfarne dataingeniører
- Bidra til å definere tekniske standarder, gjenbrukbare mønstre og løsningsdesign gjennom tekniske gjennomganger
Krav
- Bachelorgrad i informasjonsteknologi eller et beslektet fagområde er påkrevd
- Minst fem års relevant erfaring med data engineering er påkrevd
- Gode ferdigheter i Python, SQL, Spark og orkestreringsverktøy, inkludert Azure Data Factory og/eller Databricks Workflows
- Erfaring med stordata-teknologier og rammeverk for distribuert databehandling, som Hadoop og Spark
- Kunnskap om skybaserte dataplattformer og relaterte tjenester på AWS, Azure eller Google Cloud Platform
- Evne til å etablere og administrere retningslinjer, prosedyrer og standarder for datastyring
- Erfaring med dataintegrasjon gjennom ETL-prosesser, pipelines og rammeverk for datainnhenting
- Evne til å utforme og implementere skalerbare datamodeller
- Forståelse av dataoperasjoner gjennom hele datalivssyklusen
- Evne til å bruke personvernpraksis og administrere tilgangsrettigheter samt samtykkeprotokoller
- God kunnskap om datakvalitetens dimensjoner, metoder og beste praksis
- Kunnskap om personvernregler, cybersikkerhetspraksis og datasikkerhetsteknikker
- Kjennskap til verktøy og praksis for overvåking og observerbarhet
- Forståelse av DevOps-metoder
- Generelle programmeringsferdigheter
- Erfaring med løsninger for metadatastyring
- Kunnskap om NoSQL-databaser
- Kunnskap om sanntidsdatabehandling
Fordeler
- Helse-, syns- og tannforsikring
- Betalt fri
- Arbeidsgivermatching for 401(k)
- Betalt foreldrepermisjon
- Utdanningsrefusjon
- Skjønnsmessig årlig bonus sponset av selskapet