Marathon Petroleum Corporation е енергийна компания, която развива дейност в областта на рафинирането, мидстрийм операциите и търговията на дребно. Нейната рафинерийна мрежа включва 13 рафинерии в САЩ с обявен капацитет за преработка на до 3 милиона барела суров петрол дневно. Компанията развива и операции, свързани с възобновяеми горива, наред с традиционното си енергийно портфолио, като се фокусира върху повишаването на енергийната ефективност и намаляването на въглеродните емисии.
Старши инженер по данни - Marathon Petroleum, Сан Антонио, Тексас
Ръководете проектирането на мащабируеми Azure конвейери за данни и облачни решения в подкрепа на операциите на Marathon Petroleum. Ще оформяте архитектурата на данните, ще укрепвате управлението и сигурността и ще наставлявате други инженери.
Описание
- Изграждате, развивате и оптимизирате мащабируеми конвейери за данни и облачни решения за данни
- Прилагате Azure Data Lake, Synapse Analytics, Azure Functions и Databricks в инициативи за инженеринг на данни
- Партнирате си със заинтересовани страни от аналитиката, продуктите, архитектурата, управлението и бизнеса, за да превръщате изискванията в мащабируеми решения
- Проектирате и подобрявате работни потоци за извличане, приемане и трансформация на данни
- Разработвате архитектура на данни за сложни набори от данни с голям обем
- Доставяте усъвършенствани конвейери за данни, като прилагате контроли за сигурност и поверителност на данните
- Изпълнявате сложни задачи за качеството и обработката на данни с помощта на технологии с отворен код и облачни технологии
- Предоставяте специализирана техническа поддръжка по време на критични инциденти
- Координирате работата между отделите, за да поддържате надеждна интеграция на данни
- Непрекъснато подобрявате практиките за обработка на данни, като насърчавате последователността и инженерните стандарти
- Решавате сложни предизвикателства, свързани с данните, и допринасяте за стратегическото планиране на инфраструктурата за данни
- Ръководите дейностите по осигуряване на качеството и тестване на решения за данни
- Обучавате и подкрепяте по-малко опитни инженери по данни
- Помагате за определянето на инженерни стандарти, шаблони за повторна употреба и проекти на решения чрез технически прегледи
Изисквания
- Изисква се бакалавърска степен по информационни технологии или сродна дисциплина
- Изискват се поне пет години релевантен опит в инженеринг на данни
- Отлични умения с Python, SQL, Spark и инструменти за оркестрация, включително Azure Data Factory и/или Databricks Workflows
- Опит с технологии за големи данни и рамки за разпределени изчисления като Hadoop и Spark
- Познания за облачни платформи за данни и свързаните услуги в AWS, Azure или Google Cloud Platform
- Способност за създаване и управление на политики, процедури и стандарти за управление на данните
- Опит с интегриране на данни чрез ETL процеси, конвейери и рамки за приемане на данни
- Способност за проектиране и внедряване на мащабируеми модели на данни
- Разбиране на операциите с данни през целия жизнен цикъл на данните
- Способност за прилагане на практики за поверителност на данните и управление на права за достъп и протоколи за съгласие
- Задълбочени познания за измеренията, методите и най-добрите практики за качество на данните
- Познания за регламентите относно поверителността на данните, практиките за киберсигурност и техниките за защита на данните
- Познаване на инструменти и практики за мониторинг и наблюдаемост
- Разбиране на методите на DevOps
- Общи умения по програмиране
- Опит с решения за управление на метаданни
- Познания за NoSQL бази данни
- Познания за обработка на данни в реално време
Придобивки
- Здравно, зрително и стоматологично покритие
- Платен отпуск
- Съответстващи вноски от работодателя по 401(k)
- Платен родителски отпуск
- Възстановяване на разходи за образование
- Дискреционен годишен бонус, финансиран от компанията