Marathon Petroleum Corporation — енергетична компанія, що працює у сферах нафтопереробки, транспортування й зберігання сировини та нафтопродуктів, а також роздрібної торгівлі. Її переробна мережа охоплює 13 нафтопереробних заводів у США із заявленою сукупною потужністю переробки до 3 мільйонів барелів сирої нафти на добу. Компанія також розвиває виробництво відновлюваного палива поряд із традиційними напрямами енергетичного бізнесу, зосереджуючись на підвищенні енергоефективності та скороченні викидів вуглецю.
Провідний інженер із даних — Marathon Petroleum, Сан-Антоніо, Техас
Керуйте розробленням масштабованих конвеєрів даних Azure і хмарних рішень для підтримки операцій Marathon Petroleum. Формуйте архітектуру даних, посилюйте керування даними й безпеку та наставляйте інших інженерів.
Опис
- Створювати, удосконалювати й оптимізувати масштабовані конвеєри даних і хмарні рішення на основі даних
- Застосовувати Azure Data Lake, Synapse Analytics, Azure Functions і Databricks у проєктах з інженерії даних
- Співпрацювати з фахівцями з аналітики, продукту, архітектури, керування даними та бізнесу, щоб перетворювати вимоги на масштабовані рішення
- Проєктувати й удосконалювати процеси вилучення, завантаження та перетворення даних
- Розробляти архітектуру даних для складних наборів даних великого обсягу
- Створювати складні конвеєри даних із застосуванням засобів захисту даних і забезпечення конфіденційності
- Виконувати складні завдання з якості та обробки даних за допомогою відкритих і хмарних технологій
- Надавати спеціалізовану технічну підтримку під час критичних інцидентів
- Координувати роботу між підрозділами для підтримання надійної інтеграції даних
- Постійно вдосконалювати методи обробки даних, підтримуючи узгодженість та інженерні стандарти
- Розв’язувати складні завдання, пов’язані з даними, і брати участь у стратегічному плануванні інфраструктури даних
- Керувати забезпеченням якості та тестуванням рішень для роботи з даними
- Навчати й підтримувати менш досвідчених інженерів із даних
- Допомагати визначати інженерні стандарти, повторно використовувані шаблони та проєктні рішення під час технічних перевірок
Вимоги
- Потрібен ступінь бакалавра в галузі інформаційних технологій або суміжній дисципліні
- Потрібно щонайменше п’ять років відповідного досвіду в інженерії даних
- Впевнене володіння Python, SQL, Spark та інструментами оркестрації, зокрема Azure Data Factory та/або Databricks Workflows
- Досвід роботи з технологіями великих даних і фреймворками розподілених обчислень, як-от Hadoop і Spark
- Знання хмарних платформ даних і пов’язаних сервісів AWS, Azure або Google Cloud Platform
- Уміння розробляти й адмініструвати політики, процедури та стандарти керування даними
- Досвід інтеграції даних за допомогою процесів ETL, конвеєрів і фреймворків завантаження
- Здатність проєктувати й упроваджувати масштабовані моделі даних
- Розуміння операцій із даними протягом усього життєвого циклу даних
- Уміння застосовувати практики конфіденційності даних і керувати правами доступу та протоколами згоди
- Глибокі знання вимірів, методів і найкращих практик якості даних
- Знання нормативних вимог щодо конфіденційності даних, практик кібербезпеки та методів захисту даних
- Знайомство з інструментами й практиками моніторингу та спостережуваності
- Розуміння методів DevOps
- Загальні навички програмування
- Досвід роботи з рішеннями для керування метаданими
- Знання баз даних NoSQL
- Знання обробки даних у реальному часі
Переваги
- Медичне, офтальмологічне та стоматологічне страхування
- Оплачувана відпустка
- Внески роботодавця до плану 401(k)
- Оплачувана відпустка для батьків
- Компенсація витрат на освіту
- Щорічний дискреційний бонус за рахунок компанії