PrePass
PrePass
PrePass предоставляет технологические услуги для коммерческих автопарков по всей Северной Америке, включая объезд весовых станций и электронную оплату дорожных сборов. Решения компании помогают частным автопаркам, перевозчикам общего пользования и владельцам-операторам упростить соблюдение требований на дорогах и администрирование дорожных сборов, одновременно повышая прозрачность операционной деятельности. Компания объединяет широкую сеть объезда весовых станций, несколько технологических решений и поддержку клиентов, помогая транспортным предприятиям управлять эффективностью автопарка, расходом топлива, безопасностью и рисками. Основанная в 1995 году, PrePass работает в сферах логистики, транспорта и консалтинга; в компании трудятся примерно 201–500 сотрудников.

Ведущий инженер данных

Руководите проектированием и развитием облачной платформы данных PrePass на Azure, создавая надёжные конвейеры с Databricks и Delta Lake. Поддерживайте аналитику и операционные процессы в реальном времени для транспортных услуг и управления платными дорогами.

Описание

  • Проектируйте и развивайте основную платформу данных PrePass.
  • Создавайте и эксплуатируйте масштабируемые конвейеры ETL/ELT в Azure, объединяющие данные из разных источников.
  • Используйте SQL, Apache Spark, Databricks и Delta Lake для аналитики, отчётности и задач реального времени.
  • Планируйте и выполняйте модернизацию устаревших процессов SSIS.
  • Руководите проверкой концепций и созданием прототипов, а затем рекомендуйте дальнейшие шаги.
  • Продвигайте разработку через тестирование, парное программирование, постоянный рефакторинг и автоматизированные CI/CD-процессы.
  • Применяйте инструменты с поддержкой ИИ для генерации кода, создания тестов, рефакторинга устаревших систем и обнаружения аномалий в конвейерах.
  • Контролируйте критически важные системы данных по показателям актуальности, доступности и надёжности в соответствии с SLA.
  • Выявляйте и устраняйте проблемы интеграции и качества данных.
  • Обеспечивайте сквозную прослеживаемость и наблюдаемость.
  • Оптимизируйте конвейеры и вычислительные ресурсы с учётом стоимости и масштабирования.
  • Устанавливайте и поддерживайте стандарты инженерии данных и документацию по архитектуре.
  • Добивайтесь постоянных улучшений в Agile-команде.
  • Наставляйте других инженеров.

Требования

  • Подтверждённый опыт проектирования, создания и эксплуатации распределённых конвейеров данных и облачных платформ данных в крупном масштабе.
  • Практический опыт TDD для конвейеров данных, включая модульное и интеграционное тестирование, а также тестирование контрактов данных.
  • Опыт применения практик XP, таких как парная работа, рефакторинг и непрерывная интеграция.
  • Опыт внедрения ИИ-помощников для программирования и инструментов на основе больших языковых моделей в инженерные процессы.
  • Опыт эксплуатации высокодоступных производственных систем с требованиями к доступности, надёжности и наблюдаемости.
  • Опыт разработки инженерных стандартов, проведения архитектурных обзоров, документирования систем и наставничества в Agile-команде.
  • Опыт в области науки о данных или машинного обучения, особенно MLOps, развёртывания моделей, управления Feature Store или разработки признаков в Databricks.
  • Опыт работы с инструментами инфраструктуры как кода, такими как Terraform или Bicep.
  • Знакомство с архитектурами, управляемыми событиями, включая очереди, пакетную обработку и модели публикации/подписки.
  • Опыт эксплуатации Databricks, Delta Lake, PySpark или Spark SQL, Databricks Workflows и Unity Catalog в производственной среде.
  • Опыт работы с большими объёмами данных IoT, телематики или транспорта.

Преимущества

  • Медицинское страхование, стоматологическое обслуживание и страхование зрения доступны с даты приёма на работу.
  • Оплачиваемый отпуск включает отпускные дни, больничные, праздничные и дополнительные выходные дни.
  • План 401(k) с взносами работодателя.
  • Счёт на расходы, связанные с образом жизни, физическим и психологическим благополучием; его оплачивает компания.
  • Программа возмещения расходов на обучение.
  • Дополнительные программы со скидками на юридические услуги и товары для домашних животных — по желанию.
  • Бесплатная программа помощи сотрудникам.
  • Спонсируемая компанией команда по культуре и благополучию поддерживает физическое, психологическое и профессиональное развитие.
  • Инициативы по поддержке местных сообществ.
  • Программы профессионального развития сотрудников.

Похожие вакансии

Cardinal Health

Руководитель инженерии данных в Cardinal Health

Cardinal Health

Руководите командами корпоративной трансформации данных в Cardinal Health, отвечая за платформы Google Cloud, аналитику и операции AI/ML. Направляйте поставку решений, развитие платформ и профессиональный рост сотрудников.

Открыть
Wealth.com

Ведущий инженер данных

Wealth.com

Руководите платформой данных Wealth.com на AWS, используя dbt, Redshift и Airflow. Создавайте надежные системы данных для платформы планирования наследства.

Открыть
American Express

Ведущий инженер данных

American Express

Руководите проектированием и оптимизацией защищённых и отказоустойчивых платформ данных в American Express. Работа охватывает архитектуру баз данных, облачную инженерию, настройку производительности и наставничество инженеров данных.

Открыть
Protiviti

Руководитель направления инженерии данных AWS

Protiviti

Руководите созданием безопасных и масштабируемых платформ данных и конвейеров AWS для клиентов Protiviti. Определяйте архитектуру и работу команд, консультируйте клиентов и развивайте экспертизу фирмы в области инженерии данных AWS.

Открыть
Rackspace Technology

Инженер по данным V (гибридный формат, США)

Rackspace Technology

Руководите стратегией разработки корпоративного хранилища данных, конвейеров и AI/RAG-инфраструктуры в Rackspace Technology. Направляйте инженеров, стандарты поставки, дорожные карты для заинтересованных сторон, операционные метрики и надежность конвейеров.

Открыть