SunnyData
SunnyData
SunnyData — консалтинговая компания в области инженерии данных и искусственного интеллекта, специализирующаяся на Databricks. Сертифицированные специалисты компании по Databricks помогают организациям модернизировать платформы данных, переносить устаревшие корпоративные хранилища данных и озёра данных, а также превращать инициативы в области ИИ, машинного обучения и генеративного ИИ в работающие системы. Компания также поддерживает управление данными и MLOps и обладает отраслевой экспертизой в здравоохранении, финансовых услугах и логистике.

Старший архитектор решений Databricks (удалённо, Аргентина)

Проектируйте и внедряйте решения на базе Databricks для работы с данными, инженерии данных и ИИ для клиентов SunnyData. Сочетайте работу с клиентами и пресейл, руководя архитектурой, внедрением и взаимодействием с заказчиками.

Описание

  • Консультируйте клиентов по вопросам инженерии данных и архитектуры, уделяя особое внимание решениям Databricks.
  • Равномерно распределяйте время между оплачиваемыми проектами и задачами пресейла.
  • Создавайте и внедряйте решения для инициатив в области ИИ, машинного обучения и бизнес-аналитики.
  • Сотрудничайте с отделами продаж и представляйте технические решения потенциальным клиентам.
  • Курируйте несколько клиентских проектов: отслеживайте ход работ, соблюдение сроков и результаты.
  • Проектируйте архитектуру данных с учётом надлежащих практик управления данными, безопасности и качества.
  • Оценивайте источники данных и рекомендуйте, какие данные следует включить.
  • Помогайте внутренним командам и наставляйте участников проектов.
  • Помогайте конечным пользователям разбираться в продуктах данных и аналитических средах.
  • Выявляйте проблемы систем, устраняйте дефекты данных и систем, а также вносите корректирующие изменения.
  • Проверяйте перемещение данных, код преобразования и компоненты данных на точность и надёжность.

Требования

  • Не менее семи лет практического опыта работы архитектором решений и/или старшим инженером данных.
  • Недавний опыт внедрения решений для работы с данными, особенно на платформе Databricks.
  • Экспертное знание технологий инженерии данных, таких как Spark, Hadoop и Kafka.
  • Экспертное знание платформы Databricks.
  • Знание инструментов для анализа данных и машинного обучения, таких как pandas и scikit-learn.
  • Понимание аналитических процессов от начала до конца, включая моделирование данных, ETL и интеграцию данных.
  • Умение проводить сложные сессии по анализу архитектуры и проектированию решений.
  • Умение разрабатывать архитектурные схемы для внедрения.
  • Знание Java, Python и/или Scala на профессиональном уровне.
  • Опыт работы с AWS, Azure и/или Google Cloud Platform.
  • Умение писать, отлаживать и оптимизировать запросы SQL.
  • Навыки письменного и устного общения, опыт непосредственной работы с клиентами.
  • Умение готовить и проводить подробные презентации.
  • Опыт подготовки документации по решениям, например подтверждений концепции, дорожных карт, диаграмм последовательностей, иерархий классов и логических представлений систем.
  • Опыт руководства командами и наставничества инженеров.
  • Умение доводить технические решения до промышленной эксплуатации с учётом производительности, безопасности, масштабируемости и надёжной интеграции данных.
  • Степень бакалавра в области компьютерных наук или смежной инженерной дисциплины.
  • Укажите уровень владения английским языком: базовый, средний или продвинутый.
  • Приветствуется наличие как минимум двух сертификатов Databricks из числа следующих: Associate Developer for Apache Spark, Data Engineer Associate, Professional Data Engineer, Machine Learning Associate или Professional ML Engineer.
  • Приветствуется знание распределённых систем хранения данных, включая S3, ADLS, HDFS, GCS, Kudu, ElasticSearch/Solr, Cassandra или другие системы NoSQL.
  • Приветствуется опыт работы с инструментами интеграции данных, такими как Spark, Kafka, Streamsets, Matillion, Fivetran, NiFi, AWS Data Migration Services, Azure DataFactory и IICS.
  • Приветствуется широкий опыт работы на всех этапах жизненного цикла разработки программного обеспечения.
  • Приветствуется опыт автоматизированного преобразования и подготовки данных с помощью таких инструментов, как dbt, Spark, Spark Streaming и автоматизированные конвейеры.
  • Приветствуется опыт работы с инструментами управления рабочими процессами и оркестрации, включая Airflow, AWS Managed Airflow, Luigi и NiFi.

Преимущества

  • Возможности профессионального развития и карьерного роста.
  • Работа с современными технологиями и ведущими специалистами в области инженерии данных и ИИ.
  • Сотрудничающая и поддерживающая культура, в которой принято делиться знаниями.
  • Равные возможности при трудоустройстве.

Похожие вакансии

Toolbox

Архитектор коммерческих решений

Toolbox

Разрабатывайте SaaS-решения для Toolbox — поставщика технологий для онлайн-телевидения. Связывайте отделы продаж и разработки через презентации для клиентов, проработку проектов и подготовку ответов на запросы RFI и RFP.

Открыть