SunnyData — консалтинговая компания в области инженерии данных и искусственного интеллекта, специализирующаяся на Databricks. Сертифицированные специалисты компании по Databricks помогают организациям модернизировать платформы данных, переносить устаревшие корпоративные хранилища данных и озёра данных, а также превращать инициативы в области ИИ, машинного обучения и генеративного ИИ в работающие системы. Компания также поддерживает управление данными и MLOps и обладает отраслевой экспертизой в здравоохранении, финансовых услугах и логистике.
Ведущий архитектор решений, финансовые услуги — удалённая работа в США
Руководите проектированием и внедрением решений на базе Databricks для работы с данными, машинного обучения и ИИ для клиентов. Роль сочетает практическую архитектурную работу, presales-взаимодействие, руководство клиентами и техническое наставничество.
Описание
- Консультировать клиентов по стратегии инженерии данных и архитектуре, уделяя особое внимание решениям Databricks.
- Проектировать, разрабатывать и внедрять платформы данных для ИИ, машинного обучения и бизнес-аналитики.
- Предоставлять стратегические рекомендации по развитию технологий и практик работы с данными.
- Сотрудничать с командами продаж для представления технических решений потенциальным клиентам.
- Курировать несколько клиентских аккаунтов и информировать о ходе и результатах внедрения.
- Разрабатывать архитектуры с применением эффективных практик управления, безопасности и качества данных.
- Оценивать источники данных и рекомендовать те, которые следует интегрировать для улучшения аналитики.
- Поддерживать внутренние команды, наставлять проектные группы и обучать пользователей работе с продуктами данных и аналитическими средами.
- Исследовать проблемы систем и данных, определять их первопричины и внедрять подходящие исправления.
- Проверять конвейеры данных, логику преобразований и связанные компоненты на точность и надёжность.
- Распределять примерно поровну время между практической технической реализацией и presales-работой.
Требования
- Не менее 10 лет практического опыта работы архитектором решений и/или старшим инженером по данным.
- Недавний опыт внедрения решений для работы с данными с использованием Databricks.
- Экспертное знание Spark, Hadoop, Kafka, Databricks, pandas и scikit-learn.
- Глубокое знание моделирования данных, ETL, интеграции данных и современных практик инженерии данных.
- Способность руководить сложными семинарами по исследованию архитектуры и проектированию решений, а также создавать планы реализации.
- Владение Java, Python и/или Scala.
- Опыт работы с AWS, Azure и/или Google Cloud Platform.
- Умение писать, диагностировать и оптимизировать SQL-запросы.
- Отличные навыки письменной и устной коммуникации, включая опыт непосредственной работы с клиентами.
- Умение создавать и проводить подробные технические презентации для клиентов и заинтересованных сторон.
- Опыт разработки подробной документации по решениям, включая доказательства концепции, дорожные карты, диаграммы последовательности, иерархии классов и логические представления систем.
- Способность переводить технические решения в промышленную эксплуатацию с учётом производительности, безопасности, масштабируемости и надёжной интеграции данных.
- Опыт руководства инженерными командами, наставничества и развития сотрудников.
- Степень бакалавра в области компьютерных наук или смежной дисциплине.
- Настоятельно желательно проживание в часовом поясе Pacific Time или на Западном побережье.
- Желательно: знакомство с технологиями распределённого хранения, такими как S3, ADLS, HDFS, GCS, Kudu, Elasticsearch/Solr, Cassandra или другие NoSQL-системы.
- Желательно: опыт работы со Spark, Kafka, StreamSets, Matillion, Fivetran, NiFi, AWS Data Migration Services, Azure Data Factory и IICS.
- Желательно: широкий опыт на всех этапах жизненного цикла разработки программного обеспечения.
- Желательно: опыт автоматизации преобразования и курирования данных с помощью dbt, Spark, Spark Streaming и автоматизированных конвейеров.
- Желательно: опыт работы с инструментами управления рабочими процессами и оркестрации, включая Airflow, AWS Managed Airflow, Luigi и NiFi.
- Желательно: опыт работы в сфере финансовых услуг, в идеале в банковской отрасли.
- Желательно: знание требований и стандартов соответствия ИТ-систем банков.
- Желательно: не менее двух из следующих сертификатов: Associate Developer for Apache Spark, Data Engineer Associate, Professional Data Engineer, Machine Learning Associate или Professional ML Engineer.
Преимущества
- Медицинское страхование для сотрудников и членов семьи, имеющих на него право, начинается с первого дня работы.
- Не менее 20 оплачиваемых дней отпуска в год.
- Девять оплачиваемых корпоративных праздников.
- Возможности профессионального развития и карьерного роста.
- Возможности развивать технические навыки и навыки управления людьми.
- Денежные премии по результатам работы.
- Работа с передовыми технологиями и лидерами отрасли.
- Совместная рабочая среда, ориентированная на командную работу и обмен знаниями.