Keep IT Simple
Keep IT Simple
Keep IT Simple (KIS) — поставщик ИТ-услуг и решений из Кремниевой долины, обслуживающий организации по всей Калифорнии и за её пределами. Основанная в 1988 году компания помогает клиентам решать сложные технологические задачи в области кибербезопасности, виртуализации, облачных решений и консалтинга по сетевой инфраструктуре. Компания работает с представителями таких отраслей, как логистика, здравоохранение и кибербезопасность, уделяя особое внимание практичным ИТ-рекомендациям, экономичным решениям и оперативному обслуживанию клиентов.

Старший инженер данных Databricks, платформы ИИ

Создавайте платформы данных на Databricks и в облаке для международной компании в сфере страхования и управления активами. Поддерживайте управляемую аналитику, машинное обучение и решения на основе генеративного ИИ.

Описание

  • Создавайте и поддерживайте масштабируемые конвейеры и продукты данных с помощью Databricks, Spark, Python и SQL.
  • Создавайте и улучшайте пакетные, потоковые и интеграции в реальном времени между корпоративными и сторонними источниками.
  • Внедряйте архитектуры Databricks Lakehouse с Delta Lake и шаблонами Medallion.
  • Создавайте продукты данных для аналитики, прогнозного моделирования, машинного обучения и генеративного ИИ.
  • Работайте с специалистами по данным и инженерами ИИ, подготавливая, преобразуя данные и обеспечивая управление ими для задач ИИ и машинного обучения.
  • Создавайте конвейеры разработки признаков и поддерживайте процессы жизненного цикла машинного обучения.
  • Создавайте решения для RAG, векторного и семантического поиска, а также приложений на базе больших языковых моделей.
  • Повышайте производительность заданий Spark, нагрузок SQL и платформ данных, оптимизируя масштабирование и затраты.
  • Внедряйте контроль качества данных, наблюдаемость, отслеживание происхождения, управление и мониторинг.
  • Соблюдайте стандарты конфиденциальности данных, безопасности и ответственного применения ИИ.
  • Поддерживайте CI/CD, инфраструктуру как код и DataOps на всей платформе данных.
  • Наставляйте младших инженеров и укрепляйте грамотные инженерные практики.
  • Сотрудничайте со специалистами по данным, инженерами ИИ, архитекторами и представителями бизнеса, создавая надежные продукты данных с контролируемым управлением.
  • Поддерживайте корпоративные инициативы в области ИИ и генеративного ИИ с помощью надежных, безопасных платформ данных с контролируемым управлением.

Требования

  • Степень бакалавра в области информатики, информационных систем, инженерии, математики или смежной дисциплины.
  • Не менее 7 лет опыта в инженерии данных, разработке ETL или создании крупномасштабных платформ данных.
  • Не менее 3 лет практического опыта работы с Databricks и Apache Spark.
  • Уверенное владение Python и SQL, опыт распределенной обработки данных.
  • Опыт создания облачных озер данных, хранилищ и архитектур Lakehouse.
  • Опыт поддержки инициатив в области ИИ, машинного обучения или расширенной аналитики.
  • Знание моделирования данных, управления данными и корпоративного управления данными.
  • Опыт создания и оптимизации крупномасштабных конвейеров в AWS, Azure или Google Cloud.
  • Опыт работы с Databricks Delta Lake, Unity Catalog, Delta Live Tables, MLflow, Mosaic AI и Databricks Workflows.
  • Практический опыт работы с генеративным ИИ, большими языковыми моделями, RAG, векторными базами данных или приложениями на базе ИИ.
  • Знакомство с LangChain, Semantic Kernel, OpenAI API, Hugging Face или аналогичными инструментами.
  • Опыт работы с хранилищами признаков, конвейерами обучения моделей и MLOps.
  • Опыт работы с Kafka, Event Hub или другими потоковыми технологиями.
  • Предпочтительны сертификат Databricks Certified Data Engineer Professional или эквивалентный сертификат облачной платформы.
  • Экспертные знания инженерии платформы Databricks.
  • Опыт разработки на Apache Spark.
  • Экспертные знания инженерии данных для ИИ и машинного обучения.
  • Опыт создания решений для работы с данными в генеративном ИИ.
  • Опыт работы с архитектурой Lakehouse.
  • Экспертные знания моделирования данных и хранилищ данных.
  • Экспертные знания управления данными и безопасности.
  • Опыт обеспечения наблюдаемости данных и надежности систем.
  • Опыт работы с облачными платформами данных AWS или Azure.
  • Опыт работы с DataOps, CI/CD и автоматизацией.
  • Опыт технического руководства и наставничества.

Преимущества

  • Сотрудничество в качестве независимого подрядчика (PJ).
  • Гибридный график: три дня в неделю в офисе в районе Пиньейрус, Сан-Паулу.

Похожие вакансии

PRIME AGENCY M&M

Удалённый стажёр по маркетингу (студент университета)

PRIME AGENCY M&M

Помогайте с социальными сетями, брендингом и продвижением мероприятий в берлинском бутиковом агентстве PRIME AGENCY M&M, получая практический опыт во время учёбы в университете.

Открыть
Deep Blue Recruitment

Старший юрист по вопросам конфиденциальности — GDPR и ИИ

Deep Blue Recruitment

Консультируйте международную технологическую компанию по вопросам GDPR, ИИ и защиты данных в коммерческой деятельности. Развивайте систему управления конфиденциальностью, договорную работу и управление рисками в Германии и на международных рынках.

Открыть
hurra.com™

Старший менеджер по Google Ads и поисковой рекламе

hurra.com™

Руководите международными кампаниями Google Ads и поисковой рекламой в hurra.com — немецком агентстве цифрового маркетинга с фокусом на эффективности. Разрабатывайте стратегии роста на основе данных, используя автоматизацию, отслеживание и ИИ.

Открыть
FINN Design

Студент на позиции Motion и графического дизайнера для платной рекламы в соцсетях

FINN Design

Создавайте моушн-графику, редактируйте пользовательский контент и готовьте рекламу для соцсетей FINN — модного стартапа, специализирующегося на инновационном нижнем белье. Разрабатывайте графику для интернет-магазина и рекламные материалы бренда.

Открыть
HealthCaters

Медсестра выездных медицинских обследований на предприятиях

HealthCaters

Проводите забор венозной крови и медицинские обследования сотрудников HealthCaters на предприятиях по всей Германии. Иногда могут быть доступны разовые выездные задания в других странах Европы.

Открыть
Active Nutrition International GmbH

Старший специалист по закупкам в Active Nutrition International (гибридный формат, Германия)

Active Nutrition International GmbH

Координируйте работу с поставщиками, материалами, договорами, переговорами и аудитами для производства спортивного питания. Поддерживайте экономичные запуски продуктов и бесперебойные поставки совместно с командами компании.

Открыть
Active Nutrition International GmbH

Старший специалист по закупкам упаковки и сырья

Active Nutrition International GmbH

Руководить операционными закупками упаковки и сырья в компании спортивного питания: работать с поставщиками, вести переговоры и анализировать рынок. Отвечать за связанные с этим аудиторские процессы, а также поддерживать запуск новых продуктов и проекты по повышению эффективности затрат.

Открыть
B

Младший специалист по контролю качества колл-центра — удалённо, Перу

BH Partner S.A.C.

Контролируйте общение операторов колл-центра с клиентами телекоммуникационной компании, уделяя особое внимание звонкам по переносу номера. Отмечайте критические замечания и помогайте операторам исправлять ошибки общения и соблюдать стандарты качества.

Открыть
Booming Games

Ведущий Ruby-разработчик серверной части, удалённо в Европе

Booming Games

Создавайте и развивайте серверную инфраструктуру на Ruby для онлайн-казино Booming Games. Работайте над наблюдаемостью, автоматизированным тестированием, масштабируемостью и производительностью при высоких нагрузках.

Открыть
B

Оператор колл-центра службы поддержки клиентов Claro (работа в офисе)

BH Partner S.A.C.

Общайтесь с клиентами Claro, ранее обращавшимися в службу поддержки Partner Service, рассказывайте о подходящих преимуществах, акциях и улучшениях услуг. Работа проходит в офисе в Лиме; предусмотрено шестидневное обучение.

Открыть