DaCodes. — технологическая компания, основанная в 2014 году, которая помогает организациям создавать программное обеспечение и продвигать цифровую трансформацию. Компания предоставляет услуги по разработке продуктов на основе ИИ, обеспечению качества, UX/UI-дизайну, full-stack-разработке и расширению команд за счёт привлечения специалистов. Реализовав более 900 проектов и объединив свыше 220 экспертов, DaCodes. работает в таких сферах, как автомобилестроение, здравоохранение и электронная коммерция, адаптируя технологические решения к операционным потребностям каждой отрасли.
Ведущий инженер по данным Snowflake — удалённая работа в Мексике
Создавайте надёжные и управляемые хранилища данных Snowflake для клиентов DaCodes в сфере разработки ПО и цифровой трансформации. Обеспечивайте отслеживаемые бизнес-инсайты для ИИ-агентов в Мексике и странах Латинской Америки.
Описание
- Создавать конвейеры извлечения данных из SAP ASE (Sybase) и SQL Server через ODBC, используя шаблоны коннекторов Openflow.
- Интегрировать REST API с аутентификацией, обновлением токенов, постраничной выдачей, обработкой ограничений частоты запросов и повторными попытками.
- Загружать файлы и другие источники в хранилище данных, сохраняя исходные данные и время извлечения.
- Поддерживать повторную обработку данных из слоя загрузки без повторного обращения к исходным системам.
- Разрабатывать слои Bronze, Silver и Gold с согласованными измерениями, отслеживанием истории и бизнес-фактами, содержащими сертифицированные метрики.
- Создавать модели и преобразования dbt с декларативными тестами, инкрементальными материализациями и автоматически формируемой документацией.
- Работать с клиентами над созданием стандартизированных эталонных каталогов, объединяющих идентификаторы и названия из разных систем.
- Сотрудничать с инженером по ИИ при разработке семантических моделей, проверенных запросов и глоссария метрик для использования агентами.
- Обеспечивать сквозную отслеживаемость каждого показателя до его источника, таблицы и даты отчётности, а также предоставлять данные через представления для потребителей.
- Внедрять правила контроля качества данных и механизмы карантина для записей, не соответствующих заданным критериям.
- Оркестрировать ночные окна обработки, контролируя выполнение и ведя журналы.
- Сверять слой Gold с актуальными отчётами клиента и документировать расхождения и их причины.
- Управлять потреблением кредитов Snowflake и настраивать средства мониторинга ресурсов.
- Помогать оценивать точность и воспроизводимость ответов, генерируемых ИИ-агентами.
- Внедрять RBAC, политики доступа к строкам и политики маскирования в соответствии с утверждённой клиентом матрицей доступа.
- Обеспечивать, чтобы агенты запрашивали и возвращали только информацию, разрешённую для каждой роли.
- Документировать происхождение данных, работу конвейеров и процедуры повторной обработки.
- Готовить техническую и операционную передачу решения команде клиента.
Требования
- Не менее пяти лет опыта создания промышленных хранилищ данных, включая не менее двух лет работы со Snowflake.
- Продвинутая экспертиза Snowflake: хранилища, RBAC, политики доступа к строкам, маскирование и мониторы ресурсов.
- Продвинутый опыт размерного моделирования, включая согласованные измерения, отслеживание истории и звёздные схемы.
- Продвинутое владение dbt, включая декларативные тесты, инкрементальные материализации и автоматически формируемую документацию.
- Продвинутые знания SQL и опыт извлечения данных из SAP ASE (Sybase) и SQL Server, включая обратное проектирование недокументированных схем.
- Продвинутый опыт загрузки данных из REST API с аутентификацией, постраничной выдачей, контролем частоты запросов и повторными попытками.
- Продвинутый опыт оркестрации конвейеров и внедрения контроля качества данных с карантинными механизмами.
- Средний или продвинутый опыт интеграции моделей LLM с хранилищами данных, включая семантические модели, управляемый text-to-SQL, проверенные запросы, а также оценку точности и воспроизводимости.
- Средний опыт проектирования слоёв данных для агентов с отслеживанием источника и даты отчётности, представлениями для потребителей и контролем кредитов.
- Опыт непосредственной работы с бизнес-пользователями над определением правил, стандартизацией каталогов и проверкой показателей.
- Испанский на родном или профессиональном уровне и английский на среднем уровне, с возможностью понимать техническую документацию.
- Проживание в Мексике или странах Латинской Америки и готовность к полноценной удалённой работе.
- Желательно: опыт работы со Snowflake Intelligence, Cortex Analyst, Cortex Agents, Cortex Search или Snowflake CoCo.
- Желательно: опыт внедрения RAG для неструктурированных документов, интегрированных с хранилищем данных.
- Желательно: опыт работы с Openflow, Dynamic Tables или Snowpark.
- Желательно: опыт работы с нишевыми ERP-системами на базе Sybase или SQL Server.
- Желательно: сертификация SnowPro Core или Advanced.
Преимущества
- Работа с глобальными брендами и инновационными стартапами.
- Удалённая работа из дома.
- График, согласованный с назначенной рабочей ячейкой или проектом.
- Рабочая неделя с понедельника по пятницу.
- Выходной в день рождения.
- Страхование крупных медицинских расходов для сотрудников в Мексике.
- Страхование жизни для сотрудников в Мексике.
- Доступ к курсам и сертификациям.
- Виртуальные мероприятия для командной интеграции и группы по интересам.
- Занятия английским языком.
- Работодатель сертифицирован как Great Place to Work.