Grupo Criatto Rh
Grupo Criatto Rh
Grupo Criatto Rh — бразильская консалтинговая и обучающая компания в сфере управления персоналом, помогающая организациям создавать более эффективные и современные процессы работы с сотрудниками. Компания предлагает услуги аутсорсинга HR-функций, привлечения талантов, подбора специалистов в сфере технологий, поиска руководителей и человекоцентричного отбора, а также развивает лидерские навыки в рамках Criatto Academy. Кроме того, компания поддерживает процессы адаптации новых сотрудников, наставничество, развитие бренда работодателя, формирование ценностного предложения для сотрудников, бенчмаркинг заработных плат, а также внедрение OKR и KPI для повышения вовлечённости, качества лидерства и эффективности организации.

Инженер данных среднего уровня

Создавайте ETL- и ELT-конвейеры и архитектуры озёр данных в AWS для консалтинговой компании в сфере цифровой трансформации. Повышайте качество данных, надёжность рабочих систем и эффективность облачных затрат.

Описание

  • Создавайте и оптимизируйте ETL- и ELT-конвейеры.
  • Интегрируйте данные из разных источников, обеспечивая их качество, безопасность и надёжность.
  • Разрабатывайте и поддерживайте озёра данных, хранилища данных и архитектуры lakehouse.
  • Моделируйте данные и оркестрируйте рабочие процессы.
  • Контролируйте рабочие системы.
  • Повышайте производительность облачной инфраструктуры и контролируйте расходы.
  • Участвуйте в миграциях и подготовке технической документации.
  • Вносите вклад в процессы CI/CD.
  • Сотрудничайте с командами разных направлений.
  • Самостоятельно выполняйте проекты средней сложности.
  • Консультируйте младших коллег по техническим вопросам.

Требования

  • Пишите сложные SQL-запросы и оптимизируйте их.
  • Используйте Python для инженерии данных, включая PySpark, Pandas, Boto3 и NumPy.
  • Имейте опыт работы с сервисами AWS или знание таких сервисов, как S3, Glue, Glue Data Catalog, Athena, Redshift, Lambda, Step Functions, RDS и DynamoDB.
  • Используйте Apache Airflow и dbt для оркестрации и преобразования данных.
  • Понимайте принципы размерного моделирования, реляционных баз данных и NoSQL.
  • Знайте концепции архитектур озёр данных, хранилищ данных и lakehouse.
  • Понимайте основы Git, pull-запросов, проверки кода, тестирования на pytest и CI/CD.
  • Контролируйте системы с помощью CloudWatch и применяйте средства защиты на базе IAM, KMS и Secrets Manager.
  • Знайте основы миграции данных, инфраструктуры как кода с Terraform или CloudFormation и машинного обучения.
  • Будет преимуществом опыт работы с Kafka, Kinesis, MSK, CDC, Databricks, Delta Lake, Apache Iceberg или Hudi, Docker, Kubernetes, продвинутым Terraform, наблюдаемостью, управлением данными и их происхождением, AWS DMS или SCT, Power BI или QuickSight, а также интеграцией моделей машинного обучения.
  • Самостоятельно выполняйте проекты средней сложности.
  • Эффективно общайтесь и анализируйте информацию вместе с техническими и бизнес-командами.
  • Уделяйте приоритетное внимание качеству, производительности и надёжности данных.

Похожие вакансии

Global TI

Ведущий инженер данных (гибридный формат, Бразилия) в Global TI

Global TI

Создавайте конвейеры данных и архитектуру платформы данных компании. Обеспечивайте надежную, управляемую и масштабируемую аналитику, BI и продукты на основе данных.

Открыть
Cadmus Soluções em TI

Старший технический руководитель по инженерии данных

Cadmus Soluções em TI
1 001 – 5 000 Сотрудники
КонсалтингЛогистикаМаркетинг

Руководите командами инженеров данных и работой над распределённой архитектурой. Развивайте масштабируемые облачные платформы данных, принимайте технические решения, наставляйте коллег и ведите высоконагруженные проекты.

Открыть