Allata
Allata
Allata е глобална консултантска компания, която помага на организациите да превръщат дигиталната стратегия в практически подобрения на бизнеса. Екипите ѝ работят в областите на стратегията, клиентското изживяване, облачните услуги и технологиите, данните и изкуствения интелект, като подкрепят клиентите в модернизацията, персонализацията и повишаването на оперативната ефективност. Allata обслужва сектори като автомобилната индустрия, здравеопазването, логистиката, финансовите услуги и високите технологии, като се опира на опита на бивши ИТ ръководители и консултантски специалисти за насочване на сложни дигитални инициативи.

Мениджър на платформата за данни Databricks (дистанционно, Тексас)

Ръководете архитектурата и внедряването на Lakehouse платформи и корпоративни хранилища за данни за Allata. Насочвайте изграждането на потоци от данни, сигурността, мащабируемостта и разработването на продукти с данни.

Описание

  • Определяте архитектурата, избора на технологии, референтните модели и плановете за интеграция на Lakehouse платформи и корпоративни хранилища за данни.
  • Създавате концептуални, логически и физически модели за продукти с данни с поддръжка на множество наематели и специфични за даден отрасъл.
  • Стандартизирате слоевете за приемане, съхранение на необработени данни, обработка и предоставяне на данни.
  • Установявате практики за управление на метаданни, каталози, произход на данните, договори за данни и класификация.
  • Определяте мерки за сигурност и съответствие при достъп, маскиране, криптиране, мрежова сегментация и одитиране.
  • Планирате мащабируемостта на платформата, високата наличност, възстановяването след бедствие, капацитета и управлението на разходите.
  • Ръководите избора и интеграцията на Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory или Data Fabric, както и инструменти за оркестрация и мониторинг.
  • Установявате и налагате CI/CD практики за активи с данни, включително тестове, автоматизирани издания и планове за връщане към предишна версия.
  • Определяте подходи за пакетно и потоково приемане на данни, компактиране, разделяне на дялове и съхранение.
  • Установявате стандарти за наблюдаемост на метрики, SLA, табла, журнали, трасета и сигнали.
  • Осигурявате техническо ръководство и менторство на екипите по инженеринг на данни.
  • Преглеждате архитектурата и кода на критични компоненти.
  • Работите със собствениците на продукти с данни и заинтересованите страни от областите сигурност, инфраструктура, BI и ML, за да превърнете изискванията в решения и пътни карти.
  • Създавате, тествате и внедрявате модули за обработка със Spark, PySpark или Scala, Spark SQL и съхранени процедури.
  • Разработвате и оптимизирате потоци от данни в Databricks и платформи за бази данни.
  • Прилагате DevOps практики, инфраструктура като код, CI/CD, автоматизирано тестване и контрол на версиите.
  • Решавате сложни проблеми с качеството на данните, производителността и наличността и движите непрекъснати подобрения.

Изисквания

  • Предишен опит като архитект или технически ръководител на корпоративни платформи за данни.
  • Практически познания за технологиите на Databricks, включително Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader и Structured Streaming.
  • Силни умения със Spark, PySpark и/или Scala, Spark SQL и оптимизация на разпределени задачи.
  • Опит в проектирането на хранилища за данни и Lakehouse платформи.
  • Практически познания за моделите Medallion, Lambda и Kappa.
  • Опит с интеграция на SaaS, ETL или конекторни инструменти като Fivetran.
  • Опит с инструменти за оркестрация като Airflow, Azure Data Factory и Data Fabric.
  • Опит с релационни и хибридни бази данни, включително MS SQL Server, PostgreSQL, Oracle, Azure SQL, AWS RDS/Aurora или еквивалентни решения.
  • Умения за CI/CD на потоци от данни чрез Azure DevOps, GitHub Actions, Jenkins или подобни инструменти.
  • Опит с пакетиране и внедряване на артефакти като .whl файлове и контейнери.
  • Опит с пакетна и потокова обработка, компактиране на файлове, разделяне на дялове и настройка на съхранението.
  • Разбиране на облачната сигурност, IAM/RBAC, криптирането, концепциите за VPC/VNet и облачните мрежи.
  • Познаване на инструменти за наблюдаемост и мониторинг като Prometheus, Grafana, Datadog или вградени облачни услуги.
  • Опитът с автоматизация на CI/CD процеси и разработка с основен клон е предимство.
  • Напредналите умения с PySpark са предимство.
  • Напредналите умения за оптимизация и оркестрация на Spark работни потоци са предимство.
  • Сертификати за Databricks, облачна архитектура или данни са предимство.
  • Умение за идентифициране, диагностициране и решаване на сложни проблеми с данни.
  • Добри умения за сътрудничество и комуникация.
  • Любознателност и отвореност към нови инструменти, технологии и методи.

Придобивки

  • Позиция на пълно работно време.
  • Равни възможности и приобщаваща работна среда.
  • Ангажимент към многообразието.

Свързани работни места

The Athletic

Старши мениджър, анализ на данни

The Athletic

Ръководете анализа на продуктовите данни и растежа в The Athletic, спортна медия. Управлявайте анализатори и използвайте експерименти при решенията за абонаменти и продукти.

Отвори
Lunar Solar Group

Специалист по данни за маркетингови измервания (дистанционно, САЩ)

Lunar Solar Group

Изграждайте модели за атрибуция, измерване на допълнителния ефект и медиен микс за Lunar Solar Group — консултантска компания за растеж и агенция за дигитален маркетинг. Превръщайте анализите в практически препоръки към клиентите за разпределение на бюджета.

Отвори
Airbnb

Старши специалист по данни за изследвания в аналитиката на персонала

Airbnb

Ръководи изследванията в областта на аналитиката на персонала в Airbnb и използва причинно-следствени изводи и статистическо моделиране за решения относно работната сила, възнагражденията, подбора и задържането на служители. Работи със заинтересованите страни по чувствителни анализи и отчетност.

Отвори
The Cigna Group

Старши водещ специалист по данни, дистанционна работа (САЩ)

The Cigna Group

Създавайте многократно използваеми продукти с данни Silver и Gold за здравните услуги на Cigna с Databricks и управлявани MVP и CI/CD процеси. Превръщайте бизнес нуждите в готови за продукционна среда решения и установявайте стандарти в Data Operations.

Отвори
Clear Street

Старши специалист по данни за растеж

Clear Street

Подобрете оценяването, надеждността и безопасността на AI асистента на Clear Street. Ролята подпомага облачна брокерска и търговска платформа за опитни инвеститори.

Отвори