Vultr е глобална компания за облачна инфраструктура, която предоставя на разработчици и бизнеси изчислителни ресурси, съхранение, мрежови и базови данни услуги при поискване. Платформата ѝ включва виртуални машини, bare-metal сървъри, инфраструктура с GPU ускорение, управлявани бази данни, обектово и блоково съхранение, Kubernetes и приложения от marketplace, готови за внедряване. С поддръжка на AMD и NVIDIA GPU, бързи мрежи и инфраструктура в повече от 32 региона на центрове за данни, Vultr обслужва работни натоварвания в областта на софтуера, изкуствения интелект и високопроизводителните изчисления чрез API, ориентирани към разработчици, и мащабируеми облачни инструменти.
Старши инженер по данни, BigQuery
Изграждайте надеждни потоци от данни в BigQuery и управлявани набори от данни за глобалната облачна инфраструктурна платформа на Vultr. Работете с екипите по инженеринг, бизнес анализ и наука за данните в подкрепа на корпоративните анализи.
Съединени щати155 000 $ – 180 000 $ / година
ДистанционноПълен работен денСтаршиЗадължителен Език: английскиИнженер по данниОписание
- Изграждайте и поддържайте оперативни потоци от данни към BigQuery, като при необходимост използвате инкрементално зареждане и улавяне на промените в данните.
- Създавайте набори от данни bronze, silver и gold, включително споделени бизнес обекти и показатели за отчетност.
- Автоматизирайте проверката на данните и съгласуването между изходните системи и целевите набори от данни.
- Пренасяйте актуализации, изтривания и исторически корекции на изходните данни към последващите набори от данни.
- Следете състоянието на потоците, управлявайте изключенията и промените в схемите и документирайте процедурите за възстановяване и произхода на данните.
- Работете с екипите по бизнес анализ и наука за данните, за да предоставяте документирани и високопроизводителни набори от данни.
- Координирайте се с инженерните екипи и собствениците на бизнес системи за отстраняване на липси в изходните данни и определяне на надеждно предаване на данни.
- Определяйте и прилагайте инженерни стандарти за тестване, внедряване, сигурност и управление на разходите в рамките на договорената корпоративна архитектура.
- Преглеждайте съществуващите потоци и установявайте повтаряеми инженерни практики.
- Предоставяйте продукционни набори от данни за приоритетни нужди на отчетността.
- Въвеждайте първоначални контроли за качество на данните и наблюдение.
- Проверявайте дали историческите корекции на изходните данни се отразяват точно в последващите отчети.
Изисквания
- Най-малко пет години опит в инженеринг на данни, включително отговорност за продукционни потоци.
- Напреднали умения по SQL и добро владеене на Python.
- Продукционен опит с BigQuery, включително разделяне на дялове, клъстериране, производителност на заявките и контрол на разходите.
- Опит с инструменти за трансформация и оркестрация на данни като dbt, Airflow, Cloud Composer, Dagster или еквивалентни.
- Опит с извличане на данни от оперативни бази данни и управление на инкрементално зареждане, актуализации, изтривания, повторно попълване и исторически корекции.
- Добро разбиране на размерното моделиране и проследяването на исторически данни.
- Опит с автоматизирани проверки на качеството на данните, съгласуване, наблюдение, известяване и възстановяване.
- Опит с Git, преглед на код, автоматизирано тестване и CI/CD.
- Умение за работа с екипи по инженеринг, анализи и бизнес.
- Опит с MySQL, ClickHouse, Kafka или Google Pub/Sub.
- Познаване на Parquet, ефективното съхранение и Spark или PySpark.
- Умение за проследяване на дефинициите на данни и бизнес логиката в кода на приложения или ORM; познаването на PHP е предимство.
- Опит със Salesforce, NetSuite, Power BI или сравними системи.
- Познаване на IAM, служебни акаунти, достъп с минимални привилегии и сигурно удостоверяване на работни натоварвания.
- Опит с инструменти за метаданни, произход на данните или наблюдаемост на данните.
- Опит с прилагането на ИИ или автоматизация в операциите на потоци от данни, разследване на инциденти или управляван достъп до данни за LLM приложения.
- Опит в облачната инфраструктура, телекомуникациите, центровете за данни или друга среда с интензивно използване на активи.
Придобивки
- Компанията покрива 100% от застрахователните премии на служителя за медицинска, стоматологична и очна застраховка.
- Съпоставяне на вноските по 401(k) в размер 100% до 4%, с незабавно придобиване на право върху средствата.
- Годишно възстановяване на разходи за професионално развитие до 2 500 $.
- 11 официални празника, платен отпуск с натрупване и възможност за прехвърляне на неизползвания отпуск.
- Допълнителен платен отпуск при третата и десетата годишнина от назначаването.
- Един месец платен творчески отпуск на всеки пет години.
- Годишен бонус за годишнина.
- Стипендия за оборудване на домашен офис от 500 $ през първата година и 400 $ през всяка следваща година.
- Възстановяване на разходи за интернет до 75 $ месечно.
- Възстановяване на разходи за членство във фитнес зала до 50 $ месечно.
- Платен от компанията абонамент за Wellable.