Meltwater предоставя медийна информация и анализ на данни от социалните мрежи, за да помага на бизнеса да следи медийното отразяване, да разбира разговорите на потребителите и да взема решения въз основа на данни за медиите и аудиторията. Платформата обединява медийно наблюдение, прослушване на социалните мрежи, връзки с медиите, инфлуенсър маркетинг и разузнаване на продажбите. Анализите, задвижвани от изкуствен интелект, подпомагат маркетинга и връзките с обществеността. Meltwater обслужва организации, които се ориентират в бързо променящата се медийна среда.
Старши инженер по данни за Snowflake
Изграждайте мащабируеми платформи за данни със Snowflake, които захранват аналитиката, интеграциите, отчетността и приложенията с изкуствен интелект на Meltwater. Свързвайте данни от Salesforce и AWS чрез надеждни потоци от данни.
Описание
- Проектиране и поддръжка на мащабируеми решения за данни в Snowflake.
- Създаване на бази данни, схеми, таблици, изгледи, защитени изгледи, етапи и други обекти в Snowflake.
- Разработване на готови за продукционна среда трансформации със SQL и Snowpark.
- Внедряване на Streams, Tasks, Dynamic Tables и Snowpipe в Snowflake, както и инкрементална обработка и улавяне на промените в данните.
- Подобряване на заявките, складовете, клъстерирането, съхранението, използването на изчислителни ресурси и разходите за платформата.
- Настройване на сигурно споделяне на данни и контрол на достъпа.
- Изграждане на надеждни ETL/ELT потоци за структурирани и полуструктурирани данни.
- Разработване на пакетни, инкрементални, почти реалновременни и управлявани от събития потоци за приемане на данни.
- Свързване на данни от Salesforce, REST API, SaaS приложения, AWS, бази данни и файлове.
- Създаване на повторно използваеми рамки за приемане и трансформиране на данни.
- Управление на промени в схемите, закъсняващи данни, повторни опити, повторно изпълнение, съгласуване и пълнота на данните от източника до целта.
- Изграждане на работни потоци за оркестрация с обработка на зависимостите и управление на отказите.
- Проектиране на измерения, фактологични и измерителни таблици, витрини за данни, подбрани набори от данни и корпоративни модели на данни.
- Определяне на последователни основни бизнес обекти и показатели.
- Създаване на слоеве с данни за аналитика, отчетност, оперативни приложения и работни натоварвания с изкуствен интелект.
- Разработване на потоци за приемане на данни от Salesforce и тяхната инкрементална или CDC синхронизация със Snowflake.
- Изграждане на потоци за данни в AWS със S3, Lambda, SQS, SNS, EventBridge и свързани услуги.
- Осигуряване на сигурно прехвърляне на данни и приемане на файлове, включително подготовка, архивиране, IAM, криптиране, тайни и контрол на достъпа.
- Автоматизиране на проверките за качество на данните, тестването, наблюдението, регистрирането, показателите, известията и оперативните табла.
- Проучване и разрешаване на инциденти с данни в продукционна среда и проследяване на последиците нагоре и надолу по потока.
- Писане на чист, повторно използваем, подлежащ на тестване и поддръжка код.
- Участие в прегледи на архитектурата и кода.
- Поддръжка на техническата документация, съпоставянията на данни и оперативните наръчници.
- Принос към практиките за CI/CD и автоматизираното внедряване.
- Наставничество на инженери по данни и подпомагане на установяването на инженерни стандарти.
Изисквания
- Поне 5 години опит в инженерството на данни.
- Поне 3 години практически опит със Snowflake.
- Напреднали умения за работа със SQL, включително сложни трансформации и оптимизиране на заявки.
- Добри умения за работа с Python за обработка на данни, автоматизация и интеграции с API.
- Опит в изграждането на ETL/ELT потоци за продукционна среда.
- Опит с интегрирането на Snowflake и AWS.
- Опит с приемането на данни от Salesforce или сходни корпоративни SaaS платформи.
- Добро разбиране на моделирането на измерения и съвременната архитектура на данни.
- Опит с инкрементална обработка, CDC и съгласуване на данни.
- Опит с внедряването на рамки за качество и наблюдение на данните.
- Опит с Git, CI/CD и добри практики в софтуерното инженерство.
- Опит със Snowpark.
- Опит със Snowflake Cortex.
- Опит със Streams, Tasks, Dynamic Tables и Snowpipe, както и със сигурно споделяне на данни в Snowflake.
- Опит със Salesforce Bulk API, CDC и Platform Events.
- Опит с AWS Lambda, S3, SQS, SNS, EventBridge и Glue.
- Опит с dbt или подобна рамка за трансформиране на данни.
- Опит с Airflow, Dagster, Prefect или подобна платформа за оркестрация.
- Опит с Terraform или инфраструктура като код.
- Опит с поддръжката на работни натоварвания за AI/ML и RAG от Snowflake.
- Сертификатите за Snowflake са предимство.
Придобивки
- Гъвкав платен отпуск.
- Цялостна здравна застраховка.
- Програми за подкрепа на служителите, обхващащи психично здраве, правни и финансови въпроси, благополучие и поведенчески потребности.
- Безплатен абонамент за CalmApp за служителите и техните близки.
- Хибриден начин на работа.
- Отпуск за семейни причини, който се увеличава с трудовия стаж.
- Приобщаваща общност.
- Постоянни възможности за професионално развитие.