Meltwater tarjoaa mediaseurantaa ja sosiaalisen median data-analytiikkaa, joiden avulla yritykset voivat seurata medianäkyvyyttä, ymmärtää kuluttajakeskusteluja ja tehdä media- ja yleisödataan perustuvia päätöksiä. Sen alusta kokoaa yhteen mediaseurannan, sosiaalisen kuuntelun, mediasuhteet, vaikuttajamarkkinoinnin ja myynnin tietopalvelut. Tekoälypohjaiset oivallukset tukevat markkinointia ja viestintää. Meltwater palvelee organisaatioita nopeasti muuttuvassa mediaympäristössä.
Senior Snowflake -data-insinööri
Rakenna skaalautuvia Snowflake-dataympäristöjä Meltwaterin analytiikkaan, integraatioihin, raportointiin ja tekoälysovelluksiin. Yhdistä Salesforcen ja AWS:n data luotettavilla tietoputkilla.
Kuvaus
- Suunnittele ja ylläpidä skaalautuvia dataratkaisuja Snowflakessa.
- Luo tietokantoja, skeemoja, tauluja, näkymiä, suojattuja näkymiä, väliaikaisia tallennusalueita ja muita Snowflake-objekteja.
- Kehitä tuotantokäyttöön valmiita muunnoksia SQL:llä ja Snowparkilla.
- Toteuta Snowflake Streams-, Tasks-, Dynamic Tables- ja Snowpipe-toiminnot sekä inkrementaalinen käsittely ja muutostietojen tallennus.
- Tehosta kyselyitä, virtuaalivarastoja, klusterointia, tallennustilaa ja laskentatehon käyttöä sekä vähennä alustan kustannuksia.
- Määritä tietojen suojattu jakaminen ja käyttöoikeuksien hallinta.
- Rakenna toimintavarmoja ETL/ELT-tietoputkia rakenteiselle ja puolirakenteiselle datalle.
- Kehitä eräajoon perustuvia, inkrementaalisia, lähes reaaliaikaisia ja tapahtumapohjaisia tiedonkeruun tietoputkia.
- Yhdistä dataa Salesforcesta, REST-rajapinnoista, SaaS-sovelluksista, AWS:stä, tietokannoista ja tiedostoista.
- Luo uudelleenkäytettäviä tiedonkeruun ja muunnosten viitekehyksiä.
- Hallinnoi skeemamuutoksia, myöhässä saapuvaa dataa, uudelleenyrityksiä, toistoa, täsmäytystä sekä lähde- ja kohdejärjestelmien tietojen kattavuutta.
- Rakenna orkestroinnin työnkulkuja, joissa käsitellään riippuvuudet ja virhetilanteet.
- Suunnittele dimensiomalleja, faktatauluja ja dimensiotauluja, datamarketteja, kuratoituja tietoaineistoja ja yritystason datamalleja.
- Määritä yhdenmukaiset keskeiset liiketoimintakohteet ja mittarit.
- Luo datatasoja analytiikkaa, raportointia, operatiivisia sovelluksia ja tekoälykuormia varten.
- Kehitä Salesforcen tiedonkeruun sekä inkrementaaliset tai CDC-synkronointitietoputket Snowflakeen.
- Rakenna AWS:n tietoputkia S3:lla, Lambdalla, SQS:llä, SNS:llä, EventBridgellä ja niihin liittyvillä palveluilla.
- Suojaa tiedonsiirto ja tiedostojen käsittely, mukaan lukien väliaikainen tallennus, arkistointi, IAM, salaus, salaisuuksien hallinta ja käyttöoikeudet.
- Automatisoi datan laatutarkistukset, testaus, valvonta, lokitus, mittarit, hälytykset ja operatiiviset koontinäytöt.
- Tutki ja ratkaise tuotantoympäristön datahäiriöitä sekä jäljitä niiden vaikutukset aiempiin ja myöhempiin järjestelmiin.
- Kirjoita selkeää, uudelleenkäytettävää, testattavaa ja ylläpidettävää koodia.
- Osallistu arkkitehtuuri- ja koodikatselmointeihin.
- Ylläpidä teknistä dokumentaatiota, datakuvauksia ja käyttöohjeita.
- Edistä CI/CD-käytäntöjä ja automaattisia käyttöönottoja.
- Tue Data Engineereiden ammatillista kehittymistä ja auta määrittämään teknisiä standardeja.
Vaatimukset
- Vähintään viiden vuoden kokemus data engineering -tehtävistä.
- Vähintään kolmen vuoden käytännön kokemus Snowflakesta.
- Edistynyt SQL-osaaminen, mukaan lukien monimutkaiset muunnokset ja kyselyiden optimointi.
- Vahva Python-osaaminen datankäsittelyssä, automatisoinnissa ja API-integraatioissa.
- Kokemusta tuotantotason ETL/ELT-tietoputkien rakentamisesta.
- Kokemusta Snowflaken integroinnista AWS:n kanssa.
- Kokemusta datan keräämisestä Salesforcesta tai vastaavista yritystason SaaS-alustoista.
- Vahva ymmärrys dimensiomallinnuksesta ja modernista data-arkkitehtuurista.
- Kokemusta inkrementaalisesta käsittelystä, CDC:stä ja datan täsmäytyksestä.
- Kokemusta datan laatu- ja valvontakehysten käyttöönotosta.
- Kokemusta Gitistä, CI/CD:stä ja ohjelmistokehityksen parhaista käytännöistä.
- Kokemusta Snowparkista.
- Kokemusta Snowflake Cortexista.
- Kokemusta Streams-, Tasks-, Dynamic Tables- ja Snowpipe-toiminnoista sekä suojatusta tietojen jakamisesta.
- Kokemusta Salesforce Bulk APIsta, CDC:stä ja Platform Eventsistä.
- Kokemusta AWS Lambdasta, S3:sta, SQS:stä, SNS:stä, EventBridgestä ja Gluesta.
- Kokemusta dbt:stä tai vastaavasta muunnoskehyksestä.
- Kokemusta Airflow’sta, Dagsterista, Prefectistä tai vastaavasta orkestrointialustasta.
- Kokemusta Terraformista tai infrastruktuurin hallinnasta koodina.
- Kokemusta Snowflaken tukemista tekoäly- ja koneoppimistyökuormista sekä RAG-ratkaisuista.
- Snowflake-sertifikaatit katsotaan eduksi.
Edut
- Joustava palkallinen vapaa-aika.
- Kattava sairausvakuutus.
- Henkilöstön tukiohjelmat, jotka kattavat mielenterveyden, oikeudelliset ja taloudelliset asiat, hyvinvoinnin sekä käyttäytymiseen liittyvät tarpeet.
- Maksuton CalmApp-tilaus työntekijöille ja heidän läheisilleen.
- Hybridityöjärjestely.
- Työsuhteen keston myötä pitenevä perhevapaa.
- Yhteisö, johon kaikki ovat tervetulleita.
- Jatkuvia ammatillisen kehittymisen mahdollisuuksia.