A Pattern Bioscience biotechnológiai és egészségügyi vállalat, amely gyors, tenyésztést nem igénylő diagnosztikai módszereket fejleszt gyógyszerrezisztens bakteriális fertőzések kimutatására. Technológiája a mikroorganizmusok egysejtes elemzését gépi tanulással ötvözi, így néhány órán belül klinikailag hasznosítható eredményeket biztosít. Ez segíti az egészségügyi szakembereket abban, hogy hamarabb meghatározzák a megfelelő kezelést. A vállalat munkája az antimikrobiális rezisztencia problémáját kezeli azáltal, hogy gyorsabb és megalapozottabb döntéseket támogat, amelyek javíthatják a betegek kimenetelét és csökkenthetik az elkerülhető egészségügyi költségeket.
Senior adatmérnök, adat és analitika – Pune, hibrid
Vezesse a Pattern Bioscience hirdetésoptimalizálási adatrendszereit, beleértve a feature store-t és a gépi tanulási következtetési munkafolyamatokat. Tartsa fenn a piactéri hirdetési API-k megbízható, minőség-ellenőrzött licit- és költségkeret-frissítéseit.
Leírás
- Hozzon létre, telepítsen és támogasson skálázható, automatizált kötegelt adatfeldolgozási folyamatokat, amelyek változatos forrásokból töltenek adatokat a lakehouse-ba
- Kezelje és fejlessze az Airflow-orkesztrációt napi és 15 perces, több DAG-ot használó munkafolyamatokhoz, beleértve a függőségeket, újrapróbálkozásokat, visszatöltéseket, teljes frissítéseket és a biztonságos újrafuttatásokat
- Fejlesszen és optimalizáljon analitikai SQL-lekérdezéseket széles körű összekapcsolásokkal, ablakfüggvényekkel, inkrementális összeolvasztásokkal, az adattárház méretezésével és lekérdezésprofilozással
- Adjon jellemzőket és címkéket a feature store-hoz, miközben fenntartja a kialakított adatszivárgás-megelőzési és adatteljesítési szabványokat
- Koordinálja a SageMaker-modelltréninget és a kötegelt következtetést Airflow-n keresztül, beleértve az adatkészleteket, az S3- és Parquet-átvitelt, a tanítási lemezképeket, a példányok méretezését, az előrejelzéseket és a metrikákat
- Alakítson ki adatauditálási megközelítéseket, és érvényesítsen blokkoló minőség-ellenőrzéseket a külső írási műveletek előtt
- Diagnosztizálja és oldja meg a nagyléptékű adatfeldolgozási problémákat, vizsgálja ki a hibákat, és vegyen részt az ügyeleti triázsban
- Biztosítsa az idempotenciát, az új adatok észlelését, a műveletek érvényesítését, az érvénytelenítést és a naplózási nyomokat a piactéri frissítésekhez
- Működjön együtt adattudósokkal, hirdetési stratégákkal és platformmérnöki csapatokkal
- Alakítsa át a ROAS-célokat, a költségkeret ütemezését, a playbook-szabályokat és a hirdetési stratégiát megbízható adatmodellekké és adatfolyamatokká
- Vállaljon felelősséget a kijelölt területek adatminőségéért, és koordinálja a problémák megoldását az adatinfrastruktúra-csapatokkal
- Mentorálja az adatmérnököket, biztosítson technikai útmutatást, és vizsgálja felül az SQL- és DAG-módosításokat
Követelmények
- Adattudományi, adatelemzési, információmenedzsment-, számítástechnikai, informatikai vagy kapcsolódó területen szerzett alapfokú diploma, illetve ezzel egyenértékű szakmai tapasztalat
- Legalább négy év teljes szakmai tapasztalat
- Legalább négy év gyakorlati SQL- és Python-fejlesztési tapasztalat, beleértve a haladó SQL-ismereteket
- Legalább három év tapasztalat éles adatfeldolgozási folyamatok létrehozásában modern adatarchitektúrákon
- Legalább két év tapasztalat felhőalapú adattárházakkal, például Snowflake-kel, Amazon Redshifttel vagy BigQueryvel
- Szakmai tapasztalat munkafolyamat-orkesztrátorral; az Airflow kiemelten előnyös
- Tapasztalat gépi tanulási modellek tréningjének és kötegelt következtetésének ütemezésében SageMakeren vagy hasonló platformon
- Az alkalmazott gépi tanulási fogalmak gyakorlati ismerete, beleértve az adatkészletek létrehozását, az adatszivárgást, az értékelési metrikákat és a modell életciklusának üzemeltetését
- Gyakorlati AWS-tapasztalat, beleértve legalább az S3-at és az IAM-et, valamint oszlopos fájlformátumok ismerete
- Bizonyított felelősségvállalás az adatminőségért teszteléssel, monitorozással, riasztásokkal és gyökérok-elemzéssel
- Erős szoftvermérnöki és szkriptelési gyakorlatok, beleértve a verziókezelést, a kódreview-t és a moduláris fejlesztést
- Kiváló kommunikációs és több szakterületet átfogó együttműködési készségek
- Adatmérnöki csapatok vezetésének és mentorálásának képessége
- Előnyt jelent a digitális hirdetési, haladó Snowflake-, idősoradat-, big data-, adatminőség-keretrendszer-, elosztott adatplatform-, további AWS-szolgáltatás-, adatirányítási és MI-kódolóügynök-tapasztalat
Juttatások
- A juttatások közé fizetett szabadság, biztosítás és versenyképes javadalmazás tartozik
- Fizetett szabadság
- Biztosítás