EatClub е австралийска технологична компания в сферата на храните и напитките, която управлява потребителско приложение и платформа за ресторантски предложения и храна за вкъщи на намалени цени. Платформата свързва хората с оферти от ресторанти и барове, валидни за ограничен период, включително предложения за ранно хранене, пиковите часове и късни вечери, като спестяванията се прилагат чрез дигитална предплатена карта Mastercard на EatClub. Потребителите могат да откриват оферти, да правят резервации и да поръчват храна за вкъщи, а партньорските обекти използват услугата, за да запълват свободния си капацитет и да изграждат по-предвидими приходи. EatClub обединява технологии за платформи, динамично ценообразуване, резервации, поръчки и интегрирани плащания в една платформа, обслужваща австралийския сектор на хотелиерството и ресторантьорството.
Инженер на платформа за данни – хибридна работа в Австралия
Ще изграждате и управлявате lakehouse платформата на EatClub в Databricks и надеждни потоци от данни. Работата ви ще подпомага анализа, науката за данните, управлението на данните и по-добрите решения в разрастваща се технологична компания за ресторанти.
Описание
- Разработване и изпълнение на зареждане в бронзовия слой чрез интеграции с източници, CDC потоци и API на трети страни
- Управление на промени в схемите, обратно зареждане и повторно възпроизвеждане на данни
- Поемане на отговорност за оркестрацията, включително графици, зависимости, повторни опити, известия и SLA за наборите от данни
- Укрепване на CI/CD чрез разработка, базирана на основния клон, валидиране на pull request-и, контролни точки за внедряване и последователно прехвърляне между средите
- Администриране на управлението на платформата чрез права за достъп, проследимост на данните, тагове, контроли на ниво редове и колони и сигурно външно споделяне
- Подобряване на разходите и пропускателната способност чрез правилно оразмеряване на складове и клъстери и настройване на партиционирането, клъстерирането и инкременталната обработка
- Създаване на контроли за качество и наблюдаемост на данните за актуалност, обем и схема, с известия при грешки и анализ на първопричините
- Осигуряване на възможност анализаторите и специалистите по данни да използват платформата самостоятелно
- Партньорство с екипите по анализ и наука за данните, които разчитат на платформата за модели и табла
- Използване на AI инструменти за ускоряване на разработката, тестването, миграциите и прегледа на кода
Изисквания
- Доказана способност за писане и оптимизиране на SQL за продукти с търговски мащаб
- Напреднали умения по Python
- Практически опит в изграждането и експлоатацията на продукционни потоци от данни в облачни платформи за данни
- Опит с инструменти за оркестрация и планиране като Databricks Workflows, Airflow, Dagster или сравними системи
- Опит в диагностицирането и възстановяването на неуспешни нощни задачи
- Опит с ефективното приемане на данни от вътрешни API и инструменти на трети страни при запазване на строга цялост на данните
- Силна основа в Git, CI/CD, разработката на основния клон, тестването и по-широките практики на софтуерното инженерство
- Удобство при работа в модел на разработка, ориентиран към AI, с Claude Code, агентни работни процеси и AI през ежедневния цикъл на разработка
- Опитът с Databricks и dbt Core е предимство
- Познаването на AWS е предимство
- Опитът с оптимизиране на разходите и производителността на Spark или Databricks, включително партициониране, liquid clustering и оразмеряване на складове, е предимство
- Опитът със streaming или CDC технологии като Structured Streaming, Debezium или Delta Live Tables е предимство
- Опитът с прилагането на практики за качество на данните, сигурност и документация е предимство
- Опитът с провеждането на експерименти с AI и LLM е предимство
Придобивки
- Отстъпки за служители и ваучери за хранене, които могат да се използват чрез EatClub
- Незадължителен ваучер на стойност 5 USD за потребители, които използват EatClub за първи път, с код ECAPPLY5; участието не влияе на кандидатстването или процеса на интервю
- Среда с приоритет на AI, с Claude Code чрез Anthropic Enterprise, както и агентни и асинхронни работни процеси
- Възможност за принос към lakehouse платформа в Databricks
- Малък екип с широки отговорности и голямо въздействие
- Бързо изпълнение, подкрепено от седмична обратна връзка