
Applaudo yra artimosios rinkos programinės įrangos kūrimo įmonė, padedanti organizacijoms modernizuoti technologijas ir skatinti skaitmeninę transformaciją. 2013 m. įkurta įmonė sujungia programinės įrangos inžinerijos ir konsultavimo kompetencijas inovacijų ir naudotojų patirties kūrimo, programėlių kūrimo ir priežiūros, kokybės užtikrinimo, debesijos sprendimų, dirbtinio intelekto, kibernetinio saugumo, duomenų sprendimų ir programėlių modernizavimo srityse. Applaudo aptarnauja klientus sporto, žiniasklaidos ir pramogų, mažmeninės prekybos, vartojimo prekių bei finansinių paslaugų sektoriuose, remdama projektus, gerinančius skaitmeninius produktus, infrastruktūrą ir IT paslaugų teikimą. Įmonė, kurios pagrindinė būstinė yra Ostine, Teksase, o biuras – San Salvadore, suburia 501–1 000 darbuotojų komandą, aptarnaujančią technologijų ir skaitmeninių paslaugų sektoriaus įmones.
Senior Azure Databricks Data Engineer
Build Azure Databricks and Python data pipelines for Applaudo’s AI-powered enterprise solutions. Connect enterprise sources to dependable warehouses and a centralized Data Hub.
Aprašymas
- Build and maintain production data pipelines with Azure Databricks and Python.
- Create scalable data transformations using PySpark or Spark SQL.
- Ingest and process data from APIs, relational databases, cloud storage, and SFTP.
- Bring ticketing, CRM, marketing, retail, and other enterprise platform data into a centralized Data Hub.
- Develop and maintain warehouse structures, dimensional models, and data marts.
- Write, tune, and maintain SQL transformations.
- Add data quality validations and consistency checks.
- Create and maintain outbound data feeds for third-party systems.
- Investigate data discrepancies and resolve pipeline issues.
- Document pipelines, transformation logic, dependencies, and technical processes.
- Work with colleagues and stakeholders to clarify needs, surface risks, and deliver reliable data solutions.
- Share progress, blockers, and possible delays early, and propose next steps.
Reikalavimai
- At least five years of professional data engineering experience.
- Strong practical experience with Azure Databricks.
- Advanced Python skills for data processing, transformation, and pipeline development.
- Solid Apache Spark experience, including PySpark and/or Spark SQL.
- Advanced SQL skills, including complex transformations, data validation, and query performance tuning.
- Strong grounding in data warehousing and dimensional modeling, including facts, dimensions, and data marts.
- Experience connecting REST APIs, relational databases, cloud storage, and SFTP.
- Practical experience with Microsoft Azure data services.
- Experience adding data quality checks and validating consistency between source systems and target models.
- Able to diagnose pipeline failures and investigate data discrepancies.
- Able to work independently, take ownership, and follow engineering and documentation practices.
- Strong English communication skills.
- Able to collaborate effectively with a US-based team.
- SQL workload migration to Azure Databricks experience is a plus.
Privalumai
- Remote work.
- Opportunity to learn quickly and take ownership.
- Work alongside strong teams.
- Investment in modern ways of working.
- Participate in large-scale AI-native transformation.
Susiję darbai
Darbo pasiūlymų nerasta
Pabandykite pakeisti arba išvalyti filtrus, kad rastumėte daugiau galimybių.