RELX opracowuje rozwiązania analityczne i narzędzia wspierające podejmowanie decyzji na podstawie informacji dla klientów biznesowych i profesjonalnych na całym świecie. Jego produkty łączą specjalistyczne treści, dane i technologie, pomagając podejmować lepsze decyzje i osiągać lepsze wyniki w obszarach zarządzania ryzykiem, informacji naukowej, technicznej i medycznej, prawa oraz działalności wystawienniczej. RELX działa również na rynkach doradztwa, ochrony zdrowia i ubezpieczeń, pomagając organizacjom zwiększać produktywność, zarządzać ryzykiem, rozwijać badania, wspierać pracę prawną i skuteczniej przeprowadzać transakcje biznesowe.
Starszy inżynier oprogramowania, inżynieria danych — RELX, praca stacjonarna w Chennai
Twórz potoki danych Azure i HPCC dla LexisNexis Risk Solutions. Rozwijaj skalowalne platformy wspierające analitykę ryzyka, raportowanie i potrzeby operacyjne związane z danymi.
Opis
- Tworzyć i utrzymywać skalowalne potoki ETL i ELT z użyciem Azure Data Factory, Databricks oraz usług magazynowania Azure
- Ładować dane z relacyjnych baz danych, interfejsów API i źródeł plikowych do platform danych Azure
- Przekształcać dane na HPCC za pomocą ECL oraz w Azure za pomocą Spark SQL i PySpark przez Azure Databricks
- Rozwijać, utrzymywać i ulepszać notatniki oraz zadania Azure Databricks
- Tworzyć wydajne obciążenia Spark do przetwarzania dużych zbiorów danych
- Tworzyć modele danych na HPCC za pomocą ECL oraz w Delta Lake, Parquet i innych formatach kolumnowych
- Optymalizować obciążenia ECL, SQL i Spark pod kątem wydajności i skalowalności
- Współpracować z analitykami biznesowymi, specjalistami ds. danych i zespołami aplikacyjnymi, aby doprecyzowywać potrzeby dotyczące danych i rozwijać praktyki inżynieryjne
- Rozwijać i udoskonalać niezawodne, skalowalne i bezpieczne korporacyjne platformy oraz potoki danych
- Dostarczać rozwiązania danych na potrzeby analityki, raportowania i zastosowań operacyjnych
Wymagania
- Potwierdzona znajomość SQL i logiki transformacji danych
- Praktyczna znajomość zasad hurtowni danych oraz wzorców ETL/ELT
- Praktyczne doświadczenie z Azure Databricks, Spark SQL i PySpark
- Doświadczenie z Azure Data Factory, Azure Data Lake Storage Gen2 oraz Azure SQL lub Synapse
- Doświadczenie w pracy z dużymi ustrukturyzowanymi i częściowo ustrukturyzowanymi zbiorami danych
- Znajomość zwinnych praktyk tworzenia oprogramowania
- Konstruktywne podejście i gotowość do nauki nowych narzędzi oraz procesów
- Znajomość cyklu życia tworzenia oprogramowania — od wymagań i projektowania przez implementację, testowanie i wdrożenie po utrzymanie
- Znajomość zasad inżynierii oprogramowania, wzorców projektowych i najlepszych praktyk tworzenia oprogramowania
- Umiejętność zbierania, doprecyzowywania i dokumentowania wymagań
- Bardzo dobre umiejętności komunikacji pisemnej i ustnej
- Skuteczne umiejętności analityczne i rozwiązywania problemów
- Znajomość terminologii ubezpieczeniowej
Benefity
- Świadczenia różnią się w zależności od kraju pracownika
- Wsparcie w zakresie zakwaterowania lub dostosowań podczas procesu rekrutacji