SunnyData
SunnyData
SunnyData to firma konsultingowa specjalizująca się w inżynierii danych i sztucznej inteligencji, koncentrująca się na platformie Databricks. Certyfikowani inżynierowie Databricks pomagają organizacjom modernizować platformy danych, migrować starsze korporacyjne hurtownie danych i jeziora danych oraz przekształcać inicjatywy z zakresu AI, uczenia maszynowego i generatywnej AI w działające systemy. Firma wspiera również zarządzanie danymi i MLOps, a jej eksperci mają doświadczenie branżowe w ochronie zdrowia, usługach finansowych i logistyce.

Starszy architekt rozwiązań Databricks (praca zdalna, Argentyna)

Projektuj i wdrażaj rozwiązania Databricks w obszarze danych, inżynierii danych i AI dla klientów SunnyData. Łącz realizację projektów dla klientów z presales, kierując architekturą, wdrożeniem i współpracą z klientami.

Opis

  • Doradzaj klientom w zakresie inżynierii danych i architektury, koncentrując się na rozwiązaniach Databricks.
  • Równomiernie dziel czas między płatne projekty a zadania presales.
  • Twórz i wdrażaj rozwiązania dla inicjatyw związanych ze sztuczną inteligencją, uczeniem maszynowym i analityką biznesową.
  • Współpracuj z zespołami sprzedaży i prezentuj rozwiązania techniczne potencjalnym klientom.
  • Nadzoruj kilka projektów klientów: śledź postępy, dotrzymuj terminów i raportuj wyniki.
  • Projektuj architekturę danych zgodnie z dobrymi praktykami zarządzania danymi, bezpieczeństwa i jakości.
  • Oceniaj źródła danych i rekomenduj, które dane uwzględnić.
  • Wspieraj zespoły wewnętrzne i mentoruj osoby zaangażowane w projekty.
  • Pomagaj użytkownikom końcowym zrozumieć produkty danych i środowiska analityczne.
  • Diagnozuj problemy z systemami, usuwaj usterki danych i systemów oraz wprowadzaj poprawki.
  • Weryfikuj przepływ danych, kod transformacji i komponenty danych pod kątem dokładności i niezawodności.

Wymagania

  • Co najmniej siedem lat praktycznego doświadczenia na stanowisku architekta rozwiązań i/lub starszego inżyniera danych.
  • Niedawne doświadczenie we wdrażaniu rozwiązań danych, szczególnie z użyciem Databricks.
  • Ekspercka znajomość technologii inżynierii danych, takich jak Spark, Hadoop i Kafka.
  • Ekspercka znajomość platformy Databricks.
  • Znajomość narzędzi do analizy danych i uczenia maszynowego, takich jak pandas i scikit-learn.
  • Zrozumienie kompleksowych procesów analitycznych, w tym modelowania danych, ETL i integracji danych.
  • Umiejętność prowadzenia złożonych warsztatów dotyczących analizy architektury i projektowania rozwiązań.
  • Umiejętność przygotowywania planów architektury do wdrożenia.
  • Biegła znajomość Java, Python i/lub Scala.
  • Doświadczenie z AWS, Azure i/lub Google Cloud Platform.
  • Umiejętność pisania, debugowania i optymalizowania zapytań SQL.
  • Skuteczna komunikacja pisemna i ustna oraz doświadczenie we współpracy bezpośrednio z klientami.
  • Umiejętność przygotowywania i prowadzenia szczegółowych prezentacji.
  • Doświadczenie w tworzeniu dokumentacji rozwiązań, takiej jak weryfikacje koncepcji, mapy drogowe, diagramy sekwencji, hierarchie klas i logiczne widoki systemów.
  • Doświadczenie w kierowaniu zespołami i mentorowaniu inżynierów.
  • Umiejętność wdrażania kompleksowych rozwiązań technicznych do środowiska produkcyjnego z uwzględnieniem wydajności, bezpieczeństwa, skalowalności i niezawodnej integracji danych.
  • Tytuł licencjata lub inżyniera w dziedzinie informatyki lub pokrewnej dyscyplinie inżynierskiej.
  • Wybierz poziom znajomości angielskiego: podstawowy, średnio zaawansowany lub zaawansowany.
  • Mile widziane co najmniej dwa certyfikaty Databricks z następujących: Associate Developer for Apache Spark, Data Engineer Associate, Professional Data Engineer, Machine Learning Associate lub Professional ML Engineer.
  • Mile widziana znajomość rozproszonych systemów przechowywania danych, w tym S3, ADLS, HDFS, GCS, Kudu, ElasticSearch/Solr, Cassandra lub innych systemów NoSQL.
  • Mile widziane doświadczenie z narzędziami do integracji danych, takimi jak Spark, Kafka, Streamsets, Matillion, Fivetran, NiFi, AWS Data Migration Services, Azure DataFactory i IICS.
  • Mile widziane szerokie doświadczenie w całym cyklu życia oprogramowania.
  • Mile widziane doświadczenie w automatycznym przekształcaniu i przygotowywaniu danych z użyciem narzędzi takich jak dbt, Spark, Spark Streaming i zautomatyzowane potoki.
  • Mile widziane doświadczenie z narzędziami do zarządzania przepływami pracy i orkiestracji, w tym Airflow, AWS Managed Airflow, Luigi i NiFi.

Benefity

  • Możliwości rozwoju zawodowego i awansu.
  • Praca z nowoczesnymi technologiami oraz liderami w dziedzinie inżynierii danych i AI.
  • Współpracująca i wspierająca kultura, która zachęca do dzielenia się wiedzą.
  • Równe szanse zatrudnienia.

Powiązane oferty pracy