State Street
State Street
State Street ni kampuni ya kimataifa ya huduma za kifedha inayowahudumia wawekezaji wa taasisi kupitia suluhisho za usimamizi wa uwekezaji na huduma za uwekezaji. Huduma zake zinajumuisha usimamizi wa mali, huduma za uhifadhi wa mali, na utafiti wa uwekezaji, zikisaidiwa na utaalamu katika fedha, teknolojia ya kifedha na benki. Kampuni inalenga kuwasaidia wateja kudhibiti shughuli changamano za uwekezaji kwa kutumia data, maarifa na uwezo wa kiutendaji ulioundwa ili kuboresha ufanisi na kusaidia kufanya maamuzi ya kifedha.

Mhandisi wa Data, Makamu wa Rais Msaidizi - Princeton, NJ

Jenga majukwaa ya lakehouse ya AWS na Databricks yanayosaidia shughuli za kisheria na uzingatiaji wa State Street. Tengeneza mabomba ya data yanayosimamiwa kwa ajili ya uchanganuzi, ripoti, na programu za AI/ML.

Maelezo

  • Jenga na udumishe mabomba ya data yanayoweza kupanuka kwa kutumia PySpark, Python, na Spark SQL
  • Tengeneza na boresha mtiririko wa kazi wa ETL/ELT wa Databricks kwa kutumia Delta Lake
  • Tekeleza usanifu wa lakehouse wa Bronze, Silver, na Gold kwa majukwaa ya data ya biashara
  • Simamia Databricks Jobs, Workflows, na Notebooks kwa mzigo wa kazi wa batch na streaming
  • Unda mifumo inayoweza kutumiwa tena kwa uingizaji, uchakataji, na upangaji wa data
  • Weka mzigo wa kazi wa data kwenye kontena kwa Docker na uendeshe michakato kiotomatiki kupitia uandishi wa skripti
  • Unganisha mabomba ya Databricks na Power Apps na Power Automate
  • Wasilisha data kwa watumiaji wa biashara kupitia API, viunganishi, na seti za data zilizoratibiwa
  • Buni na boresha usanifu wa lakehouse wa Databricks
  • Unganisha SQL Server, Oracle, na vyanzo vingine vya data vya biashara
  • Tumia uundaji wa vipimo, ugawaji, na mbinu za uboreshaji
  • Chakata miundo iliyopangwa na isiyopangwa kikamilifu ikiwemo JSON na Parquet
  • Boresha utendaji kupitia caching, indexing, na uboreshaji wa Spark
  • Chapisha seti za data zilizoratibiwa kwa mtiririko wa kazi wa Power BI, Power Apps, na Power Automate
  • Dumisha ubora wa data kwa majaribio ya kitengo, mifumo ya uthibitishaji, na ukaguzi wa kiotomatiki
  • Fuatilia na tatua mzigo wa kazi na mabomba ya Spark yaliyosambazwa
  • Chunguza kumbukumbu na suluhisha masuala ya uzalishaji katika Databricks na mazingira ya wingu
  • Dumisha mfuatano wa data, uthabiti, na utayari wa ukaguzi
  • Shirikiana na timu za Sheria, Usalama, Uzingatiaji, na Data ya Biashara
  • Geuza mahitaji ya biashara kuwa suluhisho za uhandisi wa data
  • Kuwa mtaalamu wa Databricks na usanifu wa lakehouse
  • Ongoza mipango kwa kujitegemea na uwajibikie matokeo ya kazi
  • Saidia usimamizi kwa kutumia Databricks Unity Catalog na vidhibiti vya AWS IAM na KMS
  • Timiza mahitaji ya faragha ya data, udhibiti, usalama, na ukaguzi
  • Dumisha vidhibiti vya ufikiaji na viwango vya uainishaji na ushughulikiaji wa data
  • Fanya kazi na timu za IAM na usalama kulinda ufikiaji wa data
  • Buni na udumishe mabomba ya CI/CD kwa Harness, Azure DevOps, au GitHub
  • Otomatisha usambazaji wa vipengee vya Databricks kwa Databricks Repos na CLI
  • Fuatilia, panga, na boresha mtiririko wa kazi kwa zana za upangaji za Databricks
  • Dumisha nyaraka za usanifu, mtiririko wa data, na runbook
  • Boresha utendaji, uwezo wa kupanuka, na ufanisi wa gharama wa jukwaa

Mahitaji

  • Shahada ya kwanza au ya uzamili katika sayansi ya kompyuta, uhandisi wa data, mifumo ya habari, au taaluma ya kiufundi inayohusiana
  • Angalau miaka 8 ya uzoefu katika uhandisi wa data au uundaji wa majukwaa ya data
  • Utaalamu wa vitendo katika Databricks na Apache Spark
  • Uwezo katika PySpark, Python, na SQL
  • Uzoefu wa huduma za data za AWS ikiwemo S3, Glue, Lambda, na IAM
  • Uzoefu wa Delta Lake na usanifu wa lakehouse
  • Ujuzi thabiti wa uchakataji wa data uliosambazwa
  • Ujuzi thabiti wa mifumo ya ETL na ELT
  • Ujuzi thabiti wa mbinu za uundaji wa data
  • Uzoefu wa vitendo na vipengele vya Databricks kama Delta Lake, Workflows, na Unity Catalog
  • Uzoefu mpana wa kujenga mabomba ya batch na streaming ya mwisho hadi mwisho kwa AWS na Databricks
  • Uelewa wa uboreshaji wa utendaji wa Spark na Delta Lake
  • Uzoefu wa kusaidia mzigo wa kazi wa uchanganuzi, ripoti, au AI/ML kwenye jukwaa la lakehouse
  • Ujuzi wa usimamizi wa data, usimamizi wa metadata, na vidhibiti vya usalama
  • Uzoefu katika Sheria, Uzingatiaji, Huduma za Kifedha, au sekta nyingine zinazodhibitiwa
  • Uelewa wa dhana za data za kisheria ikiwemo mikataba, vifungu, wajibu, na masuala
  • Uzoefu wa uchakataji wa data isiyopangwa au mabomba ya hati na NLP
  • Uzoefu na Power BI, Power Apps, au Power Platform
  • Uzoefu wa kusimamia data nyeti katika mazingira yanayoendeshwa na ukaguzi

Manufaa

  • Mpango wa akiba ya kustaafu wa 401(k) wenye mchango unaolingana kutoka kwa kampuni
  • Chaguo za bima ikiwemo maisha ya msingi, matibabu, meno, macho, ulemavu wa muda mrefu, na huduma nyingine za hiari
  • Likizo yenye malipo ikiwemo likizo ya kawaida, muda wa ugonjwa, ulemavu wa muda mfupi, na majukumu ya malezi ya familia
  • Mpango wa Msaada kwa Wafanyakazi
  • Malipo ya motisha yenye kustahiki tuzo za kila mwaka zinazotegemea utendaji
  • Kustahiki mipango teule ya akiba yenye manufaa ya kodi
  • Fursa jumuishi za maendeleo ya kitaaluma
  • Msaada unaonyumbulika wa uwiano wa kazi na maisha
  • Siku za kujitolea zenye malipo
  • Mitandao ya wafanyakazi