Instituto de Pesquisas Eldorado ni taasisi ya utafiti na maendeleo nchini Brazil iliyoanzishwa mwaka 1999. Inasaidia mashirika kubadilisha mipango ya teknolojia kuwa bidhaa zilizojaribiwa na ubunifu wa vitendo. Kazi zake zinajumuisha uthibitishaji wa bidhaa za mawasiliano, majaribio ya maabara, na ushauri wa ubunifu kwa sekta kama vile magari, huduma za afya, usafirishaji na uhifadhi, kilimo, nishati, pamoja na mafuta na gesi. Taasisi hiyo pia huandaa programu za mafunzo na elimu na hushirikiana na washirika wa viwanda na utafiti ili kuimarisha uwezo wa kiteknolojia.
Mchambuzi wa Data – PySpark, SQL na Power BI
Jenga mabomba ya data, miundo na dashibodi kwa kituo cha R&D nchini Brazil cha Instituto de Pesquisas Eldorado. Fanya kazi na PySpark, SQL, Databricks na Power BI.
Maelezo
- Unda na upeleke mabomba ya kuingiza data kwa kutumia REST API, uchotaji data kwenye wavuti, taratibu za zamani za SQL na faili
- Saidia kutekeleza urudufishaji wa kusoma pekee kwa mifumo isiyo na ufikiaji wa moja kwa moja wa hifadhidata, ukizingatia athari kwa utendaji
- Badilisha data kwa kutumia PySpark na SQL
- Saidia kutathmini gharama na viwango vya utendaji wa uchakataji na kuweka ukubwa bora wa rasilimali
- Saidia kujenga tabaka za data za Bronze, Silver na Gold kwa kutumia usanifu wa medallion
- Jenga mabomba imara ya uchotaji data yanayotambua mabadiliko ya mpangilio na kupunguza kuzuiwa
- Ondoa marudio na sanifisha data, na ujaribu ubora wake
- Saidia kutekeleza mikataba ya data na arifa za mabadiliko ya schema kwa miunganisho ya wahusika wengine
- Unda dashibodi na ripoti za Power BI
- Geuza mahitaji ya biashara kuwa miundo ya data na taswira zilizo wazi
- Tumia Row-Level Security kwenye ripoti kulingana na sera za RBAC
- Unda majaribio ya ubora wa data na mabadiliko ya deklarativi kwa kutumia dbt
- Saidia kusanidi vipengele vya uchanganuzi wa kujihudumia, ikiwemo Fabric Copilot
- Fanya kazi na timu za usimamizi wa data kudumisha lineage na uainishaji
- Tafuta na urekebishe matatizo ya utendaji katika mabomba na hoja za data
- Fanya majaribio ya kukubaliwa na watumiaji na kuboresha dashibodi kwa kuzingatia maoni
Mahitaji
- Shahada ya kwanza katika Sayansi ya Kompyuta, Uhandisi wa Kompyuta, Uchambuzi wa Mifumo au taaluma inayohusiana
- Uzoefu wa kiwango cha kati katika uhandisi wa data, Python au PySpark, na SQL
- Uelewa wa Databricks au Spark
- Uelewa wa zana za upangaji kazi kama Azure Data Factory
- Uelewa wa miundo ya data za uchanganuzi kama Parquet na Delta Lake
- Maarifa ya dbt ni faida
- Uelewa wa Git na CI/CD kwa mabomba ya data
- Uzoefu wa kuunganisha data kupitia REST API
- Maarifa ya mbinu za taswira ya data na usimulizi wa data
- Uzoefu wa kufanya kazi na vyanzo mbalimbali vya data, ikiwemo SQL, API, faili, Lakehouse na Warehouse
- Uzoefu wa kutekeleza Row-Level Security
- Utayari wa kusafiri kwenda São Paulo ni faida
- Ujuzi wa Kiingereza wa kiwango cha juu ni faida
Manufaa
- Fursa sawa kwa wagombea wote
- Mahali pa kazi penye utofauti na ushirikishwaji
- Wagombea wenye ulemavu wanakaribishwa
- Mpangilio wa kazi mseto
- Fursa za kujenga uzoefu na kuchangia miradi yenye umuhimu
- Ufikiaji wa miundombinu ya maabara ya shirika na miradi ya R&D