Ang Instituto de Pesquisas Eldorado ay isang institusyon ng pananaliksik at pagpapaunlad sa Brazil na itinatag noong 1999. Tinutulungan nito ang mga organisasyon na gawing mga nasubukang produkto at praktikal na inobasyon ang kanilang mga inisyatiba sa teknolohiya. Kabilang sa mga gawain nito ang sertipikasyon ng mga produktong pangtelekomunikasyon, pagsusuri sa laboratoryo, at pagkonsulta sa inobasyon para sa mga sektor tulad ng automotive, pangangalagang pangkalusugan, logistics, agrikultura, enerhiya, at langis at gas. Bumubuo rin ang institusyon ng mga programa sa pagsasanay at edukasyon at nakikipagtulungan sa mga katuwang sa industriya at pananaliksik upang mapalawak ang mga kakayahang teknolohikal.
Data Analyst – PySpark, SQL at Power BI
Bumuo ng mga data pipeline, modelo, at dashboard para sa sentro ng R&D sa Brazil ng Instituto de Pesquisas Eldorado. Gumamit ng PySpark, SQL, Databricks, at Power BI.
Paglalarawan
- Gumawa at mag-deploy ng mga ingestion pipeline gamit ang REST API, web scraping, mga legacy na SQL procedure, at file
- Tumulong sa pagpapatupad ng read-only replication para sa mga sistemang walang direktang access sa database, habang isinasaalang-alang ang epekto sa performance
- I-transform ang data gamit ang PySpark at SQL
- Tumulong sa pag-benchmark ng gastos at performance sa pagproseso at sa mahusay na pagtukoy ng laki ng mga resource
- Tumulong bumuo ng mga layer ng data na Bronze, Silver, at Gold gamit ang medallion architecture
- Bumuo ng matatag na mga scraping pipeline na nakakakita ng pagbabago sa layout at nakababawas sa pag-block
- Mag-alis ng mga duplicate at mag-normalize ng data, at subukan ang kalidad nito
- Tumulong sa pagpapatupad ng mga data contract at alerto sa pagbabago ng schema para sa mga third-party integration
- Gumawa ng mga Power BI dashboard at report
- Isalin ang mga pangangailangan ng negosyo tungo sa mga data model at malinaw na visualization
- Ilapat ang Row-Level Security sa mga report alinsunod sa mga patakaran ng RBAC
- Gumawa ng mga pagsusuri sa kalidad ng data at mga deklaratibong transformation gamit ang dbt
- Tumulong mag-configure ng mga feature para sa self-service analytics, kabilang ang Fabric Copilot
- Makipagtulungan sa mga team ng data governance para mapanatili ang lineage at classification
- Hanapin at ayusin ang mga isyu sa performance ng mga pipeline at query
- Magsagawa ng user acceptance test at pagandahin ang mga dashboard batay sa feedback
Mga Kinakailangan
- Bachelor’s degree sa Computer Science, Computer Engineering, Systems Analysis, o kaugnay na larangan
- Karanasang pang-mid-level sa data engineering, Python o PySpark, at SQL
- Pamilyaridad sa Databricks o Spark
- Pamilyaridad sa mga orchestration tool gaya ng Azure Data Factory
- Pamilyaridad sa mga analytical data format gaya ng Parquet at Delta Lake
- Bentahe ang kaalaman sa dbt
- Pamilyaridad sa Git at CI/CD para sa mga data pipeline
- Karanasan sa pag-integrate ng data sa pamamagitan ng REST API
- Kaalaman sa mga gawain sa data visualization at data storytelling
- Karanasan sa pagtatrabaho sa iba’t ibang data source, kabilang ang SQL, API, file, Lakehouse, at Warehouse
- Karanasan sa pagpapatupad ng Row-Level Security
- Bentahe ang kahandaang bumiyahe sa São Paulo
- Bentahe ang advanced na Ingles
Mga Benepisyo
- Pantay na oportunidad para sa lahat ng kandidato
- Iba-iba at inklusibong lugar ng trabaho
- Tumatanggap ng mga kandidatong may kapansanan
- Hybrid na setup ng trabaho
- Mga oportunidad na magkaroon ng karanasan at mag-ambag sa mahahalagang proyekto
- Access sa imprastraktura ng laboratoryo at mga proyekto ng R&D ng organisasyon