Visa on ülemaailmne maksetehnoloogiaettevõte, mis teenindab tarbijaid, kaupmehi, finantsasutusi ja valitsusi oma elektrooniliste maksete võrgu kaudu. Selle platvorm toetab krediit-, deebet- ja ettemaksutehinguid ning pakub maksete töötlemist, pettuste ennetamist, turvalisust, analüütikat ja muid teenuseid tarbijatele ja ettevõtetele. Visa arendab ka uusi makselahendusi, sealhulgas tehisintellekti abil toimiva kaubanduse algatusi, ning toetab Visa Foundationi kaudu finantsilist kaasatust.
Vanemandmeinsener, andmejärv (kaugtöö Brasiilias)
Loo ja halda Visа ettevõtte andmejärve jaoks Sparki, Databricksi ja Airflow’ torujuhtmeid. Paranda andmekvaliteeti ja töövoogude orkestreerimist ning taga usaldusväärne iseteeninduslik juurdepääs andmetele.
Kirjeldus
- Arenda, testi ja halda PySparki ja SparkSQL-i abil Databricksi andmete laadimise, teisendamise ja andmekvaliteedi torujuhtmeid.
- Loo ja uuenda MWAA Airflow’ DAG-e andmetöövoogude orkestreerimiseks.
- Kirjuta ja optimeeri SQL-i teisendus- ja valideerimisülesannete jaoks.
- Rakenda ja jälgi andmekvaliteedi kontrolle Great Expectationsi või samaväärse tööriistaga.
- Osale koodi vastastikustes ülevaatustes.
- Lahenda torujuhtmete tõrkeid ja andmekvaliteedi probleeme vanemandmeinseneride toel.
- Loo ja uuenda andmekogumite ning torujuhtmete dokumentatsiooni.
- Osale sprindi planeerimises, töömahu hindamises ja retrospektiivides.
- Rakenda meeskonna CI/CD-, testimis- ja haldusstandardeid.
- Aita tugevdada Visa ettevõtte andmejärve töökindlust ja kvaliteeti.
Nõuded
- Asu Brasiilias.
- Suhtled inglise keeles vähemalt B2-tasemel (ülemine kesktase).
- Sul on vähemalt 3 aastat asjakohast töökogemust ja bakalaureuse- või rakenduskõrghariduse tasemel kraad või vähemalt 5 aastat asjakohast töökogemust.
- Kasutad Pythonit automatiseerimiseks ja andmetöötluseks.
- Mõistad pakkandmetöötluse torujuhtmeid ning ETL/ELT-mustreid.
- Tunned Apache Sparki põhialuseid, sealhulgas PySparki või SparkSQL-i.
- Töötad Databricksi tööde, töövoogude ja klastrite halduse ning jõudluse häälestamisega.
- Kasutad kesktaseme või edasijõudnud SQL-i, sealhulgas ühendusi, aknafunktsioone ja CTE-sid.
- Mõistad Amazon S3 andmejärvede ülesehitust, sealhulgas partitsioneerimist, paigutust ja elutsükli haldust.
- Tunned AWS-i põhikontseptsioone, sealhulgas S3-e, IAM-i ja CloudWatchi.
- Mõistad dimensiooni- või Kimballi modelleerimist ning medallion-kihi arhitektuure.
- Kasutad Git/GitHubi töövooge ja osaled koodiülevaatustes.
- Kasuks tuleb Delta Lake’i, Apache Airflow’/MWAA, CDC-mustrite, andmekvaliteedi põhimõtete, Terraformi aluste või BI-integratsiooni, näiteks Superseti ja juhtpaneelide, kogemus.
Hüved
- Kaugtöö võimalus.
- Võimalus avaldada mõju suures mastaabis.
- Tööalane areng ja oskuste täiendamine tähendusliku töö kaudu.
- Kaugtöötajatel võib olla eelnevalt kokku lepitud ja ette teatatud võimalusi töötada Visa kontoris.