Instituto de Pesquisas Eldorado یک مؤسسه پژوهش و توسعه برزیلی است که در سال ۱۹۹۹ تأسیس شد و به سازمان‌ها کمک می‌کند طرح‌های فناوری خود را به محصولات آزمایش‌شده و نوآوری‌های کاربردی تبدیل کنند. فعالیت‌های این مؤسسه شامل صدور گواهی محصولات مخابراتی، آزمایش‌های آزمایشگاهی و مشاوره نوآوری برای بخش‌هایی مانند خودروسازی، سلامت، لجستیک، کشاورزی، انرژی و نفت و گاز است. این مؤسسه همچنین برنامه‌های آموزشی و توانمندسازی ایجاد می‌کند و برای گسترش ظرفیت‌های فناورانه با شرکای صنعتی و پژوهشی همکاری دارد.
تحلیلگر داده – PySpark، SQL و Power BI
برای مرکز تحقیق و توسعه برزیلِ Instituto de Pesquisas Eldorado، خط لوله‌های داده، مدل‌ها و داشبورد بسازید. با PySpark، SQL، Databricks و Power BI کار کنید.
توضیحات
- با استفاده از REST APIها، وب‌اسکرپینگ، رویه‌های قدیمی SQL و فایل‌ها، خط لوله‌های دریافت داده ایجاد و مستقر کنید
- برای سامانه‌هایی که دسترسی مستقیم به پایگاه داده ندارند، در پیاده‌سازی تکثیر فقط‌خواندنی کمک کنید و اثر آن بر عملکرد را در نظر بگیرید
- داده‌ها را با PySpark و SQL تبدیل کنید
- در سنجش هزینه و عملکرد پردازش و تعیین بهینه منابع کمک کنید
- در ساخت لایه‌های داده Bronze، Silver و Gold با معماری مدالیون مشارکت کنید
- خط لوله‌های وب‌اسکرپینگ پایدار، همراه با تشخیص تغییر چیدمان و راهکارهای کاهش مسدودشدن، بسازید
- داده‌های تکراری را حذف و نرمال‌سازی کنید و کیفیت آن‌ها را بسنجید
- در پیاده‌سازی قراردادهای داده و هشدارهای تغییر طرح‌واره برای یکپارچه‌سازی‌های طرف ثالث کمک کنید
- داشبوردها و گزارش‌های Power BI ایجاد کنید
- نیازهای کسب‌وکار را به مدل‌های داده و مصورسازی‌های روشن تبدیل کنید
- سیاست‌های Row-Level Security را مطابق با خط‌مشی‌های RBAC روی گزارش‌ها اعمال کنید
- با dbt آزمون‌های کیفیت داده و تبدیل‌های اعلانی ایجاد کنید
- در پیکربندی قابلیت‌های تحلیل سلف‌سرویس، از جمله Fabric Copilot، کمک کنید
- برای حفظ تبار داده و طبقه‌بندی، با تیم‌های حاکمیت داده همکاری کنید
- مشکلات عملکردی خط لوله‌ها و پرس‌وجوها را پیدا و برطرف کنید
- آزمون‌های پذیرش کاربر را اجرا کنید و بر اساس بازخورد، داشبوردها را بهبود دهید
شرایط لازم
- مدرک کارشناسی در علوم کامپیوتر، مهندسی کامپیوتر، تحلیل سیستم‌ها یا رشته‌ای مرتبط
- تجربه در سطح متوسط در مهندسی داده، Python یا PySpark و SQL
- آشنایی با Databricks یا Spark
- آشنایی با ابزارهای ارکستراسیون مانند Azure Data Factory
- آشنایی با قالب‌های داده تحلیلی مانند Parquet و Delta Lake
- آشنایی با dbt مزیت محسوب می‌شود
- آشنایی با Git و CI/CD برای خط لوله‌های داده
- تجربه یکپارچه‌سازی داده از طریق REST APIها
- آشنایی با روش‌های مصورسازی داده و روایت‌گری با داده
- تجربه کار با منابع متنوع داده، از جمله SQL، APIها، فایل‌ها، Lakehouse و Warehouse
- تجربه پیاده‌سازی Row-Level Security
- تمایل به سفر به سائوپائولو مزیت محسوب می‌شود
- دانش پیشرفته زبان انگلیسی مزیت محسوب می‌شود
مزایا
- فرصت برابر برای همه متقاضیان
- محیط کاری متنوع و فراگیر
- پذیرای متقاضیان دارای معلولیت
- شیوه کار ترکیبی
- فرصت کسب تجربه و مشارکت در پروژه‌های معنادار
- دسترسی به زیرساخت آزمایشگاهی سازمان و پروژه‌های تحقیق و توسعه