Itix یک شرکت فناوری و مشاوره‌ای برزیلی است که با ارائه پلتفرم‌های نرم‌افزاری سفارشی، تیم‌های توسعه اختصاصی و مشاوره فناوری، به سازمان‌ها کمک می‌کند عملیات خود را مدرن‌سازی کنند. خدمات این شرکت همچنین شامل پشتیبانی و تحلیل داده یا هوش تجاری است و به مشتریان سازمانی امکان می‌دهد فرایندهای خود را بهبود دهند و از داده‌ها مؤثرتر استفاده کنند. Itix با سازمان‌هایی در حوزه‌های صنعت، مالی، بهداشت و درمان، لجستیک، بیمه، انرژی، مواد شیمیایی و معدن همکاری می‌کند و با پشتیبانی تیم‌های پراکنده در سراسر برزیل فعالیت دارد.
مهندس داده میان‌رده در ایتیکس (دورکاری، برزیل)
به‌عنوان مهندس داده به ایتیکس بپیوندید و پایپ‌لاین‌های Lakehouse و راهکارهای RAG بسازید. با Databricks، Delta Lake، embeddingها، کیفیت داده و governance کار کنید.
توضیحات
- در معماری medallion مبتنی بر Delta Lake، با Databricks یا frameworkهای متن‌باز پایپ‌لاین‌های ETL/ELT بسازید
- داده‌های PDF و تصویر را همراه با metadata مرتبط پردازش و استانداردسازی کنید
- داده‌ها را مطابق LGPD برزیل برای RAG، یادگیری few-shot و مجموعه‌داده‌های آزمون گردآوری و ناشناس‌سازی کنید
- indexهای برداری را با chunking، embeddingها، به‌روزرسانی افزایشی و کنترل نسخه توسعه دهید و نگهداری کنید
- برای سنجش دقت و benchmarking، مجموعه‌داده‌های golden نسخه‌بندی‌شده ایجاد کنید
- ماندگاری حلقه بازخورد را طراحی کنید و داده را در اختیار Quality و SLA Dashboard قرار دهید
- پایگاه‌های داده را به سرویس‌های inference و APIهای خارجی متصل کنید و هم‌زمان عملکرد، هزینه، پایش و هشدارها را مدیریت کنید
- workflowها را از طریق Jobs، پایپ‌لاین‌های CI/CD و آزمون کیفیت داده خودکار کنید
شرایط لازم
- تسلط پیشرفته بر Python و SQL
- تجربه در data modeling و معماری‌های medallion یا Lakehouse
- تجربه ساخت پایپ‌لاین‌های داده بدون ساختار برای PDF، تصویر و متن، از جمله آماده‌سازی برای RAG
- آشنایی با پایگاه‌های داده برداری و embeddingهایی مانند Databricks Vector Search یا pgvector
- تجربه در کیفیت داده، آزمون و کنترل نسخه
- تجربه عملی Databricks با Delta Lake، Workflows یا Jobs، notebookها، PySpark و Spark SQL
- تجربه کار با Git و CI/CD
- تجربه کار در Azure، AWS یا GCP
- دانش LGPD و مدیریت داده‌های حساس
- تجربه Unity Catalog در محیطی تحت governance
- تجربه کار با MLflow، Databricks Model Serving یا Mosaic AI
- تجربه کار با Delta Live Tables یا Lakeflow و Auto Loader
- تجربه در حوزه بیمه یا خدمات مالی
- تجربه کار با Terraform یا Databricks Asset Bundles
- گواهی Databricks Data Engineer Associate یا Professional
مزایا
- انعطاف جغرافیایی برای کار از مکانی که بیشترین تناسب را با پروژه دارد
- همکاری‌های تخفیفی
- برنامه پاداش ارجاع کارکنان
- مرخصی روز تولد
- دسترسی به TotalPass یا Gympass
- طرح‌های سلامت و تندرستی
- دسترسی به فضاهای استراحت دفتر با beanbag، میز بیلیارد، بازی‌های ویدیویی، lounge، آشپزخانه کاملاً مجهز و قهوه