Imaginary Cloud היא חברה לפיתוח תוכנה ולעיצוב חוויית משתמש וממשקים, הפועלת בתחומי תוכנה כשירות (SaaS), פתרונות עסקיים בין חברות (B2B) ופרויקטים רחבים יותר של פיתוח תוכנה. מאז 2010, צוותי החברה תכננו, פיתחו, השיקו והרחיבו יותר מ-300 יישומי ווב ומובייל. באמצעות משרדיה בפורטוגל ובבריטניה, החברה משלבת פיתוח מוצרים עם גישה ממוקדת באדם לטכנולוגיה, ומקדמת סביבת עבודה המבוססת על כבוד, אכפתיות ולמידה מתמשכת. Imaginary Cloud מציעה גם הזדמנויות לעבודה מרחוק לאנשים המעוניינים לתרום למוצרים דיגיטליים בתחומי העיצוב וההנדסה.
מהנדס/ת נתונים בכיר/ה – Databricks ו-PySpark
פיתוח עומסי נתונים ב-Databricks וב-PySpark עבור המוצרים הדיגיטליים של Imaginary Cloud. שיפור צינורות אנליטיקה ללקוחות ברחבי העולם בתפקיד היברידי בפורטוגל.
תיאור
- בנייה וניהול של עומסי נתונים ב-Databricks
- פיתוח פתרונות להנדסת נתונים באמצעות PySpark ו-Delta Lake
- כתיבה וכוונון של שאילתות SQL, לרבות פונקציות חלון וצירופים מורכבים
- יצירת צינורות לקליטת נתונים זורמים או מצטברים
- יישום דפוסים לאידמפוטנטיות, לנקודות ביקורת ולהתפתחות סכמות
- מידול נתונים לצורכי בינה עסקית ואנליטיקה
- בדיקת נתונים וקוד באמצעות ציפיות בצינורות, בדיקות dbt או כלים דומים
- שימוש ב-Git, בביקורות קוד, בכלי lint, בבדיקות יחידה ובצינורות CI/CD
- שימוש בכלי בינה מלאכותית מבוססי סוכנים להאצת פיתוח, רפקטורינג וניפוי שגיאות מורכב
- עבודה עם צוותי הנדסה ופיתוח מוצרים
- תרומה למוצרים דיגיטליים עבור לקוחות ברחבי העולם בצוותים רב-תחומיים
דרישות
- לפחות חמש שנות ניסיון בהנדסת נתונים או בתפקיד קרוב
- רקע אקדמי במדעי המחשב, בהנדסת נתונים, במדעי הנתונים או בתחום כמותי קשור
- ניסיון מעשי בסביבת ייצור עם Databricks
- ניסיון נרחב בבניית עומסי נתונים ב-Databricks
- הבנה מעמיקה של PySpark ו-Delta Lake
- שליטה ב-SQL, לרבות פונקציות חלון, צירופים מורכבים וכוונון שאילתות
- ניסיון בקליטת נתונים זורמים או מצטברים, כולל Structured Streaming או Auto Loader, וכן בדפוסי אידמפוטנטיות, נקודות ביקורת והתפתחות סכמות
- ניסיון במידול נתונים עבור BI ואנליטיקה
- הבנת בדיקות ו-CI/CD עבור תהליכי עבודה ב-Databricks
- היכרות עם יסודות הנדסת תוכנה ו-DevOps, לרבות Git, ביקורת קוד, כלי lint, בדיקות יחידה וצינורות CI/CD
- יישום בדיקות לאיכות נתונים באמצעות ציפיות בצינורות, בדיקות dbt או שיטות דומות
- שליטה גבוהה בכלי בינה מלאכותית מבוססי סוכנים, כגון Cursor IDE ו-GitHub Copilot
- כישורי ניתוח ופתרון בעיות חזקים
- ניסיון בשיתוף פעולה עם צוותי הנדסה ופיתוח מוצרים
- שליטה באנגלית בדיבור ובכתיבה
- מגורים בפורטוגל, או נכונות וזכאות חוקית להתגורר ולעבוד בה
הטבות
- שכר בהתאם לניסיון ולביצועים
- ימי מחלה בתשלום
- ביטוח בריאות וביטוח שיניים
- תקציב לנוחות ולרווחה
- חברה שמקדמת עבודה מרחוק
- שעות עבודה גמישות
- פרויקטים עם לקוחות מובילים מרחבי העולם
- תרבות שמעמידה אנשים במרכז, מעריכה את הצוות ומעצימה אותו
- סביבת עבודה לא פורמלית
- אירועי צוות לשיתוף ידע ולחגיגה משותפת
- חניכה ומשוב על ביצועים לתמיכה בצמיחה מקצועית