GFT Technologies היא חברת טכנולוגיה וטרנספורמציה דיגיטלית הפועלת בתחומי הייעוץ, הביטוח ואבטחת הסייבר. פלטפורמת Cookiebot של החברה מסייעת לארגונים לאסוף ולנהל הסכמות משתמשים, תוך תמיכה בעמידה בתקנות פרטיות, ובהן תקנת הגנת הפרטיות הכללית (GDPR) וחוק פרטיות הצרכנים של קליפורניה (CCPA). פתרונות החברה מיועדים להשתלב בסביבות דיגיטליות קיימות, ומשמשים יותר מ-600,000 לקוחות ברחבי העולם לניהול נתונים אישיים בשקיפות ובשליטה רבה יותר.
מהנדס/ת נתונים Azure Databricks בדרג בינוני/בכיר – עבודה מרחוק מקולומביה
תכננו וייעלו צינורות נתונים וארכיטקטורות ענן באמצעות Azure ו-Databricks ב-GFT Technologies. הכינו נתונים מהימנים לניתוח, לבינה מלאכותית וללמידת מכונה.
תיאור
- תכננו, בנו וייעלו ארכיטקטורות נתונים המבוססות על Azure ועל Databricks
- הטמיעו תהליכי ETL ו-ELT לשילוב מקורות מידע מרובים
- תכננו וניהלו ארכיטקטורות Data Lake ו-Lakehouse
- נטרו צינורות נתונים כדי להבטיח עקביות, איכות, עקיבות ואבטחה
- הכינו וייעלו מערכי נתונים לניתוח מתקדם, לדיווח ולמודלים של למידת מכונה
- עבדו עם צוותי BI, ניתוח נתונים ומדעי הנתונים לשיפור הגישה למידע
- הגדירו והטמיעו בקרות לממשל נתונים ולאיכות נתונים
- הטמיעו תהליכי אינטגרציה רציפה ופריסה רציפה עבור פתרונות נתונים
- תכננו פתרונות ניתנים להרחבה לעיבוד מבוזר ולנפחי נתונים גדולים
- זיהו שיפורים שמייעלים עלויות, ביצועים וזמני עיבוד
- העריכו טכנולוגיות חדשות ושיטות עבודה מומלצות לקידום פלטפורמת הנתונים
דרישות
- תואר בהנדסת מערכות, הנדסה תעשייתית, הנדסת אלקטרוניקה, הנדסת מכטרוניקה או תחום קשור
- שלוש עד חמש שנות ניסיון כמהנדס/ת נתונים
- שליטה מתקדמת ב-SQL
- ניסיון עם Python או Scala
- ניסיון בעיבוד מבוזר באמצעות PySpark
- ניסיון עם Azure Databricks
- ניסיון עם Azure Data Factory
- ניסיון עם Azure Data Lake Storage Gen2 (ADLS Gen2)
- ידע ב-Delta Lake
- ניסיון עם ארכיטקטורות Lakehouse
- ידע בארכיטקטורת Medallion
- ניסיון במידול ממדי
- ניסיון עם מסדי נתונים יחסיים
- ניסיון עם מסדי נתונים מסוג NoSQL
- ידע בממשל נתונים ובאיכות נתונים
- ניסיון עם Unity Catalog
- ניסיון עם Delta Live Tables (DLT)
- ידע ב-Great Expectations
- ניסיון בעיבוד זרמים באמצעות Event Hubs
- ניסיון עם Azure DevOps ו-Git
- ידע ב-Entra ID
- ידע ב-RBAC
- שליטה ב-Power BI
- שליטה ב-Visual Studio Code
- ניסיון בשילוב נתונים ובתהליכי ETL/ELT
- ניסיון בניתוח נתונים ובמידול נתונים
- הסמכות Azure בהנדסת נתונים הן יתרון
- ניסיון בפרויקטים של בינה מלאכותית ולמידת מכונה הוא יתרון
- ידע ב-DataOps ובאוטומציה של פלטפורמות נתונים הוא יתרון
הטבות
- שעות עבודה גמישות
- עבודה מרחוק
- תוכנית פיתוח קריירה מותאמת אישית
- תוכניות הכשרה
- עבודה בצוותים רב-תחומיים
- צוות גלובלי מגוון
- פרויקטים בעלי השפעה רבה עם לקוחות מובילים בתעשייה