Sigma Software Group היא חברת ייעוץ טכנולוגי רב-לאומית שנוסדה בשנת 2002. צוותיה מספקים פיתוח תוכנה, עיצוב גרפי, בדיקות ותמיכה טכנית ללקוחות במגוון תחומים, בהם רכב, בריאות, תקשורת, תעופה, בנקאות, משחקים, נדל״ן ופרסום. החברה מגייסת מומחי IT לעבודה על פרויקטים הנדסיים מורכבים ותומכת בהתפתחות המקצועית באמצעות חונכות ולמידה מתמשכת. עבודה מרחוק היא חלק ממודל העבודה שלה, והפרויקטים משרתים ארגונים כגון AstraZeneca, Scania ו-SAS.
מהנדס/ת נתונים (Azure, Spark) — עבודה מרחוק באוקראינה
בניית פלטפורמות נתונים וצינורות עיבוד מדרגיים ב-Azure לתמיכה באנליטיקה, בדיווח ובהחלטות מבוססות נתונים. פיתוח תהליכי Spark ועיבוד נתונים אמין בשיתוף פעולה עם צוותים רבים.
תיאור
- בניית פלטפורמות נתונים וצינורות עיבוד אמינים ומדרגיים לצרכים אנליטיים ותפעוליים.
- יצירת תהליכי עיבוד נתונים באמצעות מסגרות מבוזרות כגון Apache Spark ו-PySpark ב-Databricks.
- סיוע בקידום פלטפורמת הנתונים בענן באמצעות שירותי Azure, ובהם Data Factory, Synapse, Microsoft Fabric, Databricks, Event Hub ו-Azure Data Lake Storage.
- שילוב ועיבוד של נתונים פנימיים וחיצוניים תוך שמירה על עקביות, איכות ואמינות.
- אחריות על אמינות צינורות העיבוד, הניטור והביצועים שלהם.
- עבודה עם אנליסטים, מדעני נתונים ומהנדסים כדי להפוך צרכים עסקיים ואנליטיים לפתרונות נתונים יציבים.
- שיפור נוהלי הנדסת הנתונים, לרבות תקנים לצינורות עיבוד, בדיקות ואמינות תפעולית.
- הערכת כלים וטכנולוגיות לסביבת הנדסת הנתונים וסיוע בהטמעתם.
דרישות
- לפחות ארבע שנות ניסיון מעשי בהנדסת נתונים או בבניית פלטפורמות לעיבוד נתונים.
- שליטה טובה ב-SQL וניסיון משמעותי ב-Python לפיתוח ולתחזוקה של צינורות נתונים.
- ניסיון במסגרות לעיבוד מבוזר כגון Apache Spark או PySpark; ניסיון ב-Databricks הוא יתרון משמעותי.
- ניסיון מעשי בתכנון ובהטמעה של צינורות נתונים בענן, רצוי ב-Azure.
- ניסיון בתכנון צינורות ומודלי נתונים למערכות אנליטיות בקנה מידה ייצור.
- הבנת תכנון ETL/ELT, מידול ממדי ועקרונות מחסני נתונים.
- ניסיון בארכיטקטורות מודרניות של אגמי נתונים ובפורמטים כגון Parquet ו-JSON.
- ניסיון בכלי תזמור תהליכי עבודה כגון Airflow.
- ניסיון בפיתוח מסדי נתונים ובאופטימיזציה של ביצועים.
- יכולת לתכנן פתרונות נתונים מדרגיים וקלים לתחזוקה באופן עצמאי ברובו.
- יכולת תקשורת ושיתוף פעולה טובה.
- שליטה באנגלית ברמה מקצועית.
- ניסיון במחסני נתונים בענן כגון Snowflake, BigQuery או Redshift.
- ניסיון בטכנולוגיות הזרמת נתונים כגון Event Hub, Kafka או Spark Streaming.
- ניסיון ב-Delta Lake או בטכנולוגיות אחרות של Lakehouse.
- היכרות עם נוהלי CI/CD ותהליכי פיתוח המבוססים על Git.
- ניסיון בעבודה בסביבות פיתוח אג'יליות.
הטבות
- אפשרות לעבודה מרחוק.