
Scicom Infrastructure Services היא חברת ייעוץ ושירותי טכנולוגיה המסייעת לארגונים במגזר הציבורי והפרטי לנהל ולשפר את סביבות ה-IT שלהם. פעילותה כוללת ניהול ביצועי ארגונים, ארכיטקטורה, ניהול פרויקטים, ניהול תשתיות ויישומים ושירותים מנוהלים. החברה עובדת גם עם AppDynamics, BigPanda, Datadog ו-AWS בתחומי ניטור ביצועים, מתאם ואוטומציה של אירועים, ניטור ענן וניהול שירותי IT. Scicom מספקת תמיכה תפעולית מסביב לשעון לתשתיות גלובליות. הפרופיל שלה מתאר צוות הפועל בתחומי טכנולוגיות ארגוניות, SaaS וטכנולוגיות B2B; יש לבדוק את המשרות הפתוחות כעת לקבלת פרטים על התפקידים והגיוס.
מהנדס נתונים ב-Databricks לחוזי נתונים של OCDS
מחבר בין בעלי עניין ברכש לצוותי הנדסה כדי להגדיר חוזי נתונים במסגרת תוכנית Databricks רחבת היקף. בונה צינורות ובקרות התואמים ל-OCDS כדי לספק נתוני התקשרויות אמינים ואחידים.
תיאור
- מחבר בין צוותי העסק, ההתקשרויות, הממשל וההנדסה במסגרת הטמעת Databricks רחבת היקף.
- מוביל סדנאות לאיסוף דרישות עם בעלי עניין ברכש, בתוכניות, באנליטיקה, בממשל ובתחום הטכני.
- יוצר ומתחזק חוזי נתונים המגדירים כיצד מפיקי נתונים וצרכני נתונים מחליפים מידע.
- מתרגם צרכים עסקיים לסיפורי משתמש, לקריטריוני קבלה, לתהליכי עבודה, למיפויים, למפרטי ממשקים ולדרישות הנדסיות.
- מנתח מערכות מקור, בוחן פרופילי נתונים, מעריך פערים וממפה שדות מקור למבני יעד.
- משווה נתוני רכש קיימים למבנים הנדרשים לפי OCDS.
- מסייע לבעלי נתונים, למפיקים, לצרכנים, לאדריכלים ולצוותי ממשל להגיע להסכמות.
- עוקב אחר דרישות לאורך מידול נתונים, הטמעה, בדיקות וקבלה.
- מעריך כיצד שינויים מוצעים משפיעים על מוצרי נתונים, דוחות, אינטגרציות ותרחישי שימוש אנליטיים.
- מסייע בהכנה ובהובלה של סקירות backlog, תכנון ספרינטים, הדגמות, בדיקות וקבלת אישור מבעלי עניין.
- מיישם את OCDS על נתוני רכש והתקשרויות ציבוריות, משלב התכנון ועד ההטמעה.
- מתחזק מיפויים עבור מהדורות OCDS, רשומות, חבילות, מזהים, ארגונים, צדדים, פריטים, אבני דרך, מסמכים, עסקאות, תיקונים ורכיבים קשורים.
- משתמש בסכמות OCDS, ברשימות קודים, בכללי אימות ובהנחיות הטמעה.
- מזהה מתי נדרשות הרחבות OCDS ומתעד את ההנחות, הכללים, המיפויים, החריגים וההרחבות הקשורים לכך.
- בונה רשומות התקשרות מתוך מהדורות מבוססות עסקאות ומגדיר כיצד מטפלים בתיקונים, בעדכונים, בביטולים, בתיקוני שגיאות ובשינויים היסטוריים.
- מאמת נתונים שעברו טרנספורמציה מול סכמות JSON של OCDS ומתקן נתוני רכש חסרים, לא תקינים, לא עקביים או שאינם תואמים.
- מאפשר פרסום, החלפה, ניתוח או שימוש פנימי בנתוני התקשרויות אחידים.
- בונה, בודק ומתחזק צינורות Databricks באמצעות Apache Spark, PySpark, Python ו-SQL.
- קולט וממיר נתוני רכש מובְנים ומובְנים למחצה ממקורות JSON, CSV, XML, Parquet, מסדי נתונים, ממשקי API וקבצים.
- יוצר שכבות Bronze, Silver ו-Gold באמצעות ארכיטקטורת המדליון.
- מפתח מודלי נתונים מנורמלים, ממדיים, אנליטיים ומבוססי OCDS.
- משתמש ב-Delta Lake כדי לאכוף סכמות ולפתח אותן, לנהל גרסאות, לתמוך בביקורות ולעבד נתונים באופן אמין.
- יוצר שיטות לשימוש חוזר להמרת נתוני רכש ממקורות למבנים תואמי OCDS.
- בונה תהליכי קליטת נתונים באצוות ובאופן אינקרמנטלי.
- משתמש בכלי Databricks מתאימים, לרבות Workflows, מחברות, משימות, Auto Loader, Delta Live Tables או Lakeflow.
- בונה חיבורי REST API לקליטת נתונים ממקורות ולהעברתם למערכות המשך.
- ממכן בדיקות איכות נתונים, התאמה, שלמות ותאימות.
- מסייע בהטמעת Unity Catalog לניהול מטא-נתונים, בעלות, שושלת נתונים, בקרות גישה וגילוי נתונים.
- משפר משימות Spark, שאילתות SQL, אשכולות, חלוקה למחיצות, גדלי קבצים ופריסות נתונים.
- תורם לסקירות קוד, בדיקות אוטומטיות, CI/CD, פריסות, ניטור ותמיכה בסביבת ייצור.
- מאבחן כשלים בצינורות, אי-התאמות בנתונים ובעיות ביצועים.
- קובע כללים מדידים לדיוק, שלמות, תקפות, עדכניות, עקביות וייחודיות הנתונים.
- יוצר בקרות אימות לשדות OCDS, למזהים, לתאריכים, לסכומים, למטבעות, לארגונים, לסיווגים ולקשרי התקשרות.
- בונה לוחות מחוונים או דוחות על עמידה בחוזי נתונים ועל תוצאות איכות הנתונים.
- מגדיר דרכים לזיהוי ולניהול של שינויים בסכמות.
- עוקב אחר שושלת נתוני רכש דרך טרנספורמציות Databricks ועד למוצרי ההמשך.
- עובד עם צוותי ממשל כדי להגדיר בעלים, נאמנים, סיווגים, שמירה ומדיניות גישה.
- מטפל בנתוני רכש וספקים רגישים בהתאם לדרישות אבטחה ופרטיות.
- מתחזק נתיבי ביקורת באמצעות כללים מתועדים, מיפויים מנוהלי גרסאות, תוצאות אימות והיסטוריית שינויים.
דרישות
- תואר ראשון במדעי המחשב, מערכות מידע, אנליטיקת נתונים, ניתוח עסקי, הנדסה, מנהל ציבורי, ניהול שרשרת אספקה או תחום קשור.
- לפחות חמש שנות ניסיון מצטברות בהנדסת נתונים, בניתוח נתונים, בניתוח עסקי או באינטגרציית נתונים.
- ניסיון מעשי בהטמעה או בשימוש בתקן הנתונים להתקשרויות פתוחות (OCDS).
- ניסיון ביצירה, בתיעוד, במשא ומתן או בתחזוקה של חוזי נתונים.
- ניסיון במיפוי נתוני רכש או התקשרויות לסכמות OCDS.
- שליטה טובה במהדורות OCDS, ברשומות, בסכמות, ברשימות קודים, במזהים, בשלבי התקשרות ובשיטות אימות.
- לפחות שלוש שנות ניסיון מעשי ב-Databricks.
- מיומנויות חזקות ב-Apache Spark, PySpark, Python, SQL, Delta Lake, צינורות ETL/ELT, מידול נתונים, JSON ו-JSON Schema, ממשקי REST API, אימות איכות נתונים ומיפוי ממקור ליעד.
- ניסיון באיסוף דרישות ובהפיכתן למפרטים הנדסיים מעשיים.
- תקשורת ברורה עם שותפים טכניים ושאינם טכניים.
- ניסיון בהכנת סיפורי משתמש, קריטריוני קבלה, כללים עסקיים, מילוני נתונים, מפרטי ממשקים ותיעוד תהליכים.
- מיומנויות חזקות בניתוח, באבחון תקלות, בהנחיה ובתיעוד.
- ניסיון בעבודה בצוותי Agile.
- יתרון: רקע ברכש ממשלתי, בהתקשרויות במגזר הציבורי, במענקים, ברכש, בנתוני ספקים או בנתונים פיננסיים.
- יתרון: ניסיון בבניית הרחבות OCDS או בהתאמת OCDS לצורכי ארגון.
- יתרון: היכרות עם סיווגי רכש, מזהי ארגונים, מכרזים, זכיות, תיקונים, אבני דרך, עסקאות וביצוע חוזים.
- יתרון: הסמכת Databricks Certified Data Engineer Associate או Professional.
- יתרון: ניסיון ב-Unity Catalog, Delta Live Tables, Lakeflow, Databricks Workflows, Structured Streaming, שירותי ענן, Azure Data Factory, ADLS Gen2, AWS Glue, Amazon S3, Snowflake, dbt, Kafka, Airflow, Power BI, מאמתים של JSON Schema, מסגרות אוטומטיות לאיכות נתונים, ניהול מטא-נתונים או נתוני אב, שושלת נתונים, ממשל של נתוני ייחוס, CI/CD, Git, Azure DevOps, GitHub Actions, Jenkins או Terraform.
- יתרון: ניסיון בתרומה לתוכניות נתונים גדולות ברמה הפדרלית, המדינתית או המקומית, או בארגונים מפוקחים.
- יתרון: היכרות עם דרישות רכש פדרלי, רכש, דיווח, שקיפות או נתונים פתוחים.
- יכולת לתרום הן לדיונים הנדסיים והן לדיוני ניתוח עסקי.
- הבנה טובה של חוזי נתונים ושל אחריות מפיקים וצרכנים.
- יכולת לתרגם תהליכי רכש מורכבים למבני נתונים ולכללי טרנספורמציה ברורים.
- הקפדה בעת פירוש סכמות, רשימות קודים, הגדרות עסקיות ודרישות אימות.
- יכולת חזקה להנחות בעלי עניין ולפתור מחלוקות.
- יכולת לזהות פערים ועמימויות לפני שיגרמו לליקויים הנדסיים.
- מחויבות לתיעוד, לעקיבות, לממשל ולאיכות נתונים.
- יכולת לעבוד ביעילות בצוות Databricks גדול ורב-תחומי.
הטבות
- המודעה אינה מפרטת הטבות, הטבות נלוות או תגמול נוסף.
משרות קשורות
לא נמצאו משרות
נסו לשנות או לנקות את המסננים כדי למצוא הזדמנויות נוספות.