Allata
Allata
Allata היא חברת ייעוץ גלובלית המסייעת לארגונים להפוך אסטרטגיה דיגיטלית לשיפורים מעשיים בעסק. צוותיה פועלים בתחומי האסטרטגיה, חוויית הלקוח, ענן וטכנולוגיה, נתונים ובינה מלאכותית, ותומכים בלקוחות בתהליכי מודרניזציה, התאמה אישית וייעול תפעולי. Allata משרתת מגזרים ובהם רכב, בריאות, לוגיסטיקה, שירותים פיננסיים והיי־טק, ונשענת על ניסיונם של מנהלי IT לשעבר ואנשי ייעוץ בהובלת יוזמות דיגיטליות מורכבות.

מנהל פלטפורמת נתונים של Databricks (עבודה מרחוק, טקסס)

הובלת התכנון והאספקה של פלטפורמות Lakehouse ומחסני נתונים ארגוניים מפוקחים עבור Allata. הכוונת צינורות נתונים, אבטחה, יכולת הרחבה ופיתוח מוצרי נתונים.

תיאור

  • הגדרת ארכיטקטורה, בחירות טכנולוגיות, תבניות ייחוס ותוכניות שילוב עבור פלטפורמות Lakehouse ומחסני נתונים ארגוניים.
  • יצירת מודלים מושגיים, לוגיים ופיזיים למוצרי נתונים מרובי דיירים ומותאמים לתעשיות שונות.
  • תקנון שכבות הנתונים לקליטה, אחסון גולמי, אצירה והגשה.
  • קביעת נוהלי ממשל לנתוני מטא, קטלוגים, שושלת נתונים, חוזי נתונים וסיווג.
  • הגדרת בקרות אבטחה ותאימות לגישה, מיסוך, הצפנה, פילוח רשת וביקורת.
  • תכנון יכולת ההרחבה של הפלטפורמה, זמינות גבוהה, התאוששות מאסון, קיבולת וניהול עלויות.
  • הובלת הבחירה והשילוב של Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory או Data Fabric, וכלי תזמור וניטור.
  • קביעת נוהלי CI/CD לנכסי נתונים ואכיפתם, לרבות בדיקות, מהדורות אוטומטיות ותוכניות חזרה לאחור.
  • הגדרת גישות לקליטה באצווה ובזרימה, דחיסה, חלוקה למחיצות ואחסון.
  • קביעת תקני נצפיות למדדים, הסכמי רמת שירות (SLA), לוחות מחוונים, יומנים, עקבות והתראות.
  • מתן הובלה טכנית וחניכה לצוותי הנדסת נתונים.
  • סקירת ארכיטקטורה וקוד של רכיבים קריטיים.
  • עבודה עם בעלי מוצרי נתונים ובעלי עניין באבטחה, בתשתיות, ב-BI וב-ML כדי לתרגם דרישות לפתרונות ולמפות דרכים.
  • בנייה, בדיקה ופריסה של מודולי עיבוד באמצעות Spark,‏ PySpark או Scala,‏ Spark SQL ופרוצדורות שמורות.
  • פיתוח צינורות נתונים ב-Databricks ובפלטפורמות מסדי נתונים וכוונון הביצועים שלהם.
  • יישום נוהלי DevOps, תשתית כקוד, CI/CD, בדיקות אוטומטיות ובקרת גרסאות.
  • פתרון בעיות מורכבות באיכות הנתונים, בביצועים ובזמינות, וקידום שיפורים מתמשכים.

דרישות

  • ניסיון קודם כארכיטקט או כמוביל טכני של פלטפורמות נתונים ארגוניות.
  • ידע מעשי בטכנולוגיות Databricks, לרבות Delta Lake,‏ Unity Catalog,‏ Delta Live Tables,‏ Auto Loader ו-Structured Streaming.
  • מיומנויות חזקות ב-Spark,‏ PySpark ו/או Scala,‏ Spark SQL ואופטימיזציה של משימות מבוזרות.
  • רקע בתכנון מחסני נתונים ו-Lakehouse.
  • ידע מעשי בתבניות Medallion,‏ Lambda ו-Kappa.
  • ניסיון בשילוב כלי SaaS,‏ ETL או מחברים כגון Fivetran.
  • ניסיון בכלי תזמור כגון Airflow,‏ Azure Data Factory ו-Data Fabric.
  • ניסיון במסדי נתונים יחסיים והיברידיים, לרבות MS SQL Server,‏ PostgreSQL,‏ Oracle,‏ Azure SQL ו-AWS RDS/Aurora או מקבילותיהם.
  • מיומנות ב-CI/CD של צינורות נתונים באמצעות Azure DevOps,‏ GitHub Actions,‏ Jenkins או כלים דומים.
  • ניסיון באריזה ובפריסה של תוצרים כגון קובצי ‎.whl ומכולות.
  • ניסיון בעיבוד באצווה ובזרימה, בדחיסת קבצים, בחלוקה למחיצות ובכוונון אחסון.
  • הבנת אבטחת ענן, IAM/RBAC, הצפנה, מושגי VPC/VNet ורשתות ענן.
  • היכרות עם כלי נצפיות וניטור כגון Prometheus,‏ Grafana,‏ Datadog או שירותי ענן מובנים.
  • ניסיון באוטומציה של צינורות CI/CD ובפיתוח המבוסס על ענף ראשי הוא יתרון.
  • מיומנויות מתקדמות ב-PySpark הן יתרון.
  • מיומנויות מתקדמות באופטימיזציה ובתזמור של תהליכי Spark הן יתרון.
  • הסמכות ב-Databricks, בארכיטקטורת ענן או בנתונים הן יתרון.
  • יכולת לזהות, לאבחן ולפתור בעיות נתונים מורכבות.
  • מיומנויות חזקות בשיתוף פעולה ובתקשורת.
  • סקרנות ופתיחות לכלים, לטכנולוגיות ולשיטות חדשות.

הטבות

  • משרה מלאה.
  • סביבת עבודה מכילה ושוויון הזדמנויות.
  • מחויבות לגיוון.

משרות קשורות

The Athletic

מנהל בכיר, אנליטיקת נתונים

The Athletic

הובלת תובנות מוצר לצמיחה ב־The Athletic, חברת מדיה בתחום הספורט. ניהול אנליסטים ושימוש בניסויים כדי להנחות החלטות בתחום המנויים והמוצרים.

פתח
Lunar Solar Group

מדען נתונים למדידת שיווק (עבודה מרחוק, ארה״ב)

Lunar Solar Group

פיתוח מדידת ייחוס, תוספתיות ותמהיל מדיה עבור Lunar Solar Group, חברת ייעוץ לצמיחה וסוכנות שיווק דיגיטלי. הפיכת ניתוחים להמלצות מעשיות על תקציבי לקוחות.

פתח
Airbnb

מדען נתונים בכיר, מחקר בניתוח נתוני עובדים

Airbnb

הובלת מחקר בניתוח נתוני עובדים ב-Airbnb באמצעות הסקה סיבתית ומודלים סטטיסטיים, כדי לתמוך בהחלטות על כוח אדם, תגמול, גיוס ושימור. עבודה עם בעלי עניין על ניתוחים ודיווחים רגישים.

פתח
The Cigna Group

מוביל בכיר לבניית נתונים, עבודה מרחוק (ארה״ב)

The Cigna Group

בנו מוצרי נתונים לשימוש חוזר בשכבות Silver ו-Gold עבור שירותי הבריאות של Cigna, באמצעות Databricks וצינורות MVP ו-CI/CD מפוקחים. הפכו צרכים עסקיים לפתרונות נתונים מוכנים לייצור וקבעו תקנים לכל אורך תפעול הנתונים.

פתח
Clear Street

מדען/ית נתונים בכיר/ה לצמיחה

Clear Street

שפרו את ההערכה, האמינות והבטיחות של עוזר הבינה המלאכותית של Clear Street. התפקיד תומך בפלטפורמת תיווך ומסחר מבוססת ענן עבור משקיעים מתוחכמים.

פתח