State Street היא חברת שירותים פיננסיים גלובלית המשרתת משקיעים מוסדיים באמצעות פתרונות לניהול השקעות ולשירותי השקעות. היצע השירותים שלה כולל ניהול נכסים, שירותי משמורת ומחקר השקעות, הנתמכים במומחיות בתחומי הפיננסים, הטכנולוגיה הפיננסית והבנקאות. החברה מתמקדת בסיוע ללקוחות בניהול פעילויות השקעה מורכבות באמצעות נתונים, תובנות ויכולות תפעוליות שנועדו לשפר את היעילות ולתמוך בקבלת החלטות פיננסיות.
מהנדס נתונים, סגן נשיא עוזר - פרינסטון, ניו ג׳רזי
בניית פלטפורמות Lakehouse ב-AWS וב-Databricks לתמיכה בפעילות המשפטית ובפעילות הציות של State Street. פיתוח צינורות נתונים מנוהלים לניתוח נתונים, דיווח ויישומי AI/ML.
ארצות הברית
מסצ׳וסטס
ניו ג׳רזי100,000 $ – 167,500 $ / שנה
באתרמשרה מלאהמוביל/השפה נדרשת: אנגליתמהנדס נתוניםתיאור
- בניית צינורות נתונים ניתנים להרחבה ותחזוקתם באמצעות PySpark, Python ו-Spark SQL
- פיתוח ואופטימיזציה של תהליכי ETL/ELT ב-Databricks באמצעות Delta Lake
- יישום ארכיטקטורת Lakehouse מסוג Bronze, Silver ו-Gold עבור פלטפורמות נתונים ארגוניות
- ניהול Jobs, Workflows ו-Notebooks ב-Databricks עבור עומסי עבודה אצוותיים וזורמים
- יצירת מסגרות לשימוש חוזר לקליטת נתונים, עיבודם ותזמורם
- אריזת עומסי נתונים בקונטיינרים באמצעות Docker ואוטומציה של תהליכים באמצעות סקריפטים
- חיבור צינורות Databricks ל-Power Apps ול-Power Automate
- חשיפת נתונים למשתמשים עסקיים באמצעות ממשקי API, מחברים ומערכי נתונים מאוצרים
- תכנון ואופטימיזציה של ארכיטקטורות Lakehouse ב-Databricks
- שילוב SQL Server, Oracle ומקורות נתונים ארגוניים אחרים
- יישום שיטות למידול ממדי, חלוקה ואופטימיזציה
- עיבוד פורמטים מובנים ומובנים למחצה, כולל JSON ו-Parquet
- שיפור ביצועים באמצעות מטמון, אינדקסים ואופטימיזציה של Spark
- פרסום מערכי נתונים מאוצרים עבור Power BI, Power Apps ותהליכי Power Automate
- שמירה על איכות הנתונים באמצעות בדיקות יחידה, מסגרות אימות ובדיקות אוטומטיות
- ניטור ופתרון תקלות בעומסי עבודה ובצינורות Spark מבוזרים
- חקירת לוגים ופתרון תקלות ייצור ב-Databricks ובסביבות ענן
- שמירה על שושלת נתונים, עקביות ומוכנות לביקורת
- שיתוף פעולה עם צוותי המשפט, האבטחה, הציות ונתוני הארגון
- המרת דרישות עסקיות לפתרונות הנדסת נתונים
- פעילות כמומחה מקצועי ב-Databricks ובארכיטקטורת Lakehouse
- הובלת יוזמות באופן עצמאי ולקיחת אחריות על התוצרים
- תמיכה בממשל נתונים באמצעות Databricks Unity Catalog ובקרות AWS IAM ו-KMS
- עמידה בדרישות פרטיות נתונים, רגולציה, אבטחה וביקורת
- תחזוקת בקרות גישה ותקני סיווג וטיפול בנתונים
- עבודה עם צוותי IAM ואבטחה להגנה על גישה לנתונים
- תכנון ותחזוקת צינורות CI/CD באמצעות Harness, Azure DevOps או GitHub
- אוטומציה של פריסת נכסי Databricks באמצעות Databricks Repos ו-CLI
- ניטור, תזמון ואופטימיזציה של תהליכי עבודה באמצעות כלי התזמור של Databricks
- תחזוקת תיעוד ארכיטקטורה, זרימת נתונים וספרי הפעלה
- שיפור ביצועי הפלטפורמה, יכולת ההרחבה ויעילות העלויות
דרישות
- תואר ראשון או שני במדעי המחשב, הנדסת נתונים, מערכות מידע או תחום טכנולוגי קשור
- לפחות 8 שנות ניסיון בהנדסת נתונים או בפיתוח פלטפורמות נתונים
- מומחיות מעשית ב-Databricks וב-Apache Spark
- שליטה ב-PySpark, Python ו-SQL
- ניסיון בשירותי נתונים של AWS, כולל S3, Glue, Lambda ו-IAM
- ניסיון ב-Delta Lake ובארכיטקטורת Lakehouse
- ידע מעמיק בעיבוד נתונים מבוזר
- ידע מעמיק במסגרות ETL ו-ELT
- ידע מעמיק בטכניקות מידול נתונים
- ניסיון מעשי ברכיבי Databricks כגון Delta Lake, Workflows ו-Unity Catalog
- ניסיון נרחב בבניית צינורות אצווה וזרימה מקצה לקצה באמצעות AWS ו-Databricks
- היכרות עם אופטימיזציית ביצועים של Spark ו-Delta Lake
- ניסיון בתמיכה בעומסי עבודה של ניתוח נתונים, דיווח או AI/ML בפלטפורמת Lakehouse
- ידע בממשל נתונים, ניהול מטא-נתונים ובקרות אבטחה
- ניסיון בתחומי המשפט, הציות, השירותים הפיננסיים או תעשיות מפוקחות אחרות
- הבנת מושגי נתונים משפטיים, כולל חוזים, סעיפים, התחייבויות ותיקים
- היכרות עם עיבוד נתונים לא מובנים או עם צינורות מסמכים ו-NLP
- ניסיון ב-Power BI, Power Apps או Power Platform
- ניסיון בניהול נתונים רגישים בסביבות המונעות על ידי ביקורת
הטבות
- תוכנית חיסכון פנסיוני 401(k) עם התאמת הפקדות מצד החברה
- אפשרויות ביטוח הכוללות ביטוח חיים בסיסי, רפואי, שיניים, ראייה, אובדן כושר עבודה ארוך טווח וכיסויים אופציונליים נוספים
- חופשה בתשלום הכוללת חופשה שנתית, ימי מחלה, אובדן כושר עבודה קצר טווח ואחריות לטיפול במשפחה
- תוכנית סיוע לעובדים
- תגמול תמריצי עם זכאות למענקים שנתיים המבוססים על ביצועים
- זכאות לתוכניות חיסכון נבחרות בעלות יתרונות מס
- הזדמנויות מכלילות לפיתוח מקצועי
- תמיכה גמישה באיזון בין עבודה לחיים
- ימי התנדבות בתשלום
- רשתות עובדים