תיאור תפקיד:
לארגון גדול במרכז דרוש/ה Data Engineer
פיתוח ותחזוקה של תשתיות דאטה מתקדמות, תהליכי stream ו-ETL, אינטגרציה בין מערכות, ושיפור מתמיד של ביצועי עיבוד הנתונים בארגון מודל היברידי
דרישות:
- ניסיון של 3 שנים לפחות כ- Data Engineer
- ניסיון משמעותי באחד או יותר מהבאים- Apache Spark, Apache NiFi, Apache Flink
- ניסיון משמעותי בפיתוח בשפת Python לעיבוד נתונים ובניית Data Flows
- הבנה בארכיטקטורת נתונים ותשתיות Big Data כולל אתגרים ופתרונות
- ניסיון בכתיבת שאילתות SQL מורכבות ואופטימיזציה של ביצועים
- ניסיון עם MongoDB וכתיבת Aggregation Pipelines - יתרון משמעותי
- ניסיון עם שירותי Cloudera בסביבת CDP - יתרון משמעותי
- היכרות עם כלי BI כגון: SSAS, Data Stage יתרון משמעותי
- הכרות עם פיתוח לעולם ה Micro-Services בכלל ו OpenShift בפרט - יתרון
היקף משרה:
משרה מלאה
קוד משרה:
12756
אזור:
מרכז - תל אביב, פתח תקווה, רמת גן וגבעתיים, בקעת אונו וגבעת שמואל, חולון ובת-ים, מודיעין, שוהם
שרון - רעננה, כפר סבא והוד השרון, ראש העין, הרצליה ורמת השרון
השפלה - ראשון לציון ונס- ציונה
|