תיאור תפקיד:
לחברתנו דרוש/ה Data Engineer למשרה מלאה, לטווח ארוך ובמתכונת היברידית
פיתוח ותחזוקה של תשתיות דאטה מתקדמות, תהליכי stream ו ETL
פיתוח ממשקי משתמש למערכות מבוססות AI בדגש על חווית המשתמש, נגישות וביצועים
פיתוח תהליכי ETL מורכבים באמצעות Nifi Apache ו Spark
עבודה עם Flink Apache לפיתוח תהליכי עיבוד נתונים בזמן אמת
כתיבת שאילתות מורכבות וייעול ביצועים על DB SQL ו NOSQL.
פיתוח פתרונות DATA וכתיבת קוד ב Python
כתיבת מנוע המפעיל מודלי שפה LLM פיתוח agent
דרישות:
- ניסיון של מעל ל4 שנים כ Data Engineer- חובה
- ניסיון משמעותי באחת מהכלים: Apache Spark/ Nifi/ Flink- חובה
- כתיבת שאילתות SQL מורכבות ואופטימיזציה של ביצועים- חובה
- ניסיון בכתיבת תהליכי ETL ב SSIS או DATASTAGE- חובה
- ניסיון משמעותי בפיתוח ב Python-חובה
- ניסיון מהותי עם ElasticSearch- יתרון
- ניסיון בפיתוח ב ASP.NET CORE- יתרון משמעותי
- ניסיון בפיתוח ב Angular/ React-יתרון משמעותי
- ניסיון בפיתוח APIs- יתרון משמעותי
- ניסיון בעבודה עם Git, CI/CD, Agile-יתרון
- הבנה באינטגרציה עם מודלי GEN AI- יתרון משמעותי
- ניסיון עם,MongoDB Coudera ו Kafka- יתרון משמעותי
- ניסיון בפיתוח מערכות בתחום ה AI ופיתוח AGENT- יתרון
- היכרות עם עולמות ה LLM ו Prompt Enguneering- יתרון