Data Engineer
פורסם לפני 28 ימים · 34 מועמדים
התפקיד במילים פשוטות
התפקיד כולל בנייה של צינורות נתונים מקצה לקצה, עבודה עם Delta Lake ופיתוח תהליכי הטמעת נתונים ממערכות ליבה, ממשקי API וזרמי אירועים. המהנדס יעבוד גם עם Unity Catalog, ינהל הרשאות, Lineage ו-Data Governance, וישתמש ביכולות מתקדמות של Databricks. בנוסף, התפקיד דורש שיתוף פעולה הדוק עם מדעני נתונים ותמיכה בתהליכי עבודה של למידת מכונה.
- 3–5 years of experience as a Data Engineer in a Cloud environment
- Hands-on experience with Azure Databricks
- Strong knowledge of Python
- Strong knowledge of SQL
- Strong knowledge of Spark / PySpark
חולץ מתיאור המשרה · מתעדכן אוטומטית
למי זה מתאים
התפקיד מתאים למהנדס נתונים עם 3-5 שנות ניסיון בסביבת ענן וניסיון מעשי עם Azure Databricks. נדרש ידע חזק ב-Python, SQL ו-Spark/PySpark, וכן ניסיון בבניית צינורות נתונים בסביבות ייצור ועבודה עם מדעני נתונים. מי שמחפש תפקיד הדורש עבודת צוות חזקה, חשיבה מוכוונת מוצר וראיית נתונים מערכתית ימצא את התפקיד מתאים.
תיאור המשרה המלא
המשרה המקורית · נשמר לעיוןData Engineer
We are looking for a Data Engineer with 3–5 years of experience in a Cloud environment to join a team responsible for building, developing, and operating an enterprise Lakehouse platform based on Azure Databricks.
The role includes building end-to-end Data Pipelines, working with Delta Lake using the Bronze / Silver / Gold model, and developing smart Data Ingestion processes from core systems, APIs, and Event Streams, including CDC and Incremental Loading.
You will also work with Unity Catalog, manage permissions, Lineage, and Data Governance, and use advanced Databricks capabilities such as Workflows, Jobs, Autoloader, Delta Live Tables, and Structured Streaming.
The position involves close collaboration with Data Scientists, supporting ML Workflows, working with MLflow for experiment and model management, and building organizational standards for Data Quality, Monitoring, and Observability.
Requirements:
3–5 years of experience as a Data Engineer in a Cloud environment
Hands-on experience with Azure Databricks
Strong knowledge of Python, SQL, Spark / PySpark
Experience with Delta Lake, Unity Catalog, Databricks Workflows / Jobs
Experience building Data Pipelines in Production environments
Experience working with Data Scientists and ML Pipelines
Familiarity with MLflow for model and experiment management
Good understanding of Data Modeling in a Lakehouse environment
Experience with Git and CI/CD for data processes
Strong teamwork skills, product-oriented thinking, and a system-wide data perspective
Location: Ramat Gan, Diamond Exchange district — close to Savidor Center train station and the Light Rail.
שאלות על המשרה
- המשרה לא ציינה שכר. אנחנו מציגים שכר רק כשהמעסיק מפרסם אותו.
- מהמשרד
- 3–5 years of experience as a Data Engineer in a Cloud environment, Hands-on experience with Azure Databricks, Strong knowledge of Python, Strong knowledge of SQL, Strong knowledge of Spark / PySpark