Data Engineer
פורסם לפני 9 ימים · 43 מועמדים
התפקיד במילים פשוטות
התפקיד כולל בנייה ותפעול של פלטפורמת Lakehouse ארגונית המבוססת על Azure Databricks. העבודה היומיומית כוללת פיתוח תהליכי הזנת נתונים וצינורות נתונים מקצה לקצה, ניהול הרשאות ומשילות נתונים באמצעות Unity Catalog, ושיתוף פעולה הדוק עם מדעני נתונים לתמיכה בתהליכי למידת מכונה.
- 3-5 years of experience as a Data Engineer in a Cloud environment
- Azure Databricks
- Python
- SQL
- Spark / PySpark
חולץ מתיאור המשרה · מתעדכן אוטומטית
למי זה מתאים
התפקיד מתאים למהנדסי נתונים בעלי 3 עד 5 שנות ניסיון בסביבת ענן, עם ניסיון מעשי ב-Azure Databricks, פייתון, SQL ו-PySpark. הוא פחות יתאים למי שאין לו ניסיון בעבודה מול מדעני נתונים או חוסר היכרות עם Delta Lake ו-MLflow.
תיאור המשרה המלא
המשרה המקורית · נשמר לעיוןData Engineer
We are looking for a Data Engineer with 3–5 years of experience in a Cloud environment to join a team responsible for building, developing, and operating an enterprise Lakehouse platform based on Azure Databricks.
The role includes building end-to-end Data Pipelines, working with Delta Lake using the Bronze / Silver / Gold model, and developing smart Data Ingestion processes from core systems, APIs, and Event Streams, including CDC and Incremental Loading.
You will also work with Unity Catalog, manage permissions, Lineage, and Data Governance, and use advanced Databricks capabilities such as Workflows, Jobs, Autoloader, Delta Live Tables, and Structured Streaming.
The position involves close collaboration with Data Scientists, supporting ML Workflows, working with MLflow for experiment and model management, and building organizational standards for Data Quality, Monitoring, and Observability.
Requirements:
3–5 years of experience as a Data Engineer in a Cloud environment
Hands-on experience with Azure Databricks
Strong knowledge of Python, SQL, Spark / PySpark
Experience with Delta Lake, Unity Catalog, Databricks Workflows / Jobs
Experience building Data Pipelines in Production environments
Experience working with Data Scientists and ML Pipelines
Familiarity with MLflow for model and experiment management
Good understanding of Data Modeling in a Lakehouse environment
Experience with Git and CI/CD for data processes
Strong teamwork skills, product-oriented thinking, and a system-wide data perspective
Location: Ramat Gan, Diamond Exchange district — close to Savidor Center train station and the Light Rail.
שאלות על המשרה
- המשרה לא ציינה שכר. אנחנו מציגים שכר רק כשהמעסיק מפרסם אותו.
- מהמשרד
- 3-5 years of experience as a Data Engineer in a Cloud environment, Azure Databricks, Python, SQL, Spark / PySpark