דלג לתוכן הראשי

Data Engineer

promanרמת גן, מחוז תל אביב, ישראלמהמשרדFull-timeדרגה: דרגת ביניים

פורסם לפני 9 ימים · 43 מועמדים

שכר לא צוין במשרה זו

שמירה, הגשה או בדיקת התאמה — כמה שניות להקמת חשבון חינם.

תובנת Willbi

התפקיד במילים פשוטות

התפקיד כולל בנייה ותפעול של פלטפורמת Lakehouse ארגונית המבוססת על Azure Databricks. העבודה היומיומית כוללת פיתוח תהליכי הזנת נתונים וצינורות נתונים מקצה לקצה, ניהול הרשאות ומשילות נתונים באמצעות Unity Catalog, ושיתוף פעולה הדוק עם מדעני נתונים לתמיכה בתהליכי למידת מכונה.

חובה
  • 3-5 years of experience as a Data Engineer in a Cloud environment
  • Azure Databricks
  • Python
  • SQL
  • Spark / PySpark
יתרון

    חולץ מתיאור המשרה · מתעדכן אוטומטית

    למי זה מתאים

    התפקיד מתאים למהנדסי נתונים בעלי 3 עד 5 שנות ניסיון בסביבת ענן, עם ניסיון מעשי ב-Azure Databricks, פייתון, SQL ו-PySpark. הוא פחות יתאים למי שאין לו ניסיון בעבודה מול מדעני נתונים או חוסר היכרות עם Delta Lake ו-MLflow.

    תיאור המשרה המלא

    המשרה המקורית · נשמר לעיון

    Data Engineer

    We are looking for a Data Engineer with 3–5 years of experience in a Cloud environment to join a team responsible for building, developing, and operating an enterprise Lakehouse platform based on Azure Databricks.

    The role includes building end-to-end Data Pipelines, working with Delta Lake using the Bronze / Silver / Gold model, and developing smart Data Ingestion processes from core systems, APIs, and Event Streams, including CDC and Incremental Loading.

    You will also work with Unity Catalog, manage permissions, Lineage, and Data Governance, and use advanced Databricks capabilities such as Workflows, Jobs, Autoloader, Delta Live Tables, and Structured Streaming.

    The position involves close collaboration with Data Scientists, supporting ML Workflows, working with MLflow for experiment and model management, and building organizational standards for Data Quality, Monitoring, and Observability.

    Requirements:

    3–5 years of experience as a Data Engineer in a Cloud environment

    Hands-on experience with Azure Databricks

    Strong knowledge of Python, SQL, Spark / PySpark

    Experience with Delta Lake, Unity Catalog, Databricks Workflows / Jobs

    Experience building Data Pipelines in Production environments

    Experience working with Data Scientists and ML Pipelines

    Familiarity with MLflow for model and experiment management

    Good understanding of Data Modeling in a Lakehouse environment

    Experience with Git and CI/CD for data processes

    Strong teamwork skills, product-oriented thinking, and a system-wide data perspective

    Location: Ramat Gan, Diamond Exchange district — close to Savidor Center train station and the Light Rail.

    אודות proman
    פרופיל החברה · בקרוב

    ביקורות עובדים · בקרובעוד משרות ב-proman

    שאלות על המשרה

    • המשרה לא ציינה שכר. אנחנו מציגים שכר רק כשהמעסיק מפרסם אותו.
    proman
    פורסם לפני 9 ימים · 43 מועמדים
    בדקו את ההתאמה