Data Engineer
סיכום המשרה
אנו מחפשים מפתח/ת ETL/ELT מנוסה להשתלבות בפרויקטים משמעותיים, הכוללים עבודה עם טכנולוגיות ענן מתקדמות, תהליכי אינטגרציה מורכבים ועולמות Big Data.
תיאור המשרה
התפקיד:
- פיתוח, תחזוקה ושיפור תהליכי ETL ו-ELT מתקדמים להעברת נתונים ממגוון מערכות אל מחסני נתונים ואגמי נתונים בסביבה פנימית ובענן
- תכנון ויישום תהליכי אינטגרציה בין מערכות מרובות מקורות ויעדים
- הכנת נתונים, מידול, טיוב והעשרת מידע, כולל תכנון תהליכים אינקרמנטליים
- עבודה עם בסיסי נתונים רלציוניים (SQL) ולא רלציוניים (NoSQL), כתיבת שאילתות מורכבות ואופטימיזציה של ביצועים
- פיתוח מנגנונים גנריים ותשתיות נתונים
- השתתפות בפרויקטי מיגרציה לענן ועבודה בסביבת GCP, בדגש על BigQuery
- איתור ופתרון תקלות בתהליכי ETL ושיפורם בהתאם לצרכים העסקיים
- עבודה שוטפת מול צוותי DBA, BI, Data Science ומפתחים נוספים בארגון
דרישות:
- השכלה רלוונטית בהתאם לדרישות החשכ״ל - חובה
- לפחות 4 שנות ניסיון בפיתוח ETL/ELT ועבודה עם כלי ETL ייעודיים - חובה
- ניסיון בתכנון ובניית Data Pipelines מורכבים - חובה
- ניסיון של שנתיים לפחות בעבודה עם Talend - חובה
- ניסיון בפיתוח תהליכי דאטה בסביבת GCP - חובה
- שליטה גבוהה ב-SQL וניסיון בכתיבת שאילתות מורכבות ואופטימיזציה של ביצועים - חובה
- יכולת עבודה בצוות ותקשורת אפקטיבית
- יכולת ניתוח בעיות ופתרון תקלות
- דיוק וקפדנות בעבודה עם נתונים