Data Engineer לארגון פיננסי גדול ומוביל בת"א
סיכום המשרה
במסגרת התפקיד: פיתוח Data pipeline בסביבת Data lake מקצה לקצה, פיתוח תהליכי שינוע נתונים בעולמות רלציונים, פיתוח סקריפטים ב python בדגש על (PySpark), פיתוח ותחקור נתונים ב SQL וביצוע בדיקות (unit/integration)
הזדמנות להיות חלק מטרנספורמציה טכנולוגית מודרנית!
הזדמנות להיות חלק מטרנספורמציה טכנולוגית מודרנית!
תיאור המשרה
ניסיון של שנתיים לפחות ב-Python
ניסיון של שנתיים לפחות ב- Big Data בדגש על SPARK ו -HIVE
יכולות קריאה וכתיבת שאילתות SQL מורכבות
לפחות שלוש שנות ניסיון בעולמות ה-Data של מיקרוסופט (SSIS,SQLServer)
היכרות עם עולם ה-DWH,DL ותהליכי ETL,ELT
עבודה בתהליכי CI/CD
ניסיון של שנתיים לפחות ב- Big Data בדגש על SPARK ו -HIVE
יכולות קריאה וכתיבת שאילתות SQL מורכבות
לפחות שלוש שנות ניסיון בעולמות ה-Data של מיקרוסופט (SSIS,SQLServer)
היכרות עם עולם ה-DWH,DL ותהליכי ETL,ELT
עבודה בתהליכי CI/CD