Senior Data Engineer לארגון ממשלתי באזור ירושלים
סיכום המשרה
ארגון ממשלתי באזור ירושלים מגייס Senior Data Engineer לתפקיד הכולל פיתוח והובלת תהליכי Data מורכבים בסביבת AWS, עבודה עם כמויות מידע גדולות ומגוונות ובניית תשתיות ותהליכי ETL/ELT מקצה לקצה. התפקיד כולל עבודה עם AWS Glue, Python, PySpark ו-Spark, תכנון ועבודה עם DWH ו-Data Lake, אינטגרציה עם מקורות מידע מגוונים והתמודדות עם אתגרי ביצועים ו-Scalability.
תיאור המשרה
4+ שנות ניסיון כ-Data Engineer בפיתוח תהליכי ETL/ELT מורכבים
ניסיון מעשי עם AWS Glue ובפיתוח באמצעות Python, PySpark ו-Spark
שליטה גבוהה ב-SQL, כולל כתיבה ואופטימיזציה של שאילתות מורכבות
הבנה מעמיקה במסדי נתונים רלציוניים ולא-רלציוניים
ניסיון בעבודה עם נתונים מובנים וחצי-מובנים, לרבות CSV, JSON ו-Text
ניסיון באינטגרציה מול APIs ומקורות Web
היכרות מעמיקה עם DWH, Data Modeling ו-Data Lake Architecture
ניסיון מעשי עם AWS Glue ובפיתוח באמצעות Python, PySpark ו-Spark
שליטה גבוהה ב-SQL, כולל כתיבה ואופטימיזציה של שאילתות מורכבות
הבנה מעמיקה במסדי נתונים רלציוניים ולא-רלציוניים
ניסיון בעבודה עם נתונים מובנים וחצי-מובנים, לרבות CSV, JSON ו-Text
ניסיון באינטגרציה מול APIs ומקורות Web
היכרות מעמיקה עם DWH, Data Modeling ו-Data Lake Architecture