Data Engineering

הזדמנות להשתלב בתפקיד Data Engineering משמעותי בארגון ממשלתי מוביל. בתפקיד תהיה הובלה של תהליכי מעבר לענן, פיתוח תשתיות נתונים מתקדמות ועבודה עם טכנולוגיות GCP בסביבה מורכבת ומאתגרת.
תיאור תפקיד
•    הובלת העברת מאגרי נתונים מסביבת On-Premise לענן GCP
•    תכנון ופיתוח שכבות Data Marts ב-BigQuery
•    פיתוח ותחזוקת Pipelines באמצעות Cloud Composer / Apache Airflow
•    פיתוח סקריפטים ב-Dataform לטרנספורמציות, ניקוי ואיחוד נתונים
•    כתיבת שאילתות SQL יעילות ב-BigQuery
•    אופטימיזציה של ביצועים ועלויות
•    תיעוד טכני של ארכיטקטורת נתונים ותהליכים
•    פתרון בעיות מורכבות במסדי נתונים
•    בדיקות איכות נתונים ו-Pipelines
•    עבודה עם מודלים אנליטיים מורכבים
•    ניהול והרצת שאילתות מורכבות
•    עבודה עם תשתיות מאגרי מידע מורכבות
דרישות
•    ניסיון של 4 שנים ומעלה בתחום Data Engineering
•    ניסיון מעשי בפיתוח והטמעה בסביבת Google Cloud Platform
•    ניסיון עמוק ב-BigQuery
•    ניסיון בפיתוח מודלי נתונים
•    ניסיון בכתיבת שאילתות SQL מורכבות
•    ניסיון באופטימיזציה של שאילתות וביצועים
•    שליטה גבוהה ב-Python
•    היכרות עם Git
•    היכרות עם סביבות CI/CD
•    ניסיון ב