تصميم weather-pipeline

هذا المشروع تم فيه تصميم data pipeline كامل يقوم باستخراج البيانات من موقع open meteo باستخدام API.

ويقوم بمعالجة تلك البيانات وتحويلها الى جداول قابلة للقراءة و يمكن استخراج البيانات المهمة منها

تم استخدام اداة dbt لعمل التحويلات المناسبة للبيانات وعرضها في شكل مناسب.

وايضا تم استخدام اداة Airflow لأتمتة ال pipeline ليتم تحديث البيانات كل فترة محددة

يمكنكم معاينة المشروع بالكامل على حسابي على Github

أتشرف بمتابعتكم