نظام تحليل بيانات COVID-19

قمت بتطوير نظام متكامل لمعالجة البيانات بشكل فوري، قادر على استقبال البيانات الخام وغير المنظمة وتحويلها إلى رؤى قابلة للتنفيذ مباشرة. يهدف المشروع إلى رصد الاتجاهات المتسارعة لانتشار الفيروس والتنبؤ بعدد الحالات في اليوم التالي بشكل لحظي.

أهم المميزات:

استقبال ومعالجة البيانات في الوقت الفعلي باستخدام Apache Kafka.

تنظيف وتدقيق وتحسين جودة البيانات عبر Apache NiFi قبل التحليل.

تحليل البيانات وحساب المتوسطات المتحركة والتنبؤات باستخدام Spark Structured Streaming.

تخزين بيانات خفيف وإعداد السكربتات بـ Python و SQLite.

حساب مؤشرات رئيسية مثل: الحالات النشطة مقابل المتعافين، اتجاهات الانتشار خلال 7 أيام، نقاط تسارع العدوى، والتنبؤ بالحالات لليوم التالي.

النتيجة:

تمكين فرق العمل من متابعة البيانات وتحويلها من JSON خام إلى لوحة تحليلية جاهزة للعرض خلال ثوانٍ، مما يساعد على اتخاذ قرارات سريعة وفعّالة.