Real-Time Data Processing Pipeline

التقنيات المستخدمة: Apache Spark Streaming, Apache Kafka, Java

•قمت بمحاكاة تدفق بيانات شبكات التواصل الاجتماعي (مثل Twitter/X) في بيئة واقعية.

•استخدمت تحليل الكلمات المفتاحية والهاشتاجات لتصفية البيانات غير المنظمة ونشرها على Kafka Topics.

•عالجت تدفقات البيانات في Spark لإجراء التحويلات اللحظية مثل عد الكلمات وإضافة مؤشرات للمشاعر.

•عرضت الرؤى والنتائج المعالجة في لوحة تحكم تفاعلية مباشرة