قمت بتطوير نظام متكامل لاستخراج البيانات (Web Scraping) من منصة OpenSooq، وتحويلها إلى بيانات منظمة قابلة للتحليل، ثم عرضها من خلال Dashboard تفاعلي يوفر رؤى واضحة عن السوق.
أهداف المشروع
جمع بيانات الإعلانات من مختلف الأقسام (عقارات، سيارات، إلكترونيات، إلخ)
تحليل اتجاهات السوق والأسعار
توفير لوحة تحكم (Dashboard) تساعد في اتخاذ القرار
التقنيات المستخدمة
Web Scraping: باستخدام Scrapy
Data Processing: باستخدام pandas
Data Storage: ملفات Excel / CSV (قابلة للتحويل إلى قواعد بيانات)
Dashboard & Visualization: Power BI / أو Dashboard مخصص (Flask + Charts)
Automation: جدولة عمليات السحب بشكل دوري