أتمتة استخراج ومعالجة بنك أسئلة تعليمي (Web Scraping + Data Cleaning) - Python

مشروع Python Automation لمنصة تعليمية سعودية (Aplus) لبناء بنك أسئلة كامل جاهز للرفع.

كان المطلوب: استخراج آلاف الأسئلة مع الإجابات والصور وشرح الإجابات، وتنظيمها في شكل جاهز للاستخدام المباشر.

بنيت Workflow متكامل بيعمل:

استخراج البيانات تلقائيًا (Web Scraping)

تحميل الصور ومعالجة الروابط وإزالة الـ Watermark

تنظيف وفحص جودة البيانات (Data Cleaning & Validation)

ربط كل سؤال ببياناته وتنظيم المحتوى

إخراج ملف CSV نظيف جاهز للرفع مباشرة على المنصة

الأدوات المستخدمة:

Python, Pandas, Playwright + Playwright Stealth, Requests, Regular Expressions, File

Handling

النتيجة: تقليل مدة التنفيذ من +45 يوم (لو Data Entry تقليدي) إلى 7 أيام فقط، مع دقة أعلى وأخطاء أقل.

الحل ده مش مقتصر على EdTech بس، ينفع لأي بيزنس بيتعامل مع بيانات متكررة وضخمة:

E-commerce catalogs، Bulk

Data Entry، أو أي Task متكرر محتاج Automation.