مشروع لمعالجة واستكشاف بيانات شكاوى مدينة نيويورك وتجهيزها لمراحل نمذجة تعلم الآلة.
بدأ المشروع بتنظيف البيانات والتعامل مع القيم المفقودة وغير الصحيحة، ثم إجراء Exploratory Data Analysis (EDA) لفهم خصائص البيانات واكتشاف الأنماط والعلاقات بين المتغيرات. كما تم استخدام Data Visualization لعرض النتائج والأنماط المهمة بصورة واضحة.
شملت مرحلة تجهيز البيانات أيضًا ترميز المتغيرات الفئوية (Data Encoding) وتطبيق Feature Engineering لإنشاء وتحسين الخصائص، بالإضافة إلى استخدام أدوات Scikit-learn في عمليات المعالجة المسبقة للبيانات.
تم تنفيذ المشروع باستخدام Python ومكتبات Pandas و NumPy و Matplotlib و Seaborn و Scikit-learn.
الهدف من المشروع كان الوصول بالبيانات إلى مرحلة مناسبة للانتقال إلى Machine Learning Modeling ، بعد إتمام مراحل التنظيف والاستكشاف والمعالجة المسبقة وتجهيز الخصائص.