استخراج الوظائق من موقع NaukriGulf

مشروع أتمتة جمع البيانات وجلب الوظائف من NaukriGulf

تم تطوير هذا المشروع لبناء Data Pipelineمتكامل ومؤتمت بالكامل، يقوم بالبحث عن وظائف مهندس البيانات عبر موقع NaukriGulf الشهير، ومن ثم استخراجها وتنظيمها بكفاءة عالية دون أي تدخل بشري.

1. البحث المستهدف: يقوم النظام بالبحث التلقائي عن الشواغر الوظيفية المتاحة لـ "Data Engineer" في منطقة الخليج.التصفح الذكي: محاكاة سلوك المستخدم البشري للتنقل بين صفحات النتائج المتعددة بسلاسة.تخطي حظر البوتات: تهيئة متصفح Chrome

.2. استخراج وتحويل البيانات :تحويل البيانات الخام المجمعة إلى هيكل بيانات منظم و معالجة البيانات وتنظيفها باستخدام مكتبة Pandas لاستخراج العناصر التالية بدقة:

المسمى الوظيفي Job Title

الشركة الناشرة / وكالة التوظيف Company / Agency

الوصف الوظيفي والمتطلبات التقنية Job Description & Tech Stack

تاريخ النشر Publication Date

الموقع الجغرافي Location

سنوات الخبرة المطلوبة Experience Range

3. حفظ وتخزين البيانات

تصدير البيانات النهائية المفلترة وتخزينها في ملف CSV جاهز للتحليل والعمليات المستقبلية.يتضمن الملف المستخرج كافة الوظائف المتاحة في أول 3 صفحات من نتائج البحث الفورية.