متجر أثاث الكتروني ذكي مدعوم بالواقع المعزز ونظام اقتراح

تم في هذا العمل ببناء متجر إلكتروني للأثاث يتيح للمستخدم معاينة قطع الأثاث ضمن بيئته باستخدام الواقع المعزز حيث تم التحقيق باستخدام ArCore إضافة الى ذلك تم استخدام نظام اقتراح لقطع الأثاث بناء على ذوق المستخدم المستنتج من صور قطع الأثاث الموجودة ضمن البيئة الخاصة به , حيث يتكون نظام الاقتراح من نظامين منفصلين الأول هو عبارة عن نظام كشف قطع الأثاث ضمن الصور القادمة من بيئة المستخدم سواء تم التقاطها خلال عملية المعاينة لقطع الأثاث بتقنية الواقع المعزز أو من خلال القسم المخصص للبحث عن منتجات مشابهة باستخدام صورة لقطعة أثاث ويتكون نظام الكشف من شبكة EfficientDet معاد تدريبها لكشف ست أنماط من قطع الأثاث (كرسي – طاولة – سرير – خزانة – كنبة – مصباح ) بعد الكشف عن قع الأثاث ومكانها ضمن الصورة هنا يبدأ دور القسم الثاني من نظام الاقتراح والذي هو عبارة عن نظام لكشف النمط البصري لصورة قطعة الأثاث ، تم تحقيق ذلك باستخدام شبكة Siamese Networks وهي عبارة عن بنية inception-v3 مدربة مسبقا على مجموعة بيانات image net وقمنا بإعادة تدريبها باستخدام مجموعة صور أثاث منمطة بفئة قطعة الأثاث (يوجد ست فئات) والنمط البصري لقطعة الأثاث (يوجد 15 نمط بصري ) حيث تم تميطها بشكل يدوي من قبل خبراء ديكور داخلي ، وسيكون خرج الشبكة شعاع بطول 256 يمثل النمط البصري لقطعة الأثاث , (خلال التدريب تم إضافة طبقة softmax بحيث يكون الخرج هو النمط البصري والنوع وتم التدريب الشبكة كشبكة multilabel classification وتم إزالة تلك الطبقة بعد نهاية التدريب) ، ويكون اقتراح قطع الأثاث المشابهة من خلال مقارنة شعاع التمثيل الناتج بالشعاع المحسوب مسبقا لكل قطع الأثاث ضمن المتجر ويكون الاقتراح لقطع الأثاث ذات الأشعة الأقرب للشعاع الهدف.