Real-Time ASL Interpreter

**Real-Time ASL Interpreter** هو نظام ذكاء اصطناعي لترجمة لغة الإشارة الأمريكية (ASL) فورياً إلى جمل إنجليزية مفهومة وطبيعية.

يعتمد المشروع على مسار معالجة (Pipeline) من مرحلتين:

1. **استخراج المعالم:** استخدام **MediaPipe Holistic** لتتبع حركة ومعالم اليدين، الوجه، ووضعية الجسم بدقة من الفيديو المباشر.

2. **الترجمة والتحويل:** استخدام نموذج **Transformer Encoder** للتعرف على الإشارات وتحويلها إلى كلمات وسيطة (Gloss)، ثم توظيف نموذج **GPT-4** لصياغة هذه الكلمات في جمل إنجليزية مكتملة وصحيحة لغوياً.

**أبرز المميزات والإمكانيات:**

* التعرّف الفوري على لغة الإشارة عبر كاميرا الويب (Webcam).

* تصنيف 250 إشارة ASL مختلفة بالاعتماد على معمارية Transformer.

* معالجة لغوية متقدمة لدمج الـGloss في صياغة مفهومة باستخدام GPT-4.

* تدريب النموذج وتطويره باستخدام مكتبة PyTorch.

* ضبط وتحسين المعلمات الفائقة (Hyperparameters) باستخدام أداة Optuna.

* قياس دقة النتائج اللغوية بمعايير موثوقة مثل WER وBLEU.

* استدلال خفيف (Lightweight Inference) يعمل بكفاءة على المعالج (CPU) دون الحاجة لعتاد مكلف.

* الاعتماد على مجموعة بيانات GISLR الضخمة (94,477 عينة تدريبية من 21 مساهماً).

**التقنيات المستخدمة:**

Python, PyTorch, Transformers, MediaPipe, (GPT-4), Optuna, Deep Learning, Computer Vision, NLP.