جامعة مصر للمعلوماتية تعلن عن برنامج تقني جديد لترجمة فورية للغة الإشارة

أعلنت جامعة مصر للمعلوماتية عن برنامج تقني جديد للترجمة الفورية للغة الإشارة، مما يسهم في دمج شريحة كبيرة من أصحاب الهمم في المجتمع المصري وييسر حياتهم، حيث يسمح لمستخدمي البرنامج التفاهم مع أي شخص فقد القدرة على التحدث سواء من المصابين بالصمم أو ضعاف السمع لكنهم يجيدون لغة الإشارة، وهو الحاجز الذي يؤثر على هذه الشريحة من ذوي الهمم، ويسبب لبعضهم صعوبات في التعامل مع الخدمات الحكومية وحتى في ممارسة حياتهم اليومية بشكل طبيعي.

وأكدت الدكتورة هدى مختار عميد كلية علوم الحاسب والمعلومات ان فكرة المشروع تتوافق مع رؤية وأهداف الكلية والتي تهدف لتشجيع طلابها وخريجيها على الاستفادة من المحتوى العلمي في تطبيقات عملية ذات مردود اقتصادي واجتماعي على المجتمع.

طلاب مصر للمعلوماتية يصممون برنامجا للغة الإشارة

وأضافت أن البرنامج الإلكتروني صممه فريق من طلاب كلية علوم الحاسب والمعلومات يضم أربع طلاب من الفرقة الثالثة وهم أحمد سامح، نور هاني، ليلى خالد، ياسمين محمد، وأطلق على البرنامج اسم مترجم لغة الإشارة (SLI) وهو نموذج تعلم عميق لترجمة لغة الإشارة باستخدام تقنيات الذكاء الاصطناعي التي ساعدت في بناء نظام سريع ودقيق يعمل في الوقت الفعلي(Real Time)، تحويل لغة الإشارة إلى نصوص مكتوبة، حيث يعاني المصابين بالصم وضعاف السمع من تحديات كبيرة في التواصل مع باقي الأفراد ممن لا يجيدون لغة الإشارة خاصة ان الأدوات الحالية للتعامل بينهما غير كافية لسد هذه الفجوة مما يتطلب البحث عن تقنيات الكترونية أكثر فعالية.

وقالت إن الكلية دعما لمشاريع طلابها وباحثيها، أتاحت للفريق الطلابي استخدام معامل الكلية المتخصصة والتي توفر الموارد الحاسوبية المطلوبة للبحث خاصة وان تلك المعامل مجهزة بأفضل المعدات والبرامج التقنية، مما ساعدهم في استكمال البحث وتطوير هذا البرنامج الجديد، وتحقيق نتائج متميزة.

من جانبها اشارت نور هاني أحد أعضاء الفريق البحثي والطالبة بالفرقة الثالثة بكلية علوم الحاسب والمعلومات الي ان المشروع البحثي اعتمد على نهج من مرحلتين هما: 
-  التعرف على الحروف باستخدام تقنيات الرؤية الحاسوبية (Computer Vision) لتحديد الإشارات اليدوية لكل حرف على حده.
-  التعرف على الكلمات من خلال تحليل مقاطع الفيديو لاستخراج إيماءات اليد وحركات الجسم لتنميطها باستخدام الذكاء الاصطناعي (AI) ومعالجة البيانات الزمنية.

وقالت إن البرنامج الجديد يتعرف حاليا على جميع الحروف الإنجليزية وعدد كبير من الكلمات الإنجليزية، حيث يعتمد على قاعدة بيانات تحتوي على 2268 صورة تمت معالجتها لتصغير حجمها وتطبيعها، حيث استخدمنا نموذج ميديابايب (Mediapipe)   وشبكة عصبية (Neural Networks)   مما حقق درجة دقة بنسبة ٩٣٫٣٣٪.

وأضافت أنه للتعرف على الكلمات فقد استخدم الفريق البحثي قاعدة بيانات تحتوي على أكثر من 12 ألف فيديو مما أوجد 46 فيديو لكل كلمة، وبعد تجربة العديد من آليات الانتباه توصلنا الي آلية انتباه إل إس تي إم (LSTM with Attention) تفوقت على جميع النماذج الأخرى بنسبة دقة ٩٠٪.

وأوضحت أن الفريق البحثي يعمل حاليا على توسيع قاعدة بيانات البرنامج لزيادة دقة النتائج، وتكملة العمل لترقية البرنامج إلى المستوي التالي مع تدريبه على لغة الإشارة المصرية، حيث نسعى لتعريب البرنامج في مرحلته المقبلة بحيث تكون الترجمة ثنائية عربي وإنجليزي حيث إن لغة الإشارة الإنجليزية هي أحد أشهر لغات الاشارة المتعارف عليها دوليا مما يسهل تسويق البرنامج في الخارج مستقبلا إلى جانب خدمته للسائحين الأجانب من الصم وضعاف السمع خلال زيارتهم لمصر.

ونقدم لكم من خلال موقع (فيتو)، تغطية ورصدًا مستمرًّا على مدار الـ 24 ساعة لـ أسعار الذهب، أسعار اللحوم ، أسعار الدولار ، أسعار اليورو ، أسعار العملات ، أخبار الرياضة ، أخبار مصر، أخبار اقتصاد ، أخبار المحافظات ، أخبار السياسة، أخبار الحوداث ، ويقوم فريقنا بمتابعة حصرية لجميع الدوريات العالمية مثل الدوري الإنجليزي ، الدوري الإيطالي ، الدوري المصري، دوري أبطال أوروبا ، دوري أبطال أفريقيا ، دوري أبطال آسيا ، والأحداث الهامة و السياسة الخارجية والداخلية بالإضافة للنقل الحصري لـ أخبار الفن والعديد من الأنشطة الثقافية والأدبية.