كشفت شركة غوغل عن خطوة تقنية مبتكرة تهدف الى كسر حواجز التواصل لمستخدمي لغة الاشارة عبر هواتف بيكسل. حيث طورت الشركة نموذجا متطورا للذكاء الاصطناعي يعرف باسم إس ال 2 تي لتحويل حركات اليدين والجسم الى نصوص مكتوبة بشكل لحظي ودقيق. وتأتي هذه الميزة الجديدة لتكون متاحة عبر تطبيقي جي بورد ولايف ترانسكرايب. مع التركيز في مرحلتها الاولى على دعم لغة الاشارة الامريكية وتوفير تجربة تواصل اكثر سلاسة وسهولة لمجتمع الصم وضعاف السمع.

واوضحت الشركة ان النظام لا يكتفي بمجرد التعرف على الحركات البسيطة. بل يعمل على تحليل السياق والتركيب اللغوي الكامل للاشارات. وبينت ان لغات الاشارة ليست مجرد ترجمة حرفية للكلمات المنطوقة. بل هي لغات مستقلة تتطلب فهما عميقا لحركات الذراعين وتعبيرات الوجه والجذع لنقل المعنى المقصود بدقة تامة.

واضافت غوغل ان تطوير هذه التقنية واجه تحديات كبيرة في مجال الرؤية الحاسوبية. حيث يتطلب تتبع العناصر الحركية في وقت قصير وبمعدل اطارات عالٍ قدرات معالجة فائقة. واكدت ان هذه الميزة تفوقت على انظمة التعرف على الكلام التقليدية من حيث تعقيد المعالجة البصرية.

كيفية عمل نظام الترجمة الذكي

وكشفت الشركة ان التقنية تعتمد على تحويل لقطات الكاميرا الى بيانات هندسية دقيقة بدلا من ارسال الفيديو الخام. واوضحت ان النظام يستخدم اداة ميديا بايب هوليستيك لتحديد مواقع النقاط على جسم المستخدم. مما يضمن معالجة البيانات بكفاءة عالية وحماية خصوصية المستخدمين عبر التخلص من الفيديو الاصلي فور تحويله الى نصوص.

وتابعت ان النموذج يتجاوز المراحل الوسيطة التقليدية في معالجة اللغات. حيث يقوم بتحويل سلسلة الاحداثيات الحركية مباشرة الى نص مفهوم. واشارت الى ان هذا الاسلوب يمنح النظام مرونة اكبر في التعامل مع التراكيب المكانية والعلامات غير اليدوية التي تعد جزءا اساسيا من لغة الاشارة.

وشددت غوغل على ان قوة هذا النظام تكمن في حجم البيانات الضخم الذي تدرب عليه. وبينت انه تم تدريب النموذج على اكثر من 100 الف ساعة من البيانات التي تغطي اكثر من 50 لغة اشارة مختلفة. مما ساعد النظام على تعلم انماط مشتركة وتحقيق نتائج متميزة في اختبارات الاداء.

دعم المستخدم وتجربة التواصل اليومي

واكدت الشركة ان الميزة تهدف الى جعل لغة الاشارة بديلا فعالا للكتابة التقليدية على الهواتف. واضافت ان المستخدمين يمكنهم الان استخدام لغة الاشارة للبحث في الانترنت او كتابة الرسائل وحتى التفاعل مع الذكاء الاصطناعي جيميناي لتنفيذ مهام متنوعة.

وبينت النتائج الاولية ان التواصل عبر الاشارة كان اسرع واكثر طبيعية في العديد من السيناريوهات اليومية مقارنة بالكتابة التقليدية. واوضحت ان تطبيق لايف ترانسكرايب يتيح للمستخدمين الرد على المحادثات مباشرة بلغة الاشارة. مما يعزز من كفاءة التواصل في الوقت الفعلي.

واشار خبراء التقنية الى ان غوغل تواصل التعاون الوثيق مع مجتمع الصم لضمان دقة النظام. واكدت الشركة ان هناك لجنة استشارية متخصصة تتابع تطوير الميزة لضمان تلبيتها لاحتياجات المستخدمين الحقيقية في مختلف المواقف الاجتماعية.

تحديات المستقبل وتوسيع الدعم

وكشفت غوغل ان هذه الميزة لا تزال في مراحلها الاولى ولا تدعي الكمال التام. واوضحت ان هناك بعض المشكلات التي قد تظهر مع التهجئة السريعة او الاشارات النادرة التي تتطلب سياقا اضافيا لفهمها.

واضافت الشركة انها تعمل باستمرار على تحسين زمن الاستجابة ومنع الاخطاء الناتجة عن الحركة العشوائية. وبينت ان التطوير شمل تحسين الاداء للمستخدمين الذين يفضلون الاشارة بيد واحدة او الذين يستخدمون اليد اليسرى.

واختتمت غوغل بان اطلاق هذه التقنية على هواتف بيكسل يمثل بداية لمشروع اكبر. واكدت ان الخطط المستقبلية تشمل توسيع الدعم ليشمل لغات اشارة عالمية اضافية وتطوير قدرات توليد الاشارة مستقبلا لتحويل الهاتف الى مترجم فوري شامل.