قدمت OpenAI أحدث نموذج ذكاء صناعي من تطويرها باسم GPT-4 إلى العالم، و الذي يدفع البهجة إلى قلوبنا أن من أوائل الاستخدامات لهذه القدرات الجديدة هو مساعدة الأشخاص الذين يعانون من إعاقات بصرية.
Be My Eyes التطبيق الذي يتيح للمكفوفين وذوي المشاكل البصرية أن يطلبوا من الأشخاص المبصرين أن يساعدونهم عبر وصف ما يصورونه بكاميرات جوالاتهم لهم. سيحصل هذا التطبيق على ما تم تسميته بـ متطوع افتراضي (Virtual Volunteer) مدعوم بالذكاء الصناعي يقوم بتقديم المساعدة في أي وقت.
ظهر تطبيق Be My Eyes في عام 2015، ومع الزمن تحسنت الكاميرات والأدوات الأخرى التي ساعدت في كتابة قصة هذا التطبيق. قصة مساعدة أصحاب المشاكل البصرية على التنقل و حل مشاكلهم المتعلقة بالرؤية ليتمتعوا بالحياة بشكل طبيعي. الإصدار الجديد من التطبيق هو الأول من نوعه الذي يستخدم قدرات GPT-4 المتعددة الوسائط التي يمكنها فحص و فهم الصور بالاضافة إلى الدردشة بشكل قريب من الإنسان:
يمكن للمستخدمين إرسال الصور عبر التطبيق إلى الـ متطوع الافتراضي المدعوم بالذكاء الصناعي (AI-powered Virtual Volunteer)، والذي بدوره سيجيب على أي سؤال حول تلك الصورة ويوفر مساعدة بصرية فورية لمجموعة متنوعة من المهام.
على سبيل المثال، إذا أرسل المستخدم صورة من داخل الثلاجة، سيتمكن المتطوع الافتراضي من معرفة ووصف ما في الصورة بشكل صحيح، سيتمكن أيضًا من اقتراح ما يمكن تحضيره باستخدام هذه المكونات إضافة إلى توفير عدد من الوصفات التي تستخدم هذه المكونات و تقديمها خطوة بخطوة.
الفيديو في الأسفل يحوي أفضل وصف لهذه التقنية الجديدة. يتم عرض فتاة فيه اسمها لوسي تستخدم تطبيق Be My Eyes الذي يساعدها في مجموعة من المهام بشكل مباشر. مثل وصف مظهر الفستان والتعرف على نوع نبات وقراءة خريطة وترجمة ما هو مكتوب على سلعة تجارية والتوجيه إلى جهاز المشي في صالة الرياضة والمساعدة باختيار الأزرار التي يجب ضغطها على ماكينة الشراء. (يمكنك مشاهدة الفيديو أدناه.)
هذا الفيديو هو بيان موجز أيضاً لدرجة الصعوبة التي يواجهها كل من لديه مشكلة في الرؤية في العديد من النواحي الحضارية والتجارية. كما يوضح مدى فائدة نموذج GPT-4 متعدد الوسائط في هذه الحالات.
لا شك أن المتطوعين البشريين سيستمرون في لعب دور فعال لمساعدة مستخدمي تطبيق Be My Eyes – حيث سيتم رفع المستوى الذي سيتم استدعائهم من أجله عند الحاجة ( يمكن استدعاؤهم على الفور إن لم تكن استجابة الذكاء الصناعي جيدة بما فيه الكفاية).
يعمل الفريق في Be My Eyes عن كثب مع OpenAI ومع مجتمعها لتحديد وتوجيه قدراتها مع استمرار تطويرها.
في الوقت الحالي، ميزة المتطوع الافتراضي مازالت في مرحلة تجريبية مغلقة ضمن «مجموعة صغيرة» من مستخدمي Be My Eyes والتي سيتم توسيعها خلال الأسابيع المقبلة. وكتب الفريق: «نأمل أن نجعل المتطوع الافتراضي متاحًا على نطاق واسع في الأشهر المقبلة. تمامًا مثل خدمة التطوع الحالية لدينا، هذه الأداة مجانية لجميع أفراد المجتمع المكفوفين وذوي المشاكل في الرؤية الذين يستخدمون تطبيق Be My Eyes».
