الامارات 7 - باحثو آبل قاموا بتطوير نظام جديد للذكاء الاصطناعي يُدعى ReALM، والذي يمكنه فهم الإشارات الغامضة التي تظهر عبر الشاشة بالإضافة إلى سياق المحادثة والخلفية، مما يتيح تفاعلات طبيعية إضافية مع المساعدين الصوتيين.

ويستفيد النظام ReALM من نماذج لغوية كبيرة لتحليل المهام المعقدة وتحويلها إلى مشكلات نمذجة لغوية، بما في ذلك فهم الإشارات المرئية عبر الشاشة. يتيح هذا النهج لـ ReALM تحقيق أداء ممتاز مقارنة بالأساليب الحالية.

أحد الابتكارات الرئيسية في نظام ReALM هو إعادة بناء الشاشة باستخدام الكيانات المرئية عبر الشاشة وتحليل مواقعها، مما يسمح بإنشاء تمثيل نصي يعكس التخطيط البصري، وهو ما يُمثل تحسينًا كبيرًا على GPT-4 في هذه المهمة.

تحذر آبل من أن الاعتماد الكامل على التحليل الآلي للشاشات له حدود، ومن المحتمل أن يكون هناك حاجة لاستخدام الرؤية الحاسوبية والتقنيات المتعددة الوسائط للتعامل مع المراجع المرئية المعقدة.

تُظهر هذه الابتكارات التزام آبل بتطوير الذكاء الاصطناعي ورغبتها في تحسين تجربة مستخدميها، ومع ذلك، تواجه آبل منافسة شديدة من الشركات الأخرى مثل جوجل وأمازون و OpenAI ومايكروسوفت في مجال الذكاء الاصطناعي.