روبوت مع GPT-6 أسترا ينظف مطبخًا بشكل مستقل

أظهر اختبار آخر أن GPT-6 أسترا يعمل بشكل جيد مع الروبوتات. قدم باحثون من ستانفورد وكالتك نظامًا يسمى HomeBody، الذي يسمح لروبوت Unitree-G1 بالتنقل وتنظيف مطبخ غير معروف واسترجاع العناصر من الأدراج بشكل مستقل.

يتجنب HomeBody استخدام طبقة تحكم مدربة بين نموذج اللغة والروبوت. بدلاً من ذلك، يستدعي نموذج رؤية-لغة قابل للتبديل، وهو هنا GPT أسترا، مكتبة قابلة للتمديد من القدرات مثل الإمساك والتنقل أو فتح الأدراج. يستكشف الروبوت الغرفة أولاً، ويبني توأمًا رقميًا في محاكي نيفيديا إسحاق، ويحفظ العناصر والأماكن في ذاكرة مكانية. وبالتالي، يمكنه العثور على العناصر التي لم تعد في مجال الرؤية. عند تنفيذ مهام مثل "نظف المطبخ"، يخطط نموذج اللغة للخطوات التالية ويصحح الأخطاء بنفسه.

تشمل القيود، وفقًا للباحثين، زمن الاستجابة لأسترا، وسخونة محركات الأصابع، وارتفاع تكاليف المعالجة. الكود متاح على GitHub.

قدمت مؤشرات أداء سابقة لأسترا فهمًا مكانيًا محسّنًا، وأظهرت أخرى عيوبًا محتملة في أمان الروبوت أسترا. أعلنت OpenAI بالفعل عن رغبتها في العودة إلى مجال الروبوتات، بما في ذلك للاستخدام الشخصي.