Astra ile Donatılmış Robot, Kendi Kendine Bir Mutfak Temizliyor

Astra ile donatılmış bir robot, Stanford ve Caltech araştırmacıları tarafından geliştirilen HomeBody sistemi sayesinde, bir Unitree-G1 robotunu kendi kendine bilinmeyen bir mutfakta gezinmeye, temizlemeye ve çekmecelerden nesneleri çıkarmaya yönlendiriyor.

Sistem, dil modeli ile robot arasında eğitilmiş bir kontrol katmanı kullanmıyor. Bunun yerine, değiştirilebilir bir Görüntü‑Dil Modeli, burada GPT Astra, doğrudan tutma, gezinme veya çekmece açma gibi genişletilebilir yetenek kütüphanesini çağırıyor. Robot önce alanı keşfediyor, Nvidias Isaac Sim’de dijital bir ikiz oluşturuyor ve nesneleri ile yerleri uzamsal hafızada saklıyor. Böylece, görünür olmayan nesneleri de bulabiliyor. "Mutfak temizle" gibi görevlerde dil modeli sonraki adımları planlıyor ve hataları kendisi düzeltiyor.

Araştırmacılar, Astra’nın gecikmesi, parmak servosunun aşırı ısınması ve yüksek hesaplama maliyetlerini sınırlayıcı olarak belirtiyor. Kod GitHub’da bulunabilir.

Önceki bir benchmark, Astra’nın uzamsal anlayışını önemli ölçüde geliştirdiğini gösterirken, başka bir çalışma bir Astra robotunun güvenlik eksikliklerini ortaya koydu. OpenAI, kişisel kullanım için robotik alanına yeniden girmek istediğini duyurdu.