Bu robot herhangi bir yardıma ihtiyaç duymadan bir odayı toplayabiliyor

Sistemi geliştirmek için New York Üniversitesi ve Meta’dan araştırmacılar, Hello Robot tarafından üretilen, tekerlekli bir ünite, uzun bir direk ve geri çekilebilir bir koldan oluşan ticari olarak satılan bir robot olan Stretch’i beş evde toplam 10 odada test etti.

Robotla aynı odadayken bir araştırmacı, robotla paylaşmak üzere 3 boyutlu bir video çekmek için telefonun lidar sistemini kullanan bir iPhone uygulaması olan Record3D’yi kullanarak çevreyi tarayacaktı.

OK-Robot sistemi daha sonra videonun kareleri üzerinde açık kaynaklı bir yapay zeka nesne algılama modeli çalıştırdı. Bu, diğer açık kaynaklı modellerle birlikte robotun o odadaki oyuncak bir ejderha, bir tüp diş macunu ve bir paket oyun kağıdı gibi nesnelerin yanı sıra bir sandalye, bir masa gibi odanın etrafındaki yerleri tanımlamasına yardımcı oldu. ve bir çöp kutusu.

Ekip daha sonra robota belirli bir öğeyi alıp yeni bir yere taşıması talimatını verdi. Robotun kıskaç kolu bunu vakaların %58,5’inde başarıyla gerçekleştirdi; Daha az dağınık olan odalarda başarı oranı %82’ye yükseldi. (Onların araştırma henüz hakem incelemesinden geçmemiştir.)

son zamanlarda yapay zeka patlaması Google DeepMind’ın kıdemli bilgisayarlı görme araştırma bilimcisi Matthias Minderer, robotik araştırmacılarının üç yıl önce bile var olmayan açık kaynaklı yapay zeka modellerine ve araçlarına erişmesine olanak tanıyarak, dil ve bilgisayarlı görme yeteneklerinde muazzam sıçramalara yol açtığını söylüyor. projeye dahil değil.

“Tamamen kullanıma hazır modellere güvenmenin oldukça alışılmadık bir durum olduğunu ve bunların çalışmasını sağlamanın oldukça etkileyici olduğunu söyleyebilirim” diyor.