A robotikai fejlesztés új korszakát hozhatják el az Nvidia újdonságai

Új, mesterséges intelligenciával (MI) támogatott eszközöket mutatott be a robotikai ipar számára az Nvidia a dániai ROSCon 2024 konferencián. A szóban forgó technológiák célja a robotkarok és autonóm mobil robotok fejlesztésének felgyorsítása. Az Nvidia új MI-megoldásai a Robot Operating System (ROS) fejlesztői közösségének szólnak, és a Jetson platformra optimalizáltak – közölte a Robotics & Automation News.

A generatív MI eszközök lehetővé teszik, hogy a robotok érzékeljék környezetük teljes komplexitását, önálló döntéseket hozzanak és természetes módon kommunikáljanak az emberekkel. A ReMEmbR elnevezésű rendszer például nyelvi és látásnyelvi modellekkel kombinálva segíti a robotokat abban, hogy hosszú távú emlékeket alkossanak meg és tároljanak el, amelyek később hozzájárulnak ahhoz, hogy a gépek minél könnyebben tudjanak eligazodni a környezetükben, vagy reagáljanak annak változásaira.

A beszédfelismerésről a WhisperTRT gondoskodik, amely az OpenAI Whisper modelljét használja Nvidia TensorRT technológiával, ezáltal valós idejű ember-robot interakciókat biztosít. Mi több, az Nvidia Riva ASR-TTS rendszer segítségével a robotok képesek felismerni és értelmezni az élőszóban kapott parancsokat is.

A fejlesztők számára kiemelt terület a szimuláció, azaz a robotok széles körű tesztelése. Ehhez biztonságos, virtuális környezetet kínál az Isaac Sim platform. A felület lehetővé teszi továbbá, hogy a fejlesztők összekapcsolják a robotokat az ROS rendszerekkel, kockázatmentessé téve az új fejlesztések kipróbálását.

Az Nvidia legfrissebb, Isaac ROS 3.2 verziója új érzékelési és navigációs lehetőségeket kínál a robotikai fejlesztők számára. Az Isaac Manipulator modul például a FoundationPose és cuMotion segítségével felgyorsítja a tárgyfelismerést és a követést, míg az Isaac Perceptor modul új, vizuális SLAM és többkamerás 3D rekonstrukciós képességeket nyújt, hogy az autonóm robotok teljesítményét akár dinamikus környezetben is növelni lehessen.

Az Nvidia legújabb megoldásai tapinthatóan új korszakot nyitnak a robotikai fejlesztésekben, lehetővé téve a gyorsabb, intelligensebb és megbízhatóbb robotikai alkalmazások létrehozását.

Vörös István, NEW technology