Verbetering van de bewegingen van de robotpuppy
Onderzoekers van ETH Zürich en Sony Group Corporation hebben RL -modellen ontwikkeld om de robot rustig te helpen lopen en expressief te dansen.
Sony's Aibo, een robotpuppy die is ontworpen als een huishoudelijke metgezel, kan echt hondengedrag nabootsen, zoals lopen op vier benen, reageren op zijn naam, reageren op speelgoed, het uitvoeren van trucs en reageren op knuffels.
Onderzoekers van ETH Zürich en Sony Group Corporation hebben nieuwe modellen voor het leren van versterkingen (RL) ontwikkeld om de capaciteiten van AIBO te verbeteren.Deze modellen zijn bedoeld om de robot te helpen rustig te lopen en expressieve dansroutines uit te voeren.
Gebruikers van de robot hebben het geluid van zijn voetstappen opgemerkt terwijl ze door het huis bewegen.Om dit aan te pakken, ontwikkelden onderzoekers onlangs een op simulatie gebaseerde leer voor versterkingsversterking om de voetcontactsnelheid in een fysica-simulator te verminderen, waardoor stillere wandeling mogelijk is.
Het team heeft een op RL gebaseerde aanpak ontwikkeld om de lawaai te verminderen die AIBO maakt tijdens het lopen.Hun methode past in realtime gezamenlijke stijfheid en demping aan, met behulp van sensorgegevens uit de poten van de robot.Het past ook boetes toe op snelle bewegingen die ruis genereren en geleidelijk stillere stappen aanmoedigen.
De onderzoekers testten hun aanpak op AIBO in real-world experimenten en vergeleken de geluidsniveaus met die geproduceerd met behulp van baseline RL-methoden en de bestaande controllers van Sony.De voortbewegingscontroller vermindert aanzienlijk het geluid dat door de robot wordt geproduceerd tijdens het lopen, waardoor het veel stiller is dan commerciële en conventionele RL -controllers.
Behalve dat Aibo stiller in staat was om stiller te lopen, wilden de onderzoekers de entertainmentmogelijkheden verbeteren.Ze ontwikkelden een model genaamd Deep Fourier Mimic (DFM), dat bewegingsrepresentatie combineert met RL om meer expressieve dansroutines te genereren.
Het team heeft aangetoond dat hun nieuwe dansbeleid gladdere, meer natuurlijke bewegingen mogelijk maakte.Het stelde AIBO ook in staat om op nieuwe manieren met gebruikers te communiceren, zoals dansen naast hen en hun bewegingen nabootsen.
Deze op RF gebaseerde benaderingen kunnen AIBO stiller maken en de entertainmentmogelijkheden verbeteren.Ze kunnen ook worden toegepast op andere huishoudelijke robots of robotsystemen die zijn ontworpen om gasten te entertainen in themaparken wereldwijd.
Het team wil de beperkingen aanpakken die zijn waargenomen tijdens reële testen van hun modellen in toekomstig werk.