EO

Spiersignalen besturen robot (video)

04 juni 2020 om 16:53 uur

Intuïtiviteit is moeilijk te leren, vooral aan een machine. Om dit te verbeteren, bedacht een team van MIT's Computer Science and Artificial Intelligence Laboratory (CSAIL) een methode die ons dichter bij een meer naadloze samenwerking tussen mens en robot brengt. Conduct-A-Bot gebruikt menselijke spiersignalen om, via draagbare sensoren, de beweging van een robot te sturen.


"We stellen ons een wereld voor waarin machines mensen helpen met cognitief en fysiek werk en om dat te doen, passen ze zich aan mensen aan in plaats van andersom", zegt Daniela Rus, directeur van CSAIL en co-auteur van een paper over het systeem.

 

Om naadloos teamwerk tussen mens en machine mogelijk te maken, worden elektromyografische en bewegingssensoren gedragen op de biceps, triceps en onderarmen om spiersignalen en beweging te meten. Algoritmen verwerken de signalen om gebaren in realtime te detecteren, zonder offline kalibratie of training per gebruiker. Het systeem gebruikt slechts twee of drie draagbare sensoren en niets in de omgeving - waardoor de drempel voor gebruik wordt verkleind.

 

Conduct-A-Bot kan worden gebruikt voor verschillende scenario's, waaronder het navigeren door menu's op elektronische apparaten of het toezicht houden op autonome robots. Voor het onderzoek gebruikte het team een Parrot Bebop 2-drone, hoewel elke commerciële drone kon worden gebruikt.

Door acties te detecteren, zoals rotatiegebaren, het ballen van de vuisten, het spannen van armen en het activeren van onderarmen, kan Conduct-A-Bot de drone naar links, rechts, omhoog, omlaag en vooruit bewegen en hem laten draaien en stoppen.

 

Tijdens tests waarbij hij door hoepels moest vliegen, reageerde de drone correct op 82 procent van 1.500 menselijke gebaren toen hij op afstand werd bestuurd. Het systeem identificeerde ook ongeveer 94 procent van de gebarende gebaren correct wanneer hij niet werd bestuurd.

 

"Door onze gebaren te begrijpen, kunnen robots meer non-verbale aanwijzingen interpreteren die we van nature in het dagelijks leven gebruiken", zegt hoofdauteur Joseph DelPreto. "Dit type systeem kan helpen om de interactie met een robot meer te laten lijken op de interactie met een andere persoon, en het voor iemand gemakkelijker te maken om robots te gaan gebruiken zonder eerdere ervaring of externe sensoren."

 

Dit type systeem kan uiteindelijk gericht zijn op een reeks toepassingen voor samenwerking tussen mens en robot, waaronder verkenning op afstand, ondersteunende persoonlijke robots of productietaken zoals het afleveren van objecten of het tillen van materialen.

 

De tools passen ook in een samenleving waar mensen afstand van elkaar houden en kunnen mogelijk een gebied van toekomstig contactloos werk openen. Je kunt je bijvoorbeeld voorstellen dat machines door mensen worden bestuurd om een ziekenhuiskamer veilig schoon te maken of medicijnen af te geven, terwijl wij mensen op veilige afstand blijven.

 

Spiersignalen kunnen bovendien informatie geven over moeilijk te observeren toestanden, zoals gewrichtsstijfheid of vermoeidheid. Als je bijvoorbeeld een video bekijkt van iemand die een grote doos vasthoudt, kan het moeilijk zijn om te raden hoeveel inspanning of kracht er nodig was - en een machine zou het ook moeilijk vinden om dat te zien. Het gebruik van spiersensoren biedt mogelijkheden om niet alleen beweging in te schatten, maar ook de kracht en het koppel die nodig zijn om dat fysieke traject uit te voeren.

 

Voor de gebarenwoordenschat die momenteel wordt gebruikt om de robot te besturen, werden de bewegingen als volgt gedetecteerd:

  • verstijving van de bovenarm om de robot te stoppen (vergelijkbaar met kort ineenkrimpen wanneer je iets verkeerd ziet zien): biceps en triceps spier signalen
  • de hand naar links / rechts en omhoog / omlaag zwaaien om de robot zijwaarts of verticaal te bewegen: signalen van de onderarmspieren (waarbij de onderarmversnellingsmeter de handoriëntatie aangeeft);
  • vuist balde om de robot naar voren te bewegen: signalen van de onderarmspieren; en
  • rechtsom / linksom draaien om de robot te draaien: onderarmgyroscoop.

 

Machine learning-classificaties hebben de gebaren gedetecteerd met behulp van de draagbare sensoren. Ongecontroleerde classificatoren verwerkten de spier- en bewegingsgegevens en clusteerden deze in realtime om te leren hoe gebaren te scheiden van andere bewegingen. Een neuraal netwerk voorspelde ook flexie of extensie van de pols door signalen van de onderarmspieren.

Het systeem kalibreert zichzelf in wezen op de signalen van elke persoon terwijl ze gebaren maken die de robot besturen, waardoor het voor tijdelijke gebruikers sneller en gemakkelijker wordt om interactie met robots aan te gaan.

 

In de toekomst hoopt het team de tests uit te breiden met meer voorbeelden. En terwijl de bewegingen voor Conduct-A-Bot veelvoorkomende gebaren voor robotbewegingen omvatten, willen de onderzoekers de ‘woordenschat' uitbreiden met meer continue of door de gebruiker gedefinieerde gebaren.

 

"Uiteindelijk hopen we dat de robots van deze interacties leren om de taken beter te begrijpen en meer voorspellende hulp te bieden of hun autonomie te vergroten. Dit systeem komt een stap dichterbij om ons naadloos met robots te laten werken, zodat ze effectievere en intelligentere tools kunnen worden voor alledaagse taken", zegt DelPreto.

 

Gerelateerd nieuws

Nieuwe scanmethode keert objecten razendsnel binnenstebuiten

Nieuwe scanmethode keert objecten razendsnel binnenstebuiten

Live meekijken met een CT-scan in plaats van achteraf de beelden pas te analyseren. Als het aan de Leidse wiskundige Jan-Willem Buurlage ligt, is dat binnenkort realiteit. Hij ontwikkelt methodes om de algoritmes achter…

Deep drone acrobatiek

Deep drone acrobatiek (video)

Een aan de Universiteit van Zürich ontwikkeld navigatiealgoritme stelt drones in staat uitdagende acrobatische manoeuvres te leren. Autonome quadcopters kunnen met simulaties worden getraind om hun snelheid,…

Onder-water-WiFi

Aqua-Fi brengt internet onder water

Communiceren onder water is altijd een gedoe geweest. Radiogolven komen niet ver voordat ze volledig door het water worden opgenomen. Akoestische transmissies (zoals sonar) hebben de voorkeur, maar hebben een zeer lage…

Webshop

webshop

 

Gratis nieuwsbrief

EOL

 

Product van de maand

RSS
Nieuwe kleine transponderschakelaar CTM

De nieuwe CTM is heel klein en is geschikt voor elke radius vanaf slechts 15cm. Toch is het een volwaardige PL e - Cat....

Focus op

ABB BV
ABB BV

Machineveiligheid, systemen en componenten

B&R Industriële Automatisering BV *
B&R Industriële Automatisering BV *

Perfection in Automation

Elobau Benelux BV *
Elobau Benelux BV *

creating sustainable solutions

Pilz Nederland
Pilz Nederland

Voor industriële (veilige) automatiseringsoplossingen

Ringspann Benelux BV
Ringspann Benelux BV

Partner in aandrijf- en opspantechniek

Rotero Holland BV
Rotero Holland BV

Stappenmotor - Servomotor - Elektro Magneet

Download gratis engineering boeken

A gratis boeken downloaden

 

Agenda

14 juli 2020, online

Hannover Messe Digital Days

Een digitaal overzicht van actuele ontwikkelingen op het gebied van industrie, energie en logistiek en...

11 augustus 2020, Vianen

Masterclass Machineveiligheid XL

11, 12 , 18, 19 augustus 2020

19 augustus 2020, Vianen

Machineveiligheid in een dag

Meer agendapunten »