· PDF fileÉtude et development d'un manipulateur mobile à deux bras pour...
Transcript of · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour...
![Page 1: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/1.jpg)
![Page 2: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/2.jpg)
Architectures Dynamiques Reconfigurables pour Systèmes Embarqués
Autonomes Mobiles
Reconfigurable and Dynamic Architectures for Mobile Autonomous Embedded Systems
The ADREAM project
![Page 3: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/3.jpg)
•
•
•
•
![Page 4: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/4.jpg)
•
•
–
–
![Page 5: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/5.jpg)
•
![Page 6: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/6.jpg)
A team of cleaning robots
Several semi-autonomous wheelchairs
Several assistive or
companion robots
A group of service robots
![Page 7: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/7.jpg)
•
•
![Page 8: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/8.jpg)
•
•
•
•
•
![Page 9: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/9.jpg)
•
•–
–
–
–
![Page 10: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/10.jpg)
•
•–
–
–
–
–
![Page 11: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/11.jpg)
•
•–––
•
•
![Page 12: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/12.jpg)
•
•
–
![Page 13: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/13.jpg)
![Page 14: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/14.jpg)
•
•
•
•
![Page 15: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/15.jpg)
An Autonomous Interactive Robot guide
Robot Searches for interaction when left alone
Establishes a common task
Programming a H/R task involving several perception and interaction modalities
Abandons mission if guided person stops following
Rackham at « Cité de l’Espace »:
![Page 16: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/16.jpg)
Participating labs:
LAAS, ToulouseEPFL, LausanneIPA, StuttgartKTH, StockholmU. KarlsruheU. BielefeldU. HertfordshireU. AmsterdamVU. Brussels
Funded by the EU FP6 -IST- FET
“Beyond Robotics” Program
![Page 17: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/17.jpg)
••••••
aims developing key components of the next generation of robots, including industrial robots and assist devices (robots of non-industrial applications, e.g. for service, health-care, and entertainment), designed to share the environment and to physically interact with people.
![Page 18: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/18.jpg)
No human aware motion Human aware motion with 2 motion tasks:
• Follow the object path • Look to the object
![Page 19: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/19.jpg)
![Page 20: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/20.jpg)
développement d'un robot mobile autonome équipé de deux bras manipulateurs, système de vision
porter assistance à des personnes handicapées
tâches quotidiennes de manipulation :
- Servir un verre d'eau
- Ramasser un objet
Identification du besoin, validation
Étude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées.
LAAS LIRMM Montpellier LISIF Ivry sur seine CEA-LIST Clinique Union Mutualiste PROPARA
![Page 21: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/21.jpg)
•••••
•••••
•
Designing and developing a network of robots that in a cooperative way interact with human beings and the environment for tasks of guidance and assistance, transportation of goods and persons, and surveillance in urban areas
![Page 22: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/22.jpg)
Functional Layer
Supervisor / Task Allocation
Robot 1
Functional Layer
Supervisor / Task Allocation
Robot n
Ethernet
URUS Wireless network
GSM Interface
Environment Perception
Central Station
Task Allocation
GSM
Network
URUS Global Architecture
Human Supervision
ad-hoc Manet for local /real-time needs (formation ..)
![Page 23: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/23.jpg)
• Two methods integrated on FZI and LAAS robots for RFID-based navigation in a structured environment
• Ground-merged short range RFID-barriers: topological localization between areas
• Long range RFIDs in the environment: metrical localization from directional antennas
The FZI and LAAS robots
equipped with RFID readers
![Page 24: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/24.jpg)
•
•
![Page 25: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/25.jpg)
•
Aerial and Terrestrial
Multi-Robot Platform
Embedded Systems
Distributed Robotic Functions
Model Based Adaptability
Management
Cooperative Multi-Agent Systems
Distributed Autonomous Self-Adaptive Systems
Control Architectures for Multi-robot Cooperation
![Page 26: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/26.jpg)
![Page 27: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/27.jpg)
Execution Control LevelExecution Controller
Decisional LevelProceduralExecutive
(open-PRS)
Temporal PlannerTemporal Executive
(IxTeT)
Functional Level
Communication
SpeedP3D
PosPOM
PosVME
Science
Im. St.Scorrel
Camera Im.
Pos RFLEXPan-Tilt
Unit
DEM Env
GoalNAV
Aspect Obs
Laser RF
Scan
NDD Speed
•
•–
–
–
Execution Control LevelExecution Controller
Decisional LevelProceduralExecutive
(open-PRS)
Temporal PlannerTemporal Executive
(IxTeT)
Functional Level
Communication
SpeedNAV
PosPOM
PosTarget
Camera Im. Pos PilotePan-TiltUnit
FormationPos
cooperation
distributed task achievement
coordination
![Page 28: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/28.jpg)
![Page 29: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/29.jpg)
• Visual-based navigation taking into account obstacles, occlusions, saturations, human-robot joint motions… • Methods: task function framework, integration control-tracking, “multicriteria” analysis
and synthesis of visual servos
![Page 30: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/30.jpg)
![Page 31: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/31.jpg)
Capture de mouvement humain par vision binoculaire
Estimation des ddls pour interprétation de postures
![Page 32: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/32.jpg)
A Control Architecture for a Cognitive Assistant
SHARY: Supervision for a Cognitive Assistant Human Aware Task Planning
Attention Sharing
Soft Motion
Perspective Taking
Human Aware Manipulation
Human Aware Navigation
![Page 33: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/33.jpg)
•
•
•
––––
![Page 34: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/34.jpg)
•
•
•
![Page 35: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/35.jpg)
Sensors and devices
Fixed cameras
Environment sensors
Physiological data
Interface devices and “things”
![Page 36: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/36.jpg)
![Page 37: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/37.jpg)
•
•
•
•
![Page 38: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/38.jpg)
•
•
•
•
![Page 39: · PDF fileÉtude et development d'un manipulateur mobile à deux bras pour l'assistance aux personnes handicapées. LAAS LIRMM Montpellier LISIF Ivry sur seine](https://reader034.fdocuments.us/reader034/viewer/2022051721/5a79834d7f8b9a20368cbc9d/html5/thumbnails/39.jpg)