RU2016144021A - Система, способ и компьютерный программный продукт для обработки взаимодействия человекоподобного робота с человеком - Google Patents

Система, способ и компьютерный программный продукт для обработки взаимодействия человекоподобного робота с человеком Download PDF

Info

Publication number
RU2016144021A
RU2016144021A RU2016144021A RU2016144021A RU2016144021A RU 2016144021 A RU2016144021 A RU 2016144021A RU 2016144021 A RU2016144021 A RU 2016144021A RU 2016144021 A RU2016144021 A RU 2016144021A RU 2016144021 A RU2016144021 A RU 2016144021A
Authority
RU
Russia
Prior art keywords
stimuli
stimulus
group
robot
humanoid robot
Prior art date
Application number
RU2016144021A
Other languages
English (en)
Other versions
RU2664841C2 (ru
RU2016144021A3 (ru
Inventor
БОРНЬ Матиас ЛЕ
Брюно МЕЗОННЬЕ
Жером МОНСО
Тэйлор ВЕЛЬТРО
Тибо ЭРВЬЕ
Гийом ЖАКОБ
Гвеннаэль ГАТ
Original Assignee
Софтбэнк Роботикс Юроп
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Софтбэнк Роботикс Юроп filed Critical Софтбэнк Роботикс Юроп
Publication of RU2016144021A3 publication Critical patent/RU2016144021A3/ru
Publication of RU2016144021A publication Critical patent/RU2016144021A/ru
Application granted granted Critical
Publication of RU2664841C2 publication Critical patent/RU2664841C2/ru

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/0005Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Manipulator (AREA)
  • User Interface Of Digital Computer (AREA)
  • Toys (AREA)

Claims (23)

1. Способ, реализуемый в человекоподобном роботе, для обработки взаимодействия человекоподобного робота с человеком, причем способ содержит этапы:
- запоминания в качестве временных стимулов в хранилище стимулов событий, обнаруживаемых в среде человекоподобного робота, причем эти события запоминают по меньшей мере с указанием положения события; и группируют согласно типу обнаруженного события по меньшей мере в одной из группы стимулов перемещения, группы звуковых стимулов, группы сенсорных стимулов, группы человеческих стимулов, причем хранилище стимулов дополнительно запоминает постоянные стимулы для принуждения к действию человекоподобного робота;
- определения того, что обнаруженное событие соответствует человеческому стимулу, т.е. стимулу, исходящему от человека;
- использования правил уместности, выбора одного стимула среди запомненных стимулов и упомянутого человеческого стимула;
- обработки упомянутого выбранного стимула посредством запуска подпрограммы программного обеспечения конкретного сценария, причем подпрограмма программного обеспечения зависит от текущей деятельности упомянутого человекоподобного робота и от текущего режима контакта с человеком, причем режим контакта представляет связь отслеживания человекоподобного робота с человеком, выполненную таким образом, чтобы робот мог или не мог прервать текущий контакт посредством установления контакта с кем-либо еще; и
- в качестве реакции на этап обработки, генерации одного или нескольких действий человекоподобного робота.
2. Способ по п. 1, в котором события являются одним или несколькими из обнаружения перемещения, тактильного восприятия, локализации звука, обнаружения лиц, визуального восприятия, распознавания изображений.
3. Способ по п. 1 или 2, в котором временные стимулы сгруппированы согласно типу обнаруженного события по меньшей мере в группе стимулов перемещения, группе звуковых стимулов, группе сенсорных стимулов, группе человеческих стимулов.
4. Способ по п. 1 или 2, в котором хранилище стимулов дополнительно содержит группу псевдостимулов для запоминания постоянных стимулов.
5. Способ по п. 4, в котором правила уместности используют приоритетные критерии в отношении групп стимулов и псевдостимулов.
6. Способ по п. 1 или 2, в котором этап определения состоит в использовании информации, обеспечиваемой двумерной камерой и/или трехмерной камерой.
7. Способ по п. 1 или 2, в котором текущей деятельностью человекоподобного робота является отслеживание человека.
8. Способ по п. 1 или 2, в котором этап обработки дополнительно содержит этап использования указания на положение события, соответствующего выбранному стимулу, для определения того, найден ли новый человек в области около направления стимула.
9. Способ по п. 1 или 2, в котором одно или несколько действий человекоподобного робота содержат по меньшей мере активизацию элементов робота.
10. Способ по п. 9, в котором одна из активизаций состоит в ориентировании датчиков в направлении положения обнаруженного стимула.
11. Способ по п. 1 или 2, дополнительно содержащий этап обновления хранилища стимулов с использованием информации о положении найденного нового человека.
12. Способ по п. 1 или 2, дополнительно содержащий этап поддержания человекоподобного робота в визуально активном состоянии, даже когда никакие стимулы не воспринимаются, посредством обеспечения возможности малых перемещений элементов робота, подобных дыханию, или использования светодиодов или воспроизведения звуков.
13. Система для обработки взаимодействия человекоподобного робота с человеком, причем система функционирует под управлением операционной системы и содержит:
- по меньшей мере один процессор; и
- средство, связанное с упомянутым по меньшей мере одним процессором, для реализации этапов способа по любому из пп. 1-12.
14. Компьютерный программный продукт, содержащий:
- компьютерно-читаемую запоминающую среду; и
- программный код, запоминаемый в компьютерно-читаемой запоминающей среде и выполненный с возможностью, при исполнении, предписывать по меньшей мере одному процессору выполнять этапы способа по любому из пп. 1-12.
RU2016144021A 2014-04-17 2015-04-17 Система, способ и компьютерный программный продукт для обработки взаимодействия человекоподобного робота с человеком RU2664841C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14305577.0 2014-04-17
EP14305577.0A EP2933064A1 (en) 2014-04-17 2014-04-17 System, method and computer program product for handling humanoid robot interaction with human
PCT/EP2015/058353 WO2015158876A1 (en) 2014-04-17 2015-04-17 System, method and computer program product for handling humanoid robot interaction with human

Publications (3)

Publication Number Publication Date
RU2016144021A3 RU2016144021A3 (ru) 2018-05-17
RU2016144021A true RU2016144021A (ru) 2018-05-17
RU2664841C2 RU2664841C2 (ru) 2018-08-23

Family

ID=50628736

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2016144021A RU2664841C2 (ru) 2014-04-17 2015-04-17 Система, способ и компьютерный программный продукт для обработки взаимодействия человекоподобного робота с человеком

Country Status (13)

Country Link
US (1) US10144135B2 (ru)
EP (1) EP2933064A1 (ru)
JP (1) JP6495331B2 (ru)
KR (1) KR102003588B1 (ru)
CN (1) CN106660205B (ru)
AU (1) AU2015248794C1 (ru)
BR (1) BR112016023925A2 (ru)
CA (1) CA2945896C (ru)
MX (1) MX2016013018A (ru)
NZ (1) NZ724839A (ru)
RU (1) RU2664841C2 (ru)
SG (1) SG11201608199UA (ru)
WO (1) WO2015158876A1 (ru)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017151517A (ja) * 2016-02-22 2017-08-31 富士ゼロックス株式会社 ロボット制御システム
JP6726388B2 (ja) * 2016-03-16 2020-07-22 富士ゼロックス株式会社 ロボット制御システム
DE112017001573B4 (de) * 2016-03-28 2020-01-30 Groove X, Inc. Autonom agierender Roboter, der eine Begrüssungsaktion durchführt
EP3450118A4 (en) * 2016-04-28 2019-04-10 Fujitsu Limited ROBOT
JP6761598B2 (ja) * 2016-10-24 2020-09-30 富士ゼロックス株式会社 感情推定システム、感情推定モデル生成システム
KR102616403B1 (ko) 2016-12-27 2023-12-21 삼성전자주식회사 전자 장치 및 그의 메시지 전달 방법
US10678338B2 (en) 2017-06-09 2020-06-09 At&T Intellectual Property I, L.P. Determining and evaluating data representing an action to be performed by a robot
WO2018233856A1 (en) * 2017-06-19 2018-12-27 Zhongrui Funing Robotics (Shenyang) Co. Ltd METHOD FOR CONTROLLING ACTIVITIES OF A ROBOT
WO2019087484A1 (ja) * 2017-10-30 2019-05-09 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP2020017206A (ja) * 2018-07-27 2020-01-30 ソニー株式会社 情報処理装置、行動決定方法及びプログラム
US10969763B2 (en) * 2018-08-07 2021-04-06 Embodied, Inc. Systems and methods to adapt and optimize human-machine interaction using multimodal user-feedback
JP7374581B2 (ja) * 2018-10-01 2023-11-07 カシオ計算機株式会社 ロボット、画像処理方法及びプログラム
US11557297B2 (en) 2018-11-09 2023-01-17 Embodied, Inc. Systems and methods for adaptive human-machine interaction and automatic behavioral assessment
JP6886130B2 (ja) * 2019-08-12 2021-06-16 学校法人拓殖大学 感性情報を用いたリハビリテーション支援ロボット
KR20190116190A (ko) * 2019-09-23 2019-10-14 엘지전자 주식회사 로봇
CN115052717A (zh) * 2020-02-17 2022-09-13 香港理工大学 便于老人训练和治疗的治疗机器人
CN113084814B (zh) * 2021-04-13 2022-05-10 中国科学院自动化研究所 基于分布位置优化实现肌肉骨骼机器人运动控制的方法
KR20240148582A (ko) 2023-04-04 2024-10-11 주식회사 렌쥴리에듀테인먼트 특정 프로그램으로 다종 인공지능 휴머노이드 로봇을 제어하는 시스템 및 그 운용방법

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3843740B2 (ja) * 2001-03-09 2006-11-08 独立行政法人科学技術振興機構 ロボット視聴覚システム
US6967455B2 (en) * 2001-03-09 2005-11-22 Japan Science And Technology Agency Robot audiovisual system
JP4689107B2 (ja) * 2001-08-22 2011-05-25 本田技研工業株式会社 自律行動ロボット
KR100898435B1 (ko) * 2001-10-22 2009-05-21 소니 가부시끼 가이샤 로봇 장치 및 그 제어 방법
JP3714268B2 (ja) * 2002-03-18 2005-11-09 ソニー株式会社 ロボット装置
JP4239635B2 (ja) * 2003-03-20 2009-03-18 ソニー株式会社 ロボット装置、その動作制御方法、及びプログラム
JP2004299025A (ja) * 2003-04-01 2004-10-28 Honda Motor Co Ltd 移動ロボット制御装置、移動ロボット制御方法及び移動ロボット制御プログラム
JP4048492B2 (ja) * 2003-07-03 2008-02-20 ソニー株式会社 音声対話装置及び方法並びにロボット装置
JP4244812B2 (ja) * 2004-01-16 2009-03-25 ソニー株式会社 行動制御システム及びロボット装置の行動制御方法
US8488023B2 (en) * 2009-05-20 2013-07-16 DigitalOptics Corporation Europe Limited Identifying facial expressions in acquired digital images
EP2281667B1 (en) * 2005-09-30 2013-04-17 iRobot Corporation Companion robot for personal interaction
US8849691B2 (en) * 2005-12-29 2014-09-30 Microsoft Corporation Modeling user input and interaction in workflow based applications
US8909370B2 (en) * 2007-05-08 2014-12-09 Massachusetts Institute Of Technology Interactive systems employing robotic companions
EP2031517A1 (en) * 2007-08-28 2009-03-04 Toyota Motor Europe NV Methods and systems for data processing and their applications
JP5751610B2 (ja) * 2010-09-30 2015-07-22 学校法人早稲田大学 会話ロボット
US8818556B2 (en) * 2011-01-13 2014-08-26 Microsoft Corporation Multi-state model for robot and user interaction
US9044863B2 (en) * 2013-02-06 2015-06-02 Steelcase Inc. Polarized enhanced confidentiality in mobile camera applications
JP6662773B2 (ja) * 2013-08-02 2020-03-11 ソウル マシーンズ リミティド 神経行動学的アニメーションのためのシステム
US9358685B2 (en) * 2014-02-03 2016-06-07 Brain Corporation Apparatus and methods for control of robot actions based on corrective user inputs

Also Published As

Publication number Publication date
AU2015248794C1 (en) 2018-02-15
WO2015158876A1 (en) 2015-10-22
US10144135B2 (en) 2018-12-04
AU2015248794B2 (en) 2017-11-16
CA2945896A1 (en) 2015-10-22
CN106660205A (zh) 2017-05-10
AU2015248794A1 (en) 2016-10-20
RU2664841C2 (ru) 2018-08-23
CA2945896C (en) 2019-01-15
MX2016013018A (es) 2017-05-30
US20170100842A1 (en) 2017-04-13
SG11201608199UA (en) 2016-10-28
RU2016144021A3 (ru) 2018-05-17
BR112016023925A2 (pt) 2017-08-15
EP2933064A1 (en) 2015-10-21
KR102003588B1 (ko) 2019-07-24
NZ724839A (en) 2018-01-26
JP6495331B2 (ja) 2019-04-03
JP2017513724A (ja) 2017-06-01
KR20170029409A (ko) 2017-03-15
CN106660205B (zh) 2019-12-06

Similar Documents

Publication Publication Date Title
RU2016144021A (ru) Система, способ и компьютерный программный продукт для обработки взаимодействия человекоподобного робота с человеком
JP6726759B2 (ja) 人間/ロボット統合環境のための安全システム
CA2951087C (en) Collision detection
Kuehn et al. An artificial robot nervous system to teach robots how to feel pain and reflexively react to potentially damaging contacts
Bdiwi Integrated sensors system for human safety during cooperating with industrial robots for handing-over and assembling tasks
Bock et al. Exoskeleton and humanoid robotic technology in construction and built environment
CN107544669B (zh) 伪力装置
JP6938980B2 (ja) 情報処理装置、情報処理方法及びプログラム
Kostavelis et al. RAMCIP robot: A personal robotic assistant; demonstration of a complete framework
WO2021258023A1 (en) Robotic intervention systems
Billah et al. Walking hexapod robot in disaster recovery: developing algorithm for terrain negotiation and navigation
D'ippolito et al. Contact estimation in robot interaction
Bonsignorio et al. Fostering progress in performance evaluation and benchmarking of robotic and automation systems [tc spotlight]
Nandikolla et al. A Brain‐Computer Interface for Teleoperation of a Semiautonomous Mobile Robotic Assistive System Using SLAM
Cesta et al. The ROBOCARE Project: Intelligent Systems for Elder Care.
Niitsuma et al. Interaction between a user and a smart electric wheelchair in intelligent space
Gautam et al. Positioning multiple mobile robots for geometric pattern formation: An empirical analysis
Otsuka et al. Algorithm for swarming and following behaviors of multiple mobile robots
Niitsuma et al. An approach of human-smart electric wheelchair interaction in intelligent space
Vargas et al. Donaxi@ HOME Project
Gienger et al. Predictive Behavior Generation—A Sensor-Based Walking and Reaching Architecture for Humanoid Robots
Kurmasheva THE PROGRESS IN ROBOTIC ENGINEERING
Fernandes et al. Mapping study of computer vision tools applied to aid in wheelchair control
Chatty et al. Effect of low level imitation strategy on an autonomous multi-robot system using on-line learning for cognitive map building
Ferrein Robots: challenges, chances and risks for solving 21st century problems

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20200418