JP2022173971A - ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 - Google Patents
ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 Download PDFInfo
- Publication number
- JP2022173971A JP2022173971A JP2021098053A JP2021098053A JP2022173971A JP 2022173971 A JP2022173971 A JP 2022173971A JP 2021098053 A JP2021098053 A JP 2021098053A JP 2021098053 A JP2021098053 A JP 2021098053A JP 2022173971 A JP2022173971 A JP 2022173971A
- Authority
- JP
- Japan
- Prior art keywords
- information
- robot
- user
- identification information
- present
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 20
- 230000009471 action Effects 0.000 claims abstract description 51
- 230000033001 locomotion Effects 0.000 claims description 26
- 230000003542 behavioural effect Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 37
- 230000000875 corresponding effect Effects 0.000 description 30
- 230000006870 function Effects 0.000 description 23
- 230000006399 behavior Effects 0.000 description 21
- 238000012545 processing Methods 0.000 description 10
- 230000001276 controlling effect Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 3
- 235000013361 beverage Nutrition 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000035622 drinking Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000036544 posture Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
- G05B19/4155—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by programme execution, i.e. part programme or machine function execution, e.g. selection of a programme
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
- B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
- A47F7/00—Show stands, hangers, or shelves, adapted for particular articles or materials
- A47F7/28—Show stands, hangers, or shelves, adapted for particular articles or materials for containers, e.g. flasks, bottles, tins, milk packs
- A47F7/283—Show stands or the like having a compartment for each container
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/0045—Manipulators used in the food industry
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/008—Manipulators for service tasks
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
- B25J13/003—Controls for manipulators by means of an audio-responsive input
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J5/00—Manipulators mounted on wheels or on carriages
- B25J5/007—Manipulators mounted on wheels or on carriages mounted on wheels
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1602—Programme controls characterised by the control system, structure, architecture
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0255—Control of position or course in two dimensions specially adapted to land vehicles using acoustic signals, e.g. ultra-sonic singals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47B—TABLES; DESKS; OFFICE FURNITURE; CABINETS; DRAWERS; GENERAL DETAILS OF FURNITURE
- A47B31/00—Service or tea tables, trolleys, or wagons
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J5/00—Manipulators mounted on wheels or on carriages
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/39—Robotics, robotics to robotics hand
- G05B2219/39441—Voice command, camera detects object, grasp, move
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/40—Robotics, robotics mapping to robotics vision
- G05B2219/40411—Robot assists human in non-industrial environment like home or office
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/50—Machine tool, machine tool null till machine tool work handling
- G05B2219/50391—Robot
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Aviation & Aerospace Engineering (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Food Science & Technology (AREA)
- Manufacturing & Machinery (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Electromagnetism (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Manipulator (AREA)
- Signal Processing (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
200:ロボット制御システム
210:情報獲得部
220:識別情報決定部
230:動作決定部
240:通信部
250:制御部
300:ロボット
Claims (13)
- ロボットを制御するための方法であって、
サービス提供場所で使用者からロボットに対する音声情報および行動情報のうち少なくとも一つを獲得する段階、
前記音声情報および行動情報のうち少なくとも一つに基づいて前記使用者に関する識別情報を決定する段階、および
前記識別情報に基づいて前記ロボットによって遂行される動作を決定する段階を含む、方法。 - 前記識別情報決定段階で、前記音声情報および行動情報のうち少なくとも一つを基準音声情報および基準行動情報のうち少なくとも一つとそれぞれ比較することによって前記使用者に関する識別情報を決定する、請求項1に記載の方法。
- 前記基準音声情報および基準行動情報のうち少なくとも一つはあらかじめ設定される、請求項2に記載の方法。
- 前記識別情報決定段階で、前記使用者に関連するグループを前記使用者に関する識別情報として決定する、請求項1に記載の方法。
- 前記識別情報決定段階で、第1グループが前記使用者に関連するグループとして決定される場合に、
前記動作決定段階で、前記音声情報および行動情報のうち少なくとも一つにさらに基づいて前記ロボットによって遂行される動作を決定する、請求項4に記載の方法。 - 前記識別情報決定段階で、第1グループが前記使用者に関連するグループとして決定される場合に、
前記動作決定段階で、前記ロボットの現在状況に関する情報にさらに基づいて前記ロボットによって遂行される動作を決定する、請求項4に記載の方法。 - 請求項1に記載された方法を実行するための、コンピュータプログラムを記録した非一過性のコンピュータ読み取り可能記録媒体。
- ロボットを制御するためのシステムであって、
サービス提供場所で使用者からロボットに対する音声情報および行動情報のうち少なくとも一つを獲得する情報獲得部、
前記音声情報および行動情報のうち少なくとも一つに基づいて前記使用者に関する識別情報を決定する識別情報決定部、および
前記識別情報に基づいて前記ロボットによって遂行される動作を決定する動作決定部を含む、システム。 - 前記識別情報決定部は、前記音声情報および行動情報のうち少なくとも一つを基準音声情報および基準行動情報のうち少なくとも一つとそれぞれ比較することによって前記使用者に関する識別情報を決定する、請求項8に記載のシステム。
- 前記基準音声情報および基準行動情報のうち少なくとも一つはあらかじめ設定される、請求項9に記載のシステム。
- 前記識別情報決定部は、前記使用者に関連するグループを前記使用者に関する識別情報として決定する、請求項8に記載のシステム。
- 前記識別情報決定部により第1グループが前記使用者に関連するグループとして決定される場合に、
前記動作決定部は、前記音声情報および行動情報のうち少なくとも一つにさらに基づいて前記ロボットによって遂行される動作を決定する、請求項11に記載のシステム。 - 前記識別情報決定部により第1グループが前記使用者に関連するグループとして決定される場合に、
前記動作決定部は、前記ロボットの現在状況に関する情報にさらに基づいて前記ロボットによって遂行される動作を決定する、請求項11に記載のシステム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023113411A JP2023130462A (ja) | 2021-05-10 | 2023-07-11 | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/315,641 | 2021-05-10 | ||
US17/315,641 US20220357721A1 (en) | 2021-05-10 | 2021-05-10 | Method, system, and non-transitory computer-readable recording medium for controlling a robot |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023113411A Division JP2023130462A (ja) | 2021-05-10 | 2023-07-11 | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022173971A true JP2022173971A (ja) | 2022-11-22 |
Family
ID=83901020
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021098053A Pending JP2022173971A (ja) | 2021-05-10 | 2021-06-11 | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 |
JP2023113411A Pending JP2023130462A (ja) | 2021-05-10 | 2023-07-11 | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023113411A Pending JP2023130462A (ja) | 2021-05-10 | 2023-07-11 | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220357721A1 (ja) |
EP (1) | EP4337427A1 (ja) |
JP (2) | JP2022173971A (ja) |
KR (2) | KR20220152901A (ja) |
WO (1) | WO2022240678A1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009031486A1 (ja) * | 2007-09-06 | 2009-03-12 | Olympus Corporation | ロボット制御システム、ロボット、プログラム及び情報記憶媒体 |
WO2015093382A1 (ja) * | 2013-12-20 | 2015-06-25 | Re & Do 株式会社 | サービス提供管理システム |
JP2017182261A (ja) * | 2016-03-29 | 2017-10-05 | 大日本印刷株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2018118352A (ja) * | 2017-01-26 | 2018-08-02 | 株式会社日立製作所 | ロボット制御システムおよびロボット制御方法 |
JP2020027495A (ja) * | 2018-08-14 | 2020-02-20 | ウィルベース株式会社 | 販売支援システムおよび販売支援方法 |
JP6788710B1 (ja) * | 2019-08-01 | 2020-11-25 | エコモット株式会社 | 画像出力装置及び画像出力方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080008528A (ko) * | 2006-07-20 | 2008-01-24 | 주식회사 유진로봇 | 고객 접대 기능을 가지는 서빙 로봇 |
KR102140292B1 (ko) * | 2017-12-27 | 2020-07-31 | (주) 퓨처로봇 | 로봇 서비스 학습 시스템 및 그 방법 |
KR102315925B1 (ko) * | 2019-01-03 | 2021-10-21 | 삼성전자주식회사 | 이동 로봇 및 그의 동작 방법 |
WO2020246643A1 (ko) * | 2019-06-07 | 2020-12-10 | 엘지전자 주식회사 | 서빙 로봇 및 그를 이용한 고객 접대 방법 |
WO2020256160A1 (ko) * | 2019-06-17 | 2020-12-24 | 엘지전자 주식회사 | 인공지능 홈 로봇 및 그의 제어 방법 |
KR20190098926A (ko) * | 2019-08-05 | 2019-08-23 | 엘지전자 주식회사 | 로봇 및 상기 로봇의 서비스 제공 방법 |
KR20210085696A (ko) * | 2019-12-31 | 2021-07-08 | 삼성전자주식회사 | 전자 장치의 움직임을 결정하는 방법 및 이를 사용하는 전자 장치 |
-
2021
- 2021-05-10 US US17/315,641 patent/US20220357721A1/en active Pending
- 2021-05-27 KR KR1020210068395A patent/KR20220152901A/ko not_active IP Right Cessation
- 2021-06-11 JP JP2021098053A patent/JP2022173971A/ja active Pending
-
2022
- 2022-05-06 EP EP22808085.9A patent/EP4337427A1/en active Pending
- 2022-05-06 WO PCT/US2022/028053 patent/WO2022240678A1/en active Application Filing
-
2023
- 2023-07-11 JP JP2023113411A patent/JP2023130462A/ja active Pending
- 2023-07-20 KR KR1020230094424A patent/KR20230115280A/ko not_active Application Discontinuation
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009031486A1 (ja) * | 2007-09-06 | 2009-03-12 | Olympus Corporation | ロボット制御システム、ロボット、プログラム及び情報記憶媒体 |
WO2015093382A1 (ja) * | 2013-12-20 | 2015-06-25 | Re & Do 株式会社 | サービス提供管理システム |
JP2017182261A (ja) * | 2016-03-29 | 2017-10-05 | 大日本印刷株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2018118352A (ja) * | 2017-01-26 | 2018-08-02 | 株式会社日立製作所 | ロボット制御システムおよびロボット制御方法 |
JP2020027495A (ja) * | 2018-08-14 | 2020-02-20 | ウィルベース株式会社 | 販売支援システムおよび販売支援方法 |
JP6788710B1 (ja) * | 2019-08-01 | 2020-11-25 | エコモット株式会社 | 画像出力装置及び画像出力方法 |
Also Published As
Publication number | Publication date |
---|---|
KR20220152901A (ko) | 2022-11-17 |
US20220357721A1 (en) | 2022-11-10 |
EP4337427A1 (en) | 2024-03-20 |
KR20230115280A (ko) | 2023-08-02 |
WO2022240678A1 (en) | 2022-11-17 |
JP2023130462A (ja) | 2023-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200046169A1 (en) | Robot system and control method of the same | |
JP2022173971A (ja) | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 | |
US20230032760A1 (en) | Method, system, and non-transitory computer-readable recording medium for controlling a serving robot | |
KR102655839B1 (ko) | 로봇을 제어하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 | |
KR102567222B1 (ko) | 서빙 로봇을 제어하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 | |
JP7209768B2 (ja) | ロボットを制御するための方法、システムおよび非一過性のコンピュータ読み取り可能記録媒体 | |
KR102560467B1 (ko) | 패트롤링 로봇을 제어하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 | |
US11919146B2 (en) | Method, system, and non-transitory computer-readable recording medium for controlling a serving robot | |
KR102573115B1 (ko) | 서빙 로봇을 제어하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 | |
WO2022260999A1 (en) | Method, system, and non-transitory computer-readable recording medium for controlling a robot |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210611 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220623 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220823 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221122 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230314 |