JP6681940B2 - ユーザの位置及び空間に適した情報を能動的に提供する方法及び装置 - Google Patents
ユーザの位置及び空間に適した情報を能動的に提供する方法及び装置 Download PDFInfo
- Publication number
- JP6681940B2 JP6681940B2 JP2018104651A JP2018104651A JP6681940B2 JP 6681940 B2 JP6681940 B2 JP 6681940B2 JP 2018104651 A JP2018104651 A JP 2018104651A JP 2018104651 A JP2018104651 A JP 2018104651A JP 6681940 B2 JP6681940 B2 JP 6681940B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- information
- space
- electronic device
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 52
- 230000004044 response Effects 0.000 claims description 39
- 230000005236 sound signal Effects 0.000 claims description 20
- 238000004891 communication Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 13
- 238000013459 approach Methods 0.000 claims description 5
- 230000000694 effects Effects 0.000 claims description 5
- 238000000059 patterning Methods 0.000 claims 2
- 238000013473 artificial intelligence Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 15
- 230000006399 behavior Effects 0.000 description 14
- 230000015654 memory Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 8
- 238000003860 storage Methods 0.000 description 8
- 241000234282 Allium Species 0.000 description 6
- 235000002732 Allium cepa var. cepa Nutrition 0.000 description 6
- 230000005611 electricity Effects 0.000 description 5
- 238000011161 development Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000009118 appropriate response Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 235000013601 eggs Nutrition 0.000 description 2
- 230000010363 phase shift Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 238000005303 weighing Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 235000008429 bread Nutrition 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000004615 ingredient Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
- G01S15/06—Systems determining the position data of a target
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/04—Segmentation; Word boundary detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- General Health & Medical Sciences (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Otolaryngology (AREA)
- Automation & Control Theory (AREA)
- Computational Linguistics (AREA)
- User Interface Of Digital Computer (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Description
110:ユーザ
140:IPTV
150:モバイル機器
220:外部サーバ
Claims (17)
- 音声基盤の入力/出力インタフェース、及び
コンピュータで読み取り可能な命令を実行するように実現される少なくとも1つのプロセッサ
を含み、
前記少なくとも1つのプロセッサは、
室内の区画された複数の空間の中からユーザが位置する空間の種類を決定し、
前記音声基盤の入力/出力インタフェースで受信されるユーザの音声要請を、前記決定された空間の種類に応じた意味に解釈して、前記ユーザに提供する情報を決定し、該決定された情報を、前記音声基盤の入力/出力インタフェースを通じてユーザに提供すること
を特徴とする、情報提供装置。 - 前記音声基盤の入力/出力インタフェースは、
音信号を出力するスピーカ、及び
マルチチャンネルマイク
を含み、
前記少なくとも1つのプロセッサは、
前記スピーカから出力される音信号と、前記出力された音信号が空間で反射することによって前記マルチチャンネルマイクにチャンネル別に入力される反射信号に基づき、前記複数の空間に関する情報を取得し、
前記取得した複数の空間に関する情報と、ユーザの発話に基づいて測定されるユーザの位置により、ユーザの位置と特定の空間をマッチングすること
を特徴とする、請求項1に記載の情報提供装置。 - ユーザの接近を感知するセンサを含む複数のサブ機器と通信する通信インタフェース
をさらに含み、
前記少なくとも1つのプロセッサは、
前記複数のサブ機器それぞれが位置する空間に関する情報を管理し、
前記通信インタフェースにより、前記複数のサブ機器から受信されるセンサ情報と、前記複数のサブ機器それぞれが位置する空間に関する情報に基づいてユーザが位置する空間を決定すること
を特徴とする、請求項1に記載の情報提供装置。 - 前記少なくとも1つのプロセッサは、
前記ユーザが位置する空間別のユーザの発話内容と前記発話内容と関連するユーザの活動のうちの少なくとも一方のユーザ情報を時間帯別にパターン化し、
前記空間別及び時間帯別にパターン化されたユーザ情報に基づいて前記複数の空間それぞれの種類を決定すること
を特徴とする、請求項1に記載の情報提供装置。 - 前記少なくとも1つのプロセッサは、
現在の時間帯及び現在ユーザが位置する空間でのユーザの予測状況又は予測行動を、前記空間別及び時間帯別にパターン化されたユーザ情報及び現在ユーザが位置する空間の種類に基づいて決定すること
を特徴とする、請求項4に記載の情報提供装置。 - 前記少なくとも1つのプロセッサは、
前記決定されたユーザの予測状況又は予測行動に基づき、前記ユーザの発話内容を特定の単語の意味に解釈する確率を動的に調整するか、又は前記ユーザの発話内容に応じて前記ユーザに提供する情報を決定すること
を特徴とする、請求項5に記載の情報提供装置。 - 前記少なくとも1つのプロセッサは、
前記決定されたユーザの予測状況又は予測行動に基づき、前記ユーザからの音声要請がなくても前記ユーザに提供する情報を能動的に決定すること
を特徴とする、請求項5に記載の情報提供装置。 - 複数の出力メディアと通信する通信インタフェース
をさらに含み、
前記少なくとも1つのプロセッサは、
前記複数の出力メディアの位置とユーザの位置に基づいて前記複数の出力メディアの中から少なくとも1つの出力メディアを決定し、
ユーザに提供するための情報が前記決定された少なくとも1つの出力メディアから出力されるように、前記通信インタフェースによって前記ユーザに提供するための情報を前記決定された少なくとも1つの出力メディアに送信すること
を特徴とする、請求項1に記載の情報提供装置。 - 前記少なくとも1つのプロセッサは、
ユーザの位置が変更される場合、前記変更されたユーザの位置に応じて出力メディアを変更し、
前記ユーザに提供するための情報が前記変更された出力メディアから連続的に出力されるように、前記通信インタフェースを通じて前記ユーザに提供するための情報を前記変更された出力メディアに送信すること
を特徴とする、請求項8に記載の情報提供装置。 - 情報提供装置の情報提供方法であって、
室内の区画された複数の空間の中からユーザが位置する空間の種類を決定する段階、及び
前記情報提供装置に含まれる音声基盤の入力/出力インタフェースで受信されるユーザの音声要請を、前記決定された空間の種類に応じた意味に解釈して、前記ユーザに提供する情報を決定し、該決定された情報を、前記音声基盤の入力/出力インタフェースを通じてユーザに提供する段階
を含むことを特徴とする、情報提供方法。 - 前記ユーザが位置する空間を決定する段階は、
前記音声基盤の入力/出力インタフェースが含むスピーカから出力される音信号と、前記出力された音信号が空間で反射することによって前記音声基盤の入力/出力インタフェースが含むマルチチャンネルマイクにチャンネル別に入力される反射信号に基づき、前記複数の空間に関する情報を取得する段階、及び
前記取得した複数の空間に関する情報と、ユーザの発話に基づいて測定されるユーザの位置により、ユーザの位置と空間をマッチングする段階
を含むことを特徴とする、請求項10に記載の情報提供方法。 - 前記ユーザが位置する空間を決定する段階は、
ユーザの接近を感知するセンサを含む複数のサブ機器それぞれが位置する空間に関する情報を管理する段階、及び
前記情報提供装置の通信インタフェースにより、前記複数のサブ機器から受信されるセンサ情報と、前記複数のサブ機器それぞれが位置する空間に関する情報に基づいてユーザが位置する空間を決定すること
を特徴とする、請求項10に記載の情報提供方法。 - 前記ユーザが位置する空間別のユーザの発話内容及び前記発話内容と関連するユーザの活動のうちの少なくとも一方のユーザ情報を時間帯別にパターン化する段階、及び
前記空間別及び時間帯別にパターン化されたユーザ情報に基づいて前記複数の空間それぞれの種類を決定する段階
をさらに含むことを特徴とする、請求項10に記載の情報提供方法。 - 現在の時間帯及び現在ユーザが位置する空間でのユーザの予測状況又は予測行動を、前記空間別及び時間帯別にパターン化されたユーザ情報及び現在ユーザが位置する空間の種類に基づいて決定する段階
をさらに含むことを特徴とする、請求項13に記載の情報提供方法。 - 前記決定されたユーザの予測状況又は予測行動に基づき、前記ユーザの発話内容を特定の単語の意味に解釈する確率を動的に調整するか、前記ユーザの発話内容に応じて前記ユーザに提供する情報を決定するか、又は前記ユーザからの音声要請がなくても前記ユーザに提供する情報を能動的に決定する段階
をさらに含むことを特徴とする、請求項14に記載の情報提供方法。 - コンピュータと結合し、請求項10〜15のうちのいずれか一項に記載の方法をコンピュータに実行させる、コンピュータプログラム。
- 請求項10〜15のうちのいずれか一項に記載の方法をコンピュータに実行させるためのプログラムが記録されていることを特徴とする、コンピュータ読み取り可能な記録媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2017-0068963 | 2017-06-02 | ||
KR1020170068963A KR101975423B1 (ko) | 2017-06-02 | 2017-06-02 | 사용자의 위치 및 공간에 알맞은 정보를 능동적으로 제공하는 방법 및 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018206385A JP2018206385A (ja) | 2018-12-27 |
JP6681940B2 true JP6681940B2 (ja) | 2020-04-15 |
Family
ID=64670151
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018104651A Active JP6681940B2 (ja) | 2017-06-02 | 2018-05-31 | ユーザの位置及び空間に適した情報を能動的に提供する方法及び装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6681940B2 (ja) |
KR (1) | KR101975423B1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102650488B1 (ko) | 2019-11-29 | 2024-03-25 | 삼성전자주식회사 | 전자장치와 그의 제어방법 |
KR20210083059A (ko) * | 2019-12-26 | 2021-07-06 | 삼성전자주식회사 | 오디오 데이터의 출력 방법 및 이를 지원하는 전자 장치 |
KR102434127B1 (ko) * | 2019-12-31 | 2022-08-19 | 주식회사 스캐터랩 | 인공지능에서 선제 메시지 전송 방법 및 그 장치 |
KR102223294B1 (ko) * | 2020-02-20 | 2021-03-05 | 한국과학기술원 | 복수 사용자의 움직임 추적을 통한 인공지능 스피커와의 대화 상호작용 흐름 관리 기술 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001319045A (ja) * | 2000-05-11 | 2001-11-16 | Matsushita Electric Works Ltd | 音声マンマシンインタフェースを用いたホームエージェントシステム、及びプログラム記録媒体 |
JP4581290B2 (ja) * | 2001-05-16 | 2010-11-17 | パナソニック株式会社 | 音声認識装置および音声認識方法 |
US20090251996A1 (en) * | 2004-03-09 | 2009-10-08 | Koninklijke Philips Electronics, N.V. | Object position estimation |
KR100809659B1 (ko) * | 2006-07-14 | 2008-03-05 | 세종대학교산학협력단 | 지능형 홈 서비스 제공 시스템 및 방법 |
KR101064948B1 (ko) * | 2008-12-10 | 2011-09-16 | 한국전자통신연구원 | 유비쿼터스 지능형 로봇을 이용한 홈 네트워크 서비스 방법 |
WO2011145030A1 (en) * | 2010-05-20 | 2011-11-24 | Koninklijke Philips Electronics N.V. | Distance estimation using sound signals |
JP2011257950A (ja) * | 2010-06-08 | 2011-12-22 | Sony Corp | 情報処理装置、情報処理ユニットおよび情報処理方法 |
US8340975B1 (en) * | 2011-10-04 | 2012-12-25 | Theodore Alfred Rosenberger | Interactive speech recognition device and system for hands-free building control |
KR101641448B1 (ko) * | 2012-03-16 | 2016-07-20 | 뉘앙스 커뮤니케이션즈, 인코포레이티드 | 사용자 전용 자동 음성 인식 |
KR20130107555A (ko) * | 2012-03-22 | 2013-10-02 | 한국전자통신연구원 | 홈 네트워크 시스템에서 사용자를 추적하여 컨텐츠를 제공하는 장치 및 방법 |
US9219460B2 (en) * | 2014-03-17 | 2015-12-22 | Sonos, Inc. | Audio settings based on environment |
JP6326743B2 (ja) * | 2013-08-30 | 2018-05-23 | ヤマハ株式会社 | 情報処理装置、avレシーバ、およびプログラム |
GB2544543B (en) * | 2015-11-20 | 2020-10-07 | Zuma Array Ltd | Lighting and sound system |
-
2017
- 2017-06-02 KR KR1020170068963A patent/KR101975423B1/ko active IP Right Grant
-
2018
- 2018-05-31 JP JP2018104651A patent/JP6681940B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
KR101975423B1 (ko) | 2019-05-07 |
KR20180132276A (ko) | 2018-12-12 |
JP2018206385A (ja) | 2018-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102025391B1 (ko) | 사용자의 발화 위치에 따른 디바이스 제어 | |
KR101949497B1 (ko) | 사용자 발화의 표현법을 파악하여 기기의 동작이나 컨텐츠 제공 범위를 조정하여 제공하는 사용자 명령 처리 방법 및 시스템 | |
JP6567727B2 (ja) | 受信した音声入力の入力音量に基づいて出力される音の出力音量を調節するユーザ命令処理方法およびシステム | |
JP6681940B2 (ja) | ユーザの位置及び空間に適した情報を能動的に提供する方法及び装置 | |
JP6607999B2 (ja) | 音声要請に対応する情報提供のためのメディア選択 | |
US10984790B2 (en) | Method of providing service based on location of sound source and speech recognition device therefor | |
JP6752870B2 (ja) | 複数のウェイクワードを利用して人工知能機器を制御する方法およびシステム | |
JP6716630B2 (ja) | 情報を提供する装置、方法、コンピュータプログラムおよび記録媒体 | |
JP6947687B2 (ja) | 情報提供方法、電子機器、コンピュータプログラム及び記録媒体 | |
JP6573696B2 (ja) | ネットワークに連結した音響機器とのマルチモーダルインタラクション方法およびシステム | |
JP6920398B2 (ja) | 人工知能機器における連続会話機能 | |
JP6728319B2 (ja) | 人工知能機器で複数のウェイクワードを利用したサービス提供方法およびそのシステム | |
KR20190084202A (ko) | 복수의 호출 용어를 이용하여 인공지능 기기를 제어하는 방법 및 시스템 | |
JP6775563B2 (ja) | 人工知能機器の自動不良検出のための方法およびシステム | |
JP2019012506A (ja) | 機械の自動活性のための方法及びシステム | |
KR102255844B1 (ko) | 사용자의 위치 및 공간에 알맞은 정보를 능동적으로 제공하는 방법 및 장치 | |
KR102023161B1 (ko) | 무빙 디바이스를 이용하여 사용자의 위치 및 공간에 알맞은 정보를 제공하는 방법 및 장치 | |
KR102309509B1 (ko) | 인공지능 기기 상호간의 호출을 활용한 IoT 디바이스를 제어하는 방법 및 시스템 | |
KR20180129729A (ko) | 네트워크에 연결된 음향기기와의 멀티모달 인터렉션 방법 및 시스템 | |
KR20200038904A (ko) | 인공지능 기기에서의 연속 대화 기능 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190806 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20191105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200324 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6681940 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |