JP6943192B2 - 家電機器および場所検索システム - Google Patents

家電機器および場所検索システム Download PDF

Info

Publication number
JP6943192B2
JP6943192B2 JP2018009443A JP2018009443A JP6943192B2 JP 6943192 B2 JP6943192 B2 JP 6943192B2 JP 2018009443 A JP2018009443 A JP 2018009443A JP 2018009443 A JP2018009443 A JP 2018009443A JP 6943192 B2 JP6943192 B2 JP 6943192B2
Authority
JP
Japan
Prior art keywords
information
article
location information
unit
location
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018009443A
Other languages
English (en)
Other versions
JP2019129392A (ja
Inventor
祐貴 田島
祐貴 田島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2018009443A priority Critical patent/JP6943192B2/ja
Publication of JP2019129392A publication Critical patent/JP2019129392A/ja
Application granted granted Critical
Publication of JP6943192B2 publication Critical patent/JP6943192B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)

Description

本発明は、家電機器および場所検索システムに関する。
物品の所有者は、しばしば、物品の場所を忘れてしまい、物品を探し出すのに苦労することがある。このため、物品の場所を探索するための技術が研究されている。例えば、特許文献1には、ユーザが物品を収納する際に、ロボットがユーザに物品の収納場所を問いかけ、ユーザが音声で物品の収納場所を答え、ロボットがユーザの音声を記憶する技術が開示されている。ロボットは、ユーザからの要求に応じて、物品の収納場所を示すユーザの音声を出力する。特許文献2には、物品にチップを貼り付け、探知機によってチップを探知する技術が開示されている。
その他、関連技術として、特許文献3には、ユーザが置き場所を忘れた物を探すために、信号を受信すると音声を発する技術が開示されている。特許文献4には、ユーザとの対話からロボットの位置情報をサーバに提供するためのシステムが開示されている。特許文献5には、家庭内の家電機器をネットワークで接続する技術が開示されている。
特開2007−152443号公報 特開2007−200266号公報 特開2012−199770号公報 特開2003−295889号公報 特開2003−289588号公報
しかし、上記の技術では、システムを利用するための事前準備の手間がユーザに生じる。例えば、特許文献1に記載の技術では、ユーザが意識的にロボットに対して発話する手間が生じる。また、特許文献2に記載の技術では、物品に事前にチップまたは電子タグなどを貼り付ける手間が生じ、かつ、チップまたは電子タグが貼り付けられた物品しか探索することができない。チップまたは電子タグの貼り付けが困難な物品も存在する。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、物品の場所情報の蓄積においてユーザに生じる手間を抑制することが可能な、新規かつ改良された家電機器および場所回答システムを提供することにある。
上記課題を解決するために、本発明のある観点によれば、継続的に起動され、ユーザの会話が入力される音声入力部と、前記音声入力部に入力されたユーザの会話から、物品情報および場所情報を抽出する音声認識部と、他の家電機器において抽出された物品情報および場所情報を受信する通信部と、前記音声認識部により抽出された物品情報および場所情報、および前記通信部により受信された物品情報および場所情報を記憶する記憶部と、ユーザからの問い合わせ対象を示す物品情報に対応する場所情報を前記記憶部から検索し、検索された場所情報を用いて回答情報の出力を制御する出力制御部と、を備える、家電機器が提供される。
前記回答情報は音声情報であり、前記出力制御部は、前記ユーザからの問い合わせ対象を示す物品情報に対応する場所情報を用いて前記音声情報を生成してもよい。
前記ユーザからの問い合わせ対象を示す物品情報に対応する場所情報が前記記憶部に記憶されていない場合、前記通信部は、前記他の家電機器に前記ユーザからの問い合わせ対象を示す物品情報を送信し、前記他の家電機器から受信される場所情報を用いて前記回答情報の出力を制御してもよい。
前記通信部は、前記音声認識部により抽出された物品情報および場所情報を前記他の家電機器に送信してもよい。
前記音声認識部は、テキスト形式で前記物品情報および前記場所情報を抽出してもよい。
同一の物品情報について、前記音声認識部による抽出が行われたタイミング、および通信部による受信が行われたタイミングの差分が所定時間以上である場合、前記記憶部は、先に得られた物品情報および当該物品情報の場所情報を、後に得られた物品情報および当該物品情報の場所情報で上書きし、同一の物品情報について、前記音声認識部による抽出が行われたタイミング、および通信部による受信が行われたタイミングの差分が所定時間未満である場合、前記記憶部は、先に得られた物品情報および当該物品情報の場所情報を、後に得られた物品情報および当該物品情報の場所情報で上書きしなくてもよい。
前記記憶部は、前記物品情報および前記場所情報に、有効期限情報を関連付けて記憶し、前記出力制御部は、有効期限が経過する前の前記有効期限情報に関連付けられている物品情報に対応する場所情報を検索してもよい。
前記有効期限が経過するまでの有効期間の長さは、前記物品情報が示す物品の種類に応じて異なってもよい。
また、上記課題を解決するために、本発明の別の観点によれば、複数の家電機器からなる場所検索システムであって、前記複数の家電機器の各々は、継続的に起動され、ユーザの会話が入力される音声入力部と、前記音声入力部に入力されたユーザの会話から、物品情報および場所情報を抽出する音声認識部と、他の家電機器において抽出された物品情報および場所情報を受信する通信部と、前記音声認識部により抽出された物品情報および場所情報、および前記通信部により受信された物品情報および場所情報を記憶する記憶部と、ユーザからの問い合わせ対象を示す物品情報に対応する場所情報を前記記憶部から検索し、検索された場所情報を用いて回答情報の出力を制御する出力制御部と、を有する、場所検索システムが提供される。
以上説明した本発明によれば、物品の場所情報の蓄積においてユーザに生じる手間を抑制することが可能である。
本発明の実施形態による物品検索システムの構成を示す説明図である。 本発明の実施形態による家電機器の構成を示す説明図である。 記憶部が記憶する辞書情報の具体例を示す説明図である。 家電機器の使用例を示す説明図である。 記憶部が記憶する検索用情報の具体例を示す説明図である。 家電機器の使用例を示す説明図である。 本発明の実施形態による家電機器の動作を示すフローチャートである。 本発明の実施形態による家電機器の動作を示すフローチャートである。 家電機器のハードウェア構成を示したブロック図である。
以下に添付図面を参照しながら、本発明の実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。例えば、実質的に同一の機能構成または論理的意義を有する複数の構成を、必要に応じて家電機器20A、20Bおよび20Cのように区別する。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、複数の構成要素の各々に同一符号のみを付する。例えば、家電機器20A、20Bおよび20Cを特に区別する必要が無い場合には、各家電機器を単に家電機器20と称する。
<1.物品検索システムの構成>
図1は、本発明の実施形態による物品検索システムの構成を示す説明図である。図1に示したように、本発明の実施形態による物品検索システムは、複数の家電機器20を有する。
図1においては、複数の家電機器20として、ノートPC(Personal Computer)である家電機器20Aを示し、電話機である家電機器20Bを示し、TVである家電機器20Cを示し、冷蔵庫である家電機器20Dを示している。これら家電機器20A〜20Dは、ネットワーク12を介して相互に接続されている。家電機器20の種類は図1に示した種類に限定されず、家電機器20は、例えば、空調機、映像レコーダ、スピーカ、照明機器、掃除機、洗濯機、食器洗浄機、インターホン、炊飯器、電子レンジ、および美容機器などであってもよい。
ネットワーク12は、ネットワーク12に接続されている装置から送信される情報の有線、または無線の伝送路である。ネットワーク12は、例えば、LAN(Local Area Network)またはBluetooth(登録商標)などの無線通信方式によって構築され得る。
家電機器20は、家電機器の本来の機能(例えば、冷蔵庫であれば、食品を低温に維持する機能)に加え、ユーザによる物品の探索を支援する機能を有する。例えば、家電機器20は、ユーザの日常会話から物品の場所情報を抽出し、当該場所情報を記憶しておき、ユーザからの問い合わせに応じて当該物品の場所を示す回答情報を出力する。かかる構成により、ユーザは、置き場所が分からなくなった物品を回答情報に基づいて見つけ出すことが可能である。また、物品の場所情報はユーザの日常会話から抽出されるので、ユーザが意識的に物品の場所情報を家電機器20に入力する必要が無い。このため、物品の場所情報の蓄積においてユーザに生じる手間を抑制することが可能である。
<2.家電機器の構成>
以上、本発明の実施形態による物品検索システムの構成を説明した。続いて、物品検索システムが有する家電機器20の詳細な構成および動作を順次詳細に説明する。
図2は、本発明の実施形態による家電機器20の構成を示す説明図である。図2に示したように、家電機器20は、音声入力部220、通信部230、音声出力部240、制御部250および記憶部260を有する。
(音声入力部)
音声入力部220は、空気振動である音声を電気的な音声信号に変換し、変換により得られた音声信号を制御部250に出力する。本発明の実施形態においては、音声入力部220は恒常的または継続的に起動しており、家電機器20に到達した音声を随時に音声信号に変換する。すなわち、1または2以上のフレーズの音声の入力ごとに音声入力部220を起動するための操作無しに、音声入力部220は起動し続けている。このため、音声入力部220には、複数のユーザ間の会話である日常会話が入力され、音声入力部220は当該日常会話を音声信号に変換して制御部250に出力する。また、音声入力部220には、物品の場所を問い合わせる音声が入力され、音声入力部220は、当該物品の場所を問い合わせる音声も音声信号に変換して制御部250に出力する。
(通信部)
通信部230は、他の家電機器20とのインタフェースであり、他の家電機器20と多様な情報を通信する。例えば、通信部230は、物品情報および場所情報を含む後述の検索用情報を他の家電機器20に送信し、他の家電機器20からも検索用情報を受信する。また、通信部230は、物品の場所の検索依頼として物品情報を他の家電機器20に送信し、他の家電機器20から物品情報に対応する場所情報を受信する。通信部230は、他の家電機器20から物品の場所の検索依頼として物品情報を受信する場合もあり、この場合、通信部230は物品情報に対応する場所情報を他の家電機器20に送信する。
(音声出力部)
音声出力部240は、ユーザからの物品の場所の問い合わせに対する回答情報を音声により出力する。ただし、回答情報の出力は音声による出力に限られず、家電機器20は、回答情報を表示により出力する表示部を有してもよい。
(制御部)
制御部250は、家電機器20の動作全般を制御する。特に、本発明の実施形態による制御部250は、図2に示したように、音声認識部252、記憶制御部254および出力制御部256の機能を有する。
−音声認識部
音声認識部252は、音声入力部220から供給される音声信号を解析し、音声信号をテキスト形式の情報であるテキスト列に変換する。そして、記憶部260に記憶されている辞書情報を参照し、テキスト列の意味を解析し、テキスト列から物品情報および場所情報の抽出を試みる。ここで、図3を参照し、記憶部260が記憶する辞書情報の具体例を説明する。
図3は、記憶部260が記憶する辞書情報の具体例を示す説明図である。図3に示したように、辞書情報は複数の物品名を示す情報を含む。辞書情報において、各物品名には物品種別を示す情報が関連付けられている。例えば、物品名「腕時計」には物品種別「アクセサリ」が関連付けられ、物品名「エアコンのリモコン」には物品種別「リモコン」が関連付けられる。なお、物品名としてより具体的な名称が辞書情報に含まれてもよい。例えば、「A社の腕時計」のようにブランド名を含む物品名、「お父さんの腕時計」のように所有者名を含む物品名が辞書情報に含まれてもよい。
音声認識部252は、辞書情報に含まれる物品名がテキスト列に含まれる場合、当該物品名を物品情報として抽出する。さらに、音声認識部252は、テキスト列に場所を示す情報が含まれる場合、当該情報を場所情報として抽出する。
例えば、図4に示すように、ユーザ1およびユーザ2の日常会話の中で、ユーザ1が「腕時計をTVの前に置いておくね。」と言い、ユーザ2が「分かりました。」と返事をした場面を考える。このようなユーザ1およびユーザ2の日常会話が家電機器20の音声入力部220に入力され、日常会話の音声信号を音声認識部252が認識することにより、物品情報として「腕時計」が抽出され、場所情報として「TV」が抽出される。
音声認識部252は、抽出した物品情報および場所情報を含む検索用情報を記憶制御部254に供給する。併せて、当該検索用情報は、ネットワーク12を介して接続されている他の家電機器20へ通信部230から送信される。
また、音声認識部252は、ユーザからの物品の場所の問い合わせの音声を認識する。音声認識部252が、例えば「Aはどこ?」のように、末尾に場所を問う表現が含まれる音声を、物品の場所の問い合わせとして認識してもよい。そして、音声認識部252は、上記例における「A」を問い合わせ対象の物品情報として認識してもよい。代替的に、ユーザは、家電機器20に設けられる操作部(キーまたはタッチパネルなど)を操作することにより物品の場所を問い合わせることも可能である。
このような音声認識部252は、日常会話を含む音声の音声信号を認識するために、音声入力部220と同様に、恒常的または継続的に起動している。
−記憶制御部
記憶制御部254は、記憶部260が記憶する情報を制御する。例えば、記憶制御部254は、音声認識部252により抽出された物品情報および場所情報を含む検索用情報を記憶部260に記憶させる。
図5は、記憶部260が記憶する検索用情報の具体例を示す説明図である。図5に示したように、検索用情報は、物品情報、場所情報および記憶日時を含む。例えば、図5には、物品情報が「腕時計」であり、場所情報が「TV」であり、記憶日時が「2017/12/18 17:03」である検索用情報が示されている。記憶日時は、当該検索用情報が記憶部260に記憶された日時であり、物品情報および場所情報の抽出が行われたタイミングと実質的に同一であってもよい。
また、記憶制御部254は、他の家電機器20から通信部230により受信された検索用情報の記憶部260への格納を制御する。ここで、家電機器20に加え、他の家電機器20も同一の日常会話から物品情報および場所情報の抽出に成功した場合、記憶部260に既に記憶済みの検索用情報に対応する検索用情報が、当該検索用情報の記憶のタイミングの近傍で他の家電機器20から受信され得る。
このため、物品情報が同一である検索用情報について、音声認識部252による抽出が行われたタイミング、および通信部230による受信が行われたタイミングの差分が所定時間未満である場合、記憶制御部254は、先に得られて記憶部260に記憶されている検索用情報を、後に得られた検索用情報で上書きしない。
一方、物品情報が同一である検索用情報について、音声認識部252による抽出が行われたタイミング、および通信部230による受信が行われたタイミングの差分が所定時間以上である場合、後に得られた検索用情報が新たな日常会話に基づく検索用情報であると考えられる。このため、記憶制御部254は、物品情報が同一である検索用情報について、音声認識部252による抽出が行われたタイミング、および通信部230による受信が行われたタイミングの差分が所定時間以上である場合、先に得られて記憶部260に記憶されている検索用情報を、後に得られた検索用情報で上書きする。
−出力制御部
出力制御部256は、ユーザからの物品の場所の問い合わせに応じて、問い合わせ対象の物品の場所を示す回答情報の出力を制御する。まず、出力制御部256は、問い合わせ対象を示す物品情報を含む検索用情報を記憶部260で検索する。問い合わせ対象を示す物品情報を含む検索用情報が検索により見つかった場合、出力制御部256は、当該検索用情報に含まれる場所情報を用いて回答情報を生成する。このように、1つの家電機器20に閉じて回答情報が生成されるパターンは、単独機器完結パターンとも称される。
一方、問い合わせ対象を示す物品情報を含む検索用情報が記憶部260に記憶されていない場合、出力制御部256は、問い合わせ対象を示す物品情報を通信部230に他の家電機器20に送信させる。そして、いずれかの家電機器20から問い合わせ対象を示す物品情報に対応する場所情報が受信された場合、出力制御部256は、当該場所情報を用いて回答情報を生成する。このように、他の家電機器20との協力により回答情報が生成されるパターンは、他機器問合せパターンとも称される。
出力制御部256は、回答情報として、音声情報を生成してもよい。例えば、出力制御部256は、場所情報を含む音声情報を音声合成により生成してもよい。出力制御部256により生成された音声情報は、音声出力部240から出力される。
例えば、図6に示したように、ユーザから「腕時計はどこ?」という物品の場所の問い合わせがあった場面を考える。この場合、家電機器20の音声認識部252は、ユーザの音声が物品の場所の問い合わせであること、および問い合わせ対象の物品が「腕時計」であることを認識する。そして、出力制御部256が物品情報「腕時計」を含む検索用情報を記憶部260で検索する。記憶部260には図5に示したように「腕時計」を含む検索用情報が記憶されているので、出力制御部256は、当該検索用情報に含まれる場所情報「TV」を用いて、「TVの付近にあります。」という音声情報を生成する。そして、図6に示したように、家電機器20の音声出力部240が「TVの付近にあります。」という音声を出力する。
これにより、ユーザは、腕時計がTVの付近にあることを理解し、腕時計を容易に見つけることが可能である。なお、出力制御部256は、音声認識部252により認識された問い合わせ対象の物品情報も用いて音声情報を生成してもよい。この場合、例えば、「腕時計はTVの付近にあります。」という音声情報が生成される。かかる構成により、ユーザに、問い合わせ対象の物品が正しく認識されたことを伝えることが可能となる。
(記憶部)
記憶部260は、家電機器20の動作に用いられる多様な情報を記憶する。例えば、記憶部260は、上述したように、辞書情報、音声認識部252により抽出された物品情報および場所情報を含む検索用情報、および通信部230により他の家電機器20から受信された検索用情報などを記憶する。
<3.家電機器の動作>
以上、本発明の実施形態による家電機器20の構成を説明した。続いて、図7および図8を参照して、本発明の実施形態による家電機器20の動作を整理する。
図7および図8は、本発明の実施形態による家電機器20の動作を示すフローチャートである。まず、音声入力部220が起動されると(S304)、家電機器20の状態は、ユーザからの音声の入力待ち状態となる(S308)。他の家電機器20から検索用情報が受信されると(S312/Yes)、記憶部260が当該検索用情報を記憶する(S316)。
音声入力部220へユーザからの音声の入力があった場合(S320/Yes)、音声認識部252が音声入力部220から出力される音声信号を認識する(S324)。そして、音声信号の認識において、物品情報および場所情報が抽出された場合(S328/Yes)、記憶部260は、物品情報および場所情報を含む検索用情報を記憶する(S332)。さらに、家電機器20に他の家電機器20が接続されている場合(S336/Yes)、通信部230が、接続されている他の家電機器20に検索用情報を送信する(S340)。その後、S308からの処理が繰り返される。
S324での音声信号の認識において、物品情報および場所情報が抽出されず(S328/No)、ユーザの音声が物品の場所の問い合わせであることが認識された場合(S344/Yes)、出力制御部256が検索処理を実行する(S400)。当該検索処理について、図8を参照して具体的に説明する。
まず、出力制御部256は、問い合わせ対象を示す物品情報を含む検索用情報を記憶部260で検索する。当該検索用情報が見つかった場合(S404/Yes)、出力制御部256は、当該検索用情報に含まれる場所情報を用いて回答情報を生成し(S420)、音声出力部240が当該回答情報を出力する(S424)、単独機器完結パターンの処理が行われる。
一方、S404において問い合わせ対象を示す物品情報を含む検索用情報が見つからなかった場合(S404/No)、出力制御部256は、接続されている他の家電機器20があるか否かを判断する(S408)。接続されている他の家電機器20がある場合(S408/Yes)、他機器問合せパターンの処理が行われる。すなわち、通信部230が、他の家電機器20に問い合わせ対象を示す物品情報を送信する(S412)。他の家電機器20から問い合わせ対象を示す物品情報に対応する場所情報が受信された場合(S416/Yes)、出力制御部256は、当該場所情報を用いて回答情報を生成し(S420)、音声出力部240が当該回答情報を出力する(S424)。
S408において接続されている他の家電機器20が無いと判断された場合、および、S416においていずれの他の家電機器20からも問い合わせ対象を示す物品情報に対応する場所情報が受信されなかった場合、出力制御部256は、音声出力部240に検索失敗情報を出力させる(S428)。検索失敗情報は、問い合わせ対象を示す物品情報に対応する場所情報がいずれの家電機器20にも記憶されていないことをユーザに伝えるメッセージであり、例えば、「残念ですが、腕時計の場所は分かりません。」というメッセージであってもよい。
<4.作用効果>
以上説明した本発明の実施形態による家電機器20によれば、多様な作用効果が得られる。
例えば、家電機器20は、ユーザの日常会話から物品の場所情報を抽出し、当該場所情報を記憶しておき、ユーザからの問い合わせに応じて当該物品の場所を示す回答情報を出力する。かかる構成により、ユーザは、置き場所が分からなくなった物品を回答情報に基づいて見つけ出すことが可能である。また、物品の場所情報はユーザの日常会話から抽出されて蓄積されるので、ユーザが意識的に物品の場所情報を家電機器20に入力する必要が無い。また、タグを用いた物品探索システムにおける物品へのタグ付けのような作業も必要ない。このため、ユーザに生じる事前準備のための手間を抑制することが可能である。
また、家電機器20は、音声認識により抽出した物品情報および場所情報を含む検索用情報を、接続されている他の家電機器20に送信する。このため、検索用情報が自動的に家庭内ネットワークを形成する複数の家電機器20で共有される。結果、単独機器完結パターンでの検索用情報の検索成功率が向上するので、回答情報の出力までの時間を短縮することが可能である。
また、家電機器20は、必要に応じて他機器問合せパターンの処理を行うことにより、ユーザが他の家電機器20に対して同じ問い合わせ操作をすることなく、問い合わせ対象を示す物品情報に対応する場所情報をより高確率に得ることが可能となる。なお、検索用情報は事前に家庭内ネットワークで共有されるが、新たに家庭内ネットワークに追加された家電機器20、および、故障により一時的に家庭内ネットワークから外れていた家電機器20においては、一部の検索用情報が欠けている場合がある。このため、検索用情報を事前に共有する処理と、他機器問合せパターンの処理を併存させることで、問い合わせ対象を示す物品情報に対応する場所情報をより高確率に得ることが可能となる。
<5.ハードウェア構成>
以上、本発明の実施形態を説明した。上述した音声認識および出力制御などの情報処理は、ソフトウェアと、以下に説明する家電機器20のハードウェアとの協働により実現される。
図9は、家電機器20のハードウェア構成を示したブロック図である。家電機器20は、CPU(Central Processing Unit)201と、ROM(Read Only Memory)202と、RAM(Random Access Memory)203と、ホストバス204と、を備える。また、家電機器20は、ブリッジ205と、外部バス206と、インタフェース207と、入力装置208と、表示装置209と、音声出力装置210と、ストレージ装置(HDD)211と、ドライブ212と、ネットワークインタフェース215とを備える。
CPU201は、演算処理装置および制御装置として機能し、各種プログラムに従って家電機器20内の動作全般を制御する。また、CPU201は、マイクロプロセッサであってもよい。ROM202は、CPU201が使用するプログラムや演算パラメータ等を記憶する。RAM203は、CPU201の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはCPUバスなどから構成されるホストバス204により相互に接続されている。これらCPU201、ROM202およびRAM203とソフトウェアとの協働により、図2を参照して説明した制御部250の機能が実現され得る。
ホストバス204は、ブリッジ205を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス206に接続されている。なお、必ずしもホストバス204、ブリッジ205および外部バス206を分離構成する必要はなく、1つのバスにこれらの機能を実装してもよい。
入力装置208は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、センサー、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、CPU201に出力する入力制御回路などから構成されている。家電機器20のユーザは、該入力装置208を操作することにより、家電機器20に対して各種のデータを入力したり処理動作を指示したりすることができる。
表示装置209は、例えば、CRT(Cathode Ray Tube)ディスプレイ装置、液晶ディスプレイ(LCD)装置、プロジェクター装置、OLED(Organic Light Emitting Diode)装置およびランプなどの表示装置を含む。また、音声出力装置210は、スピーカおよびヘッドホンなどの音声出力装置を含む。
ストレージ装置211は、データ格納用の装置である。ストレージ装置211は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置211は、例えば、HDD(Hard Disk Drive)またはSSD(Solid Strage Drive)、あるいは同等の機能を有するメモリ等で構成される。このストレージ装置211は、ストレージを駆動し、CPU201が実行するプログラムや各種データを格納する。
ドライブ212は、記憶媒体用リーダライタであり、家電機器20に内蔵、あるいは外付けされる。ドライブ212は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体24に記録されている情報を読み出して、RAM203またはストレージ装置211に出力する。また、ドライブ212は、リムーバブル記憶媒体24に情報を書き込むこともできる。
ネットワークインタフェース215は、例えば、ネットワーク12に接続するための通信デバイス等で構成された通信インタフェースである。また、ネットワークインタフェース215は、無線LAN(Local Area Network)対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。
<6.変形例>
続いて、本発明の実施形態の幾つかの変形例を説明する。なお、以下に説明する各変形例は、単独で本発明の実施形態に適用されてもよいし、組み合わせで本発明の実施形態に適用されてもよい。また、各変形例は、本発明の実施形態で説明した構成に代えて適用されてもよいし、本発明の実施形態で説明した構成に対して追加的に適用されてもよい。
ユーザの日常会話から物品の場所情報が抽出され、記憶部260にその物品の場所情報が記憶された後に、その物品が移動され、かつ、当該移動を話題とする日常会話が行われないことが考えられる。この場合、音声出力部240は、誤った回答情報を出力してしまう。このため、記憶部260が記憶する検索用情報は、有効期限情報を含んでもよい。そして、出力制御部256は、有効期限情報が示す有効期限が経過する前の物品情報に対応する場所情報を検索してもよい。かかる構成により、誤った回答情報の出力を抑制することが可能である。
さらに、物品の種類に応じて、当該物品が移動される頻度は異なる。例えば、TVのリモコンは頻繁に移動される一方で、銀行印の移動の頻度は相対的に低いと考えられる。このため、記憶日時から有効期限情報が示す有効期限までの有効期間の長さは、物品の種類に応じて異なってもよい。例えば、リモコンに関する検索用情報の有効期間の長さは12時間であり、印鑑に関する検索用情報の有効期間の長さは30日であってもよい。かかる構成により、物品の種類に応じて適切な有効期限を設定することが可能である。
なお、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
例えば、本明細書の家電機器20の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、家電機器20の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
また、家電機器20に内蔵されるCPU201、ROM202およびRAM203などのハードウェアに、上述した家電機器20の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。
20 家電機器
220 音声入力部
230 通信部
240 音声出力部
250 制御部
252 音声認識部
254 記憶制御部
256 出力制御部
260 記憶部

Claims (9)

  1. 継続的に起動され、ユーザの会話が入力される音声入力部と、
    前記音声入力部に入力されたユーザの会話から、物品情報および場所情報を抽出する音声認識部と、
    他の家電機器において抽出された物品情報および場所情報を受信する通信部と、
    前記音声認識部により抽出された物品情報および場所情報、および前記通信部により受信された物品情報および場所情報を記憶する記憶部と、
    ユーザからの問い合わせ対象を示す物品情報に対応する場所情報を前記記憶部から検索し、検索された場所情報を用いて回答情報の出力を制御する出力制御部と、
    を備える、家電機器。
  2. 前記回答情報は音声情報であり、
    前記出力制御部は、前記ユーザからの問い合わせ対象を示す物品情報に対応する場所情報を用いて前記音声情報を生成する、請求項1に記載の家電機器。
  3. 前記ユーザからの問い合わせ対象を示す物品情報に対応する場所情報が前記記憶部に記憶されていない場合、前記通信部は、前記他の家電機器に前記ユーザからの問い合わせ対象を示す物品情報を送信し、前記他の家電機器から受信される場所情報を用いて前記回答情報の出力を制御する、請求項1または2に記載の家電機器。
  4. 前記通信部は、前記音声認識部により抽出された物品情報および場所情報を前記他の家電機器に送信する、請求項3に記載の家電機器。
  5. 前記音声認識部は、テキスト形式で前記物品情報および前記場所情報を抽出する、請求項1〜4のいずれか一項に記載の家電機器。
  6. 同一の物品情報について、前記音声認識部による抽出が行われたタイミング、および通信部による受信が行われたタイミングの差分が所定時間以上である場合、前記記憶部は、先に得られた物品情報および当該物品情報の場所情報を、後に得られた物品情報および当該物品情報の場所情報で上書きし、
    同一の物品情報について、前記音声認識部による抽出が行われたタイミング、および通信部による受信が行われたタイミングの差分が所定時間未満である場合、前記記憶部は、先に得られた物品情報および当該物品情報の場所情報を、後に得られた物品情報および当該物品情報の場所情報で上書きしない、請求項1〜5のいずれか一項に記載の家電機器。
  7. 前記記憶部は、前記物品情報および前記場所情報に、有効期限情報を関連付けて記憶し、
    前記出力制御部は、有効期限が経過する前の前記有効期限情報に関連付けられている物品情報に対応する場所情報を検索する、請求項1〜6のいずれか一項に記載の家電機器。
  8. 前記有効期限が経過するまでの有効期間の長さは、前記物品情報が示す物品の種類に応じて異なる、請求項7に記載の家電機器。
  9. 複数の家電機器からなる場所検索システムであって、
    前記複数の家電機器の各々は、
    継続的に起動され、ユーザの会話が入力される音声入力部と、
    前記音声入力部に入力されたユーザの会話から、物品情報および場所情報を抽出する音声認識部と、
    他の家電機器において抽出された物品情報および場所情報を受信する通信部と、
    前記音声認識部により抽出された物品情報および場所情報、および前記通信部により受信された物品情報および場所情報を記憶する記憶部と、
    ユーザからの問い合わせ対象を示す物品情報に対応する場所情報を前記記憶部から検索し、検索された場所情報を用いて回答情報の出力を制御する出力制御部と、
    を有する、場所検索システム。

JP2018009443A 2018-01-24 2018-01-24 家電機器および場所検索システム Active JP6943192B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018009443A JP6943192B2 (ja) 2018-01-24 2018-01-24 家電機器および場所検索システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018009443A JP6943192B2 (ja) 2018-01-24 2018-01-24 家電機器および場所検索システム

Publications (2)

Publication Number Publication Date
JP2019129392A JP2019129392A (ja) 2019-08-01
JP6943192B2 true JP6943192B2 (ja) 2021-09-29

Family

ID=67472399

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018009443A Active JP6943192B2 (ja) 2018-01-24 2018-01-24 家電機器および場所検索システム

Country Status (1)

Country Link
JP (1) JP6943192B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114428502B (zh) * 2021-12-17 2024-04-05 北京未末卓然科技有限公司 一种基于与家电联网的物流机器人及其控制方法
JP7411303B1 (ja) 2023-05-01 2024-01-11 株式会社大正スカイビル 対象物の管理システム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318108B2 (en) * 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US20090182622A1 (en) * 2008-01-15 2009-07-16 Agarwal Amit D Enhancing and storing data for recall and use
US8566097B2 (en) * 2009-06-02 2013-10-22 Honda Motor Co., Ltd. Lexical acquisition apparatus, multi dialogue behavior system, and lexical acquisition program
JP5620349B2 (ja) * 2011-07-22 2014-11-05 株式会社東芝 対話装置、対話方法および対話プログラム
JP5844375B2 (ja) * 2011-09-09 2016-01-13 株式会社日立製作所 物体検索システムおよび物体検索方法
KR102447438B1 (ko) * 2015-07-01 2022-09-27 삼성전자주식회사 알림 장치 및 알림 장치가 물건의 위치를 알려주는 방법
EP3455720B1 (en) * 2016-05-13 2023-12-27 Google LLC Led design language for visual affordance of voice user interfaces
CN107480129A (zh) * 2017-07-18 2017-12-15 上海斐讯数据通信技术有限公司 一种基于视觉识别和语音识别的物品位置识别方法及系统

Also Published As

Publication number Publication date
JP2019129392A (ja) 2019-08-01

Similar Documents

Publication Publication Date Title
US9880808B2 (en) Display apparatus and method of controlling a display apparatus in a voice recognition system
CN111192591B (zh) 智能设备的唤醒方法、装置、智能音箱及存储介质
JP6053097B2 (ja) 機器操作システム、機器操作装置、サーバ、機器操作方法およびプログラム
USRE48569E1 (en) Control method for household electrical appliance, household electrical appliance control system, and gateway
WO2019037732A1 (zh) 麦克风阵列的电视机及电视系统
US9984563B2 (en) Method and device for controlling subordinate electronic device or supporting control of subordinate electronic device by learning IR signal
US9936355B2 (en) Information processing apparatus, information processing method, and computer program
CN105489220A (zh) 语音识别方法及装置
WO2020130549A1 (en) Electronic device and method for controlling electronic device
CN104615359A (zh) 对应用软件进行语音操作的方法及装置
JP6943192B2 (ja) 家電機器および場所検索システム
CN105100672A (zh) 显示装置及其视频通话执行方法
CN110830368B (zh) 即时通讯消息发送方法及电子设备
WO2017206832A1 (zh) 一种信息处理方法、服务器、终端及信息处理系统
CN112908318A (zh) 智能音箱的唤醒方法、装置、智能音箱及存储介质
CN108763475B (zh) 一种录制方法、录制装置及终端设备
Bernatin et al. Implementation of communication aid using zigbee technology
US20190026266A1 (en) Translation device and translation system
WO2016206646A1 (zh) 使机器装置产生动作的方法及系统
US20210110824A1 (en) Electronic apparatus and controlling method thereof
US11620997B2 (en) Information processing device and information processing method
WO2018023514A1 (zh) 一种家居背景音乐控制系统
US20160133243A1 (en) Musical performance system, musical performance method and musical performance program
WO2021238405A1 (zh) 非接触式人机交互方法、设备、装置及存储介质
CN108681567A (zh) 一种信息推荐方法及装置

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20190327

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190328

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201111

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210726

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210810

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210823

R150 Certificate of patent or registration of utility model

Ref document number: 6943192

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150