JP2010272050A - Operation supporting device, information apparatus, operation supporting method, and program - Google Patents
Operation supporting device, information apparatus, operation supporting method, and program Download PDFInfo
- Publication number
- JP2010272050A JP2010272050A JP2009125096A JP2009125096A JP2010272050A JP 2010272050 A JP2010272050 A JP 2010272050A JP 2009125096 A JP2009125096 A JP 2009125096A JP 2009125096 A JP2009125096 A JP 2009125096A JP 2010272050 A JP2010272050 A JP 2010272050A
- Authority
- JP
- Japan
- Prior art keywords
- information
- function
- input
- user
- similarity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、操作支援装置、それを備えた情報機器、操作支援方法、及びプログラムに関する。 The present invention relates to an operation support apparatus, an information device including the operation support apparatus, an operation support method, and a program.
近年、パーソナルコンピュータ、ＨＤＤレコーダ、テレビ等の電子機器においては、多機能化伴い、ユーザに便利な機能が多く提供される一方で、操作方法が複雑化してユーザにおける操作性が悪化している。このような操作性の悪化の要因としては、ユーザに慣れ親しみのない用語で示された機能の増加が挙げられる。機能がユーザに慣れ親しみのない用語で示されていると、ユーザにとって、その機能の認知的負荷が高くなり、操作性が悪化すると考えられる。 In recent years, electronic devices such as personal computers, HDD recorders, and televisions are provided with many functions that are convenient for the user along with the increase in the number of functions. As a factor of such deterioration in operability, there is an increase in functions indicated in terms that are not familiar to users. If the function is expressed in terms that are not familiar to the user, it is considered that the cognitive load of the function is increased and the operability is deteriorated for the user.
つまり、このような認知的負荷を伴う操作をユーザに強いると、ユーザは、操作の途中で本来の目的を見失いやすく、所望の機能になかなか到達できない状況になる。このような問題を解決するため、以下のような技術が提案されている（例えば、特許文献１〜特許文献４参照。）。
That is, when the user is forced to perform such an operation with a cognitive load, the user easily loses the original purpose during the operation, and cannot easily reach the desired function. In order to solve such problems, the following techniques have been proposed (for example, see
特許文献１は、ユーザが操作メニュー項目を自由にカスタマイズすることができるようにした操作画面生成方法を開示している。特許文献１に開示の操作画面生成方法によれば、ユーザ自身が、メニュー項目名をユーザ自身で分かりやすい用語に変更することができるので、慣れ親しみのない用語を操作メニューから排除することができる。よって、ユーザにおける認知的負荷が軽減される。
また、特許文献２〜特許文献４は、機器の操作方法を提示するヘルプシステムを開示している。このヘルプシステムは、ユーザにとって慣れ親しみのある用語と、機器に定義された機能の用語とを結びつけるテーブルを備えている。また、テーブルには、予め機器に定義されている用語に加え、定義されている用語に近い意味の用語も合わせて登録されている。特許文献２〜４に開示されているヘルプシステムによれば、ユーザは、自身にとって慣れ親しみのある用語を用いて、所望の操作方法に関する情報を入手することができる。
しかしながら、上記特許文献１〜特許文献４に開示された、情報機器の操作案内を提示する技術には、以下の問題点が存在する。特許文献１に開示された技術と、特許文献２〜特許文献４に開示された技術とに分けて説明する。
However, the technique for presenting operation guidance for information equipment disclosed in
上記特許文献１に開示の操作画面生成方法の実行には、メニュー項目名等に示される用語を、ユーザにとって慣れ親しみのある用語に変えるために、ユーザの手によるカスタマイズ作業が必要となる。しかし、カスタマイズ作業は、ユーザが機器操作と平行して行う
ことができないため、ユーザは、自身が実際に自ら機器を使用する状況を思い浮かべながら、自身にとって慣れ親しみの無い用語を、慣れ親しみのある用語に書き換える必要がある。
Execution of the operation screen generation method disclosed in
また、特許文献１に開示の操作画面生成方法では、ユーザにとって慣れ親しみのある用語への変更を実行するために、ユーザは、予め、変更前の慣れ親しみのない用語が何を示すのかを予め理解しておく必要がある。このため、ユーザにおいては、事前に機器を一通り使用しておくことや、取扱説明書などを読んでおくことなども必要となる。
Further, in the operation screen generation method disclosed in
このように、上記特許文献１に開示された操作画面生成方法を実行するためには、ユーザは、自身にとって慣れ親しみの無い用語を、慣れ親しみのある用語に書き換えたり、予め学習を行ったりする必要がある。上記特許文献１に開示された技術には、ユーザの負担が大きくなるという問題がある。
As described above, in order to execute the operation screen generation method disclosed in
また、特許文献２〜特許文献４においては、上述したように、ユーザにとって慣れ親しみのある用語と機器に定義された機能の用語とを結びつけるテーブルが必要となり、テーブルの完成度によって性能が左右される。しかし、ユーザにとって慣れ親しみのある用語を完全に網羅した完成度の高いテーブルを作成することは困難である。また、テーブルの完成度を高めようとすると、機器の開発コストが大きく上昇するという問題が生じてしまう。
In
本発明の目的は、上記問題を解消し、ユーザの操作負担の軽減と、情報機器の開発コストの低減とを図り得る、操作支援装置、それを用いた情報機器、操作支援方法、及びプログラムを提供することにある。 An object of the present invention is to provide an operation support apparatus, an information device using the same, an operation support method, and a program capable of solving the above-described problems, reducing the operation burden on the user, and reducing the development cost of the information device. It is to provide.
上記目的を達成するため、本発明における操作支援装置は、ユーザにおける情報機器の操作を支援する操作支援装置であって、
前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算する意味類似度計算部と、
前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算する履歴類似度計算部と、
前記意味類似度計算部が計算した類似度、及び前記履歴類似度計算部が計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定する、置換機能決定部と、
を備えていることを特徴とする。
In order to achieve the above object, an operation support apparatus according to the present invention is an operation support apparatus that supports an operation of an information device by a user,
Semantic similarity between input function information that is input from the user and that specifies a function that the user wants the information device, and defined function information that specifies a function of the information device that is defined in advance. A semantic similarity calculator to calculate,
A history similarity calculation unit that calculates a similarity between the input function information and the definition function information based on the input history of the user;
Using the similarity calculated by the semantic similarity calculation unit and the similarity calculated by the history similarity calculation unit, specified by the definition function information replaceable with the function specified by the input function information A replacement function determination unit that determines a function;
It is characterized by having.
また、上記目的を達成するため、本発明における情報機器は、ユーザによる操作を支援する支援機能を有する情報機器であって、
前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算する意味類似度計算部と、
前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算する履歴類似度計算部と、
前記意味類似度計算部が計算した類似度、及び前記履歴類似度計算部が計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定する、置換機能決定部と、
を備えていることを特徴とする。
In order to achieve the above object, an information device according to the present invention is an information device having a support function for supporting an operation by a user,
Semantic similarity between input function information that is input from the user and that specifies a function that the user wants the information device, and defined function information that specifies a function of the information device that is defined in advance. A semantic similarity calculator to calculate,
A history similarity calculation unit that calculates a similarity between the input function information and the definition function information based on the input history of the user;
Using the similarity calculated by the semantic similarity calculation unit and the similarity calculated by the history similarity calculation unit, specified by the definition function information replaceable with the function specified by the input function information A replacement function determination unit that determines a function;
It is characterized by having.
上記目的を達成するため、本発明における操作支援方法は、ユーザにおける情報機器の操作を支援するための操作支援方法であって、
（ａ）前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算するステップと、
（ｂ）前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算するステップと、
（ｃ）前記（ａ）のステップで計算した類似度、及び前記（ｂ）のステップで計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定するステップと、
を有することを特徴とする。
In order to achieve the above object, an operation support method according to the present invention is an operation support method for supporting an operation of an information device by a user,
(A) Semantic between input function information that is input from the user and specifies a function that the user wants the information device, and definition function information that specifies a function of the information device that is defined in advance. Calculating the similarity,
(B) calculating a similarity between the input function information and the definition function information based on the input history of the user;
(C) The definition function information replaceable with the function specified by the input function information using the similarity calculated in the step (a) and the similarity calculated in the step (b). Determining the identified function;
It is characterized by having.
また、上記目的を達成するため、本発明におけるプログラムは、ユーザにおける情報機器の操作をコンピュータによって支援するためのプログラムであって、
前記コンピュータに、
（ａ）前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算するステップと、
（ｂ）前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算するステップと、
（ｃ）前記（ａ）のステップで計算した類似度、及び前記（ｂ）のステップで計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定するステップと、
を実行させることを特徴とする。
In order to achieve the above object, a program according to the present invention is a program for assisting a user in operating an information device by a computer,
In the computer,
(A) Semantic between input function information that is input from the user and specifies a function that the user wants the information device, and definition function information that specifies a function of the information device that is defined in advance. Calculating the similarity,
(B) calculating a similarity between the input function information and the definition function information based on the input history of the user;
(C) The definition function information replaceable with the function specified by the input function information using the similarity calculated in the step (a) and the similarity calculated in the step (b). Determining the identified function;
Is executed.
以上の特徴により、本発明における操作支援装置、それを用いた情報機器、操作支援方法、及びプログラムによれば、ユーザの操作負担の軽減と、情報機器の開発コストの低減とを共に図ることが可能となる。 With the above features, according to the operation support apparatus, the information device using the same, the operation support method, and the program according to the present invention, it is possible to reduce both the operation burden on the user and the development cost of the information device. It becomes possible.
（実施の形態１）
以下、本発明の実施の形態１における、操作支援装置、情報機器、操作支援方法、及びプログラムについて、図１〜図３を参照しながら説明する。最初に、本実施の形態１における操作支援装置及び情報機器の構成について図１を用いて説明する。図１は、本発明の実施の形態１における操作支援装置及び情報機器の概略構成を示すブロック図である。
(Embodiment 1)
Hereinafter, an operation support apparatus, an information device, an operation support method, and a program according to
図１に示す操作支援装置１は、情報機器２に備えられ、ユーザにおける情報機器２の操作を支援する装置である。本実施の形態１において、情報機器２は、特に限定されるものではなく、例えば、録画装置、テレビ受像機、プリンタ、デジタルカメラ、カムコーダ、冷蔵庫、パーソナルコンピュータ、業務用システムの端末装置等である。
An
図１に示すように、操作支援装置１は、意味類似度計算部３０と、履歴類似度計算部４０と、置換機能決定部５０とを備えている。このうち、意味類似度計算部３０は、入力機能情報と定義機能情報との間の意味的な類似度（以下「意味類似度」という。）を計算する。入力機能情報は、ユーザから入力された情報であって、ユーザが情報機器２に求める機能を特定する情報である。定義機能情報は、予め定義されている情報機器２の機能を特定する情報である。
As illustrated in FIG. 1, the
具体的には、入力機能情報は、ユーザが慣れ親しんだ用語で表された情報機器２の機能を特定する情報である。また、定義機能情報は、情報機器２の操作マニュアル等に記載されている機能、即ち、情報機器２における各種機能の正式名称を特定する情報である。
Specifically, the input function information is information for specifying the function of the
履歴類似度計算部４０は、ユーザの入力履歴に基づいて、入力機能情報と定義機能情報との間の類似度（以下「履歴類似度」という。）を計算する。また、置換機能決定部５０は、意味類似度計算部３０が計算した意味類似度と、履歴類似度計算部４０が計算した履歴類似度とを用いて、入力機能情報で特定される機能（ユーザが慣れ親しんだ用語で表された機能）と置き換え可能な、定義機能情報で特定される機能を決定する。
The history
このように、操作支援装置１は、ユーザが、自身の慣れ親しんだ用語を用いて情報機器２の機能を入力すると、これと置き換え可能な、定義された機能を決定する。よって、操作支援装置１によれば、ユーザは、情報機器２において定義された機能の名称を知らなくても、自身の慣れ親しんだ用語による情報機器の操作が可能となるので、ユーザにおける操作負担の軽減が図られる。
As described above, when the user inputs the function of the
また、操作支援装置１において、入力機能情報の機能と置き換え可能かどうかは、入力機能情報の機能及び定義機能情報の機能それぞれの意味と、ユーザの過去の入力履歴とに基づいて判断される。つまり、本実施の形態１では、上述した特許文献２〜４に開示の技術と異なり、予め、変換テーブルを用意しなくても良い。よって、操作支援装置１によれば、開発コストの低減を図ることもできる。
In the
ここで、本実施の形態１における操作支援装置１及び情報機器２の構成について更に具体的に説明する。図１に示すように、情報機器２は、操作支援装置１に加え、各種情報を表示するための表示部７０を備えている。なお、図１において、情報機器２の本来の機能を発揮するための構成の図示は、省略されている。
Here, the configuration of the
また、図１に示すように、操作支援装置１は、上述した構成に加え、音声データ入力部１０と、音声認識部２０と、表示情報変更部６０と、音声認識辞書記録部２１と、意味空間辞書記録部３１と、操作履歴記録部４１とを備えている。以下、情報機器２及び操作支援装置１の各部について説明する。
As shown in FIG. 1, in addition to the above-described configuration, the
音声データ入力部１０は、ユーザ発した音声を音声データに変換し、得られた音声デー
タを音声認識部２０へと出力する。具体的には、音声データ入力部１０は、マイクロホン等である。よって、ユーザが情報機器２に求める機能に関する音声を発した場合は、音声データ入力部１０は、ユーザの情報機器に求める機能に関する音声を音声データに変換し、この得られた音声データを音声認識部２０に入力する。
The voice data input unit 10 converts voice generated by the user into voice data, and outputs the obtained voice data to the
音声認識部２０は、音声データ入力部１０から音声データが入力されると、音声認識辞書記録部２１に記録されている音声認識辞書を用いて音声認識を行う。このとき、入力された音声データに、情報機器２に求める機能に関する音声の音声データが含まれていると、認識結果として得られたデータは、上述した入力機能情報となる。本実施の形態１では、入力機能情報は、ユーザから、音声データ入力部１０及び音声認識部２０を介して、入力されている。また、音声認識部２０は、認識結果を、意味類似度計算部３０、履歴類似度計算部４０、及び表示情報変換部６０に出力する。
When voice data is input from the voice data input unit 10, the
具体的には、例えば、音声認識辞書が、情報機器２に求める機能に関する音声の音素データと、各音素データに対応するテキストデータとを登録しているとする。この場合、音声認識部２０は、音声データ入力部１０からの音声データに含まれる音素データと、音声認識辞書に登録されている、情報機器２に求める機能に関する音声の音素データとのマッチング処理を行う。そして、音声認識部２１０は、マッチングした音素データに対応するテキストデータを入力機能情報として抽出する。
Specifically, for example, it is assumed that the speech recognition dictionary registers speech phoneme data related to a function required for the
また、本実施の形態１において、音声認識部２０による音声認識の方式（音声データからテキストデータへの変換の方式）は、特に限定されず、単語認識方式や、ワードスポッティング方式といった変換方式であれば良い。 In the first embodiment, the method of speech recognition by the speech recognition unit 20 (a method of converting speech data to text data) is not particularly limited, and may be a conversion method such as a word recognition method or a word spotting method. It ’s fine.
音声認識辞書記録部２１に記録されている音声認識辞書は、上述したように、情報機器２に求める機能に関する音声の音素データと、各音素データに対応するテキストデータとを登録している。各音素データに対応するテキストデータは、予め用意された、情報機器２に求める機能を特定する情報であり、入力機能情報に相当する。
As described above, the speech recognition dictionary recorded in the speech recognition dictionary recording unit 21 registers speech phoneme data related to the function required for the
また、本実施の形態１においては、情報機器２に求める機能を特定する情報は、情報機器２に関するマニュアルや、システム設計情報等の文書に対して、下記の参考文献１に開示されている形態素解析を適用することによって取得することができる。更に、情報機器２に求める機能を特定する情報は、上記の文書を形態素解析による品詞毎の分解によって得られた、固有名詞、一般名詞、及び動詞等であっても良い。
Further, in the first embodiment, the information specifying the function required for the
更に、情報機器２に求める機能を特定する情報の種類を増加させるため、情報機器２と同種の情報機器に関するマニュアルやシステム設計情報に対しても、下記の参考文献１に開示されている形態素解析を適用しても良い。このようにして、情報機器に求める機能を特定する情報の種類が増えると、ユーザにとって親しみのある用語の音声認識辞書への登録が容易なものとなる。
Furthermore, in order to increase the types of information specifying the functions required for the
また、音声認識辞書に登録される音素データは、上述の形態素解析によって得られたテキストデータを、既存のテキスト合成音声技術を用いて、音素データに変換し、これによって取得されたデータであっても良い。 The phoneme data registered in the speech recognition dictionary is data obtained by converting text data obtained by the above morphological analysis into phoneme data using an existing text synthesis speech technology. Also good.
なお、本実施の形態１では、音声データを音声認識して得られる入力機能情報は、テキストデータに限定されず、静止画像データ報、動画像データ、音データ等であっても良い。また、入力機能情報は、これらのデータにテキストデータを付加して得られた情報であっても良いし、これらの多種類のデータを組み合わせて得られたデータであっても良い。入力機能情報のデータ形式は、入力先となる、類似度計算部３０、履歴類似度計算部４０
、及び表示情報変更部６０それぞれ毎に変換することもできる。更に、この場合、音声認識辞書には、音素データに対応するテキストデータの変わりに、音素データに対応する、画像データ、動画像データ、音データ、これらとテキストデータとを組み合わせたデータ等が登録される。
In the first embodiment, input function information obtained by voice recognition of voice data is not limited to text data, and may be still image data, moving image data, sound data, and the like. Further, the input function information may be information obtained by adding text data to these data, or may be data obtained by combining these various types of data. The data format of the input function information is the
, And the display
（参考文献１）
長尾 真 編、「自然言語処理 岩波講座 ソフトウェア科学 １５」、ｐｐ．１１７−１３７，１９９６年発行
(Reference 1)
Edited by Makoto Nagao, “Natural Language Processing Iwanami Lecture Software Science 15”, pp. 117-137, issued in 1996
意味類似度計算部３０は、本実施の形態１では、入力機能情報と定義機能情報とに対して、下記の参考文献２に開示の潜在意味解析（ＬＳＡ：Latent Semantic Analysis）を実行し、潜在意味解析における単語頻度ベクトルの内積によって、意味類似度を計算する。
In the first embodiment, the semantic
（参考文献２）
S. Deerwester、S. T. Dumais、G. W. Furnas、T. K. Landauer、R. Harshman、「Indexing by Latent Semantic Analysis.」、Journal of The Society for Information Science、４１（６）、ｐｐ．３９１−４０７、１９９０年発行
(Reference 2)
S. Deerwester, ST Dumais, GW Furnas, TK Landauer, R. Harshman, “Indexing by Latent Semantic Analysis.”, Journal of The Society for Information Science, 41 (6), pp. 391-407, published in 1990
具体的には、意味類似度計算部３０は、先ず、意味空間辞書記録部３１に記録されている意味空間辞書にアクセスし、入力機能情報と定義機能情報との間の意味空間を表す行列と、情報機器２に定義されている機能の名称（テキストデータ）のリストとを取得する。そして、意味類似度計算部３０は、行列とリストとを用いて、情報機器２に定義されている機能の名称それぞれ毎に、各名称を示すテキストデータの意味空間中のベクトルを算出する。
Specifically, the semantic
続いて、意味類似度計算部３０は、入力機能情報（音声認識部２０から得られる情報機器２に求める機能を示すテキストデータ）と、意味空間辞書に登録されている意味空間を表す行列とを用い、情報機器２に求める機能を示すテキストデータの意味空間中のベクトルを算出する。
Subsequently, the semantic
その後、意味類似度計算部３０は、得られた２つのベクトルのなす角度の余弦を求め、これを意味類似度とする。なお、本実施の形態１では、意味類似度計算部３０は、潜在意味解析を用いて意味類似度を計算することができるが、本実施の形態１は、この例に限定されるものではない。その他に、意味類似度計算部３０は、シソーラスを用いた類義語検索を行い、類義語の順位を用いて意味類似度を計算することもできる。更に、意味類似度計算部３０は、その他にも、意味の類似度を算出するにあたって、種々の好適な手法を用いることができる。
Thereafter, the semantic
意味空間辞書記録部３１は、意味類似度計算部３０が参照する意味空間辞書を記憶している。意味空間辞書は、上述したように、意味空間を表す行列と、情報機器２に定義されている機能の名称（テキストデータ）のリストとを登録している。意味空間を表す行列は、入力機能情報によって特定される機能と定義機能情報によって特定される機能との意味の近さを定義する行列であり、予め求められている。
The semantic space dictionary recording unit 31 stores a semantic space dictionary to which the semantic
本実施の形態１では、意味空間を示す行列は、例えば、情報機器２に関するマニュアルやシステム設計情報等の文書類を用いて生成することができる。具体的には、先ず、これらの文書に対して形態素解析を行って、文書を品詞に分解する。続いて、情報機器２に定義されている機能を説明している箇所毎に、固有名詞、一般名詞、及び動詞等を抽出する。その後、抽出された各品詞に対して、上記参考文献２に開示されている潜在意味解析（ＬＳＡ）が行われ、これにより、意味空間を示す行列が生成される。
In the first embodiment, the matrix indicating the semantic space can be generated using, for example, documents such as a manual related to the
また、本実施の形態１では、意味空間辞書に登録されているリストも、上述した情報機器２に関するマニュアルやシステム設計情報等の文書類から生成することができる。具体的には、この場合も、先ず、これらの文章に対して形態素解析を行って、文書を品詞に分解する。次に、固有名詞、一般名詞、及び動詞等を抽出し、これらをリスト化して、意味空間辞書に登録する。なお、意味空間辞書は、上述した意味区間を示す行列及びリスト以外にも、例えば、情報機器２に定義されている機能の名称に関する、その他のテキストデータ、音声データ、画像データ、及び動画像データ等を登録していても良い。
In the first embodiment, the list registered in the semantic space dictionary can also be generated from documents such as the manual related to the
履歴類似度計算部４０は、本実施の形態１では、操作履歴記録部４１に記録されているユーザの入力履歴（操作履歴）を用いて、入力機能情報と定義機能情報との間の履歴類似度を計算する。また、本実施の形態１では、ユーザの入力履歴には、ユーザから入力された過去の入力機能情報と、過去の入力機能情報の入力の際に実行された情報機器２の機能の履歴とが含まれている。ここで「過去」とは、履歴類似度計算部４０に入力機能情報が入力される以前を意味する。即ち、過去の入力機能情報とは、処理対象となっている入力機能情報以外の入力機能情報を意味する。
In the first embodiment, the history
ここで、図２（ａ）及び（ｂ）を用いて、入力履歴と、履歴類似度計算部４０における処理とについて説明する。図２（ａ）は、本発明の実施の形態１におけるユーザの入力履歴の一例を示す図であり、図２（ｂ）は、本発明の実施の形態１における履歴類似度計算部による計算プロセスの一例を示す図である。図２（ａ）に示すように、入力履歴は、過去の入力機能情報、即ち、ユーザが過去に入力した情報機器２の機能を示すテキストデータ（過去の音声認識データ）を含んでいる。図２（ａ）においては、テキストデータは、「録画する」、「予約する」等として示されている。
Here, the input history and the processing in the history
また、入力履歴は、過去の入力機能情報の入力の際に実行された情報機器２の機能の履歴、即ち、ユーザによって実際に行われた情報機器の操作の履歴も含んでいる。図２（ａ）の例では、図中の右側の欄に示すように、ユーザによって実際に行われた情報機器２の操作の履歴は、情報機器２に定義されている機能の名称を示すテキストデータによって構成されている。
The input history also includes a history of functions of the
履歴類似度計算部４０は、先ず、図２（ａ）に示された入力履歴の中から、入力機能情報と一致する、過去の入力機能情報を特定する。具体的には、履歴類似度計算部４０は、音声認識部２０によって過去に得られた音声認識データの中から、入力機能情報によって特定される機能を示すテキストデータと一致する箇所を探索する。図２（ｂ）の例では、現在得られた音声認識データが「録画する」である場合を示しており、入力履歴Ｎｏ.１と３と５が一致しているとして特定されている。
The history
次に、履歴類似度計算部４０は、特定された過去の入力機能情報から、その入力の際に実行された情報機器の機能を抽出し、そして、抽出した機能を用いて、履歴類似度を計算する。
Next, the history
具体的には、図２（ｂ）に示すように、入力履歴Ｎｏ.１と３と５が一致している場合は、履歴類似度計算部４０は、入力履歴Ｎｏ.１と３と５で実行された機能として、「録画」「録画予約」を抽出する。更に、履歴類似度計算部４０は、抽出された機能を実行した回数ｎを機能毎にカウントする。また、履歴類似度計算部４０は、全ての履歴のうち、過去の音声認識データが「録画する」であった回数Ｍを特定する。その後、履歴類似度計算部４０は、回数ｎがカウントされた機能それぞれについて、下記の（数１）を用いて、履歴類似度Ｓを算出する。
Specifically, as shown in FIG. 2 (b), when the input histories No. 1, 3 and 5 match, the history
（数１）
Ｓ＝ｎ／Ｍ
(Equation 1)
S = n / M
上記（数１）及び図２（ｂ）から分かるように、履歴類似度Ｓは、過去にユーザが情報機器２に求める機能に関する音声を発した時に実行された、機能の実行回数が多いほど、高くなるようになっている。
As can be seen from the above (Equation 1) and FIG. 2 (b), the history similarity S is larger when the number of executions of the function executed in the past when the user has made a voice related to the function requested by the
なお、本実施の形態１において、入力機能情報と定義機能情報との履歴類似度の算出方法は、上述した方法に限定されるものではない。履歴類似度は、例えば、現在のユーザの入力履歴と過去の別のユーザの入力履歴との履歴の類似性から計算しても良いし、現在の入力を行っているユーザと、過去に入力を行ったユーザとが一致するかどうかに応じて計算しても良い。履歴類似度の計算方法は、次に説明する置換機能決定部５０での処理に合わせて決定すれば良い。
In the first embodiment, the method for calculating the history similarity between the input function information and the definition function information is not limited to the method described above. The history similarity may be calculated from the history similarity between the input history of the current user and the input history of another user in the past, or the user who has made the current input and the past input The calculation may be performed according to whether or not the user who has performed matches. The history similarity calculation method may be determined in accordance with the processing in the replacement
また、本実施の形態１においては、入力履歴には、ユーザの過去の操作によって得られた、その他のテキストデータ、音声データ、画像データ、及び動画像データ等が記録されていても良い。更に、入力履歴には、ユーザの無操作時間が一定時間を超えた場合や、ユーザが設定した機能を情報機器２が実行した場合、情報機器２においてエラーが発生した場合等の特定の状況が発生する毎に、その事実の発生が記録されていても良い。
In the first embodiment, other text data, audio data, image data, moving image data, and the like obtained by the user's past operations may be recorded in the input history. Furthermore, the input history includes specific situations such as when the user's no-operation time exceeds a certain time, when the
置換機能決定部５０は、本実施の形態１では、入力機能情報について、予め定義されている情報機器２の機能毎に、意味類似度及び履歴類似度、それぞれに、設定された係数を乗算し、そして得られた各乗算値の和（重み付け和）を計算する。そして、置換機能決定部５０は、計算した重み付け和を用いて、入力機能情報で特定される機能と置き換え可能な、定義機能情報で特定される機能を決定する。本実施の形態１では、置換機能決定部５０は、重み付け和が最大となる機能を、入力情報機能に置換可能な機能として選択する。
In the first embodiment, the replacement
具体的には、意味類似度に乗算する係数をＷｍ、意味類似度をＳｍ、履歴類似度に乗算する係数をＷｉ、履歴類似度をＳｉとすると、重み付け和σは、下記の（数２）を用いて算出することができる。 Specifically, when the coefficient for multiplying the semantic similarity is Wm, the semantic similarity is Sm, the coefficient for multiplying the historical similarity is Wi, and the historical similarity is Si, the weighted sum σ is expressed by the following (Equation 2). Can be used to calculate.
（数２）
σ＝Ｗｍ×Ｓｍ＋Ｗｉ×Ｓｉ
(Equation 2)
σ = Wm × Sm + Wi × Si
また、本実施の形態１においては、意味類似度に乗算される係数Ｗｍ、及び履歴類似度に乗算される係数Ｗｉそれぞれの値は、ユーザの入力履歴の量に応じて設定されても良い。具体的には、操作履歴記録部４１に蓄積されているユーザの入力履歴のデータの数をｄとすると、係数Ｗｍは、データ数ｄに基づいて下記の（数３）及び（数５）のように書き換えることができる。また、係数Ｗｉは、データ数ｄに基づいて下記の（数４）及び（数６）のように書き換えることができる。なお、下記の（数３）〜（数６）において、ｃは、入力履歴を十分に蓄えている判断される場合における入力履歴の総数に対する閾値であり、例えば、操作支援装置の開発時等に操作支援状況に基づいて適宜設定される。
In
（数３）
Ｗｍ＝（ｃ−ｄ）／ｃ （ｄ＜ｃ）
(Equation 3)
Wm = (cd) / c (d <c)
（数４）
Ｗｉ＝ｄ／ｃ （ｄ＜ｃ）
(Equation 4)
Wi = d / c (d <c)
（数５）
Ｗｍ＝０ （ｄ≧ｃ）
(Equation 5)
Wm = 0 (d ≧ c)
（数６）
Ｗｉ＝１ （ｄ≧ｃ）
(Equation 6)
Wi = 1 (d ≧ c)
上記（数３）及び（数４）に示すように、入力履歴が十分に蓄えられていない場合は、意味類似度に対する係数Ｗｍが大きくなり、その状態で重み付けσが計算される。一方、上記（数５）及び（数６）に示すように、入力履歴が十分に蓄えられている場合は、履歴類似度に対する係数Ｗｉが大きくなり、その状態で重み付けσが計算される。 As shown in the above (Equation 3) and (Equation 4), when the input history is not sufficiently stored, the coefficient Wm for the semantic similarity becomes large, and the weighting σ is calculated in this state. On the other hand, as shown in (Equation 5) and (Equation 6), when the input history is sufficiently stored, the coefficient Wi for the history similarity becomes large, and the weighting σ is calculated in this state.
また、本実施の形態１では、意味類似度に乗算される係数Ｗｍ、及び履歴類似度に乗算される係数Ｗｉ、それぞれの値は、入力機能情報の内容に応じて設定されていても良い。例えば、情報機器２に求める機能を特定する情報、即ち、入力機能情報が、ユーザが求める情報機器２の機能を表す単語であった場合は、意味類似度に乗算される係数Ｗｍを履歴類似度に乗算する係数Ｗｉよりも大きく設定するのが好ましい。一方、入力機能情報がユーザに提供するコンテンツを表す単語であった場合は、意味類似度は低くなる傾向にあるため、履歴類似度に乗算される係数Ｗｉを意味類似度に乗算する係数Ｗｍよりも大きく設定するのが好ましい。
In the first embodiment, the coefficient Wm multiplied by the semantic similarity and the coefficient Wi multiplied by the history similarity may be set in accordance with the contents of the input function information. For example, if the information specifying the function required for the
更に、本実施の形態１において、重み付け和σの計算方法は、特に限定されず、各類似度に乗算する係数の設定方法も適宜選択することができる。また、上述したように、置換機能決定部５０は、重み付け和σを用いて、置き換え可能な機能を決定するが、その際、重み付け和σの高いものから順に複数個の機能を選択しても良い。なお、選択する機能の数は、次に説明する表示情報変換部６０での処理に合わせて決定すれば良い。
Furthermore, in the first embodiment, the method for calculating the weighted sum σ is not particularly limited, and the method for setting the coefficient by which each similarity is multiplied can be selected as appropriate. Further, as described above, the replacement
表示情報変更部６０は、情報機器の表示部７０に設けられた表示画面に表示されている情報に、入力機能情報と定義機能情報とを用いて、ユーザが情報機器２に求める機能の操作を用意に行うことができるようにするため、変更を加えることができる。なお、表示部７０は、液晶表示装置等の表示装置である。
The display
本実施の形態１では、表示情報変更部６０は、表示画面に表示されている情報の中から、置換機能決定部５０によって決定された機能の名称と一致する情報（テキストデータ）を抽出する。そして、表示情報変更部６０は、抽出した情報自体、抽出した情報が表示されている表示領域、及びその周辺領域のうち少なくとも一つに変更を加える。
In the first embodiment, the display
具体的には、表示情報変更部６０は、抽出した情報を、それと置き換え可能な、入力機能情報で特定される機能を表す文字列に変更することができる。また、表示情報変更部６０は、抽出した情報を示す文字に対して、文字色の変更、太字化、斜体字化、文字点滅などの視覚的に強調する効果を加える、といった変更を行うこともできる。更に、このとき、表示情報変更部６０は、変更部分にユーザを注目させるため、「点滅部分を押してください」、「太字部分に着目してください」等の補足表示を表示画面に加えることもできる。なお、これらの変更はあくまでも一例にしか過ぎず、抽出された情報が明確になる変更であれば良い。本実施の形態１において、変更は特に限定されるものではない。
Specifically, the display
次に、本発明の実施の形態１における操作支援装置１の動作について図３を用いて説明する。図３は、本発明の実施の形態１における操作支援装置及び情報機器の動作を示すフローチャートである。また、本実施の形態１では、操作支援装置１を動作させることにより、本実施の形態１における操作支援方法が実施される。よって、本実施の形態１における操作支援方法の説明は、以下の操作支援装置１の動作の説明に代える。また、以下の説明においては、適宜図１を参酌する。
Next, operation | movement of the
図３に示すように、先ず、音声データ入力部１０により、ユーザが発した情報機器２に求める機能に関する音声が音声データに変換される（ステップＡ１）。ステップＡ１において得られた音声データは、音声認識部２０へと出力される。
As shown in FIG. 3, first, the voice data input unit 10 converts the voice about the function required by the
なお、ユーザが音声を発する前に、操作支援装置１は、情報機器２の表示部７０やスピーカ（図１において図示せず）を用いて、ユーザに対して、情報機器２に求める機能に関する音声を発するように促すこともできる。例えば、操作支援装置１は、表示部７０の表示画面に「行いたいことを言ってください」等のように表示を行っても良い。
Note that the
次に、音声認識部２０によって、ステップＡ１で得られた音声データに対して音声認識が行われ、ユーザが情報機器２に求める機能を特定する情報（入力機能情報）が取得される（ステップＡ２）。ステップＡ２で得られた入力機能情報は、意味類似度計算部３０、履歴類似度計算部４０、及び表示情報変更部６０へと出力される。
Next, the
次に、意味類似度計算部３０によって、入力機能情報と定義機能情報との間の意味類似度が算出され（ステップＡ３）、更に、履歴類似度計算部４０によって、ユーザの入力履歴に基づいて入力機能情報と定義機能情報との履歴類似度が算出される（ステップＡ４）。ステップＡ３で算出された意味類似度と、ステップＡ４で算出された履歴類似度とは、共に、置換機能決定部５０へと出力される。また、本実施の形態１では、ステップＡ３とステップＡ４とは同時に実行されていても良いし、ステップＡ４から先に実行されていても良い。
Next, the semantic
次に、置換機能決定部５０によって、意味類似度と履歴類似度とを用いて重み付け和σが計算され、更に、計算された重み付け和σに基づいて、入力機能情報で特定される機能と置き換え可能な、定義機能情報で特定される機能が決定される（ステップＡ５）。ステップＡ５で置き換え可能であるとされた機能は、表示情報変更部６０へと出力される。
Next, the replacement
その後、表示情報変更部６０により、ステップＡ２で得られた入力機能情報と、ステップＡ５で得られた置換可能な機能の情報とが用いられて、情報機器の表示部７０に設けられた表示画面に表示されている情報に変更が加えられる（ステップＡ６）。ステップＡ６における変更は、ユーザが情報機器２に求める機能の操作を用意に行うことができるように行われている。
Thereafter, the display
以上のように、本実施の形態１によれば、ユーザが、自身にとって慣れ親しみのある情報機器２の機能に関する言葉を入力すると、情報機器２に予め定義されている、その言葉と同じ意味の機能が特定される。そして、特定された機能についての表示が、ユーザが入力した自身にとって慣れ親しみのある言葉に置き換えられる等する。このため、情報機器２の操作にあたっての認知的負荷の軽減が図られるので、ユーザにとって、情報機器２の操作を容易なものにできるとともに、操作手順を記憶し易いものとすることもできる。また、ユーザが入力した言葉と同じ意味の機能の特定のために、予め変換テーブルを用意する必要がないため、情報機器２の開発にかかるコストの低減を図ることもできる。
As described above, according to the first embodiment, when the user inputs a word related to the function of the
また、本実施の形態１におけるプログラムは、コンピュータに、図３に示すステップＡ１〜Ａ６を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行すれば、本実施の形態１における操作支援装置及び操作支援方法を実現することができる。この場合、コンピュータのＣＰＵ（Central Processing Unit）は、音声データ入力部１０、音声認識部２０、意味類似度計算部３０、履歴類似度計算部４０、置換機能決定部５０、及び表示情報変更部６０として機能し、処理を行なう。
Moreover, the program in this
また、上記の場合、音声認識辞書記録部２１、意味空間辞書記録部３１、及び操作履歴記録部４１は、コンピュータに備えられた記憶装置、例えば、ＲＯＭ、ＲＡＭ、ハードディスク装置等によって実現できる。また、記憶装置を備えるコンピュータは、本実施の形態１におけるプログラムがインストールされたコンピュータに限られず、このコンピュータと接続された外部の別のコンピュータであっても良い。 In the above case, the speech recognition dictionary recording unit 21, the semantic space dictionary recording unit 31, and the operation history recording unit 41 can be realized by a storage device provided in a computer, for example, a ROM, a RAM, a hard disk device, or the like. The computer provided with the storage device is not limited to the computer in which the program according to the first embodiment is installed, and may be another external computer connected to the computer.
（実施の形態２）
次に、本発明の実施の形態２における、操作支援装置、情報機器、操作支援方法、及びプログラムについて、図４〜図６を参照しながら説明する。最初に、本実施の形態２における操作支援装置及び情報機器の構成について図４を用いて説明する。図４は、本発明の実施の形態２における操作支援装置及び情報機器の概略構成を示すブロック図である。
(Embodiment 2)
Next, an operation support apparatus, an information device, an operation support method, and a program according to
図４に示すように、本実施の形態２における操作支援装置３は、図１に示した実施の形態１における操作支援装置１の構成に加え、入力部８０を備えている。また、これにより、各部の動作も、一部において、実施の形態１で示した例と異なっている。以下に、実施の形態１との相違点について説明する。
As shown in FIG. 4, the
入力部８０は、ユーザが情報機器２に対して行う操作を受け付け、操作に対応する情報を出力する。操作に対応する情報の出力先としては、表示情報変更部６０及び音声認識辞書２１といったユーザからの操作を必要とする要素が挙げられる。また、入力部８０としては、具体的には、キーボード、マウス、タッチパネル、及びリモートコントローラ等の入力機器が挙げられる。
The
音声認識辞書記録部２１は、実施の形態１の場合と同様に、音声認識辞書を記録している。音声認識辞書は、情報機器２に求める機能に関する音声の音素データと、各音素データに対応するテキストデータとを登録している。但し、本実施の形態２では、音声認識辞書に登録されているデータに対して更新が行われる。具体的には、更新は、ユーザから入力部８０を介して入力される情報機器２の操作内容に基づいて行われる。
The voice recognition dictionary recording unit 21 records the voice recognition dictionary as in the case of the first embodiment. The speech recognition dictionary registers speech phoneme data related to functions required for the
また、音声認識部２０は、本実施の形態２では、実施の形態１において説明した動作に加え、上述の音声認識辞書の更新に伴って以下の動作を行うこともできる。つまり、本実施の形態２においては、音声認識部２０は、音声認識結果として、実施の形態１と同様の情報機器２の機能に関する音素データに対応するテキストデータに加え、ユーザから入力部８０を介して入力された情報機器２の操作内容に関するデータも出力できる。また、音声認識部２０は、出力される音声認識の結果に、データの種類を特定する識別子を付加することもできる。
In addition, in the second embodiment, the
後者のデータの具体例としては、ユーザが過去に情報機器２の機能を実行した際に利用したコンテンツに関する情報が挙げられる。また、コンテンツに関する情報としては、例えば、情報機器２が、ＤＶＤレコーダ等の録画装置であるならば、番組名が挙げられる。更に、情報機器２がパーソナルコンピュータであるならば、ブラウジングしたＷｅｂページのタイトル、アクセスしたデータファイルの名称等が挙げられる。情報機器２が携帯電話であるならば、携帯電話の電話帳に記録されている通話相手の名前等が挙げられる。
As a specific example of the latter data, there is information related to the content used when the user has executed the function of the
このようなコンテンツに関する情報は、入力部８０を介して、音声認識辞書として、音声認識辞書記録部２１に記録されるが、このとき、情報機器２に求める機能に関する音素データに対応するテキストデータとは区別された状態で、記録されているのが好ましい。
Information regarding such content is recorded in the speech recognition dictionary recording unit 21 as a speech recognition dictionary via the
また、本実施の形態２では、操作履歴記録部４１に記録されている入力履歴は、ユーザによって実際に行われた情報機器の操作の履歴として、過去にユーザが入力機能情報を入
力して情報機器２の機能を実行した際に利用したコンテンツに関する情報を含むこともできる。更に、本実施の形態２では、過去の入力機能情報は、機能の名称によって情報機器２の機能を特定する情報だけに限られず、コンテンツの名称によって情報機器２の機能を特定する情報であっても良い。
Further, in the second embodiment, the input history recorded in the operation history recording unit 41 is information obtained by the user inputting input function information in the past as a history of information device operations actually performed by the user. Information related to the content used when the function of the
ここで、図５（ａ）及び図５（ｂ）を用いて、本実施の形態２における入力履歴について説明すると共に、本実施の形態２における履歴類似度計算部４０の処理についても説明する。図５（ａ）は、本発明の実施の形態２におけるユーザの入力履歴の一例を示す図であり、図５（ｂ）は、本発明の実施の形態２における履歴類似度計算部による計算プロセスの一例を示す図である。
Here, with reference to FIG. 5A and FIG. 5B, the input history in the second embodiment will be described, and the processing of the history
図５（ａ）に示すように、本実施の形態２では、入力履歴は、過去の入力機能情報（過去の音声認識データ）として、ユーザが過去に入力した情報機器２の機能を示すテキストデータに加えて、同時に入力されたコンテンツの名称を示すテキストデータを含んでいる。図５（ａ）の例では、機能を示すテキストデータとしては、「録画する」及び「見る」等が示されており、コンテンツの名称を示すテキストデータとしては、「ニュース８」及び「連続ドラマ」等が示されている。
As shown in FIG. 5A, in the second embodiment, the input history is text data indicating the function of the
また、入力履歴は、本実施の形態２においても、実施の形態１と同様に、過去の入力機能情報の入力の際に実行された情報機器２の機能の履歴、即ち、ユーザによって実際に行われた情報機器の操作の履歴も含んでいる。但し、本実施の形態２では、実施の形態１と異なり、ユーザによって実際に行われた情報機器２の操作の履歴は、情報機器２に定義されている機能の名称を示すテキストデータに加えて、機能を実行した際に利用されたコンテンツの名称を示すテキストデータも含んでいる。なお、図５（ａ）の例では、機能の名称を示すテキストデータ（実行した機能名）として、「録画」及び「録画予約」等が示されている。また、コンテンツの名称を示すテキストデータ（実行したコンテンツ）として、「連続ドラマ」及び「ニュース８」等が示されている。
Also in the second embodiment, the input history is the function history of the
履歴類似度計算部４０は、本実施の形態２においても、実施の形態１と同様に、先ず、図５（ａ）に示された入力履歴の中から、入力機能情報と一致する、過去の入力機能情報を特定する。具体的には、履歴類似度計算部４０は、音声認識部２０によって過去に得られた音声認識データの中から、入力機能情報によって特定される機能を示すテキストデータと一致する箇所を探索する。
Similarly to the first embodiment, the history
但し、本実施の形態２では、図５（ｂ）の例に示すように、現在得られた音声認識データは、コンテンツの名称である「ニュース８」である。よって、コンテンツの名称が一致している入力履歴として、入力履歴Ｎｏ.１、２、及び３が特定される。
However, in the second embodiment, as shown in the example of FIG. 5B, the currently obtained voice recognition data is “
次に、履歴類似度計算部４０は、特定された過去の入力機能情報から、その入力の際に実行された情報機器の機能と、機能を実行した際に利用されたコンテンツ（実行したコンテンツ）とを抽出する。そして、履歴類似度計算部４０は、抽出した機能とコンテンツとを用いて、履歴類似度を計算する。
Next, the history
具体的には、図５（ｂ）に示すように、入力履歴Ｎｏ.１、２、３が一致している場合は、履歴類似度計算部４０は、入力履歴Ｎｏ．１、２、３それぞれで実行された機能と、各機能の実行によって利用されたコンテンツとを一組のデータとして抽出する。つまり、履歴類似度計算部４０は、「録画」と「ニュース８」、「録画予約」と「ニュース８」それぞれ抽出する。更に、履歴類似度計算部４０は、抽出された機能を実行した回数ｎを機能毎にカウントする。また、履歴類似度計算部４０は、全ての履歴のうち、過去の音声認識データのコンテンツの名称が「ニュース８」であった回数Ｍを特定する。その後、履歴
類似度計算部４０は、回数ｎがカウントされた機能それぞれについて、上述した（数１）を用いて、履歴類似度Ｓを算出する。
Specifically, as shown in FIG. 5B, when the input history Nos. 1, 2, and 3 match, the history
そして、過去の入力機能情報が、コンテンツの名称によって情報機器２の機能を特定している場合は、入力履歴には、過去に入力されたコンテンツの名称を示すテキストデータ（過去の音声認識データ）と、ユーザが過去に利用したコンテンツの名称を示すテキストデータとが含まれる。つまり、この場合は、図２（ａ）における左欄に、コンテンツの名称を示すテキストデータが含まれ、それに対応する右欄に、実際に利用されたコンテンツの名称を示すテキストデータ（又はそれを示す識別子）が含まれることになる。
If the past input function information specifies the function of the
履歴類似度計算部４０は、入力履歴にコンテンツの名称が含まれていない場合は、実施の形態１で述べた例と同様にして履歴類似度を算出する。一方、履歴類似度計算部４０は、入力履歴にコンテンツの名称が含まれている場合は、次のようにして履歴類似度を算出する。
When the input history does not include the name of the content, the history
先ず、履歴類似度計算部４０は、入力履歴にアクセスし、ユーザが情報機器２に求める機能のテキスト情報（入力機能情報）と、入力履歴中におけるユーザが過去に情報機器２に求めた機能のテキスト情報（過去の入力機能情報）とが一致する箇所を特定する。次に、履歴類似度計算部４０は、一致した入力履歴中におけるユーザが情報機器に求める機能のテキスト情報（過去の入力機能情報）に基づき、それと対になっているユーザの操作の履歴（図２（ａ）における右側の欄に相当）を参照する。
First, the history
この一連の処理は、入力履歴中において、ユーザが情報機器２に求める機能のテキスト情報（コンテンツの名称）と、ユーザの操作履歴中のその機能を実行した際に利用されたコンテンツの名称とが一致する箇所の探索を行っている。
This series of processing includes the text information (content name) of the function that the user wants from the
探索の結果、両方が一致する箇所が存在する場合は、入力機能情報が過去の入力機能情報と一致し、一致した過去の入力機能情報に対応するコンテンツの名称が存在していることになる。この場合、履歴類似度計算部４０は、入力機能情報と一致している過去の入力機能情報と対となって記録されているコンテンツの名称を抽出し、抽出された名称の個数ｎを名称の種類毎にカウントする。また、履歴類似度計算部４０は、一致している過去の入力機能情報の入力履歴だけではなく、全ての入力履歴を対象としたコンテンツの名称の抽出も実行し、種類毎の個数をカウントし、更に最大の個数Ｍを特定する。その後、履歴類似度計算部４０は、個数ｎがカウントされたコンテンツの名称それぞれについて、上記の（数１）を用いて、履歴類似度Ｓを算出する。
As a result of the search, if there is a location where both match, the input function information matches the past input function information, and the content name corresponding to the matched past input function information exists. In this case, the history
なお、本実施の形態２において、過去の音声認識データは、実施の形態１において図２（ａ）の例に示した場合と同様に、実行された情報機器２の機能のみであっても良いし、コンテンツの名称のみであっても良い。また、本実施の形態２では、履歴類似度の算出は、過去の音声認識データが、機能のみの場合、コンテンツの名称のみの場合、機能とコンテンツの名称との両方の場合、それぞれについて、異なっていても良い。つまり、履歴類似度の算出は、図５（ａ）の例において、履歴ＮＯ．１と、ＮＯ．２と、Ｎｏ．４とでそれぞれ異なっていても良い。
In the second embodiment, the past speech recognition data may be only the function of the executed
置換機能決定部５０は、本実施の形態２においても、実施の形態１で示した処理と同様の処理により、重み付け和σを計算する。但し、本実施の形態２では、置換機能決定部５０は、上述した入力機能情報の種類に応じて、意味類似度に乗算される係数Ｗｍ、及び履歴類似度に乗算される係数Ｗｉそれぞれの値を設定することができる。
Also in the second embodiment, the replacement
例えば、入力機能情報が、機能を示すテキストデータのみによって、情報機器２の機能
を特定する場合は、置換機能決定部５０は、実施の形態１で示した例と同様にして、係数Ｗｍ及び係数Ｗｉを設定する。一方、入力機能情報が、機能を示すテキストデータとコンテンツの名称を示すテキストデータとによって情報機器２の機能を特定する場合は、置換機能決定部５０は、下記の（数７）及び（数８）に示すように、係数Ｗｍ及び係数Ｗｉを設定することができる。
For example, when the input function information specifies the function of the
（数７）
Ｗｍ＝０
(Equation 7)
Wm = 0
（数８）
Ｗｉ＝１
(Equation 8)
Wi = 1
上記（数７）及び（数８）による場合は、重み付け和σは、意味類似度の影響を全く受けず、履歴類似度の影響のみを受ける値となる。つまり、この場合は、履歴類似度のみに基づいて、置き換えが可能な情報機器に定義されている機能が決定されることとなる。なお、上述の点を除き、置換機能決定部５０は、実施の形態１で述べた場合と同様に動作する。また、本実施の形態２においても、実施の形態１と同様に、置換機能決定部５０は、置き換え可能な機能を決定する際、重み付け和σの高いものから順に複数個の機能を選択しても良い。なお、選択する機能の数は、表示情報変換部６０での処理に合わせて決定すれば良い。
In the case of the above (Equation 7) and (Equation 8), the weighted sum σ is a value that is not influenced by the semantic similarity at all, but only affected by the history similarity. That is, in this case, the function defined in the replaceable information device is determined based only on the history similarity. Except for the points described above, replacement
表示情報変更部６０は、本実施の形態２では、情報機器の表示部７０に設けられた表示画面に表示されている情報に、変更を加える際に、入力機能情報と定義機能情報とに加え、入力部８０が受け付けたユーザの操作も用いることができる。なお、本実施の形態２においても、変更は、ユーザが情報機器２に求める機能の操作を容易に行うことができるように行われる。
In the second embodiment, the display
本実施の形態２においても、表示情報変更部６０は、実施の形態１と同様に、表示画面に表示されている情報の中から、置換機能決定部５０によって決定された機能の名称と一致する情報を抽出する。そして、表示情報変更部６０は、抽出した情報自体、抽出した情報が表示されている表示領域、及びその周辺領域のうち少なくとも一つに変更を加える。但し、本実施の形態２では、表示情報変更部６０は、変更を加える前に、表示画面に、変更の許可を求める情報を表示し、そして、外部から変更を許可する通知を取得した場合にのみ、変更を加えることもできる。
Also in the second embodiment, the display
具体的には、表示情報変更部６０は、例えば「表示されている○○○（定義機能情報で特定される機能）は、×××（入力機能情報で特定される機能）と同じ意味です。○○○を×××に置き換えますか？」と表示する。このような表示に対して、ユーザは、入力部８０を介して返答を入力する。ユーザから、変更を加えても良い旨の情報が入力されると、表示情報変更部６０は、変更を加える。
Specifically, the display
更に、本実施の形態２では、表示情報変更部６０は、表示画面に、ユーザの入力履歴に関する情報を表示することもできる。この場合、表示情報変更部６０は、例えば「△△△（入力機能情報の機能を特定しているコンテンツの名称又は内容）に関して、過去の履歴情報を表示しますか？」等と表示する。ユーザから、表示を求める旨の情報が入力されると表示情報変更部６０は、例えば、抽出した情報が表示されている表示領域の付近に、入力履歴に基づいて、ユーザが過去に行った操作の情報を提示する。
Furthermore, in the second embodiment, the display
具体的には、表示情報変更部６０は、履歴情報の表示が求められた場合は、履歴類似度計算部４０に履歴情報の抽出を指示する。指示を受けると、履歴類似度計算部４０は、入
力履歴の中から、現在の入力機能情報と一致する過去の入力機能情報を特定し、これに対応するユーザの操作履歴を抽出し、これを表示情報変更部６０に送る。
Specifically, the display
表示情報変更部６０は、操作履歴を受け取ると、例えば、そこに示されている、ユーザによって実行された情報機器２の操作の履歴を、グラフ、又は状態遷移図等の形式で表示する画像を作成する。この場合、作成された画像が、履歴情報として、情報機器２の表示画面に表示される。
When the display
また、表示情報変更部６０が複数の操作履歴を受け取っている場合（履歴類似度計算部４０が複数の操作履歴を抽出している場合）は、表示情報変更部６０は、これら複数の履歴情報をリスト形式で示す画像を作成し、これを情報機器２の表示画面に表示する。更に、表示情報変更部６０は、操作履歴の中から、最も主要な機能又はコンテンツの名称だけを抽出し、それだけを示す画像を作成することもできる。その他、表示情報変更部６０は、作成する画像中に、各入力履歴が記録された日時を特定する情報や、操作を行ったユーザの名前等が表示されるようにすることもできる。
When the display
次に、本発明の実施の形態２における操作支援装置３の動作について図６を用いて説明する。図６は、本発明の実施の形態２における操作支援装置及び情報機器の動作を示すフローチャートである。また、本実施の形態２においても、操作支援装置３を動作させることにより、本実施の形態２における操作支援方法が実施される。よって、本実施の形態２における操作支援方法の説明も、以下の操作支援装置３の動作の説明に代える。また、以下の説明においては、適宜図４を参酌する。
Next, operation | movement of the
図６に示すように、先ず、音声データ入力部１０により、ユーザが発した情報機器２に求める機能に関する音声が音声データに変換される（ステップＢ１）。次に、音声認識部２０によって、音声データに対して音声認識が行われ、入力機能情報が取得される（ステップＢ２）。
As shown in FIG. 6, first, the voice data input unit 10 converts a voice about a function required by the
次に、意味類似度計算部３０によって意味類似度が算出され（ステップＢ３）、更に、履歴類似度計算部４０によって履歴類似度が算出される（ステップＢ４）。次に、置換機能決定部５０によって、意味類似度と履歴類似度とを用いて重み付け和が計算され、計算された重み付け和に基づいて、入力機能情報で特定される機能と置き換え可能な、定義機能情報で特定される機能が決定される（ステップＢ５）。なお、ステップＢ１〜ステップＢ５は、実施の形態１において図３に示したステップＡ１〜Ａ５と同様のステップである。
Next, the semantic similarity is calculated by the semantic similarity calculator 30 (step B3), and the history similarity is calculated by the history similarity calculator 40 (step B4). Next, the replacement
続いて、ステップＢ５の実行後、表示情報変更部６０は、表示画面に表示される情報が、置換機能決定部５０によって決定された機能の名称と一致する箇所（テキストデータ）を含んでいるかどうかを確認する（ステップＢ６）。そして、表示情報変更部６０は、一致する箇所が存在しているかどうかを判定する（ステップＢ７）。
Subsequently, after the execution of step B5, the display
ステップＢ７の判定の結果、表示画面に表示される情報が一致する箇所を含んでいない場合は、処理が終了する。一方、ステップＢ７の判定の結果、表示画面に表示される情報が一致する箇所を含んでいる場合は、ステップＢ８が実行される。 As a result of the determination in step B7, if the information displayed on the display screen does not include a matching part, the process ends. On the other hand, if the result of determination in step B7 includes a location where the information displayed on the display screen matches, step B8 is executed.
ステップＢ８では、表示情報変更部６０により、情報機器２の表示画面に、ユーザに対して表示内容に変更を加えてもよいかどうかの確認を求めるテキストが表示される。次に、表示情報変更部６０は、入力部８０を介して、ユーザから変更を加えることを許可する指示が得られているかどうかを判定する（ステップＢ９）。
In step B <b> 8, the display
ステップＢ９の判定の結果、変更を加えることが許可されていない場合は、処理が終了する。一方、ステップＢ９の判定の結果、変更を加えることが許可されている場合は、ステップＢ１０が実行される。ステップＢ１０では、ステップＢ６で確認された一致箇所の表示領域の周辺に、入力履歴に基づいて、ユーザが過去に行った操作の情報が追加表示される（ステップＢ１０）。 As a result of the determination in step B9, when the change is not permitted, the process ends. On the other hand, if the result of determination in step B9 is that changing is permitted, step B10 is executed. In step B10, information on the operation performed by the user in the past is additionally displayed around the display area of the matching part confirmed in step B6 based on the input history (step B10).
以上のように、本実施の形態２では、情報機器２の表示画面に変更が加えられる場合に、ユーザに変更の許可が求められ、許可された場合にのみ表示画面は変更される。よって、ユーザにとって必要以上の変更が行われないため、ユーザが操作を混乱してしまう事態の発生が抑制される。
As described above, in the second embodiment, when the display screen of the
また、表示画面の変更の一態様として、本実施の形態２では、ユーザの操作履歴を表示させることもできる。この場合、ユーザは、過去に操作した内容を思い出し易くなり、且つ、操作すべき対象は明確となる。この結果、ユーザにとって、情報機器２の操作はいっそう容易になり、更に、操作手順もより記憶しやすいものとなる。なお、本実施の形態２を用いた場合も、実施の形態１で述べた効果を得ることができる。
In addition, as an aspect of changing the display screen, the operation history of the user can be displayed in the second embodiment. In this case, the user can easily remember the contents operated in the past, and the object to be operated becomes clear. As a result, the operation of the
また、本実施の形態２におけるプログラムは、コンピュータに、図６に示すステップＢ１〜Ｂ１０を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行すれば、本実施の形態２における操作支援装置及び操作支援方法を実現することができる。この場合、本実施の形態２において、コンピュータのＣＰＵ（Central Processing Unit）は、音声データ入力部１０、音声認識部２０、意味類似度計算部３０、履歴類似度計算部４０、置換機能決定部５０、表示情報変更部６０、及び入力部８０として機能し、処理を行なう。
Moreover, the program in this
また、本実施の形態２においても、上記の場合、音声認識辞書記録部２１、意味空間辞書記録部３１、及び操作履歴記録部４１は、コンピュータに備えられた記憶装置、例えば、ＲＯＭ、ＲＡＭ、ハードディスク装置等によって実現できる。また、記憶装置を備えるコンピュータは、本実施の形態２におけるプログラムがインストールされたコンピュータに限られず、このコンピュータと接続された外部の別のコンピュータであっても良い。 Also in the second embodiment, in the above case, the speech recognition dictionary recording unit 21, the semantic space dictionary recording unit 31, and the operation history recording unit 41 are storage devices provided in the computer, for example, ROM, RAM, It can be realized by a hard disk device or the like. The computer provided with the storage device is not limited to the computer in which the program according to the second embodiment is installed, and may be another external computer connected to the computer.
上述した実施の形態１及び実施の形態２では、入力機能情報は、ユーザが発した音声に対して音声認識を行って得られたデータである。但し、本発明は、これに限定されるものではない。入力機能情報は、ユーザが直接入力したテキストデータであっても良い。この場合の例について図７を用いて説明する。図７は、本発明の実施の形態１における操作支援装置及び情報機器の他の例の構成を示すブロック図である。
In the first embodiment and the second embodiment described above, the input function information is data obtained by performing voice recognition on the voice uttered by the user. However, the present invention is not limited to this. The input function information may be text data directly input by the user. An example of this case will be described with reference to FIG. FIG. 7 is a block diagram showing a configuration of another example of the operation support apparatus and the information device according to
図７の例では、操作支援装置１は、図１に示した、音声データ入力部１０、音声認識部２０、及び音声認識辞書記録部２１の代わりに、テキスト入力部８０を備えている。テキスト入力部８０は、ユーザから、情報機器２に求める機能に関するテキストデータが入力されると、入力されたテキストデータを入力機能情報として出力する。更に、本発明においては、操作支援装置１は、音声データ入力部１０、音声認識部２０、及び音声認識辞書記録部２１に加えて、テキスト入力部８０を備えていても良い。
In the example of FIG. 7, the
本発明は、ＤＶＤレコーダ等の録画装置、テレビ受像機、プリンタ、デジタルカメラ、カムコーダ、冷蔵庫等の家庭で使用される電化製品に有用である。また、本発明は、パーソナルコンコンピュータに代表される個人向けの端末装置、ＰＯＳシステム及び経理システム等の企業向け業務システムを構成する端末装置、図書検索システム及び電子カルテシステム等の公共サービスシステムを構成する端末装置にも有用である。本発明は、これら
に適用した場合に、情報機器の開発コストを低減しつつ、ユーザにとって、機器操作を容易にし、更に、操作手順を記憶しやすいものとすることができる。
INDUSTRIAL APPLICABILITY The present invention is useful for electrical appliances used at home such as a recording device such as a DVD recorder, a television receiver, a printer, a digital camera, a camcorder, and a refrigerator. Further, the present invention constitutes a personal service device such as a personal computer represented by a personal computer, a terminal device constituting a business system for enterprises such as a POS system and an accounting system, a public service system such as a book retrieval system and an electronic medical record system. It is also useful for a terminal device. When the present invention is applied to these, it is possible to make the device operation easy for the user and to easily store the operation procedure while reducing the development cost of the information device.
１ 操作支援装置（実施の形態１）
２ 情報機器
３ 操作支援装置（実施の形態２）
１０ 音声入力部
２０ 音声認識部
２１ 音声認識辞書記録部
３０ 意味類似度計算部
３１ 意味空間辞書記録部
４０ 履歴類似度計算部
４１ 操作履歴記録部
５０ 置換機能決定部
６０ 表示情報変換部
７０ 表示部
８０ 入力部
1 Operation Support Device (Embodiment 1)
2
DESCRIPTION OF SYMBOLS 10
Claims (28)
前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算する意味類似度計算部と、
前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算する履歴類似度計算部と、
前記意味類似度計算部が計算した類似度、及び前記履歴類似度計算部が計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定する、置換機能決定部と、
を備えていることを特徴とする、操作支援装置。 An operation support apparatus that supports an operation of an information device by a user,
Semantic similarity between input function information that is input from the user and that specifies a function that the user wants the information device, and defined function information that specifies a function of the information device that is defined in advance. A semantic similarity calculator to calculate,
A history similarity calculation unit that calculates a similarity between the input function information and the definition function information based on the input history of the user;
Using the similarity calculated by the semantic similarity calculation unit and the similarity calculated by the history similarity calculation unit, specified by the definition function information replaceable with the function specified by the input function information A replacement function determination unit that determines a function;
An operation support apparatus comprising:
前記音声認識部は、前記ユーザから、前記情報機器に求める機能に関する音声の音声データが入力されると、その認識結果を前記入力機能情報として出力する、請求項１に記載の操作支援装置。 A voice recognition unit that performs voice recognition on the voice data input from the user and outputs a recognition result;
The operation support apparatus according to claim 1, wherein the voice recognition unit outputs a recognition result as the input function information when voice data of a voice related to a function required for the information device is input from the user.
前記テキスト入力部は、前記ユーザから、前記情報機器に求める機能に関するテキストデータが入力されると、入力されたテキストデータを前記入力機能情報として出力する、請求項１に記載の操作支援装置。 A text input unit for receiving input of text data from the user;
The operation support apparatus according to claim 1, wherein the text input unit outputs the input text data as the input function information when text data related to a function required for the information device is input from the user.
前記履歴類似度計算部が、前記入力機能情報と一致する、前記過去の入力機能情報を特定し、更に、特定された前記過去の入力機能情報の入力の際に実行された前記情報機器の機能を抽出し、そして、抽出した機能を用いて、前記類似度を計算する、請求項１〜４のいずれかに記載の操作支援装置。 The input history of the user includes past input function information input from the user, and a history of functions of the information device executed at the time of input of the past input function information,
The history similarity calculation unit specifies the past input function information that matches the input function information, and further, the function of the information device executed when the specified past input function information is input. The operation support apparatus according to claim 1, wherein the similarity is calculated using the extracted function.
前記入力機能情報について、前記予め定義されている前記情報機器の機能毎に、
前記意味類似度計算部が計算した類似度及び前記履歴類似度計算部が計算した類似度、それぞれに、設定された係数を乗算し、更に得られた各乗算値の和を計算し、
計算した和を用いて、前記定義機能情報で特定される機能を決定する、請求項１〜５のいずれかに記載の操作支援装置。 The replacement function determining unit;
For the input function information, for each function of the information device defined in advance,
Each of the similarity calculated by the semantic similarity calculation unit and the similarity calculated by the history similarity calculation unit is multiplied by a set coefficient, and a sum of each obtained multiplication value is calculated.
The operation support apparatus according to claim 1, wherein a function specified by the definition function information is determined using a calculated sum.
請求項１０に記載の操作支援装置。 The display information changing unit displays the information for requesting permission for the change on the display screen before making the change, and the change is performed only when a notification for permitting the change is acquired from the outside. Add,
The operation support apparatus according to claim 10.
前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算する意味類似度計算部と、
前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算する履歴類似度計算部と、
前記意味類似度計算部が計算した類似度、及び前記履歴類似度計算部が計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定する、置換機能決定部と、
を備えていることを特徴とする、情報機器。 An information device having a support function for supporting a user operation,
Semantic similarity between input function information that is input from the user and that specifies a function that the user wants the information device, and defined function information that specifies a function of the information device that is defined in advance. A semantic similarity calculator to calculate,
A history similarity calculation unit that calculates a similarity between the input function information and the definition function information based on the input history of the user;
Using the similarity calculated by the semantic similarity calculation unit and the similarity calculated by the history similarity calculation unit, specified by the definition function information replaceable with the function specified by the input function information A replacement function determination unit that determines a function;
An information device characterized by comprising:
（ａ）前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算するステップと、
（ｂ）前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算するステップと、
（ｃ）前記（ａ）のステップで計算した類似度、及び前記（ｂ）のステップで計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定するステップと、
を有することを特徴とする、操作支援方法。 An operation support method for supporting operation of an information device by a user,
(A) Semantic between input function information that is input from the user and specifies a function that the user wants the information device, and definition function information that specifies a function of the information device that is defined in advance. Calculating the similarity,
(B) calculating a similarity between the input function information and the definition function information based on the input history of the user;
(C) The definition function information replaceable with the function specified by the input function information using the similarity calculated in the step (a) and the similarity calculated in the step (b). Determining the identified function;
An operation support method comprising the steps of:
前記（ｂ）のステップで、前記入力機能情報と一致する、前記過去の入力機能情報を特定し、更に、特定された前記過去の入力機能情報の入力の際に実行された前記情報機器の機能を抽出し、そして、抽出した機能を用いて、前記類似度を計算する、請求項１５〜１８のいずれかに記載の操作支援方法。 The input history of the user includes past input function information input from the user, and a history of functions of the information device executed at the time of input of the past input function information,
In the step (b), the past input function information that matches the input function information is specified, and the function of the information device executed when the specified past input function information is input. The operation support method according to claim 15, wherein the similarity is calculated using the extracted function.
請求項２４に記載の操作支援方法。 In the step (f), before the change is made, the information for requesting the change is displayed on the display screen, and the change is made only when a notification for permitting the change is obtained from the outside. Add
The operation support method according to claim 24.
前記コンピュータに、
（ａ）前記ユーザから入力され、且つ前記ユーザが前記情報機器に求める機能を特定する
入力機能情報と、予め定義されている前記情報機器の機能を特定する定義機能情報との間の意味的な類似度を計算するステップと、
（ｂ）前記ユーザの入力履歴に基づいて、前記入力機能情報と前記定義機能情報との間の類似度を計算するステップと、
（ｃ）前記（ａ）のステップで計算した類似度、及び前記（ｂ）のステップで計算した類似度を用いて、前記入力機能情報で特定される機能と置き換え可能な、前記定義機能情報で特定される機能を決定するステップと、
を実行させることを特徴とする、プログラム。
A program for supporting operation of information equipment by a user by a computer,
In the computer,
(A) Semantic between input function information that is input from the user and specifies a function that the user wants the information device, and definition function information that specifies a function of the information device that is defined in advance. Calculating the similarity,
(B) calculating a similarity between the input function information and the definition function information based on the input history of the user;
(C) The definition function information replaceable with the function specified by the input function information using the similarity calculated in the step (a) and the similarity calculated in the step (b). Determining the identified function;
A program characterized by having executed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009125096A JP2010272050A (en) | 2009-05-25 | 2009-05-25 | Operation supporting device, information apparatus, operation supporting method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009125096A JP2010272050A (en) | 2009-05-25 | 2009-05-25 | Operation supporting device, information apparatus, operation supporting method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2010272050A true JP2010272050A (en) | 2010-12-02 |
Family
ID=43420002
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009125096A Pending JP2010272050A (en) | 2009-05-25 | 2009-05-25 | Operation supporting device, information apparatus, operation supporting method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2010272050A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015207190A (en) * | 2014-04-22 | 2015-11-19 | 理想科学工業株式会社 | Display name changing apparatus |
-
2009
- 2009-05-25 JP JP2009125096A patent/JP2010272050A/en active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015207190A (en) * | 2014-04-22 | 2015-11-19 | 理想科学工業株式会社 | Display name changing apparatus |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10198436B1 (en) | Highlighting key portions of text within a document | |
| JP4130846B2 (en) | Operation support apparatus and operation support method | |
| US7310601B2 (en) | Speech recognition apparatus and speech recognition method | |
| US9053423B2 (en) | Assisted update of knowledge base for problem solving | |
| JP4935658B2 (en) | Browser program and information processing apparatus | |
| JP2002024212A (en) | Voice interaction system | |
| JP2006527870A (en) | Configurable information identification system and method | |
| JPWO2008062552A1 (en) | Information display device, information display program, and information display system | |
| US11853689B1 (en) | Computer-implemented presentation of synonyms based on syntactic dependency | |
| JP2005321730A (en) | Dialog system, dialog system implementation method, and computer program | |
| WO2004001570A1 (en) | Method for describing existing data by a natural language and program for that | |
| JP2009042968A (en) | Information selection system, information selection method, and program for information selection | |
| JP2008226110A (en) | Information processor, information processing method and control program | |
| JP2007206886A (en) | Information processor and method | |
| JP2010272050A (en) | Operation supporting device, information apparatus, operation supporting method, and program | |
| JPH05324728A (en) | Information retrieving device | |
| JP2007316803A (en) | Operation support device and operation support method | |
| CN112740159A (en) | Help information display system, help information display method, and help information display program | |
| JPH1145261A (en) | Information retrieval device and computer-readable recording medium where program making computer function as samd device is recorded | |
| Höpken et al. | Context-based adaptation of ubiquitous web applications in tourism | |
| JP5380989B2 (en) | Electronic device and program with dictionary function | |
| JP5332128B2 (en) | Information retrieval apparatus, information retrieval method and program thereof | |
| JP2003296327A (en) | Translation server, genre-classified online machine translation method, and program therefor | |
| JP2007164732A (en) | Computer executable program and information processing device | |
| JP3734101B2 (en) | Hypermedia construction support device |