JP7289243B2 - 表示装置、表示システム、及び表示方法 - Google Patents

Description

本発明は、表示装置、表示システム、及び表示方法に関する。

特許文献１には、所定のボード上に所定のペンで描画された描画軌跡に基づいて情報を表示する電子黒板装置が記載されている。ユーザーは、音声入力によって電子黒板装置に文字を表示させる場合、表示させたい内容を発声しながら、電子黒板装置のうち文字を表示させる領域をペンで指示することによって設定する。

特開２００２－２５１２８０号公報

しかし、電子黒板装置のうち文字を表示させる領域をユーザーがペンで設定する場合、ユーザーは、自身の手が電子黒板装置に届く位置まで電子黒板装置に近づかなければならず、煩雑であった。

本発明は、表示部内での文字を表示する領域を、ユーザーが容易に設定できる表示装置、表示システム、及び表示方法を提供することを目的とする。

本願の第１局面によれば、表示システムは、表示部と、音声受付部と、制御部とを備える。表示部には、画像が表示される。音声受付部は、音声を受け付ける。制御部は、前記表示部を制御する。前記制御部は、音声入力モードと、設定モードとで動作する。音声入力モードは、前記音声受付部が受け付けた音声を表す文字を前記表示部に表示するモードである。設定モードは、前記音声受付部が受け付けた設定音声に基づいて、前記表示部内での前記文字の表示を開始する位置である開始位置の設定、又は、前記表示部内での前記文字を表示する領域である文字領域の設定を行うモードである。

本願の第２局面によれば、表示装置は、音声を受け付ける音声受付部と通信可能に接続され、又は、前記音声受付部を含む。表示装置は、表示部と、制御部とを備える。表示部には、画像が表示される。制御部は、前記表示部を制御する。前記制御部は、音声入力モードと、設定モードとで動作する。音声入力モードは、前記音声受付部が受け付けた音声を表す文字を前記表示部に表示するモードである。設定モードは、前記音声受付部が受け付けた設定音声に基づいて、前記表示部内で前記文字の表示を開始する位置である開始位置の設定、又は、前記表示部内で前記文字を表示する領域である文字領域の設定を行うモードである。

本願の第３局面によれば、表示方法は、画像が表示される表示部と、音声を受け付ける音声受付部と、前記表示部を制御する制御部とを用いた方法である。表示方法は、前記制御部により、前記音声受付部が受け付けた設定音声に基づいて、前記表示部内で文字の表示を開始する位置である開始位置の設定、又は、前記表示部内で前記文字を表示する領域である文字領域の設定を行う工程を含む。表示方法は、前記制御部により、前記音声受付部が受け付けた音声を表す前記文字を前記表示部に表示する工程を含む。

本発明の表示装置、表示システム、及び表示方法によれば、表示部内での文字を表示する領域を、ユーザーが容易に設定できる。

本発明の実施形態に係る表示システムの構成を示すブロック図である。 表示装置の動作の一例を示すフロー図である。 音声コマンド処理を示すフロー図である。 操作処理を示すフロー図である。 制御部の動作モードが音声入力モードに切り替わるときのユーザーの動作を示す図である。 音声入力処理が行われている状態を示す模式図である。 制御部の動作モードが設定モードに切り替わるときのユーザーの動作を示す模式図である。 設定画面を示す図である。 ユーザーが、複数の候補位置のうちの第３候補位置を開始位置に指定している状態を示す模式図である。 表示部から設定画面が消去された状態を示す図である。 設定画面を示す図である。 位置設定画面を示す図である。 設定画面の第１変形例を示す図である。 設定画面の第２変形例を示す図である。

本発明の実施形態について、図面を参照しながら説明する。なお、図中、同一又は相当部分については同一の参照符号を付して説明を繰り返さない。

図１を参照して、本発明の実施形態に係る表示システム１について説明する。図１は、本発明の実施形態に係る表示システム１の構成を示すブロック図である。

図１に示すように、表示システム１は、音声受付装置１００と、サーバ２００と、表示装置３００とを備える。音声受付装置１００と、サーバ２００と、表示装置３００とは、ネットワークＮを介して接続される。

表示システム１は、音声受付装置１００が受け付けた音声をサーバ２００により文字に変換し、変換した文字を表示装置３００に表示させるシステムである。

音声受付装置１００は、例えば、マイクを内蔵したタッチペンである。音声受付装置１００は、音声受付部１１０と、操作部１２０と、通信部１３０と、記憶部１４０と、制御部１５０とを備える。なお、音声受付装置１００は、タッチペンでなくてもよい。音声受付装置１００は、受け付けた音声をサーバ２００に送信する機能があれよい。例えば、音声受付装置１００は、音声受付部１１０と通信部１３０とで構成されるデバイスであってもよい。

音声受付部１１０は、ユーザーによる発話の入力を受け付ける。音声受付部１１０は、例えば、マイクを含む。

操作部（音声入力ボタン）１２０は、音声受付装置１００に対する外部からの指示を受け付ける。操作部１２０は、例えば、操作ボタンである。操作部１２０が操作されると、表示装置３００に操作信号が送信される。その結果、表示装置３００が、操作信号に基づいて動作する。操作部１２０は、音声受付部１１０の動作モードを、入力モードと、待機モードとの間で切り替える。

入力モードは、音声受付部１１０が音声入力の受け入れ中の状態になるモードである。待機モードは、音声受付部１１０が音声入力の受け入れを解除した状態になるモードである。

操作部１２０が操作され度に、音声受付部１１０の動作モードが、入力モードと待機モードとの間で交互に切り替わる。

通信部１３０は、ネットワーク網を介しサーバ２００と無線通信する。また、通信部１３０は、ワイヤレスＬＡＮ、又はＢｌｕｅｔｏｏｔｈ（登録商標）により表示装置３００と無線通信する。通信部１３０は、無線ＬＡＮモジュール（通信機器）である。なお、通信部１３０は、サーバ２００及び表示装置３００の各々と有線接続され、有線通信を行ってもよい。

記憶部１４０は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）のような主記憶装置（例えば、半導体メモリー）を含み、補助記憶装置（例えば、ハードディスクドライブ）をさらに含んでもよい。記憶部１４０は、制御部１５０によって実行される種々のコンピュータープログラムを記憶する。

制御部１５０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）及びＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のようなプロセッサーを含む。制御部１５０は、記憶部１４０に記憶されたコンピュータープログラムを実行することにより、音声受付装置１００の各要素を制御する。

なお、記憶部１４０及び制御部１５０は、ＡＳＩＣ、又はＦＰＧＡのような集積回路で構成されてもよい。

サーバ２００は、通信部２１０と、記憶部２２０と、制御部２３０とを含む。

通信部２１０は、音声受付装置１００及び表示装置３００の各々と通信する。通信部２１０は、例えば、ＬＡＮボードのような通信モジュールである。

記憶部２２０は、ＲＯＭ、及びＲＡＭのような主記憶装置を含み、補助記憶装置をさらに含んでもよい。記憶部２２０は、制御部２３０によって実行される種々のコンピュータープログラムを記憶する。

制御部２３０は、ＣＰＵ及びＭＰＵのようなプロセッサーを含む。制御部２３０は、記憶部２２０に記憶されたコンピュータープログラムを実行することにより、サーバ２００の各要素を制御する。

表示装置３００は、例えば、電子黒板である。表示装置３００は、表示部３１０と、入力部３２０と、通信部３３０と、記憶部３４０と、制御部３５０とを含む。

表示部３１０は、画像を表示する。表示部３１０は、例えば、液晶ディスプレイ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）である。

入力部３２０は、例えば、表示装置３００の筐体に設けられた操作キー、又は表示部３１０に設けられたタッチパネルを含む。なお、表示装置３００は、タッチパネルを備えていなくてもよい。操作キーには、マウス、及び／又は、キーボードのような入力デバイスも含まれる。

通信部３３０は、音声受付装置１００及びサーバ２００の各々と通信する。通信部３３０は、例えば、ＬＡＮボードのような通信モジュールである。

記憶部３４０は、ＲＯＭ、及びＲＡＭのような主記憶装置を含み、補助記憶装置をさらに含んでもよい。記憶部３４０は、制御部３５０によって実行される種々のコンピュータープログラムを記憶する。

制御部３５０は、ＣＰＵ及びＭＰＵのようなプロセッサーを含む。制御部３５０は、記憶部３４０に記憶されたコンピュータープログラムを実行することにより、表示装置３００の各要素を制御する。

表示システム１の動作について説明する。

まず、音声受付部１１０の動作モードが入力モードの状態で、音声受付部１１０が音声を受け付けると、制御部１５０は音声受付部１１０に入力された音声の音声データを生成する。そして、音声データが、音声受付装置１００の通信部１３０からサーバ２００に送信される。そして、サーバ２００の制御部２３０は、音声データをテキストデータに変換し、変換したテキストデータに該当するインテントを生成する。インテントは、音声受付部１１０に入力された音声に対応したデータである。具体的には、インテントは、音声受付部１１０に入力された音声が示す内容を表すテキスト形式のデータである。そして、サーバ２００の制御部２３０は、インテントに対応した制御信号を生成する。そして、制御信号が、サーバ２００の通信部２１０から表示装置３００に送信される。その結果、表示装置３００が、制御信号に基づいた処理を行う。

次に、図１～図１０を参照して、表示システム１の動作の一例について説明する。図２は、表示システム１の動作の一例を示すフロー図である。

図１及び図２に示すように、ステップＳ１において、通信部３３０によりサーバ２００からの制御信号（音声コマンド）が受信されたか否かを、制御部３５０が判定する。通信部３３０により制御信号が受信されたと制御部３５０が判定すると（ステップＳ１で、Ｙｅｓ）、処理がステップＳ２に移行する。通信部３３０により制御信号が受信されていないと制御部３５０が判定すると（ステップＳ１で、Ｎｏ）、処理がステップＳ３に移行する。

図５を参照して、通信部３３０が制御信号を受信する手順について説明する。図５は、音声受付装置１００の音声受付部１１０が起動している状態を示す図である。

図５に示すように、ユーザーが音声受付装置１００に対して所定の第１音声Ｄ１を発すると、音声受付部１１０の動作モードが入力モードに切り替わる。本実施形態では、第１音声Ｄ１は、「コマンド文字入力開始」である。図１に示すように、音声受付部１１０の動作モードが入力モードの状態で、音声受付部１１０が音声を受け付けると、音声受付装置１００からサーバ２００へ音声データが送信されて、サーバは、音声データをテキストデータに変換し、変換したテキストデータに該当するインテントを生成し、インテントに対応した制御信号を生成する。そして、サーバ２００から表示装置３００へ制御信号が送信される。

図１及び図２に示すように、ステップＳ２において、制御部３５０は、制御信号に基づいた処理（音声コマンド処理）を行う。

なお、ユーザーが音声受付装置１００に対して、「コマンド文字入力終了」のような所定の終了音声を発すると、音声受付部１１０の動作モードが待機モードに切り替わり、音声コマンド処理が終了する。

ステップＳ３において、音声受付装置１００の制御部１５０は、操作部１２０が操作されたか否かを判定する。操作部１２０が操作されたと制御部１５０が判定すると（ステップＳ３で、Ｙｅｓ）、処理がステップＳ４に移行する。操作部１２０が操作されていないと制御部１５０が判定すると（ステップＳ３で、Ｎｏ）、処理がステップＳ５に移行する。

ステップＳ４において、制御部１５０は、操作部１２０の操作内容に対応した処理（操作処理）を行う。

ステップＳ５において、表示装置３００に対してその他の操作が行われたか否かを制御部３５０が判定する。その他の操作は、例えば、表示部３１０の画面の明るさを調整する操作である。その他の操作が行われたと制御部３５０が判定すると（ステップＳ５で、Ｙｅｓ）、処理がステップＳ６に移行する。その他の操作が行われていないと制御部３５０が判定すると（ステップＳ５で、Ｎｏ）、処理がステップＳ７に移行する。

ステップＳ６において、制御部３５０は、その他の操作に基づいた処理（その他の処理）を行う。

ステップＳ７において、制御部３５０は、終了コマンドを受け付けたか否かを判定する。終了コマンドは、表示装置３００の電源をオフにするコマンドである。制御部３５０が終了コマンドを受け付けていないと判定すると（ステップＳ７で、Ｎｏ）、処理がステップＳ１に移行する。制御部３５０が終了コマンドを受け付けたと判定すると（ステップＳ７で、Ｙｅｓ）、処理が終了する。

次に、図１、図３、及び図５～図１０を参照して、音声コマンド処理について説明する。図３は、音声コマンド処理を示すフロー図である。

図１及び図３に示すように、ステップＳ２１において、制御部３５０は、ステップＳ１（図２参照）において通信部３３０が受信した制御信号の種類を判定する。制御信号が設定信号でないと制御部３５０が判定すると（ステップＳ２１で、Ｎｏ）、処理がステップＳ２２に移行する。制御信号が設定信号であると制御部３５０が判定すると（ステップＳ２１で、Ｙｅｓ）、処理がステップＳ２６に移行する。

設定信号は、制御部３５０の動作モードを設定モードに切り替えるための制御信号である。設定モードは、表示部３１０内において、文字の表示を開始する位置である開始位置を設定するためのモードである。

ステップＳ２２において、制御部３５０は、音声入力モードで動作する。音声入力モードは、音声受付部１１０が受け付けた音声を表す文字が表示部３１０に表示されるように、制御部３５０が動作するモードである。

ステップＳ２３において、制御部３５０は、音声受付部１１０が受け付けた音声を表す文字を、表示部３１０に表示させる音声入力処理を行う。

図６は、音声入力処理が行われている状態を示す模式図である。

図１、図３及び図６に示すように、ユーザーが音声受付装置１００に対して音声を発すると、ユーザーが発した音声の音声データがサーバ２００に送信される。そして、サーバ２００から表示装置３００に対し、音声のテキストデータを含む制御信号が送信される。その結果、制御部３５０は、ユーザーの発した音声を文字の形式で表示部３１０に表示させる。

ステップＳ２３に示す処理が終了すると、処理がステップＳ３（図２参照）に移行する。

ステップＳ２６において、制御部３５０は、設定モードで動作する。

図７は、制御部３５０の動作モードが設定モードに切り替わるときのユーザーの動作を示す模式図である。

図１、図３及び図７に示すように、ユーザーが音声受付装置１００に対して所定の第２音声Ｄ２を発すると、音声受付装置１００からサーバ２００に対して第２音声Ｄ２の音声データが送信される。サーバ２００は、第２音声Ｄ２の音声データを受信すると、表示装置３００に対して、設定信号を送信する。その結果、制御部３５０の動作モードが設定モードに切り替わる。本実施形態では、第２音声Ｄ２は、「コマンド文字位置」である。

制御部３５０の動作モードが設定モードに切り替わると、処理がステップＳ２７に移行する。

ステップＳ２７において、表示部３１０が設定画面Ｇ１を表示するように、制御部３５０が表示部３１０を制御する。設定画面Ｇ１は、表示部３１０内において、文字の表示を開始する開始位置を設定するための画面である。なお、設定画面Ｇ１は、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）画面でもよい。

図８は、設定画面Ｇ１を示す図である。

図１、図３及び図８に示すように、設定画面Ｇ１には、複数の候補位置Ｐが予め設定されている。複数の候補位置Ｐは、表示部３１０内において、文字の表示を開始する開始位置の候補となる位置である。

複数の候補位置Ｐは、第１候補位置（Ｘ１，Ｙ１）～第Ｎ候補位置（Ｘｔ，Ｙｕ）で構成される。Ｎは、２以上の整数である。ｔ、及びｕの各々は、２以上の整数である。ｔは、例えば、候補位置ＰのＸ軸方向（図８の左右方向）の順番を示し、ｕは、例えば、候補位置ＰのＹ軸方向（図８の上下方向）の順番を示す。

設定画面Ｇ１は、複数の記号Ｑを含む。複数の記号Ｑは、第１記号Ａ０１～第Ｎ記号Ｋ２０を含む。複数の記号Ｑは、本発明の位置を示す情報の一例である。

第１候補位置（Ｘ１，Ｙ１）～第Ｎ候補位置（Ｘｔ，Ｙｕ）は、それぞれ、第１記号Ａ０１～第Ｎ記号Ｋ２０と対応する。

設定画面Ｇ１上において、複数の候補位置Ｐの各々が位置する場所には、対応する記号Ｑが、それぞれ表示される。本実施形態では、表示部３１０の左上隅を候補位置Ｐの始点とし、表示部３１０の右下を候補位置Ｐの終点として、第１候補位置（Ｘ１、Ｙ１）～第Ｎ候補位置（Ｘｔ、Ｙｕ）が配置される。始点には第１候補位置（Ｘ１、Ｙ１）が配置され、終点には第Ｎ候補位置（Ｘｔ、Ｙｕ）が配置される。第１候補位置（Ｘ１、Ｙ１）には第１記号Ａ０１が表示され、第Ｎ候補位置（Ｘｔ、Ｙｕ）には第Ｎ記号Ｋ２０が表示される。なお、本実施形態では、表示部３１０の左上隅を候補位置Ｐの始点として説明するが、本発明はこれに限定されず、ユーザーによって予め定められた位置が候補位置Ｐの始点に設定されて、各候補位置Ｐ上に対応する記号Ｑが表示されるように構成してもよい。すなわち、表示部３１０上において、候補位置Ｐの始点となる位置が、任意に設定できるように構成してもよい。

表示部３１０に設定画面Ｇ１が表示されると、処理がステップＳ２８に移行する。

ステップＳ２８において、通信部３３０により文字の表示を開始する開始位置を示す指定信号が受信されたか否かを、制御部３５０が判定する。指定信号は、複数の候補位置Ｐのうち開始位置に指定された候補位置Ｐを示す信号である。

ユーザーにより開始位置が指定されることで、通信部３３０が指定信号を受信する。以下では、ユーザーにより開始位置が指定される手順について説明する。

図９は、ユーザーが、複数の候補位置Ｐのうちの第２候補位置（Ｘ１、Ｙ１０）を開始位置に指定している状態を示す模式図である。

図１、図３、及び図９に示すように、ユーザーは、第２候補位置（Ｘ１、Ｙ１０）を開始位置に指定する場合、音声受付装置１００に対して、第２記号Ａ１０を表す設定音声Ｄ３を発する。

サーバ２００は、設定音声Ｄ３の音声データを受信すると、設定音声Ｄ３のテキストデータを生成する。そして、サーバ２００は、表示装置３００に対して、制御部２３０で開始位置を指定する制御信号を生成し、生成した制御信号を送信する。開始位置は、設定音声Ｄ３のテキストデータが表す記号Ｑと対応する候補位置Ｐに指定される。その結果、表示装置３００の通信部３３０が制御信号を受信する。なお、本実施形態では、設定音声Ｄ３のテキストデータは、第２記号Ａ１０を表すテキストデータである。この場合、候補位置Ｐは、第２候補位置（Ｘ１、Ｙ１０）となる。

通信部３３０により制御信号が受信されたと制御部３５０が判定すると（ステップＳ２８で、Ｙｅｓ）、処理がステップＳ２９に移行する。通信部３３０により制御信号が受信されていないと制御部３５０が判定すると（ステップＳ２８で、Ｎｏ）、ステップＳ２８に示す処理が繰り返される。

ステップＳ２９において、表示装置３００の制御部３５０は、制御信号で示された記号Ｑと対応する候補位置Ｐを、開始位置に設定する。本実施形態では、ユーザーが設定音声Ｄ３として第２記号Ａ１０を表す音声を発する。その結果、制御部３５０は、第２記号Ａ１０と対応する第２候補位置（Ｘ１、Ｙ１０）を、開始位置に設定する。

ステップＳ３０において、表示部３１０から設定画面Ｇ１が消去されるように、制御部３５０が表示部３１０を制御する。

図１０は、表示部３１０から設定画面Ｇ１が消去された状態を示す図である。

図１、図３、及び図１０に示すように、ステップＳ３１において、表示部３１０のうち開始位置に設定された場所にカーソルＣが表示されるように、制御部３５０が表示部３１０を制御する。本実施形態では、カーソルＣは、矩形の図で示される。なお、カーソルＣの視認性を向上させるため、カーソルＣ（矩形の図）を点滅させてもよい。その後、音声入力処理が行われると、開始位置から文字の表示が開始される。なお、本実施形態では、第２候補位置（Ｘ１、Ｙ１０）が開始位置に設定されるので、第２候補位置（Ｘ１、Ｙ１０）にカーソルＣが表示される。

ステップＳ３２において、制御部３５０の設定モードが終了する。

ステップＳ３２に示す処理が終了すると、処理がステップＳ３（図２参照）に移行する。

以上、図１、図３、及び図５～図１０を参照して説明したように、制御部３５０は、設定モードで動作する際、音声受付部１１０が受け付けた設定音声Ｄ３に基づいて、開始位置を設定する。従って、ユーザーは、開始位置を設定する場合、設定音声Ｄ３を発すればよいので、表示部３１０まで近づいて、開始位置をペンで指定する作業を行う必要がない。その結果、ユーザーは、開始位置を容易に設定できる。また、ユーザーは、設定音声Ｄ３により開始位置を設定することで、表示部３１０から離れた場所からでも開始位置を設定できるので、開始位置を設定する際、表示部３１０に近づく必要がない。従って、例えば、会議中に、他の者が表示部３１０を視認している状態で、ユーザーが開始位置を設定する場合でも、ユーザーが他の者の視線を遮ることを防止できる。

次に、図１、図３、及び図４を参照して、操作処理について説明する。図４は、操作処理を示すフロー図である。

図１、図４に示すように、ステップＳ４１において、音声受付装置１００の制御部１５０は、音声受付部１１０が、音声入力の受け入れ中であり、入力モードで動作しているか否かを判定する。

音声受付部１１０が入力モードであると制御部１５０が判定すると（ステップＳ４１で、Ｙｅｓ）、処理がステップＳ４２に移行する。音声受付部１１０が入力モードであないと制御部１５０が判定すると（ステップＳ４１で、Ｎｏ）、処理がステップＳ４３に移行する。

ステップＳ４２において、音声受付部１１０が、音声入力の受け入れを解除することで、待機モードになる。すなわち、図２に示すステップＳ３において、操作部１２０が操作された際に、音声受付部１１０が入力モードで動作していると、ステップＳ４２において、音声受付部１１０の動作モードが待機モードに切り替わる。その結果、表示装置３００が、図３に示す音声入力処理（ステップＳ２３参照）、及び、開始位置を設定する処理（ステップＳ２９参照）を実行不能な状態になる。ステップＳ４２に示す処理が終了すると、処理がステップＳ５（図２参照）に移行する。

ステップＳ４３において、音声受付部１１０が、音声入力の受け入れを準備することで、入力モードになる。すなわち、図２に示すステップＳ３において、操作部１２０が操作された際に、音声受付部１１０が待機モードで動作していると、ステップＳ４２において、音声受付部１１０の動作モードが入力モードに切り替わる。その結果、表示装置３００が、図３に示す音声入力処理、及び、開始位置を設定する処理を実行可能な状態になる。ステップＳ４２に示す処理が終了すると、処理がステップＳ５（図２参照）に移行する。

以上、図面（図１～図１０）を参照しながら本発明の実施形態について説明した。但し、本発明は、上記の実施形態に限られるものではなく、その要旨を逸脱しない範囲で種々の態様において実施することが可能である（例えば、（１）～（９））。また、上記の実施形態に開示されている複数の構成要素を適宜組み合わせることによって、種々の発明の形成が可能である。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。図面は、理解しやすくするために、それぞれの構成要素を主体に模式的に示しており、図示された各構成要素の個数等は、図面作成の都合から実際とは異なる場合もある。また、上記の実施形態で示す各構成要素は一例であって、特に限定されるものではなく、本発明の効果から実質的に逸脱しない範囲で種々の変更が可能である。

（１）図９に示すように、制御部３５０は、設定画面Ｇ１上において、開始位置に設定された候補位置Ｐの場所に応じて、表示部３１０に横書きで文字を表示するか、又は、縦書きで文字を表示するかを決定してもよい。例えば、設定画面Ｇ１上において、左側の候補位置Ｐが開始位置に設定されると、制御部３５０は、開始位置から右側に向かって横書きで文字を表示する。具体例として、第１候補位置（Ｘ１、Ｙ１）が開始位置に設定されると、制御部３５０は、第１候補位置（Ｘ１、Ｙ１）から第３候補位置（Ｘ１１、Ｙ１）に向かって横書きで文字を表示する。また、例えば、設定画面Ｇ１上において、上側の候補位置Ｐが開始位置に設定されると、制御部３５０は、開始位置から下側に向かって縦書きで文字を表示する。具体例として、設定画面Ｇ１上において、第３候補位置（Ｘ１１、Ｙ１）が開始位置に設定されると、制御部３５０は、第３候補位置（Ｘ１１、Ｙ１）から候補位置第４（Ｘ１１、Ｙ２０）に向かって縦書きで文字を表示する。その結果、開始位置が設定される場所に合わせて、文字の表示態様を適宜変更できる。

（２）図１１を参照して、ステップＳ２６～ステップＳ３２に示す設定モード（図３参照）の変形例について説明する。図１１は、設定画面Ｇ２を示す図である。設定画面Ｇ２は、表示部３１０内において、文字を表示する領域である文字領域を設定するための画面である。

図１１に示すように、設定モードの変形例では、制御部３５０の動作モードが設定モードに切り替わると、表示部３１０に設定画面Ｇ２が表示される。

設定画面Ｇ２には、複数の候補領域Ｅが予め設定されている。複数の候補領域Ｅは、表示部３１０内において、文字領域の候補となる領域である。

本実施形態では、複数の候補領域Ｅは、表示部３１０が複数の候補領域に分割されることで、第１候補領域Ｅ１～第４候補領域Ｅ４で構成される。

設定画面Ｇ２は、複数の候補領域Ｅとそれぞれ対応する複数の領域記号を含む。本実施形態では、複数の領域記号は、第１領域記号Ａ～第４領域記号Ｄで構成される。

第１候補領域Ｅ１～第４候補領域Ｅ４は、それぞれ、第１領域記号Ａ～第４領域記号Ｄと対応する。

設定画面Ｇ２上において、複数の候補領域Ｅの各々が位置する場所には、対応する領域記号が、それぞれ表示される。本実施形態では、第１候補領域Ｅ１～第４候補領域Ｅ４上には、それぞれ、第１領域記号Ａ～第４領域記号Ｄが表示される。

表示部３１０に設定画面Ｇ２が表示されている状態において、表示装置３００の制御部３５０は、音声受付装置１００の音声受付部１１０が受け付けた設定音声Ｄ４に基づいて、文字領域の設定を行う。設定音声Ｄ４は、複数の領域記号（第１領域記号Ａ～第４領域記号Ｄ）のうちのいずれかの領域記号を表す音声を含む。例えば、音声受付部１１０が第１領域記号Ａを表す「Ａ」の音声を受け付けると、制御部３５０は、第１領域記号Ａと対応する第１候補領域Ｅ１を、文字領域に設定する。文字領域の設定が完了すると、制御部３５０は、表示部３１０から設定画面Ｇ２を消去する。その後、音声入力処理が行われると、文字領域に設定された第１候補領域Ｅ１内に文字が表示される。

その結果、ユーザーは、設定音声Ｄ４により文字領域を設定できるので、文字領域を容易に設定できる。また、ユーザーは、表示部３１０から離れた場所からでも文字領域を設定できるので、他の者の表示部３１０に対する視線を遮ることを防止できる。

（３）図１１及び図１２を参照して、制御部３５０の動作モードの追加例である、開始位置設定モードについて説明する。開始位置設定モードは、文字開始位置を設定するモードである。

文字開始位置は、文字領域内において、文字の表示を開始する位置である。

図１２は、位置設定画面Ｇ３を示す図である。位置設定画面Ｇ３は、文字領域内に文字開始位置を設定するための画面である。

図１１に示す設定画面Ｇ２から文字領域が設定されると、制御部３５０の動作モードが文字開始位置設定モードに切り替わる。その結果、文字領域には、図１２に示す位置設定画面Ｇ３が表示される。

図１１及び図１２に示すように、本実施形態では、第１候補領域Ｅ１が文字領域に設定されるので、第１候補領域Ｅ１に位置設定画面Ｇ３が表示される。

位置設定画面Ｇ３には、複数の候補位置Ｒが予め設定されている。複数の候補位置Ｒは、位置設定画面Ｇ３内において、文字開始位置の候補となる位置である。

本実施形態では、複数の候補位置Ｒは、第１候補位置Ｒ１～第１０候補位置Ｒ１０で構成される。

位置設定画面Ｇ３は、複数の候補位置Ｒとそれぞれ対応する複数の候補記号Ｔを含む。本実施形態では、複数の候補記号Ｔは、第１候補記号Ｔ１～第１０候補記号Ｔ１０で構成される。

第１候補位置Ｒ１～第１０候補位置Ｒ１０は、それぞれ、第１候補記号Ｔ１～第１０候補記号Ｔ１０と対応する。

位置設定画面Ｇ３上において、複数の候補位置Ｒの各々が位置する場所には、対応する候補記号Ｔが、それぞれ表示される。

文字領域（本実施形態では、第１候補領域Ｅ１）に位置設定画面Ｇ３が表示されている状態において、表示装置３００の制御部３５０は、音声受付装置１００の音声受付部１１０が受け付けた設定音声Ｄ５に基づいて、文字開始位置の設定を行う。設定音声Ｄ５は、複数の候補記号Ｔ（第１候補記号Ｔ１～第１０候補記号Ｔ１０）のうちのいずれかの候補記号Ｔを表す音声を含む。例えば、音声受付部１１０が、設定音声Ｄ５として、第１候補記号Ｔ１を表す「０」の音声を受け付けると、制御部３５０は、第１候補記号Ｔ１と対応する第１候補位置Ｒ１を、文字開始位置に設定する。文字開始位置の設定が完了すると、制御部３５０は、表示部３１０から位置設定画面Ｇ３を消去する。その後、音声入力処理が行われると、文字領域に設定された第１候補領域Ｅ１内に文字が表示され、さらに、文字開始位置に設定された第１候補位置Ｒ１から文字の表示が開始される。

その結果、音声入力処理が行われる際、ユーザーは、文字領域内の所望の位置から文字の表示を開始することができる。

なお、複数の候補位置Ｒの各々が位置する場所には、候補記号Ｔ（第１候補記号Ｔ１～第１０候補記号Ｔ１０）に代えて、互いに異なる色が表示されてもよい。この場合、例えば、音声受付装置１００の音声受付部１１０が、色を表す音声を受け付けることで、位置設定画面上において、音声で表された色が表示されている場所が、文字開始位置に設定される。複数の候補位置Ｒの各々が位置する場所に表示される互いに異なる色は、本発明の位置を示す情報の二例である。

（４）図１３を参照して、図９に示す設定画面Ｇ１の第１変形例について説明。する。図１３は、図９に示す設定画面Ｇ１の第１変形例を示す図である。

図１３に示すように、設定画面Ｇ１の第１変形例では、設定画面Ｇ１は、透明又は半透明のＯＳＤ上に表示される。その結果、入力画像ＶがＯＳＤの背面に配置された状態で、表示部３１０に表示される。その結果、ユーザーは、入力画像Ｖの位置を考慮しつつ、開始位置を決定できる。また、ユーザーは、表示部３１０に設定画面Ｇ１が表示されている状態で、入力画像Ｖを視認できる。入力画像Ｖは、例えば、ペン等により表示部３１０に描かれた画像、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）のような外部装置から表示装置３００に送信された画像、及び／又は、音声入力処理により表示部３１０に表示された文字を示す。

（５）図１４を参照して、図９に示す設定画面Ｇ１の第２変形例について説明する。図１４は、図９に示す設定画面Ｇ１の第２変形例を示す図である。

図１４に示すように、設定画面Ｇ１の第２変形例では、設定画面Ｇ１上において、入力画像Ｖを含む矩形領域と重ならないように、記号Ｑが表示される。その結果、入力画像Ｖ上に開始位置が設定されることを防止できる。なお、設定画面Ｇ１上において、入力画像Ｖと重ならないように、記号Ｑが表示されてもよい。

（６）本実施形態では、表示装置３００にはタッチパネルが含まれる。しかし、本発明はこれに限定されない。表示装置３００にはタッチパネルが含まれなくてもよい。

（７）複数の音声受付装置１００（図１参照）が存在する場合、複数の音声受付装置１００のうち、操作部１２０が操作された音声受付装置１００のみからの指示を表示装置３００が受け付けるように構成してもよい。その結果、複数の音声受付装置１００からの指示に対し優先順位を設定することができる。

（８）音声受付装置１００の音声受付部１１０は、表示装置３００に内蔵されることで、表示装置３００に含まれていてもよく、又は、スタンドマイクでもよい。

（９）本実施形態では、サーバ２００が音声受付装置１００から送信された音声データをテキストデータに変換する変換処理を行う。しかし、本発明はこれに限定されない。音声受付装置１００、又は、表示装置３００が変換処理を行ってもよい。

本発明は、表示装置、表示システム、及び表示方法の分野に利用可能である。

１ 表示システム
１１０ 音声受付部
１５０ 制御部
３１０ 表示部
Ｄ３ 設定音声

Claims (9)

1. 画像が表示される表示部と、
   音声を受け付ける音声受付部と、
   前記表示部を制御する制御部と
   を備え、
   前記制御部は、
   前記音声受付部が受け付けた音声を表す文字を前記表示部に表示する音声入力モードと、
   前記音声受付部が受け付けた設定音声に基づいて、前記表示部内での前記文字の表示を開始する位置である開始位置の設定、又は、前記表示部内での前記文字を表示する領域である文字領域の設定を行う設定モードと
   で動作し、
   前記設定モードの際、前記表示部に設定画面を表示し、
   前記設定画面は、前記文字を前記表示部内に表示する候補位置が予め配置されると共に前記候補位置に対応する情報が表示され、
   前記設定音声は、前記情報を含む、表示システム。
2. 前記設定画面において、入力画像が背面に配置された状態で、前記候補位置に対応する情報が透明または半透明で表示される、請求項１に記載の表示システム。
3. 前記設定画面において、前記候補位置に対応する情報が入力画像と重ならないように表示される、請求項１に記載の表示システム。
4. 前記設定画面には、前記開始位置の候補となる複数の候補位置が予め設定され、
   前記複数の候補位置は、それぞれ、複数の位置を示す前記情報と対応し、
   前記制御部が前記設定モードで動作する際、前記設定画面上における、前記複数の候補位置の各々が位置する場所には、対応する前記位置を示す前記情報が、それぞれ表示され、
   前記設定音声は、前記複数の位置を示す前記情報のうちのいずれかの前記情報を表す音声を含み、
   前記制御部は、前記複数の候補位置のうち、前記設定音声として発せられた前記位置を示す前記情報と対応する候補位置を前記開始位置に設定する、請求項１から３のいずれか１項に記載の表示システム。
5. 前記設定画面には、前記文字領域の候補となる複数の候補領域が予め設定され、
   前記複数の候補領域は、それぞれ、複数の位置を示す前記情報と対応し、
   前記制御部が前記設定モードで動作する際、前記設定画面上における、前記複数の候補領域の各々が位置する場所には、対応する前記位置を示す前記情報が、それぞれ表示され、
   前記設定音声は、前記複数の位置を示す前記情報のうちのいずれかの前記情報を表す音声を含み、
   前記制御部は、前記複数の候補領域のうち、前記設定音声として発せられた前記位置を示す前記情報と対応する候補領域を前記文字領域に設定する、請求項１から３のいずれか１項に記載の表示システム。
6. 前記制御部は、
   前記音声受付部が受け付けた音声に基づいて、前記文字領域内で前記文字の表示を開始する文字開始位置を設定する文字開始位置設定モードでさらに動作する、請求項５に記載の表示システム。
7. 前記複数の位置を示す情報は、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）上に表示される、請求項４から請求項６のいずれか１項に記載の表示システム。
8. 音声を受け付ける音声受付部と通信可能に接続され、又は、前記音声受付部を含む表示装置であって、
   画像が表示される表示部と、
   前記表示部を制御する制御部と
   を備え、
   前記制御部は、
   前記音声受付部が受け付けた音声を表す文字を前記表示部に表示する音声入力モードと、
   前記音声受付部が受け付けた設定音声に基づいて、前記表示部内で前記文字の表示を開始する位置である開始位置の設定、又は、前記表示部内で前記文字を表示する領域である文字領域の設定を行う設定モードと
   で動作し、
   前記設定モードの際、前記表示部に設定画面を表示し、
   前記設定画面は、前記文字を前記表示部内に表示する候補位置が予め配置されると共に前記候補位置に対応する情報が表示され、
   前記設定音声は、前記情報を含む、表示装置。
9. 画像が表示される表示部と、音声を受け付ける音声受付部と、前記表示部を制御する制御部とを用いた表示方法であって、
   前記制御部により、前記音声受付部が受け付けた設定音声に基づいて、前記表示部内で文字の表示を開始する位置である開始位置の設定、又は、前記表示部内で前記文字を表示する領域である文字領域の設定を行う工程と
   前記制御部により、前記音声受付部が受け付けた音声を表す前記文字を前記表示部に表示する工程と、
   前記開始位置の設定、又は、前記文字領域の設定を行う際、前記表示部に設定画面を表示する工程と、
   を含み、
   前記設定画面は、前記文字を前記表示部内に表示する候補位置が予め配置されると共に前記候補位置に対応する情報が表示され、
   前記設定音声は、前記情報を含む、表示方法。

Images