JP7069795B2

JP7069795B2 - 電子機器

Info

Publication number: JP7069795B2
Application number: JP2018025082A
Authority: JP
Inventors: 洋一平沼; 広輝竹花; 悦子萬田
Original assignee: Kyocera Document Solutions Inc
Current assignee: Kyocera Document Solutions Inc
Priority date: 2018-02-15
Filing date: 2018-02-15
Publication date: 2022-05-18
Anticipated expiration: 2038-02-15
Also published as: JP2019139701A

Description

本発明は、音声認識によるＵＩ（User Interface）を搭載した電子機器に関する。

電子機器の一つとして、スマートフォン等の携帯端末がある。携帯端末に対しての指示は、タッチ操作が可能なパネル部を介して行うことができる。なお、近年では、音声認識の技術の進歩に伴い、パネル部を介しての指示と音声認識による指示とを組み合わせた技術も提案されている。

その一つとして、特許文献１では、次のような構成の表示画面制御装置を提案している。すなわち、音声認識部が音声認識を行う際に参照する辞書テーブルを、表示部に表示する階層構造の表示画面ごとに設定して記憶装置に記憶させる。表示画面ごとの辞書テーブルには、階層構造に従って表示部の表示画面を順次下位層の画面に遷移させていくための第１の認識候補群と、階層構造に従わずに表示部の表示画面を特定の画面にダイレクトに遷移させるための第２の認識候補群とが含まれている。そして、制御部は、音声認識部によって認識された音声が第２の認識候補群に含まれる音声である場合、表示部における表示画面を特定の画面に遷移させる。

特開２０１０－０４９４３２号公報

上述した特許文献１での表示画面制御装置では、音声認識によって認識された音声が第２の認識候補群に含まれる音声である場合、表示手段における表示画面を特定の画面に遷移させるので、ユーザーが所望する表示画面を表示するまでにユーザーが発声する回数を少なくすることができ、音声入力による操作性を改善できる。

ところで、この表示画面制御装置は、音声認識により、表示部における表示画面を特定の画面に遷移させることができるものの、タッチ操作に関わるアイコンの表示についての仕組みを備えていないため、操作性をさらに高めることができないものと考えられる。

この場合、使用状況に応じてタッチ操作に関わるアイコンが確認しやすい画面に表示されるようにすると、操作性をさらに高めることができるものと考えられる。このようなことから、操作性をさらに高めることができる装置の開発が望まれている。

本発明は、このような状況に鑑みてなされたものであり、上記問題点を解消することができる電子機器を提供することを目的とする。

本発明の電子機器は、マイクと、複数の画面にアイコンを表示するパネル部と、前記マイクが取り込んだ音声によるキーワードを認識する音声認識部と、前記アイコンに関連する前記キーワードと、前記アイコンとを関連付けて管理する画面表示情報管理部と、前記音声認識部が前記キーワードを認識すると、この認識したキーワードに関連する前記アイコンを前記画面表示情報管理部が管理しているかどうかを確認し、管理している場合は認識した前記キーワードに関連する前記アイコンを前記パネル部の特定画面に表示させるシステム制御部とを備えることを特徴とする。
また、前記システム制御部は、前記キーワードに関連する前記アイコンを前記パネル部の特定画面に一時的に移動させることを特徴とする。
また、前記システム制御部は、一時的に移動させた前記アイコンの色を変えることを特徴とする。
また、前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させるスペースがなくなった場合、前記特定画面の次画面に前記アイコンを表示させることを特徴とする。
また、前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させる場合、前記アイコンの優先度の高い順に並べて表示させることを特徴とする。
また、前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させる場合、既に表示されている前記アイコンに対し、新たに表示される前記アイコンの色を変えることを特徴とする。
また、前記システム制御部は、起動中の前記アイコンの周囲に、前記キーワードに関連するアイコンを一時的に移動させることを特徴とする。
また、前記システム制御部は、特定の前記アイコンの周囲に、前記キーワードに関連するアイコンを一時的に移動させることを特徴とする。
本発明の電子機器では、パネル部により、複数の画面にアイコンを表示し、画面表示情報管理部により、アイコンに関連するキーワードと、アイコンとを関連付けて管理し、音声認識部により、マイクが取り込んだ音声によるキーワードを認識し、システム制御部により、音声認識部が認識したキーワードに関連するアイコンを画面表示情報管理部が管理しているかどうかを確認し、管理している場合は認識したキーワードに関連するアイコンをパネル部の特定画面に表示させる。
これにより、直ちに利用可能なアイコンの確認を容易且つ確実に行うことができる。

本発明の電子機器によれば、直ちに利用可能なアイコンの確認を容易且つ確実に行うことができるので、操作性をさらに高めることができる。

本発明の電子機器を携帯端末に適用した場合の一実施形態を示す図である。図１の携帯端末の画面表示情報管理部が管理するキーワード検索関連テーブルの一例を示す図である。図１の携帯端末のパネル部でのアイコンの集約処理について説明するものであって、図３（ａ）はアイコン集約アプリを起動させる前の初期画面の一例を示す図であり、図３（ｂ）はアイコン集約アプリを起動させた場合のアイコン集約画面の一例を示す図である。図１の携帯端末のパネル部でのアイコンの集約処理の実施例１について説明するものであって、図４（ａ）～図４（ｄ）は時間の経過とともに、キーワードに関連するアイコンが集約して表示される場合を示す図である。図１の携帯端末のパネル部でのアイコンの集約処理の実施例２について説明するものであって、図５（ａ）はメモ帳アプリの起動によって表示されるメモ帳アプリ起動画面の一例を示す図であり、図５（ｂ）はホーム画面にキーワードの関連するアイコンが表示される場合を示す図である。図１の携帯端末のパネル部でのアイコンの集約処理について説明するためのフローチャートである。

以下、本発明の電子機器をスマートフォン等の携帯端末に適用した場合の一実施形態について、図１～図７を参照しながら説明する

まず、図１に示す携帯端末１００は、少なくともWi-Fi（登録商標）や、Wi-Fi Direct（登録商標）の規格に基づいた無線ＬＡＮ(Local Area Network)での無線通信機能を有しているものとする。また、携帯端末１００は、無線通信機能により図示しないＭＦＰ(Multifunction Peripheral)等の画像形成装置と通信し、印刷の指示や印刷設定の指示等を行うことができるものとする。また、携帯端末１００には、詳細については後述するが、たとえば後述の図３（ａ）に示すアイコンａ～ｃ、ａ１～ｃ１を、たとえば後述の図３（ｂ）に示すアイコン集約画面に集約させるアイコン集約アプリケーション（以下、アイコン集約アプリという）がインストールされている。

携帯端末１００は、アンテナ１０１、マイク１０２、パネル部１０３を制御する制御部１１０を備えている。アンテナ１０１は、図示しない無線基地局を介し、他の携帯端末１００との間での電波を送受信する。マイク１０２は、音声を取り込む。パネル部１０３は、携帯端末１００の各種機能の選択等を行うタッチパネル等のデバイスである。

制御部１１０は、制御プログラム等を実行して携帯端末１００全体の動作を制御するプロセッサーである。制御部１１０は、通信制御部１１１、マイク制御部１１２、ＲＡＭ(Random Access Memory)１１３、EEPROM(electrically erasable and programmable read-only memory)１１４、音声認識部１１５、パネル操作制御部１１６、画面表示情報管理部１１７、システム制御部１１８を備えている。また、これらは、データバス１１９に接続されている。

通信制御部１１１は、アンテナ１０１を介し、図示しない無線基地局を経由し、他の携帯端末１００との間での電波を送受信する。マイク制御部１１２は、マイク１０２の音声の取り込みを制御する。ＲＡＭ１１３は、プログラムを実行するためのワークメモリーである。EEPROM１１４には、各部の動作チェック等を行う制御プログラムが記憶されている。また、EEPROM１１４には、音声認識部１１５が音声認識を行う際に参照する音声パターンが記憶されている。ちなみに、音声パターンは、後述の図２に示すアイコンに関連するキーワードに関するものである。このように、音声パターンの内容を限定することで、音声パターンのデータ量を少なくできる。

音声認識部１１５は、マイク１０２が取り込んだ音声を認識する。なお、音声認識部１１５は、マイク１０２が取り込んだ音声を認識する際、EEPROM１１４に記憶されている音声パターンを参照する。これにより、音声認識部１１５は、後述の図２に示すキーワードに関するもの以外の音声については認識しない。パネル操作制御部１１６は、パネル部１０３の表示動作を制御する。また、パネル操作制御部１１６は、パネル部１０３でのタッチ操作を受け付ける。

画面表示情報管理部１１７は、後述の図２に示すキーワード検索関連テーブル１３０により、パネル部１０３の複数の画面に点在しているアイコンを管理する。なお、画面表示情報管理部１１７は、たとえばアイコンと、アイコンが示すアプリ名又はファイル名と、アイコンが表示されている画面とを関連づけてアイコンを管理する

システム制御部１１８は、各部の連携動作を制御する。また、システム制御部１１８は、詳細については後述するが、後述の図３（ａ）に示すアイコン集約アプリを起動させるアイコン１４０がタッチ操作されると、アイコン集約アプリを起動させ、パネル操作制御部１１６を介し、パネル部１０３に後述の図３（ｂ）に示すアイコン集約画面を表示させる。また、システム制御部１１８は、音声認識部１１５が後述の図２に示すキーワードを認識すると、画面表示情報管理部１１７が管理するキーワード検索関連テーブル１３０を参照し、音声認識部１１５が認識したキーワードに関連するアイコンａ～ｃ、ａ１～ｃ１のいずれかを図３（ｂ）に示すアイコン集約画面に表示させる。

次に、図２を参照し、画面表示情報管理部１１７が管理するキーワード検索関連テーブル１３０について説明する。まず、キーワード検索関連テーブル１３０は、アイコンａ～ｃ、ａ１～ｃ１等を示す項目１３１、アイコンａ～ｃ、ａ１～ｃ１等の表示画面を示す項目１３２、アプリ／文書ファイル（アプリ又は文書ファイル）に関連するキーワードを示す項目１３３、アプリ／文書ファイルを示す項目１３４を有している。項目１３２の表示画面、項目１３３のキーワード、項目１３４のアプリ／文書ファイルは、項目１３１のアイコンａ～ｃ、ａ１～ｃ１等に関連付けられている。

ちなみに、たとえば項目１３１のアイコンａ１は、項目１３２に示すＡ画面に表示されていて、項目１３３に示すキーワードは写真／画像（写真又は画像）であり、項目１３４に示すアプリ／文書ファイルはアルバム管理アプリである場合を示している。また、たとえば項目１３１のアイコンａは、項目１３２に示すＡ画面に表示されていて、項目１３３に示すキーワードはファイル名／ファイル番号（ファイル名又はファイル番号）であり、項目１３４に示すアプリ／文書ファイルはファイル名が報告書で、ファイル番号が０００１で示す文書ファイルである場合を示している。

次に、図３～図５を参照し、パネル部１０３でのアイコンの集約例について説明する。

（初期操作）
まず、図３により、携帯端末１００のパネル部１０３での初期操作について説明する。図３（ａ）は、パネル部１０３の初期画面の一例を示している。パネル部１０３の初期画面には、少なくともアイコン集約画面を起動させるアイコン１４０が表示されている。なお、点線で示すアイコンａ～ｃ、ａ１～ｃ１は、初期画面に表示されているものではなく、図２に示したキーワード検索関連テーブル１３０の項目１３２で示すＡ画面、Ｂ画面、Ｃ画面等に表示されている。

ここで、アイコン１４０をタッチ操作すると、システム制御部１１８がアイコン１４０に関連するアイコン集約アプリを起動させ、さらに、パネル操作制御部１１６を介し、パネル部１０３に図３（ｂ）に示すアイコン集約画面を表示させる。このアイコン集約画面は、音声認識部１１５が認識したキーワードに関連するアイコンａ～ｃ、ａ１～ｃ１のいずれかを表示させるものである。なお、アイコン集約アプリには、電話会議（通話）の機能が備わっていてもよい。電話会議（通話）の機能が備わっていることで、アイコン集約アプリの起動により、直ちに会議やミーティングでの電話会議（通話）を実施できる。また、アイコン集約アプリの起動により、会議で発言するたびに音声認識部１１５が認識したキーワードに関連するアイコンａ～ｃ、ａ１～ｃ１を、後述のアイコン集約画面に自動で表示させることができる。

（実施例１）
次に、図４を参照し、アイコン集約の実施例１について説明する。まず、図３（ｂ）のように、パネル部１０３にアイコン集約画面が表示されている状態で、マイク１０２により音声を取得する。なお、音声の取得は、たとえば会議、又はミーティング中である場合とする。

ここで、音声認識部１１５がたとえば「メモ」としたキーワードを認識したとする。このとき、システム制御部１１８は、画面表示情報管理部１１７が管理しているキーワード検索関連テーブル１３０を参照し、項目１３３に該当するキーワードが有るかどうかを確認する。また、システム制御部１１８は、キーワード検索関連テーブル１３０にたとえば「メモ」としたキーワードがある場合、そのキーワードに関連するアイコンｂ１と、項目１３２に示す表示画面であるＣ画面とを確認する。そして、システム制御部１１８は、図４（ａ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｂ１を表示させる。

また、音声認識部１１５がたとえば「写真」としたキーワードを認識したとする。このとき、システム制御部１１８は、画面表示情報管理部１１７が管理しているキーワード検索関連テーブル１３０を参照し、項目１３３に該当するキーワードが有るかどうかを確認する。また、システム制御部１１８は、キーワード検索関連テーブル１３０にたとえば「写真」としたキーワードがある場合、そのキーワードに関連するアイコンａ１と、項目１３２に示す表示画面であるＡ画面とを確認する。そして、システム制御部１１８は、図４（ｂ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンａ１を表示させる。

また、音声認識部１１５がたとえば「０００３」としたキーワードを認識したとする。このとき、システム制御部１１８は、画面表示情報管理部１１７が管理しているキーワード検索関連テーブル１３０を参照し、項目１３３に該当するキーワードが有るかどうかを確認する。また、システム制御部１１８は、キーワード検索関連テーブル１３０にたとえば「０００３」としたキーワードがある場合、そのキーワードに関連するアイコンｃと、項目１３２に示す表示画面であるＢ画面とを確認する。そして、システム制御部１１８は、図４（ｂ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｃを表示させる。

以下同様にして、音声認識部１１５がたとえば「カメラ」としたキーワードを認識したとする。このとき、システム制御部１１８は、キーワード検索関連テーブル１３０からそのキーワードに関連するアイコンｃ１と、項目１３２に示す表示画面であるＢ画面とを確認し、図４（ｃ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｃ１を表示させる。

また、音声認識部１１５がたとえば「報告書」としたキーワードを認識したとする。このとき、システム制御部１１８は、キーワード検索関連テーブル１３０からそのキーワードに関連するアイコンａと、項目１３２に示す表示画面であるＡ画面とを確認し、図４（ｃ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンａを表示させる。

また、音声認識部１１５がたとえば「決算書」としたキーワードを認識したとする。このとき、システム制御部１１８は、キーワード検索関連テーブル１３０からそのキーワードに関連するアイコンｂと、項目１３２に示す表示画面であるＡ画面とを確認し、図４（ｄ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｂを表示させる。

以上のように、アイコン集約画面に音声認識部１１５が認識したキーワードに関連するアイコンａ～ｃ、ａ１～ｃ１を表示させることで、直ちに必要なアイコンａ～ｃ、ａ１～ｃ１のいずれかを起動させることができ、たとえば会議、又はミーティング中に必要な情報を取得できる。

なお、アイコン集約画面にアイコンａ～ｃ、ａ１～ｃ１を表示させる場合、キーワード検索関連テーブル１３０が示す項目１３２のそれぞれの画面に表示されているアイコンａ～ｃ、ａ１～ｃ１をアイコン集約画面に移動させてもよいし、それぞれの画面に表示されているアイコンａ～ｃ、ａ１～ｃ１のショートカットを表示させてもよい。また、アイコンａ～ｃ、ａ１～ｃ１をアイコン集約画面に移動させた場合、一定時間経過後に、元に画面に戻してもよい。また、アイコン集約画面に表示されたいずれかのアイコンａ～ｃ、ａ１～ｃ１がタッチ操作された場合、そのタッチ操作されたいずれかのアイコンａ～ｃ、ａ１～ｃ１をアイコン集約画面に残してもよい。

（実施例２）
次に、図５を参照し、アイコン集約の実施例２について説明する。まず、キーワード検索関連テーブル１３０の項目１３１が示すアイコンｂ１がタッチ操作されたとする。この場合、図５（ａ）のように、パネル部１０３にメモ帳アプリ起動画面を表示させる。この場合、アイコンｂ１はメモ帳アプリ起動画面のたとえば中央部分等に表示されるようにしてもよい。この状態で、たとえば会議、又はミーティング中に、マイク１０２により音声を取得する。なお、図５（ａ）のように、パネル部１０３に表示されるメモ帳アプリ起動画面では、タッチペン等を用いることで、文字等を書き込むことができる。

ここで、音声認識部１１５がたとえば「写真」としたキーワードを認識したとする。このとき、システム制御部１１８は、画面表示情報管理部１１７が管理しているキーワード検索関連テーブル１３０を参照し、項目１３３に該当するキーワードが有るかどうかを確認する。また、システム制御部１１８は、キーワード検索関連テーブル１３０にたとえば「写真」としたキーワードがある場合、そのキーワードに関連するアイコンａ１と、項目１３２に示す表示画面であるＡ画面とを確認する。そして、システム制御部１１８は、図５（ｂ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のホーム画面にアイコンａ１を移動させ、アイコンｂ１の周囲にアイコンａ１を表示させる。なお、パネル部１０３に、図５（ａ）のメモ帳アプリ起動画面が表示されている場合、図５（ｂ）に示すパネル部１０３のホーム画面でのアイコンａ１の表示は、バックグラウンドで処理される。この場合、パネル部１０３のメモ帳アプリ起動画面からホーム画面に切り替えることで、アイコンｂ１の周囲に表示されるキーワードに関連したアイコンａ１等を確認できる。なお、ここでは、キーワードに関連したアイコンａ１等がホーム画面のメモ帳アプリに関連するアイコンｂ１の周囲に表示される場合としているが、この例に限らず、たとえば図５（ａ）のメモ帳アプリ起動画面にアイコンｂ１を表示させ、そのアイコンｂ１の周囲にキーワードに関連したアイコンａ１等が表示されるようにしてもよい。また、ここでは、メモ帳アプリに関連するアイコンｂ１の周囲にキーワードに関連したアイコンａ１等が表示される場合としているが、アイコンｂ１以外の特定のアイコンの周囲にキーワードに関連したアイコンａ１等が表示されてもよい。なお、特定のアイコンは、特定のアプリに間連したものであってもよいし、関連しないものであってもよい。また、たとえば指標アイコンを新たに設定しておき、キーワードに関連したアイコンａ１等がその指標アイコンの周囲に表示されるようにしてもよい。

また、音声認識部１１５がたとえば「決算書」としたキーワードを認識したとする。このとき、システム制御部１１８は、キーワード検索関連テーブル１３０からそのキーワードに関連するアイコンｂと、項目１３２に示す表示画面であるＡ画面とを確認し、図５（ａ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のメモ帳アプリ起動画面のアイコンｂ１の周囲にアイコンｂを表示させてもよい。

なお、上述した実施例１、実施例２においては、アイコン集約画面、又はメモ帳アプリ起動画面に新たなアイコンａ～ｃ、ａ１～ｃ１を表示させるアイコンのスペースが無くなった場合、アイコン集約画面、又はメモ帳アプリ起動画面の次画面に新たなアイコンａ～ｃ、ａ１～ｃ１を表示させてもよい。これにより、新たなアイコンａ～ｃ、ａ１～ｃ１が増えても、検索されたアイコンａ～ｃ、ａ１～ｃ１を確認しやすいように集約しておくことができる。

また、上述した実施例１、実施例２においては、アイコンａ～ｃ、ａ１～ｃ１が検索された順にアイコン集約画面、又はメモ帳アプリ起動画面に表示されているが、アイコンａ～ｃ、ａ１～ｃ１に優先順位を設定しておき、優先順位の高いアイコンａ～ｃ、ａ１～ｃ１をアイコン集約画面、又はメモ帳アプリ起動画面のたとえば上部から順に並べて表示させてもよい。これにより、優先順位の高いアイコンａ～ｃ、ａ１～ｃ１を直ちに利用することができる。

また、上述した実施例１、実施例２においては、既に表示されているアイコンａ～ｃ、ａ１～ｃ１に対し、新たに検索されたアイコンａ～ｃ、ａ１～ｃ１を識別しやすいように、既に表示されているアイコンａ～ｃ、ａ１～ｃ１に対し、新たに検索されたアイコンａ～ｃ、ａ１～ｃ１の色を変えてもよい。これにより、新たに検索されたアイコンａ～ｃ、ａ１～ｃ１の確認をさらに容易に行うことができる。

また、上述した実施例１、実施例２においては、アイコン集約画面、又はメモ帳アプリ起動画面に集約されたアイコンａ～ｃ、ａ１～ｃ１毎に、それぞれのアイコンａ～ｃ、ａ１～ｃ１が元の画面に戻るまでの時間を表示させてもよい。これにより、アイコンａ～ｃ、ａ１～ｃ１の表示時間を容易に確認できる。

次に、図６を参照し、携帯端末１００でのパネル部１０３でのアイコンの集約処理の一例について説明する。なお、以下では、図３に示したように、たとえばアイコン集約アプリを起動させるアイコン１４０がタッチ操作された場合として説明する。

（ステップＳ１０１）
システム制御部１１８は、アイコン集約アプリが選択されたかどうかを判断する。
この場合、システム制御部１１８は、図３（ａ）の画面でパネル操作制御部１１６からのパネル部１０３のアイコン１４０へのタッチ操作が有ることを示す通知が無ければアイコン集約アプリが選択されていないと判断し（ステップＳ１０１：Ｎｏ）、アイコン集約アプリの選択待ちとなる。
これに対し、システム制御部１１８は、図３（ａ）の画面でパネル操作制御部１１６からのパネル部１０３のアイコン１４０へのタッチ操作が有ることを示す通知が有ればアイコン集約アプリが選択されたと判断し（ステップＳ１０１：Ｙｅｓ）、ステップＳ１０２に移行する。

（ステップＳ１０２）
システム制御部１１８は、音声認識部１１５に対し、音声認識を開始させる。
この場合、システム制御部１１８は、アイコン集約アプリを起動させ、パネル操作制御部１１６を介し、パネル部１０３に図３（ｂ）に示したアイコン集約画面を表示させる。また、システム制御部１１８は、音声認識部１１５に対し、音声認識を開始させる。

（ステップＳ１０３）
システム制御部１１８は、音声を取得したかどうかを判断する。
この場合、システム制御部１１８は、マイク制御部１１２からのマイク１０２を介して音声を取得したことを示す通知が無ければ音声を取得していないと判断する（ステップＳ１０３：Ｎｏ）。
これに対し、システム制御部１１８は、マイク制御部１１２からのマイク１０２を介して音声を取得したことを示す通知が有れば音声を取得したと判断し（ステップＳ１０３：Ｙｅｓ）、ステップＳ１０４に移行する。

（ステップＳ１０４）
システム制御部１１８は、音声認識が完了したかどうかを判断する。
この場合、システム制御部１１８は、音声認識部１１５からの音声認識した内容（たとえば「メモ」としたキーワード）の通知が無ければ音声認識が完了していないと判断する（ステップＳ１０４：Ｎｏ）。
これに対し、システム制御部１１８は、音声認識部１１５からの音声認識した内容（たとえば「メモ」としたキーワード）の通知が有れば音声認識が完了したと判断し（ステップＳ１０４：Ｙｅｓ）、ステップＳ１０５に移行する。

（ステップＳ１０５）
システム制御部１１８は、関連するアイコンａ～ｃ、ａ１～ｃ１が存在するかどうかを判断する。
この場合、システム制御部１１８は、画面表示情報管理部１１７が管理しているキーワード検索関連テーブル１３０を参照し、項目１３３に該当するキーワードが無い場合は、関連するアイコンａ～ｃ、ａ１～ｃ１が存在しないと判断し（ステップＳ１０５：Ｎｏ）、ステップＳ１０３に戻る。
これに対し、システム制御部１１８は、画面表示情報管理部１１７が管理しているキーワード検索関連テーブル１３０を参照し、項目１３３に該当するキーワードが有る場合は、関連するアイコンａ～ｃ、ａ１～ｃ１が存在すると判断し（ステップＳ１０５：Ｙｅｓ）、ステップＳ１０６に移行する。

（ステップＳ１０６）
システム制御部１１８は、該当するアイコンａ～ｃ、ａ１～ｃ１をアイコン集約画面に移動させる。
この場合、システム制御部１１８は、キーワード検索関連テーブル１３０にたとえば「メモ」としたキーワードがある場合、そのキーワードに関連するアイコンｂ１と、項目１３２に示す表示画面であるＣ画面とを確認する。そして、システム制御部１１８は、図４（ａ）に示したように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｂ１を表示させる。
なお、システム制御部１１８は、音声認識部１１５がたとえば「写真」としたキーワードを認識した場合、図４（ｂ）に示したように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンａ１を表示させる。
また、システム制御部１１８は、音声認識部１１５がたとえば「０００３」としたキーワードを認識した場合、図４（ｂ）に示したように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｃを表示させる。
また、システム制御部１１８は、音声認識部１１５がたとえば「カメラ」としたキーワードを認識した場合、図４（ｃ）に示したように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｃ１を表示させる。
また、システム制御部１１８は、音声認識部１１５がたとえば「報告書」としたキーワードを認識した場合、図４（ｃ）に示したように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンａを表示させる。
また、システム制御部１１８は、音声認識部１１５がたとえば「決算書」としたキーワードを認識した場合、図４（ｄ）に示すように、パネル操作制御部１１６を介し、パネル部１０３のアイコン集約画面にアイコンｂを表示させる。

（ステップＳ１０７）
システム制御部１１８は、アイコン集約アプリの終了が選択されたかどうかを判断する。
ここで、たとえば図３（ｂ）の画面にアイコン集約アプリの終了ボタンが表示されているとする。
この場合、システム制御部１１８は、たとえば図３（ｂ）の画面でパネル操作制御部１１６からのパネル部１０３の終了ボタンへのタッチ操作が有ることを示す通知が無ければアイコン集約アプリの終了が選択されていないと判断し（ステップＳ１０７：Ｎｏ）、ステップＳ１０３に戻る。
これに対し、システム制御部１１８は、たとえば図３（ｂ）の画面でパネル操作制御部１１６からのパネル部１０３の終了ボタンへのタッチ操作が有ることを示す通知が有ればアイコン集約アプリの終了が選択されたと判断し（ステップＳ１０７：Ｙｅｓ）、処理を終了する。
なお、ここでは、たとえば図３（ｂ）の画面にアイコン集約アプリの終了ボタンが表示されているとした場合で説明したが、この例に限らず、システム制御部１１８は、音声認識部１１５が「終了」という音声を認識した場合、直ちに処理を終了してもよい。

このように、本実施形態では、パネル部１０３により、複数の画面にアイコンａ～ｃ、ａ１～ｃ１を表示し、画面表示情報管理部１１７により、アイコンａ～ｃ、ａ１～ｃ１に関連するキーワードと、アイコンａ～ｃ、ａ１～ｃ１とを関連付けて管理し、音声認識部１１５により、マイク１０２が取り込んだ音声によるキーワードを認識し、システム制御部１１８により、音声認識部１１５が認識したキーワードに関連するアイコンａ～ｃ、ａ１～ｃ１を画面表示情報管理部１１７が管理しているかどうかを確認し、管理している場合は認識したキーワードに関連するアイコンａ～ｃ、ａ１～ｃ１をパネル部１０３のたとえばアイコン集約画面（特定画面）に集約して表示させる。これにより、直ちに利用可能なアイコンａ～ｃ、ａ１～ｃ１の確認を容易且つ確実に行うことができるので、操作性をさらに高めることができる。

なお、本実施形態では、電子機器として携帯端末１００を例示したが、タッチ操作方式のパネル部を有する電子機器であればよく、たとえばＭＦＰ(Multifunction Peripheral)等の画像形成装置等にも適用可能である。

１００携帯端末
１０１アンテナ
１０２マイク
１０３パネル部
１１０制御部
１１１通信制御部
１１２マイク制御部
１１３ＲＡＭ
１１４ EEPROM
１１５音声認識部
１１６パネル操作制御部
１１７画面表示情報管理部
１１８システム制御部
１１９データバス
１３０キーワード検索関連テーブル
１３１～１３４項目
１４０、ａ～ｃ、ａ１～ｃ１アイコン

Claims

マイクと、
複数の画面にアイコンを表示するパネル部と、
前記マイクが取り込んだ音声によるキーワードを認識する音声認識部と、
前記アイコンに関連する前記キーワードと、前記アイコンとを関連付けて管理する画面表示情報管理部と、
前記音声認識部が前記キーワードを認識すると、この認識したキーワードに関連する前記アイコンを前記画面表示情報管理部が管理しているかどうかを確認し、管理している場合は認識した前記キーワードに関連する前記アイコンを前記パネル部の特定画面に表示させるシステム制御部とを備え、
前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させる場合、それぞれのアイコン毎に、それぞれのアイコンが元の画面に戻るまでの時間を表示させることを特徴とする電子機器。
前記システム制御部は、前記キーワードに関連する前記アイコンを前記パネル部の特定画面に一時的に移動させることを特徴とする請求項１に記載の電子機器。
前記システム制御部は、一時的に移動させた前記アイコンの色を変えることを特徴とする請求項２に記載の電子機器。
前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させるスペースがなくなった場合、前記特定画面の次画面に前記アイコンを表示させることを特徴とする請求項１に記載の電子機器。
前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させる場合、前記アイコンの優先度の高い順に並べて表示させることを特徴とする請求項１に記載の電子機器。
前記システム制御部は、前記特定画面に前記キーワードに関連する前記アイコンを表示させる場合、既に表示されている前記アイコンに対し、新たに表示される前記アイコンの色を変えることを特徴とする請求項１に記載の電子機器。
前記システム制御部は、起動中の前記アイコンの周囲に、前記キーワードに関連するアイコンを一時的に移動させることを特徴とする請求項１に記載の電子機器。
前記システム制御部は、特定の前記アイコンの周囲に、前記キーワードに関連するアイコンを一時的に移動させることを特徴とする請求項１に記載の電子機器。