JP2017004113A - 操作支援装置、操作支援システム及び操作支援方法 - Google Patents

Abstract

【課題】ユーザに効果的に操作の支援を行うことができるという効果を有する。【解決手段】 操作支援装置は、ユーザ操作に従って状態変位して第１の階層のモードを選択する操作機構と、ユーザ入力に基づくユーザ要求情報を取得する取得部と、上記第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定すると共に、上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが上記操作機構によって選択された場合には、上記ユーザ指定モードを設定する制御部と、を具備する。【選択図】図１

Description

本発明は、階層化されたメニューを用いて操作を行う機器に好適な操作支援装置、操作支援システム及び操作支援方法に関する。

近年、デジタルカメラなどの撮影機能付き携帯機器が普及している。この種の撮影機器においては表示部を有して、撮影画像を表示する機能を有するものもある。また、表示部にメニュー画面を表示して、撮影機器の操作を容易にしたものもある。更に操作性を向上させるために、表示部にタッチパネルを配置して、タッチパネルに対するタッチ操作によって撮影機器の操作が可能なものもある。

このような表示部を有する機器においては、機器の機械的な操作を表示して、操作を誘導するものもある。例えば、特許文献１においては、表示部に表示された機器の外観図の一部をタッチパネルを介して操作することにより、操作された機器の外観図の一部を構成する部分の動作に関する設定を行うための表示画面に切り換える技術が提案されている。この提案によれば、ユーザは操作を覚えておく必要がなく、案内に従って操作を行えば良い。

しかし、特許文献１の提案は、単に、操作対象機器の外観図の一部を構成する部分の動作に関する設定を行う、という１つの機能に関してその操作を支援するものであって、極めて多くの機能の中から、ユーザが漫然と知っている機能を選択するための操作を効果的に案内することができるものではない。

特開平１１−１５４００号公報

従来、操作を簡単化するためにメニューを階層的に構成する方法がある。ユーザは上位の階層から下位の階層に向けてメニューを順次選択していくことで、目的の操作を行うことができ、操作を簡単にすることができる。しかしながら、選択するモード等が膨大な場合には、単純な階層構造のメニューだけでは、操作が煩雑であったり、目的とする操作にたどり着くことがかえって困難な場合がある。

そこで、選択のためのスイッチ等の機構を用いて、選択できるメニューを分かりやすくしたものもある。例えば、デジタルカメラにおいては、機能選択を階層化し最上位階層の機能選択のためのモードダイヤルを備えたものがある。モードダイヤルを回して最上位階層の機能を選択する操作をユーザが行うことで、ユーザにとって、目的とする機能が属する最上位階層の機能を選択したことを理解しやすくなり、結果的に選択操作が分かりやすいものとなる。

しかし、近年、高機能化、多機能化により、最上位のモード選択の後、更に選択する機能の数が増え、モードの選択や、各種機能の選択や、撮影に必要な各種設定の指定等が極めて複雑化している。このため、ユーザが希望する選択や設定の操作を行うためには、その装置の操作を十分に習熟する必要があった。

本発明は、ユーザに効果的に操作の支援を行うことができる操作支援装置、操作支援システム及び操作支援方法を提供することを目的とする。

本発明に係る操作支援装置は、ユーザ操作に従って状態変位して第１の階層のモードを選択する操作機構と、ユーザ入力に基づくユーザ要求情報を取得する取得部と、上記第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定すると共に、上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが上記操作機構によって選択された場合には、上記ユーザ指定モードを設定する制御部と、を具備する。

本発明に係る操作支援システムは、ユーザ操作に従って状態変位して第１の階層のモードを選択する操作機構を有する制御対象機器と、ユーザ入力に基づくユーザ要求情報を取得する取得部と、上記第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定する判定部と、を有する制御機器と、上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが上記操作機構によって選択された場合には、上記ユーザ指定モードを設定する制御部と、を具備する。

本発明に係る操作支援方法は、ユーザ入力に基づくユーザ要求情報を取得する取得ステップと、第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定する判定ステップと、ユーザ操作に従って状態変位して上記第１の階層のモードを選択する操作機構によって、上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが選択された場合には、上記ユーザ指定モードを設定する制御ステップと、を具備する。

本発明によれば、ユーザに効果的に操作の支援を行うことができるという効果を有する。

本発明の第１実施の形態に係る操作支援装置が組み込まれた撮影機器を示すブロック図。 図１の撮影機器１の外観を示す説明図。 図２Ａ中のモードダイヤル２２を説明するための説明図。 カメラ制御を説明するためのフローチャート。 撮影する様子を示す説明図。 画面表示の一例を示す説明図。 画面表示の一例を示す説明図。 画面表示の一例を示す説明図。 画面表示の一例を示す説明図。 画面表示の一例を示す説明図。 本発明の第２の実施の形態を示すブロック図。 図１１は第２の実施の形態における制御を示すフローチャートである。 第２の実施の形態における画面表示の一例を示す説明図。 第２の実施の形態における画面表示の一例を示す説明図。

以下、図面を参照して本発明の実施の形態について詳細に説明する。

（第１の実施の形態）
図１は本発明の第１実施の形態に係る操作支援装置が組み込まれた撮影機器を示すブロック図である。本実施の形態において、制御対象機器である撮影機器は、所定の機能をそれぞれ実現する複数のモードが階層化された項目によって選択可能な機器であり、本実施の形態における操作支援装置は、所定の階層のモードを選択するためには、ユーザによる明示的な選択操作を必要とさせると共に、当該階層より下位の階層のモードについてはユーザ入力に基づいて自動的に設定することにより、ユーザが漫然と知っている機能を選択するための操作を効果的に案内するものである。本実施の形態は、ユーザによる明示的な選択操作を、状態変位を伴う操作機構のみによって行うことができるようになっている例であるが、この明示的な選択操作が状態変位を伴わない所定の操作部によってできるようになっていてもよい。

なお、制御対象機器におけるモードは、制御対象機器の各機能を実現するためのものであり、例えば、制御対象機器を制御する１つ以上のコマンドや各種パラメータ（設定値）を制御対象機器の各部に設定することで実現される。

図１において、撮影機器１には撮像部２が設けられている。撮像部２は、ＣＣＤやＣＭＯＳセンサ等の図示しない撮像素子と、被写体の光学像を撮像素子の撮像面に導くレンズ部３とを備える。レンズ部３は、ズームやフォーカシングのための図示しないレンズ等を備えており、これらのレンズは、本体部１０の制御部１１によって駆動制御されるようになっている。

制御部１１は、例えば、図示しないメモリに記憶されたプログラムに従って各部を制御してカメラ制御を行う図示しないＣＰＵ等のプロセッサによって構成することができる。制御部１１の撮影制御部１１ａは、撮像部２に撮像素子の駆動信号を出力してシャッタスピード、露光時間等を制御すると共に、撮像部２からの撮影画像を読み出す。制御部１１の画像処理部１１ｂは、読み出した撮影画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。

制御部１１の表示制御部１１ｅは、表示に関する各種処理を実行する。表示制御部１１ｅは、信号処理後の撮影画像を表示部１６に与えることができる。表示部１６は、ＬＣＤ等の表示画面を有しており、表示制御部１１ｅから与えられた画像を表示する。また、表示制御部１１ｅは、各種メニュー表示等を表示部１６の表示画面１６ｂ（図４参照）に表示させることもできるようになっている。なお、表示部１６の表示画面１６ｂは本体部１０が収納された筐体１０ａの背面に沿って設けられており（図４参照）、撮影者は、撮影時に表示部１６の表示画面１６ｂ上に表示されたスルー画を確認することができ、スルー画を確認しながら撮影操作を行うこともできる。

制御部１１には、操作判定部１１ｆが設けられている。操作判定部１１ｆは、図示しないシャッタボタン、ファンクションボタン、撮影モード設定等の各種スイッチ等を含む操作部１８に対するユーザ操作を受け付けるようになっている。制御部１１は操作判定部１１ｆの判定結果に基づいて各部を制御する。

制御部１１は、各種信号処理後の撮像画像を圧縮処理し、圧縮後の画像を記録部４に与えて記録させることができる。

また、制御部１１には、通信制御部１１ｇが設けられている。通信制御部１１ｇは、通信部１９を制御して、外部機器との間で通信を行い、データの送信及び受信が可能である。通信部１９は、Ｗｉｆｉ（登録商標）等の所定の伝送路を介して外部機器との間で通信が可能である。

本実施の形態においては、操作部１８としては、状態変位を伴う操作機構を有する変位操作部１８ａと、それ以外の非変位操作部１８ｂとを備える。本実施の形態においては、変位操作部１８ａは、ユーザによる明示的な選択操作がなければモードが設定されない階層（以下、操作要求階層という）に含まれる複数のモードから１つのモードを設定するために用いられる。即ち、撮影機器１は、階層化されたモードのうち操作要求階層の各モードについては、変位操作部１８ａによる選択操作を行わなければ選択し設定することができないようになっている。

また、表示部１６の表示画面上には、非変位操作部１８ｂの１つであるタッチパネル１６ａが設けられている。タッチパネル１６ａは、ユーザが指で指し示した表示画面上の位置に応じた操作信号を発生することができる。この操作信号は、制御部１１に供給される。これにより、制御部１１は、ユーザがタッチした表示画面上の位置やユーザが表示画面上を指でスライドさせるスライド操作を検出することができ、ユーザ操作に対応した処理を実行することができるようになっている。

図２Ａは図１の撮影機器１の外観を示す説明図である。図２Ａに示す撮影機器１は本体部１０の回路が収納された筐体１０ａとレンズ部３が収納される鏡筒３ａとを有する。筐体１０ａの上面には、変位操作部１８ａを構成するシャッタボタン２１とモードダイヤル２２とが設けられている。本実施の形態においては、モードダイヤル２２が操作要求階層の各モードの選択及び設定のために用いられる操作機構である。

図２Ｂは図２Ａ中のモードダイヤル２２を説明するための説明図である。モードダイヤル２２は、円柱形状を有しており、円形状の表面の中心を回転中心として筐体１０ａの上面上において回動自在に配置される。モードダイヤル２２の表面には、操作要求階層の各モードに対応したＡｒｔ、Ｐ、Ａ、Ｓ、Ｍ、Ｍｏｖｉｅの文字が表示されている。これらの文字の１つがマーク２３に対応する位置に位置するように、モードダイヤル２２を回転させることで、当該文字に対応付けられたモードが選択され設定される。なお、Ａｒｔはアートフィルタを実現するアートフィルタモードに対応し、Ｐはプログラムモードに対応し、Ａは絞り優先モードに対応し、Ｓはシャッタスピード優先モードに対応し、Ｍはマニュアルモードに対応し、Ｍｏｖｉｅは動画モードに対応する。図２Ｂではアートフィルタモードが選択されている状態であることを示している。
もちろん、ダイヤル操作に限定するものではなく、状態変位を伴う操作機構を有する変位操作部１８ａとしてはスライドスイッチやトグルスイッチなどのプッシュスイッチなどでもよい。状態変位を伴う操作を、部材変位操作を伴う操作と表現しても良く、本発明によれば、ユーザ入力に基づくユーザ要求情報を取得する取得ステップと現在の機器設定状態を取得するステップとユーザ要求と上記機器設定状態の差異から、上記機器の部材変位操作を伴う操作ガイドを特定する特定ステップと、上記特定結果を表示する表示ステップと、を具備したことを特徴とする操作支援方法によって、分かりやすいヒューマンインターフェースたる部材変位操作を伴う操作と、デジタル的な設定の親和性を高めることが可能となる。

本実施の形態においては、撮影機器１の所定の機能を実現する所定のモードを指定するために、例えばマイク等の入力部１５が設けられている。なお、入力部１５としては、マイクに限らず、タッチパネル１６ａやキーボード等のモードを指定可能な種々の入力部を採用することができる。マイク等の入力部１５は、ユーザによるモード等の指定に対応した情報（以下、ユーザ要求情報という）を制御部１１に出力することができるようになっている。

制御部１１には要望取得部１１ｄが設けられている。要望取得部１１ｄは、入力部１５からのユーザ要求情報に基づいてデータベース１７を参照することで、ユーザが指定しようとしているモード（以下、ユーザ指定モードという）を判定する。なお、入力部１５がマイクによって構成されている場合には、要望取得部１１ｄは、ユーザの音声に対する音声認識処理によってユーザ要求情報を取得する。データベース１７は、撮影機器１のモードに関する種々の情報を記憶している。要望取得部１１ｄは、データベース１７に、ユーザによるユーザ要求情報に完全に一致するモードが検索できた場合には、このモードをユーザ指定モードと判定し、当該モードを設定するための情報をデータベース１７から読み出す。なお、要望取得部１１ｄは、データベース１７から、ユーザによるユーザ要求情報に完全に一致するモードを検索できなかった場合には、検索可能なモードの一覧情報又は検索のための質問情報をデータベース１７から読み出すようにしてもよい。要望取得部１１ｄは、表示制御部１１ｅを制御して、読み出した一覧情報や質問情報に基づく表示を表示部１６に表示させるようになっている。

要望取得部１１ｄは、ユーザによるユーザ要求情報に基づくユーザ指定モードを判定すると、当該モードを設定するための情報をモード・パラメータ設定部１１ｃに与える。モード・パラメータ設定部１１ｃは、データベース１７を参照することで、ユーザ指定モードを設定するために必要な各モードを判定し、ユーザ指定モードが属する操作要求階層のモードを判定する。モード・パラメータ設定部１１ｃは、表示制御部１１ｅを制御して、判定した操作要求階層のモードを指定するように、表示部１６の表示画面上にメッセージ（操作ガイド表示）を表示させる。

ところで、ユーザが音声入力等によって指定したユーザ指定モードを含む階層よりも上位の階層において現在選択されているモードに、ユーザ指定モードが属さないことがある。例えば、モードダイヤル２２によって絞り優先モードが設定されている場合において、ユーザが音声入力によってアートフィルタモード中の所定のフィルタモードを指定するものとする。即ち、ユーザが指定したフィルタモードは、モードダイヤル２２のＡｒｔで示すアートフィルタモード中のモードであり、モードダイヤル２２のＡで示す絞り優先モードには属さない。この場合でも、制御部１１においてモードの検索を行い、選択要求階層のモードをソフトウェア処理によって自動的に変更することも可能ではある。例えば、モードダイヤル２２の設定に拘わらず、ユーザが指定したモードに移行することも考えられる。しかしながら、そうすると、モードダイヤル２２によって示されているモードと、ユーザ指定モードとの対応の整合性がとれなくなり、ユーザは、いずれのモードで動作しているかを誤認識し易くなり、混乱を来して結果的に誤操作を招来する虞がある。

そこで、本実施の形態においては、ユーザが入力部１５によって指定したモードよりも上位の操作要求階層のモードについては、ユーザによる明示的な操作のみによって変更可能とする。これにより、機能選択の整合性を担保する。操作要求階層のモード変更が行われた後、ユーザが指定したユーザ指定モードへの移行が行われる。

即ち、モード・パラメータ設定部１１ｃは、操作要求階層のモードを指定するためのモードダイヤル２２の操作によってユーザ指定モードが属する操作要求階層のモードが指定されていることが操作判定部１１ｆ等によって示された場合には、ユーザ指定モードが実現されるように各部を設定する。モード・パラメータ設定部１１ｃは、ユーザ指定モードを実現するための設定情報を記録部４に記録させるようになっている。

次に、このように構成された実施の形態の動作について図３乃至図９を参照して説明する。図３はカメラ制御を説明するためのフローチャートであり、図４は撮影する様子を示す説明図であり、図５乃至図９は画面表示の一例を示す説明図である。

図３のステップＳ１において、制御部１１は、撮影モードが指示されたか否かを判定する。撮影モードが指示されていない場合には、制御部１１は、再生モードが指定されているか否かを判定する（ステップＳ３１）。再生モードが指示されると、制御部１１は、ステップＳ３２において、指定された画像を再生する。制御部１１は、ステップＳ３３において再生画像の変更が指示されたか否かを判定しており、変更が指示された場合には指定された画像に変更して再生を行う（ステップＳ３４）。また、制御部１１は、再生モードが指示されていない場合には、通信モードに移行し、ステップＳ３５において、画像通信が指定されているか否かを判定する。画像通信が指定されている場合には、ステップＳ３６において画像通信を行い、画像通信が指定されていない場合には、必要に応じて各種データのダウンロードを行う（ステップＳ３７）。

一方、撮影モードが指示されると、制御部１１は、ステップＳ２においてレンズ交換が行われたか否かを判定する。レンズ交換が行われている場合には、制御部１１は、撮像部２との間でレンズ通信を行って、撮像部２のレンズ部３及び撮像素子に関する情報を取得すると共に、ユーザ操作に応じて、レンズ部３及び撮像素子の設定を行う（ステップＳ３）。

次に、制御部１１は、ステップＳ４において、撮像部２からの画像信号に基づいて、表示部１６に撮像画像（スルー画）をライブヴュー表示させる。

図４は、撮影者３０が右手３１によって本体部１０の筐体１０ａを把持して、撮影のために構えている様子を示している。本体部１０の筐体１０ａの前面には鏡筒３ａが設けられ、背面には表示部１６が設けられ、背面下端にはマイク等の入力部１５が設けられている。また、筐体１０ａの上面にはモードダイヤル２２が配設されている。この構えた態勢において背面からみると、図５に示すように、表示部１６の表示画面１６ｂ上に、ライブヴュー画像３５が表示されている。ライブヴュー画像３５中には、被写体である人物の画像３６及びヘルプボタン表示３７が表示されている。

次に、制御部１１は、ステップＳ５において、ヘルプ操作が発生したか否かを判定する。ヘルプ操作は、本実施の形態における操作支援を行うことをユーザが指定するための操作であり、操作判定部１１ｆは、例えば、表示部１６の表示画面１６ｂ上に表示されたヘルプボタン表示３７に対するタッチ操作によって、ヘルプ操作が行われたものと判定する。なお、操作判定部１１ｆは、筐体１０ａに設けた図示しないスイッチの操作やモードダイヤル２２の押下操作等によってヘルプ操作が行われたものと判定してもよい。

いま、ユーザが画像に対してフィルタを行うフィルタモードを希望するものとする。ユーザは、希望するフィルタモードの設定操作が分からない場合には、ヘルプ操作を行う。ユーザによるヘルプ操作が行われると、制御部１１の要望取得部１１ｄは、ユーザからのモード設定等の要求の待機状態となり、要求が発生するとステップＳ６においてユーザの要求を判定可能であるか否かを判定する。例えば、ユーザは、希望するフィルタモードを音声にて指示する。入力部１５は、この音声を取得して要望取得部１１ｄに与える。要望取得部１１ｄは、音声認識によって、ユーザ要求情報を取得し、取得したユーザ要求情報に基づいてデータベース１７を検索することで、ユーザ指定モードを判定する。

なお、ユーザの音声等による入力は、直接モード名を指定するものでなくてもよく、所定のモードの特徴を表す語句等であってもよい。この場合でも、データベース１７がこれらの特徴の情報を有することによって、要望取得部１１ｄは、モードを特定することができる。

また、要望取得部１１ｄは、データベース１７にユーザによるユーザ要求情報に一致するモードが存在しない場合に、当該ユーザ要求情報に基づいて検索可能なモードの一覧又は質問を表示するための情報をデータベース１７から取得して、これらの情報に基づく表示を表示部１６に表示させる（ステップＳ７）。例えば、要望取得部１１ｄは、図６に示すように、モードの一覧として、撮影機器のカタログに出ている売れ筋のモードのみを表示してもよい。また、例えば、要望取得部１１ｄは、図６に示すように、ユーザの要求からモードを質問形式で取得するための質問を表示画面１６ｂ上に表示させてもよい。

要望取得部１１ｄは、ユーザによるユーザ要求情報に対応したモード（ユーザ指定モード）を特定することができた場合には、処理をステップＳ８に移行して、データベース１７から当該モードを設定するための情報を取得してモード・パラメータ設定部１１ｃに与える。モード・パラメータ設定部１１ｃは、次のステップＳ９において、操作要求階層について、ユーザ指定モードと現状のモードとの差異を判定する。

即ち、モード・パラメータ設定部１１ｃは、データベース１７を参照することで、ユーザ指定モードを選択するための各モードを判定し、ユーザ指定モードが属する操作要求階層のモードを判定する。モード・パラメータ設定部１１ｃは、表示制御部１１ｅを制御して、判定した操作要求階層のモードを指定するように、表示部１６の表示画面１６ｂ上に操作ガイド表示を表示させる（ステップＳ１１）。

図７はこの場合の画面表示の例を示しており、表示画面１６ｂ上には、モードダイヤル２２に対応したダイヤル表示２２ａとマーク２３に対応したマーク表示２３ａとが表示されている。なお、ダイヤル表示２２ａの状態はモードダイヤル２２の設定すべき状態を示している。即ち、図７の例ではモードダイヤル２２をＡｒｔにて示すアートフィルタモードに設定すべであることを示している。なお、表示画面１６ｂには、モードダイヤル２２を手動で設定する必要があることを示す手動操作の表示３８も表示されている。なお、図７では操作ガイド表示によってモードダイヤル２２の設定すべき状態を表示するようにしたが、現在設定されているモードと設定すべきモードとの両方の状態を表示するようにしてもよい。

モード・パラメータ設定部１１ｃは、操作判定部１１ｆの出力によって、ユーザがモードダイヤル２２を対応するモードに変更したか否かを判定する（ステップＳ１２）。ユーザが、モードダイヤル２２を回転させて、ユーザが入力部１５によって指定したモードが属する操作要求階層のモードに設定すると、モード・パラメータ設定部１１ｃは処理をステップＳ１３に移行して、ユーザ指定モードに従った設定変更を行う。

なお、図３の例では、ユーザ指定モードが現在の操作要求階層のモードに属する場合には、モードダイヤル２２の変位操作は不要であることから、操作ガイド表示を表示することなくステップＳ１３に移行するようになっているが、モード・パラメータ設定部１１ｃは、ユーザに操作要求階層のモードを認識させるために、現在の操作要求階層のモードにユーザ指定モードが属することを示す表示、例えば、「モード指定ＯＫ」等の表示を表示させるようにしてもよい。また、モード・パラメータ設定部１１ｃは、モードダイヤル２２の変位操作が不要である場合でも、一旦モードダイヤル２２を回転させて元の位置に戻す操作や、ＯＫボタンにタッチする等の所定の操作の後に、ステップＳ１３に移行するようにしてもよく、これらの操作をユーザに促す操作ガイド表示を表示させてもよい。

図８はユーザ指定モードへのモード変更後の画面表示を示している。表示画面１６ｂ上には、図５の画像３５に対してフィルタ処理が施されて得られた画像４１が表示されている。この画像４１は、被写体である人物の画像３６の背景部分に所定の画像処理を施したものである。また、表示画面１６ｂ上には、アートフィルタモード中のＡｒｔ１で示すフィルタモードによる画像処理が行われていることを示す表示３９も表示されている。

このように、ユーザが設定したいモードや或いは設定したい撮影方法等の漠然とした機能等を指定することで、指定したモードや機能を実現するモード（ユーザ指定モード）が自動的に設定される。例えば、ユーザが「水彩」と発話すれば、水彩アートモードが自動的に設定される。この場合において、操作要求階層のモード設定については、ユーザに明示的に操作させて、ユーザ指定モードが属するモードを設定させるようになっており、ユーザによるモード及び操作方法の理解を深めて、誤操作を生じ難くすることができる。

次のステップＳ１４では、設定するモードについてパラメータ設定等の調整操作が必要か否かが判定される。モード・パラメータ設定部１１ｃは、調整操作が不要であると判定した場合には、処理をステップＳ２０に移行して、設定したモード及び設定を記録部４に記録した後、ステップＳ１７に移行して撮影の待機状態となる。

また、モード・パラメータ設定部１１ｃは、調整操作が必要と判定すると、ステップＳ１５に移行して操作補助表示を表示する。次に、モード・パラメータ設定部１１ｃは、ユーザによる調整操作を受け付けて（ステップＳ１６）、調整操作に応じてモード・設定変更を行い（ステップＳ１９）、変更結果を記録部４に記録する（ステップＳ２０）。

図９は操作補助表示の一例を示している。図９の例は、ユーザが例えば「明るくしたい」と発話した場合の例を示しており、表示画面１６ｂ上には、操作補助表示４５が表示されている。操作補助表示４５は、明るさを明るくするためのボタン表示４６と明るさを暗くするためのボタン表示４７とを含む。ユーザがボタン表示４６上をタッチすることで、画像の明るさを明るくすることができる。

ステップＳ１７では、撮影操作が行われたか否かが判定される。例えばレリーズボタン操作等によって静止画撮影が指示されると、制御部１１は、ステップＳ１８において撮影を行う。即ち、制御部１１は、撮像部２からの撮像画像に信号処理を施して圧縮した後、記録部４に与えて記録を行う。

なお、撮影機器１の１つの機能のみを実現する場合だけでなく、画像の明るさの設定と画像の鮮やかさの設定等の２つ以上の設定を同時に実現したい場合がある。このような場合を考慮して、ステップＳ６において、例えば、「更に」というユーザ入力があった場合には、前回までの設定を保持した状態で、新たな設定を行うようにしてもよい。

このように本実施の形態においては、ユーザの入力に応じて、モードを自動的に設定することができる。例えば、ユーザが「比較明合成」による撮影を希望する場合において、比較明合成のための設定方法を知らない場合でも、ユーザは「比較明合成」と発話すればよい。これにより、自動的に比較明合成を実現するモードへの移行及び設定が行われる。この場合において、本実施の形態においては、比較明合成が属する操作要求階層のモードをユーザに通知すると共に、当該操作要求階層のモードを指定する操作機構をユーザに明示的に操作させることによって、比較明合成モードへの移行を行う。これにより、操作機構によって指示されるモードと実際のモードとの整合性をとることができ、ユーザがモードに対して正しく認識することを容易にして、誤操作を低減させることができる。

（第２の実施の形態）
図１０は本発明の第２の実施の形態を示すブロック図である。第１の実施の形態においては、制御対象機器である撮影機器内に操作支援装置を設けた例を示した。本実施の形態は、制御対象機器を外部から操作可能な制御機器によって操作支援を行う例である。例えば、制御対象機器が図１の撮影機器であるものとして説明する。なお、本実施の形態においては、制御対象機器としては、制御機器との間の通信によって制御機器により制御されることが可能な機器であればどのような機器であってもよく、図１の撮影機器に限らない。例えば、図１の撮影機器内の要望取得部１１ｄ、データベース１７等を省略した撮影機器を採用してもよい。

図１０の制御機器５０は、例えば制御対象機器以外の他の撮影機器や、スマートフォンやタブレットＰＣ、パーソナルコンピュータ等の情報端末によって構成することができる。制御機器５０は、制御部５１を有している。制御部５１は、例えば、図示しないメモリに記憶されたプログラムに従って各部の制御を行う図示しないＣＰＵ等のプロセッサによって構成することができる。機器通信部５２は、制御部５１に制御されて、制御対象機器の通信部、例えば、図１の通信部１９との間で通信が可能であり、制御部５１からの情報を制御対象機器に送信すると共に、制御対象機器からの情報を受信して制御部５１に与えることができるようになっている。また、時計部５３は時間情報を発生して制御部５１に出力するようになっている。

制御機器５０は表示制御部５５を有している。表示制御部５５は、制御部５１に制御されて、表示に関する各種処理を実行する。例えば、表示制御部５５は、制御部５１から与えられた画像や各種メニュー表示等を表示部５６に表示させることができるようになっている。表示部５６は、ＬＣＤ等の表示画面を有しており、表示制御部５５から与えられた画像を表示する。

操作部５４は、制御機器５０に設けられた図示しないスイッチや、表示部５６の表示画面に配設された図示しないタッチパネル等によって構成することができる。このタッチパネルは、ユーザが指で指し示した表示画面上の位置に応じた操作信号を発生することができる。この操作信号は、制御部５１に供給される。これにより、制御部５１は、ユーザがタッチした表示画面上の位置やユーザが表示画面上を指でスライドさせるスライド操作を検出することができ、ユーザ操作に対応した処理を実行することができるようになっている。

記録部５７は、制御部５１から与えられた情報が記録されるようになっている。本実施の形態においては、記録部５７は、図１のデータベース１７に保持された情報と同様の情報、即ち、制御対象機器のモードに関する情報を記録することができる。

制御機器５０には、基地局通信部５８が設けられている。基地局通信部５８は、所定の伝送路を介してネットワーク６０に接続可能であり、ネットワーク６０内の基地局６２を介して情報源６１との間で情報の授受が可能である。本実施の形態においては、情報源６１には制御対象機器のモードに関する情報が保持されていることがあるものとする。

また、制御機器５０には、携帯電話機能部５９が設けられている。携帯電話機能部５９は、例えば、電話機能、内蔵カメラ機能及びメール機能等を有しているが、本実施の形態において必須の機能ではない。

制御部５１の状況分析部５１ａは、機器通信部５２を介して制御対象機器の状態に関する情報を受信して制御対象機器の状況を分析することができる。対処判定部５１ｂは、ユーザ入力に基づくユーザ要求情報を取得すると共に、制御対象機器の状況の分析結果に応じて、記録部５７から制御対象機器を制御するために必要な情報を取得するか、又は、基地局通信部５８を介して情報源６１から制御対象機器を制御するために必要な情報を取得する。対処判定部５１ｂは、取得した情報に基づいて制御対象機器を制御するための制御情報を生成するようになっている。対処判定部５１ｂは、制御対象機器の制御情報を機器通信部５２を介して制御対象機器に送信することができるようになっている。

次に、このように構成された実施の形態の動作について図１１乃至図１３を参照して説明する。図１１は第２の実施の形態における制御を示すフローチャートである。図１１において図３と同一の手順には同一符号を付して説明を省略する。図１１のフローは、撮影機器１によるカメラ制御と、制御機器５０による制御機器制御を示しており、カメラ制御の制御フローと制御機器制御の制御フローとの間を結ぶ矢印は、処理によって通信が行われることを示している。また、図１２及び図１３は第２の実施の形態における画面表示の一例を示す説明図である。

いま、撮影機器１による被写体の撮影に先だって、ユーザがスマートフォン等の制御機器５０によって撮影機器１の設定を行うものとする。制御機器５０の制御部５１は、ステップＳ４１において、表示制御部５５を制御して表示部５６の表示画面５６ａ上に、モードを選択するためのモード表示７１を表示させる。

図１２はこのモード表示７１を示している。表示画面５６ａ上に表示されたモード表示７１には、電話モードを選択するボタン７１ａ、外部カメラモードを選択するボタン７１ｂ、内蔵カメラモードを選択するボタン７１ｃ及びメールモードを選択するボタン７１ｄが含まれる。図１２の例では、各ボタンを囲む枠が実線の場合に選択されているモードを示し、破線は非選択モードを示している。図１２の例は外部カメラモードが選択されていることを示している。

制御部５１は、操作部５４の出力によって、外部カメラモードが設定されたか否かを判定する（ステップＳ４２）。外部カメラモード以外のモードが設定されている場合には、制御部５１はステップＳ４３において選択されているモードに対応した機能を実現する。

制御部５１は、外部カメラモードが設定されている場合には、機器通信部５２を制御してカメラ通信を行う（ステップＳ４４）。一方、撮影機器１の制御部１１は、ステップＳ５１においてカメラ通信モードが指定されているか否かを判定する。カメラ通信モードが設定されている場合には、撮影機器１の制御部１１の通信制御部１１ｇは、通信部１９に制御機器５０の機器通信部５２との間で通信を行わせ、撮影機器１のカメラ状態を示す各種設定情報を送信させる。なお、この設定情報は、例えば、記録部４に記録されており、通信制御部１１ｇは、記録部４からカメラ状態の情報を読み出して、制御機器５０に送信する。

制御機器５０の制御部５１の状況分析部５１ａは、機器通信部５２を介してカメラ状態の情報を受信し、撮影機器１のカメラ状態を取得し、（ステップＳ４５）、ユーザによる要求の待機状態となる。いま、例えば、ユーザが水彩アートモードによる撮影を希望するものとする。この場合には、ユーザは、例えば、「水彩」と発話することによって要求を制御機器５０に入力する。制御機器５０の対処判定部５１ｂは、例えば携帯電話機能部５９によって、ユーザの発話に基づくユーザ要求情報を取得する。

対処判定部５１ｂは、次のステップＳ４７において、ユーザ要求情報に基づいて撮影機器１の設定のための操作方法を判定することができるか否かを判定する。例えば、対処判定部５１ｂは、記録部５７に撮影機器１の設定方法について保持されている情報に基づいて操作方法を判定することができか否かを判定する。対処判定部５１ｂは、判定不能の場合には、ネット検索によって操作方法の判定を行う（ステップＳ４８）。即ち、対処判定部５１ｂは、基地局通信部５８を介してネットワーク６０に接続して、情報源６１に保持されている情報を検索することで、ユーザ要求情報に対応した撮影機器１の操作方法を取得する。例えば、対処判定部５１ｂは、状況分析部５１ａによって撮影機器１の製造メーカを判定した場合には、当該製造メーカのＷｅｂサイト等にアクセスすることで、ユーザ要求情報に対応した操作方法を取得する。

対処判定部５１ｂは、ユーザ要求情報に対応した操作方法を取得すると、ステップＳ４９に移行して、表示制御部５５を制御して表示部５６の表示画面５６ａ上に操作ガイド表示を表示させる。なお、対処判定部５１ｂは、操作ガイド表示を表示するための情報についても、記録部５７又はネットワーク６０上の情報源６１から取得する。

図１３はこの場合の画面表示の例を示しており、表示画面５６ａ上には、撮影機器１のモードダイヤル２２に対応したダイヤル表示２２ｂとマーク２３に対応したマーク表示２３ｂとが表示されている。なお、ダイヤル表示２２ｂの状態はモードダイヤル２２の設定すべき状態を示している。即ち、図１３の例ではモードダイヤル２２をＡｒｔにて示すアートフィルタモードに設定すべであることを示している。

対処判定部５１ｂは、水彩アートモードの設定に必要な情報を制御情報として撮影機器１に送信する（ステップＳ５０）。なお、この制御情報中には、操作要求階層のモードに関する情報も含まれている。また、制御情報は、撮影機器１を制御する一連のコマンド及びパラメータ等によって構成される。

撮影機器１のモード・パラメータ設定部１１ｃは、ステップＳ５３において、制御機器５０の機器通信部５２及び通信部１９を介して制御情報を受信する。モード・パラメータ設定部１１ｃは、ステップＳ１０において、操作要求階層のモードを選択するモードダイヤル２２の状態変位操作が必要であるか否かを判定し、必要な場合には、ステップＳ１２において、ユーザがモードダイヤル２２を対応するモードに変更したか否かを判定する。なお、本実施の形態においては、制御機器５０において、操作ガイド表示を表示しており、撮影機器１側では操作ガイド表示を省略しているが、撮影機器１の表示部１６においても操作ガイド表示を表示させるようにしてもよい。また、制御機器５０における操作ガイド表示を省略して、撮影機器１の表示部１６のみにおいて操作ガイド表示を表示させるようにしてもよい。以後の操作は第１の実施の形態と同様である。

なお、図１１の例では、図３のステップＳ５〜Ｓ９，Ｓ１１に相当する処理を制御機器５０側で実施する例を説明したが、ステップＳ１４，Ｓ１５，Ｓ２０等の調整のための入力処理及びモード設定の記録処理等についても制御機器５０側で実施するようにしてもよい。

このように、本実施の形態においても、第１の実施の形態と同様の効果を得ることができる。また、本実施の形態においては、制御機器として、膨大な情報量を有するネットワーク上の情報源を利用した検索が可能な情報端末を採用することができ、ユーザの漠然とした要求から所望の操作を判定することが容易であり、より確実にユーザが希望する操作を行うことが可能である。

なお、上記実施の形態においては、図３及び図１１のステップＳ１２において、操作要求階層の選択を行う操作機構を実際に操作したか否かを判定するだけでなく、他の操作部の操作によって操作要求階層の指定されたモードに設定されたか否かを判定することが可能である。例えば、モードダイヤル２２がモータ等の駆動機構によって駆動可能な場合には、この駆動機構を制御するタッチパネル等の操作や音声入力によって、モードダイヤル２２の状態を変更することも可能である。例えば、ステップＳ１１，Ｓ４９の操作ガイド表示上に、現在のモードと設定すべきモードとを表示し、このガイド表示に対するスライド操作等によって、モードダイヤル２２を回転させるようにしてもよい。更に、このように操作要求階層の選択を行う操作機構を間接的に操作する場合には、次のモード設定前に元のモードに戻しておくようにしてもよい。

さらに、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。また、産業用の検査装置や医療用機器にも応用が可能であることは言うまでもない。

本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。

また、ここで説明した技術のうち、主にフローチャートで説明した制御に関しては、プログラムで設定可能であることが多く、記録媒体や記録部に収められる場合もある。この記録媒体、記録部への記録の仕方は、製品出荷時に記録してもよく、配布された記録媒体を利用してもよく、インターネットを介してダウンロードしたものでもよい。
［付記１］
ユーザ入力に基づくユーザ要求情報を取得する取得ステップと、
現在の機器設定状態を取得するステップと（Ｓ５２からの信号）、
上記ユーザ要求と上記機器設定状態の差異から、上記機器の部材変位操作を伴う操作ガイドを特定する特定ステップと、
上記特定結果を表示する表示ステップと、
を具備したことを特徴とする操作支援方法。

１…撮影機器、２…撮像部、４…記録部、１０…本体部、１１…制御部、１１ａ…撮影制御部、１１ｂ…画像処理部、１１ｃ…モード・パラメータ設定部、１１ｄ…要望取得部、１１ｅ…表示制御部、１１ｆ…操作判定部、１５…入力部、１６…表示部、１６ａ…タッチパネル、１７…データベース、１８…操作部、１８ａ…変位操作部、１９…通信部。

Claims (12)

1. ユーザ操作に従って状態変位して第１の階層のモードを選択する操作機構と、
   ユーザ入力に基づくユーザ要求情報を取得する取得部と、
   上記第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定すると共に、上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが上記操作機構によって選択された場合には、上記ユーザ指定モードを設定する制御部と、
   を具備したことを特徴とする操作支援装置。
2. 上記制御部は、上記ユーザ要求情報に基づく上記ユーザ指定モードを判定すると、上記ユーザ指定モードが属する上記第１の階層中のモードを選択させるためのガイド表示を表示させる
   ことを特徴とする請求項１に記載の操作支援装置。
3. 上記制御部は、上記ガイド表示として、上記操作機構の状態変位を示す画像を表示する
   ことを特徴とする請求項２に記載の操作支援装置。
4. 上記取得部は、上記ユーザの音声入力に基づいて上記ユーザ要求情報を取得する
   ことを特徴とする請求項１乃至３のいずれか１つに記載の操作支援装置。
5. 上記制御部は、上記ユーザ指定モード設定に際して、ユーザ入力に基づく設定値を設定する
   ことを特徴とする請求項１乃至４のいずれか１つに記載の操作支援装置。
6. 上記制御部は、ユーザに上記ユーザ入力に基づく設定値を設定させるための操作補助表示を表示させる
   ことを特徴とする請求項５に記載の操作支援装置。
7. ユーザ操作に従って状態変位して第１の階層のモードを選択する操作機構を有する制御対象機器と、
   ユーザ入力に基づくユーザ要求情報を取得する取得部と、上記第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定する判定部と、を有する制御機器と、
   上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが上記操作機構によって選択された場合には、上記ユーザ指定モードを設定する制御部と、
   を具備したことを特徴とする操作支援システム。
8. 上記判定部は、所定のネットワーク上の情報源を検索することで、上記ユーザ要求情報に基づくユーザ指定モードを判定する
   ことを特徴とする請求項７に記載の操作支援システム。
9. 上記制御部は、上記制御対象機器に設けられ、
   上記制御機器は、上記ユーザ指定モードを設定するための制御情報を上記制御部に送信する
   ことを特徴とする請求項７又は８に記載の操作支援システム。
10. 上記制御部は、上記ユーザ指定モードが属する上記第１の階層中のモードを選択させるためのガイド表示を表示させる
    ことを特徴とする請求項７乃至９のいずれか１つに記載の操作支援システム。
11. ユーザ入力に基づくユーザ要求情報を取得する取得ステップと、
    第１の階層よりも下位の階層のモードであって上記ユーザ要求情報に基づくユーザ指定モードを判定する判定ステップと、
    ユーザ操作に従って状態変位して上記第１の階層のモードを選択する操作機構によって、上記第１の階層の各モードのうち上記ユーザ指定モードが属するモードが選択された場合には、上記ユーザ指定モードを設定する制御ステップと、
    を具備したことを特徴とする操作支援方法。
12. 上記制御ステップでは、上記ユーザ要求情報に基づく上記ユーザ指定モードを判定すると、上記ユーザ指定モードが属する上記第１の階層中のモードを選択させるためのガイド表示を表示させる
    ことを特徴とする請求項１１に記載の操作支援方法。