JP5488584B2 - 画像処理装置及びプログラム - Google Patents

Description

本発明は、撮影された画像に対する画像処理を行う画像処理装置に関する。

従来、台上に載置した各種ドキュメントの画像を撮影して画像信号化し、外部接続したプロジェクタ装置等へ出力することで、ドキュメント画像を拡大して表示させることが可能な書画カメラ装置が各種製品化されている。

この種の書画カメラ装置では、例えばカメラ部をスタンド部と着脱自在な構成とし、カメラ部単独でも携帯して使用可能とすることで、使用範囲を広げ、使い勝手に優れたものとするなど、各種の技術が考えられている。（例えば、特許文献１）

特開２００５−１４３０９１号公報

しかるに、上記特許文献１に記載された技術も含め、書画カメラ装置本来の使用環境下では、書画台上に載置したドキュメントの画像を撮影して得た画像データを出力する。その際の技術として、例えば撮影画像中のドキュメントの矩形範囲を抽出することで、書画台上に斜めに載置されたドキュメント画像を正しい向きの画像にして出力する斜め補正処理、カメラ撮影光軸に対するドキュメント画像の位置の離間により本来は矩形であるドキュメント画像が台形状に撮影されてしまうのを元の矩形画像に変形する台形補正処理、など、各種の補正処理を行なうことが考えられている。

また、撮影系のズーム倍率を可変することでドキュメント画像の一部を拡大した画像データを出力させることも考えられるが、その場合、光学的にズーム倍率を可変するものとすれば、撮影光軸を中心とした位置のみの拡大に限られ、撮影光軸から外れたドキュメント画像の端部を拡大させることはできない。

一方、デジタル的な画像処理によるズームの場合には、拡大位置が限定されることなく、ドキュメント画像の任意の位置を拡大させることが可能となるが、その場合には拡大する位置をユーザが何らかのキー操作により指示しなければならず、特にこの種の機器が多用されるプレゼンテーション等の環境下では操作が煩雑なものと考えられることも多い。

請求項１記載の発明は、カメラ部で撮影される撮影画像を逐次出力すると共に、その出力される撮影画像に対する画像処理を行う画像処理装置であって、所定被写体を含む上記撮影画像内におけるユーザによる任意の指示操作を、その撮影画像内の画像走査により検出する検出手段と、上記検出手段で検出された上記撮影画像内での上記指示操作の指示位置が、上記撮影画像内における上記所定被写体の位置か否かを判別する判別手段と、上記指示位置が上記撮影画像内の所定被写体の位置であると判別されたことを条件に、当該被写体を撮影した撮影画像を上記指示操作時のジェスチャ指示動作の種類に対応する種類の画像処理を行って出力する出力制御手段と、を具備したことを特徴とする。

請求項１記載の発明は、撮影された画像に対する画像処理を行う画像処理装置であって、被写体を含む撮影画像内におけるユーザによる任意の指示操作を検出する検出手段と、上記検出手段で上記任意の指示操作を検出した際は、上記検出手段で検出された指示操作の指示位置が、上記撮影画像内における上記被写体の位置か否かを判別する判別手段と、上記判別手段で上記被写体の位置であると判別された場合には、その指示操作時の指示動作内容が所定のジェスチャ指示動作による操作内容であれば、その指示された位置の被写体の画像を、当該指示された位置を基準として、上記ジェスチャ指示動作の種類に対応する種類の画像処理を行って出力する出力制御手段と、を具備したことを特徴とする。

本発明によれば、被写体を含む撮影画像内における指示位置がその被写体の位置か否かに基づいて、その被写体の画像に対する画像処理を自動的に行うようにすることができる。

本発明の一実施形態に係る書画カメラ装置をプロジェクタ装置と接続した投影システムの構成を示す図。 同実施形態に係る書画カメラ装置の書画台の構成を示す平面図。 同実施形態に係る書画カメラ装置の機能回路構成を示すブロック図。 同実施形態に係るプロジェクタ装置の機能回路構成を示すブロック図。 同実施形態に係る書画カメラ装置側でドキュメント画像取得時に実行する処理内容を示すフローチャート。 同実施形態に係る書画台上のドキュメント画像をポイントした状態とそれに対応して変更される投影内容とを例示する図。 同実施形態に係る書画台上のドキュメント画像をポイントした状態とそれに対応して変更される投影内容とを例示する図。 同実施形態に係る書画台上のドキュメント画像をポイントした状態とそれに対応して変更される投影内容とを例示する図。

以下本発明を書画カメラ装置に適用した場合の一実施形態について図面を参照して説明する。
図１は、本実施形態に係る書画カメラ装置１をプロジェクタ装置２と接続したプレゼンテーションシステムの外観構成を示すものである。同図に示す如く、書画カメラ装置１とプロジェクタ装置２とは、例えばＵＳＢケーブル３で接続される。書画カメラ装置１は、書画台１ａ、スタンド部１ｂ、及びカメラ部１ｃを組み合わせて構成される。

書画台１ａは、例えばヒンジを介して接続された３枚の折りたたみ式の薄板状部材（合成樹脂板）からなり、その中央の合成樹脂板の端部からスタンド部１ｂが直立する。スタンド部１ｂの上部には回動アーム部１ｄが延在され、この回動アーム部１ｄの先端にカメラ部１ｃが上記書画台１ａと平行となるように回動自在に配置される。

カメラ部１ｃは、図示する如く撮影レンズ１ｅが下方に向けて配置され、書画台１ａ上に載置された各種ドキュメントの画像を書画台１ａを含めて撮影することとなる。その撮影により取得された画像データが、適宜加工された後に上記ＵＳＢケーブル３を介してプロジェクタ装置２へ出力され、プロジェクタ装置２で投影出力される。

図２は、上記書画台１ａのみを抽出して示す平面図である。上述した如く折りたたみ式の書画台１ａを展開した状態で、ユーザは任意のドキュメント用紙をこの書画台１ａ上に載置することで、上記カメラ部１ｃによりドキュメント用紙を含んだ書画台１ａ上の全域を撮影し、その画像データを適宜補正して書画カメラ装置１と接続した外部機器、例えば上記プロジェクタ装置２へ出力することができる。

図示する如く書画台１ａの上下左右各端部には、リターンマークＲＭが付加配設される。これらスクロールマークＳＭａ〜ＳＭｄは、各方向へのスクロール方向を示す三角形を配したものとなっている。

加えて、書画台１ａの右下端部には、リターンマークＲＭが付加配設される。このリターンマークＲＭは、左方向の矢印とアルファベット「Ｒ」を配したものとなっている。

上記スクロールマークＳＭａ〜ＳＭｄ及びリターンマークＲＭはいずれも、樹脂製の書画台１ａ上に透明地の粘着シールを貼付して構成しても良いし、あるいは凹凸を有するものとして樹脂製の書画台１ａをモールド製造する際に一体的に凹部がパターン形成された後、凹部に塗料が塗布されるものとしてもよい。

次に書画カメラ装置１の概略機能構成について図３を用いて説明する。
図３は、同実施の形態に係る書画カメラ装置１全体の電子回路の概念構成を示すものである。
図中、モータ（Ｍ）２１の駆動により、カメラ部１ｃの下面側に取付けられた撮影レンズ１ｅ中の一部のレンズ、具体的にはズームレンズ及びフォーカスレンズの位置が適宜移動される。この撮影レンズ１ｅの撮影光軸後方の結像位置に、図示しないメカニカルシャッタを介して、固体撮像素子であるＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ：電荷結合素子）２３が配置される。

ＣＣＤ２３は、タイミング信号発生器（ＴＧ）２４、ＣＣＤドライバ（Ｄｖ．）２５によって走査駆動され、一定周期毎に結像した光像に対応する光電変換出力を１画面分出力する。

この光電変換出力は、サンプルホールド（Ｓ／Ｈ）回路２６において、アナログ値の信号の状態でＲＧＢの各原色成分毎にその時点に設定されているＩＳＯ感度に応じてＡＧＣ（自動ゲイン調整）された後にサンプルホールドされ、Ａ／Ｄ変換器２７に送られる。

Ａ／Ｄ変換器２７では、アナログの画像データをデジタルデータに変換し、カラープロセス回路２８へ出力する。

カラープロセス回路２８は、デジタルの画像データに対して画素補間処理及びγ補正処理を含むカラープロセス処理を行ない、マトリックス変換によりデジタル値の輝度色差系の画像データＹＵＶを生成した後にバッファコントローラ２９に出力する。

バッファコントローラ２９は、カラープロセス回路２８の出力する画像データＹＵＶを、同じくカラープロセス回路２８からの複合同期信号、メモリ書込みイネーブル信号、及びクロック信号を用いて一度バッファコントローラ２９内部に書込んだ後、バッファメモリとして使用されるＤＲＡＭ３０にＤＭＡ転送を行なう。

このＤＲＡＭ３０は、上記撮影により得た画像データを保持する領域と、後述する外部出力する画像データを保持する領域の少なくとも２枚分の画像データを保持するだけの記憶容量を有するものとする。

制御部３１は、ＣＰＵで構成され、ワークメモリとして使用されるメインメモリ３２、動作プログラムやデータ等を固定的に記憶した不揮発性メモリでなるプログラムメモリ３３とシステムバスＳＢ１を介して接続されるもので、プログラムメモリ３３から必要なプログラム等を読出し、該メインメモリ３２に適宜必要なプログラムやデータを一時的に展開して書込みながら、この書画カメラ装置１全体の制御動作を司る。

しかして制御部３１は、上記画像データのＤＲＡＭ３０へのＤＭＡ転送終了後に、この画像データをバッファコントローラ２９を介してＤＲＡＭ３０より読出し、表示制御部３４を介してＶＲＡＭ３５に書込む。

表示制御部３４は、上記画像データをＶＲＡＭ３５より定期的に読出して表示部３６に出力する。

この表示部３６は、バックライト付きのカラー液晶パネルとその駆動回路とで構成される。この表示部３６は、上記カメラ部１ｃの上面側に配置され、この書画カメラ装置１を外部機器に接続していない状態でも撮影内容を視認できるビューファインダとして機能するもので、表示制御部３４からの画像データ等に基づいた表示を行なうことで、その時点で上記ＣＣＤ２３から取込んでいる画像等をリアルタイムにモニタ表示する。

一方で、制御部３１は、ＤＲＡＭ３０に保持される出力用の画像データをバッファコントローラ２９により読出させ、ＵＳＢインタフェース（Ｉ／Ｆ）３７へ出力する。ＵＳＢインタフェース３７は、ＵＳＢ２．０規格に則って外部機器の間で画像データを含む各種データの送受を行なうもので、上記ＵＳＢケーブル３を介して画像データをアイソクロナス転送により外部機器へ出力する。

なお、上記ＵＳＢケーブル３は電源ケーブルを兼ねており、ＵＳＢケーブル３を構成する複数の線中で、ＵＳＢ規格で規定されている電力線が電源制御部３８と接続される。電源制御部３８は、ＵＳＢケーブル３から供給される直流５．０［Ｖ］の電力を元に各種電圧、例えば１．５［Ｖ］、３．３［Ｖ］の電力を生成し、他の各回路に必要な動作電圧を印加する。

また、上記システムバスＳＢ１にはさらに、補助光駆動部３９、画像処理部４０、及びメモリカード４１が接続される。
補助光駆動部３９は、制御部３１の制御の下に、複数の高輝度白色ＬＥＤ４２を同時に発光駆動し、書画台１１上に載置されたドキュメント用紙を照明する。

画像処理部４０は、後述する画像認識処理、斜め補正処理等の画像処理を行なう他、制御部３１の制御に基づいてＤＲＡＭ３０に保持される画像データを所定の規格、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈ ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）に則ってデータ圧縮する。

メモリカード４１は、この書画カメラ装置１のカメラ部１ｃに着脱自在に装着されるもので、上記画像処理部４０でデータ圧縮された画像データ等を記録する。

なお、書画カメラ装置１のカメラ部１及びスタンド部１ｂに設けられる各種キースイッチを含んでキー入力部４３が構成され、このキー入力部４３でのキー操作信号が直接制御部３１へ送出されるもので、制御部３１はこのキー入力部４３からのキー操作信号に応じた制御動作を実行する。

なお、上記プロジェクタ装置２の概略機能構成についても図４を用いて説明しておく。
図４は、同実施の形態に係る書画カメラ装置１全体の電子回路の概念構成を示すものである。同図で、５１は入出力コネクタ部であり、例えばピンジャック（ＲＣＡ）タイプのビデオ入力端子、ＲＧＢ入力端子、及びＵＳＢ端子からなる。

入出力コネクタ部５１より入力される各種規格の画像信号は、入出力インタフェース（Ｉ／Ｆ）５２、システムバスＳＢ２を介して画像変換部５３で投影に適した所定のフォーマットの画像信号に統一された後に、投影駆動部５４へ送られる。

この際、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）用の各種キャラクタやポインタ等の記号も必要に応じて画像信号上に重畳加工された状態で投影駆動部５４へ送られる。

投影駆動部５４は、送られてきた画像信号をビデオＲＡＭ５５に展開して記憶させた上で、このビデオＲＡＭ５５の記憶内容からビデオ信号を生成する。投影駆動部５４は、このビデオ信号のフレームレート、例えば６０［フレーム／秒］と色成分の分割数、及び表示階調数を乗算した、より高速な時分割駆動により、空間的光変調素子（ＳＯＭ）であるマイクロミラー素子５６を表示駆動する。

一方、リフレクタ５７内に配置された、例えば超高圧水銀灯を用いた光源ランプ５８が高輝度の白色光を出射する。光源ランプ５８の出射した白色光は、カラーホイール５９を介して時分割で原色に着色され、インテグレータ６０で輝度分布が均一な光束とされた後にミラー６１で全反射して上記マイクロミラー素子５６に照射される。

そして、マイクロミラー素子５６での反射光で光像が形成され、形成された光像が光学レンズユニット６２を介して、投影対象となるここでは図示しないスクリーンに投影表示される。

光学レンズユニット６２は、マイクロミラー素子５６で形成された光像を拡大してスクリーン等の対象に投影するものであり、合焦位置及びズーム位置（投影画角）を任意に可変できるものとする。

すなわち、光学レンズユニット６２中の図示しないフォーカスレンズ及びズームレンズは共に光軸方向に沿って前後に移動することで制御されるもので、それらレンズはステッピングモータ（Ｍ）６３の回動駆動により移動する。

なお、上記カラーホイール５９の終端部に対向するようにマーカセンサ６４が近接配置され、このマーカセンサ６４がカラーホイール５９に設けられた図示しないマーカの通過を検出して検出信号を上記投影駆動部５４へ送出する。

投影駆動部５４は、マーカセンサ６４からの検出信号によりマイクロミラー素子５６での駆動タイミングを調整する。

また、上記光源ランプ５８の点灯駆動、上記カラーホイール５９用のモータ（Ｍ）６５の回転駆動、及び上記ステッピングモータ６３の回動駆動をいずれも投影光処理部６６が実行する。

上記各回路の動作すべてをＣＰＵ６７が制御する。このＣＰＵ６７は、動作プログラムや各種定型データ等を記憶した不揮発性メモリでなるプログラムメモリ６８、ＲＡＭでなるメインメモリ６９を用いてこのプロジェクタ装置２内の制御動作を実行する。

上記ＣＰＵ６７にはさらに、上記システムバスＳＢ２を介してキースイッチ部７０、インジケータ部７１、及び音声処理部７２が接続される。

キースイッチ部７０は、電源キー、モード切換キー、キャンセルキー、フォーカスキー、ズームキー、カーソル（「↑」「↓」「←」「→」）キー、エンターキー等からなる。

これらキースイッチ部７０の各キーを用いてユーザが任意の操作を行なうと、そのキー操作に応じた操作信号がＣＰＵ６７へ入力され、ＣＰＵ６７はキースイッチ部７０からの入力に応じて制御動作を実行する。

インジケータ部７１は、例えば複数個のＬＥＤで構成され、各種動作状態等を点灯色と点滅パターンの組合せにより表示する。

音声処理部７２は、ＰＣＭ音源等の音源回路を備え、投影動作時に与えられる音声データをアナログ化し、このプロジェクタ装置２の本体ケーシングの例えば背面に設けられるスピーカ７３を駆動して拡声放音させ、あるいは必要によりビープ音等を発生させる。

次に上記実施形態の動作について説明する。
以下に示す動作は、いずれも制御部３１がプログラムメモリ３３に記憶された動作プログラムを読出して実行することにより制御される。

書画カメラ装置１では、書画台１ａ上を常時撮影してその画像データを上記バッファメモリであるＤＲＡＭ３０に保持する。制御部３１は、このＤＲＡＭ３０に保持している、撮影により得た画像データ中から、画像処理部４０により書画台１ａに載置されているドキュメント画像の矩形領域を抽出させ、抽出した当該矩形領域の画像データを同じくＤＲＡＭ３０に出力用の画像データとして保持させた上でＵＳＢインタフェース３７よりプロジェクタ装置２に向けて出力させる。

このとき平行して制御部３１が画像処理部４０を用いて実行する、ＤＲＡＭ３０に保持した撮影により得た画像データに対する処理の内容を図５で示す。
図５では、その当初に画像データ中の書画台１ａの範囲内でレーザ光によるポイント部分があるか否かを、画像データ全体を走査して著しく輝度レベルが高いスポット領域部分があるか否かにより判断する（ステップＳ１０１）。

これは、この書画カメラ装置１及びプロジェクタ装置２のユーザが書画台１ａ上に載置されたドキュメント用紙ＤＰ、またはドキュメント用紙ＤＰを外れた書画台１ａ上の上記スクロールマークＳＭａ〜ＳＭｄ、リターンマークＲＭをレーザポインタＬＰによりポイント指示しているか否かを判断するためのものである。

ここでレーザ光によるポイント部分がないと判断した場合には、再びこのステップＳ１０１の処理に戻り、以後繰返してこのステップＳ１０１の処理を実行することで、レーザ光によるポイントがなされるのを待機する。

しかして、レーザ光によるポイント部分があった場合、ステップＳ１０１でこれを判断し、次にそのポイント部分の位置が書画台１ａ上に載置されたドキュメント用紙ＤＰの矩形範囲内であるか否かを判断する（ステップＳ１０２）。

ここで、レーザ光によるポイント部分の位置が書画台１ａ上に載置されたドキュメント用紙ＤＰの矩形範囲内ではなく、同範囲外であると判断した場合には、続いてポイント部分の位置が４つのスクロールマークＳＭａ〜ＳＭｄのいずれかであるか否かを判断する（ステップＳ１０３）。

ここで、レーザ光によるポイント部分の位置がスクロールマークＳＭａ〜ＳＭｄのいずれでもないと判断すると、続いてポイント部分の位置がリターンマークＲＭであるか否かを判断する（ステップＳ１０４）。

こうして、レーザ光によるポイントの位置がドキュメント用紙ＤＰの矩形範囲内、スクロールマークＳＭａ〜ＳＭｄ、及びリターンマークＲＭのいずれであるかを順次判断していくもので、そのいずれでもないと判断した場合には、そのレーザ光によるポイントは無効であるものとして特に何の処理も行なわずに、再び上記ステップＳ１０１からの処理に戻って、次にレーザ光によるポイントがあるまで待機する。

しかして、レーザ光によるポイントの位置がドキュメント用紙ＤＰの矩形範囲内であった場合、上記ステップＳ１０２でこれを判断し、ポイントされた位置を中心として所定倍率での拡大画像データを作成する（ステップＳ１０５）。

図６（Ａ）は、書画台１ａ上に載置されたドキュメント用紙ＤＰの矩形範囲内を、レーザポインタＬＰによりポイントしている状態を例示している。同図（Ａ）では、ドキュメント用紙ＤＰの中央よりやや下方の位置Ｐ１をレーザポインタＬＰにてポイントしており、当該位置Ｐ１を中心として所定の倍率、例えば４倍に拡大した画像データを作成する。

そして、この作成した拡大画像データを用いてＤＲＡＭ３０の出力用画像データを書換えた後（ステップＳ１０６）、上記ステップＳ１０１からの処理に戻ることで、プロジェクタ装置２では拡大した画像の投影が実行される。
図６（Ｂ）は、上記図６（Ａ）でのポイント位置Ｐ１を中心とした拡大画像をスクリーンＳＣ上に投影している状態を例示するものである。

また、レーザ光によるポイントの位置が４つのスクロールマークＳＭａ〜ＳＭｄのいずれかであった場合、上記ステップＳ１０３でこれを判断する。

この場合、スクロールマークＳＭａ〜ＳＭｄはいずれも拡大画像を表示している場合にのみその指示が有効であるものとし、まずその時点で拡大画像データを出力中であることを確認した後に（ステップＳ１０７）、ポイントされた位置のスクロールマークＳＭａ〜ＳＭｄの方向に基づいて隣接した範囲での拡大画像データを作成する（ステップＳ１０８）。

図７（Ａ）は、上記図６（Ｂ）で説明した拡大画像の出力状態から、書画台１ａの上方向へのスクロールを示すスクロールマークＳＭａをレーザポインタＬＰによりポイントしている状態を例示している。この図７（Ａ）では、スクロールマークＳＭａに該当する位置Ｐ２をレーザポインタＬＰにてポイントしており、上記ステップＳ１０５で作成した拡大画像データに隣接する上側の拡大画像データを作成する。

そして、この作成した拡大画像データを用いてＤＲＡＭ３０の出力用画像データを書換えた後（ステップＳ１０９）、上記ステップＳ１０１からの処理に戻ることで、プロジェクタ装置２では上側にスクロールした拡大した画像の投影が実行される。
図７（Ｂ）は、上記図７（Ａ）でのスクロールマークＳＭａ上のポイント位置Ｐ２をポイントしたことにより、上記図６（Ｂ）に示した拡大画像を上側にスクロールした投影状態を例示するものである。

また、レーザ光によるポイントの位置がリターンマークＲＭであった場合、上記ステップＳ１０４でこれを判断する。

この場合、リターンマークＲＭは拡大画像を表示している場合にのみその指示が有効であるものとし、まずその時点で拡大画像データを出力中であることを確認した後に（ステップＳ１１０）、書画台１ａ上に載置されたドキュメント用紙ＤＰの矩形領域全面の画像データを作成する（ステップＳ１１１）。

図８（Ａ）は、上記図６（Ｂ）または図７（Ｂ）で説明した拡大画像の出力状態から、リターンマークＲＭをレーザポインタＬＰによりポイントしている状態を例示している。この図８（Ａ）では、リターンマークＲＭに該当する位置Ｐ３をレーザポインタＬＰにてポイントしているため、元のドキュメント用紙ＤＰの矩形領域全面に渡った画像データを再度作成する。

そして、この作成した画像データを用いてＤＲＡＭ３０の出力用画像データを書換えた後（ステップＳ１１２）、上記ステップＳ１０１からの処理に戻ることで、プロジェクタ装置２では元のドキュメント用紙ＤＰ全面に渡った画像の投影状態に復帰する。
図８（Ｂ）は、上記図８（Ａ）でのリターンマークＲＭ上のポイント位置Ｐ３をポイントしたことにより、元のドキュメント用紙ＤＰの矩形領域全面に渡った画像の投影状態に復帰した様子を例示するものである。

このように本実施形態によれば、書画台１ａ上で位置指定に基づき、指定された位置に対応した所定の処理を施して画像データを出力するものとしたため、ユーザにとってはより簡易で直感的な理解し易い取扱いとしながら、ドキュメントの画像を適宜加工して出力することが可能となる。

特に上記実施形態では、書画台１ａ上に載置したドキュメント用紙ＤＰの範囲内の任意の位置を指定することにより、当該位置を中心とした拡大画像を即時作成して出力するものとした。これにより、例えばこの書画カメラ装置１のユーザがプレゼンテーションを行なっている場合に、レーザポインタＬＰを用いて書画台１ａ上に載置したドキュメント用紙ＤＰ内の強調したい部分近傍をポイントすることで、即時当該部分の画像がプロジェクタ装置２により拡大して投影させるなど、ユーザにとっての使い勝手をより向上することができる。

また上記実施形態では、書画台１ａの上下左右各端部にスクロールマークＳＭａ〜ＳＭｄを設け、ドキュメント用紙ＤＰを外れた位置にあるこれらスクロールマークＳＭａ〜ＳＭｄを選択的に指定することにより、上記拡大画像に隣接する拡大画像を変わって出力させる、疑似的なスクロールを簡易に実行できるものとしたので、上記ドキュメント用紙ＤＰ中の任意位置を拡大する機能と組み合わせて、ユーザにとっての使い勝手をより向上することができる。

さらに上記実施形態では、書画台１ａの一端部にリターンマークＲＭを設け、ドキュメント用紙ＤＰを外れた位置にあるこのリターンマークＲＭを指定することにより、上記拡大画像の表示状態を即時解除して元のドキュメント用紙ＤＰの矩形領域全面の画像データを出力するものとしたので、上記ドキュメント用紙ＤＰ中の任意位置を拡大する機能と組み合わせて、ユーザにとっての使い勝手をより向上することができる。

なお、上記実施形態では、書画台１ａの任意の位置をレーザポインタＬＰによりポイントし、そのポイント位置を書画台１ａを撮影した画像データ中を走査することで書画台１ａでの位置指定を行なうものとした。これにより、プレゼンテーション等できわめて一般的に使用されるレーザポインタを有効な位置指定手段としても活用することができると共に、画像データ中からポイント位置を検出する方法として、周囲の画像データと比較して著しく輝度レベルの高いスポット光領域を画像データを走査する過程で検出することができるため、きわめて容易且つ正確な位置検出を行なうことができる。

しかしながら、本発明は書画台上の位置指定をする手段としてレーザ光によるスポット位置の指定を行なうものに限ることなく、例えば先端が鮮鋭な指示棒やペン類等の指示部材、あるいは手指での位置指定をドキュメント用紙ＤＰあるいは書画台１ａ上で行なうことで、撮影により得た画像データの時系列上の変化により画像処理によって上記支持部材あるいは手指の先端部分を検出することで位置検出を行なうものとしてもよいし、または書画台１ａ全面を感圧タブレットで構成し、該感圧タブレット上に載置したドキュメント用紙あるいは載置していない部位の押圧操作を位置検出するものとしてもよい。

また、上記実施形態では、画像の拡大を所定の倍率で行なうものとして説明したが、一律に拡大倍率を設定してしまうのではなく、実用頻度の高い倍率情報をいくつか保持しておいてそれらのうちのいずれかをユーザが選択できるものとしてもよいし、あるいは、位置指定手段であるレーザポインタで１箇所をポイントした場合には第１の倍率、例えば２倍、円を描くようにポイントした場合には第２の倍率、例えば４倍、というようにポイントの仕方によって倍率を異ならせるものとしてもよい。

さらに、上記実施形態で用いたスクロールマークＳＭａ〜ＳＭｄやリターンマークＲＭとは別に、拡大倍率のアップ／ダウンを指示するようなマークを書画台１ａ上に付加し、そのマークが指示された場合には段階的に拡大倍率を増加／減少させるものとしてもよい。

さらに、上記実施形態では拡大画像を表示している場合に、ポイントされた位置のスクロールマークＳＭａ〜ＳＭｄの方向に基づいて隣接した範囲での拡大画像データを作成するようにしたが、スクロールマークＳＭａ〜ＳＭｄがなくても、ドキュメント用紙ＤＰの上下左右の部分などスクロールしたい方向の部分をレーザポインタでポイントすることでスクロールするようにしてもよい。

その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件により適宜の組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。

１…書画カメラ装置、１ａ…書画台、１ｂ…スタンド部、１ｃ…カメラ部、１ｄ…回動アーム部、１ｅ…撮影レンズ、２…プロジェクタ装置、３…ＵＳＢケーブル、２１…モータ（Ｍ）、２３…ＣＣＤ、２４…タイミング信号発生器（ＴＧ）、２５…ＣＣＤドライバ（Ｄｖ．）、２６…サンプルホールド回路（Ｓ／Ｈ）、２７…Ａ／Ｄ変換器、２８…カラープロセス回路、２９…バッファコントローラ、３０…ＤＲＡＭ、３１…制御部、３２…メインメモリ、３３…プログラムメモリ、３４…表示制御部、３５…ＶＲＡＭ、３６…表示部、３７…ＵＳＢインタフェース（Ｉ／Ｆ）、３８…電源制御部、３９…補助光駆動部、４０…画像処理部、４１…メモリカード、４２…高輝度白色ＬＥＤ、４３…キー入力部、５１…入出力コネクタ部、５２…入出力インタフェース（Ｉ／Ｆ）、５３…画像変換部、５４…投影駆動部、５５…ビデオＲＡＭ、５６…マイクロミラー素子（ＳＯＭ）、５７…リフレクタ、５８…光源ランプ、５９…カラーホイール、６０…インテグレータ、６１…ミラー、６２…光学レンズユニット、６３…ステッピングモータ（Ｍ）、６４…マーカセンサ、６５…モータ（Ｍ）、６６…投影光処理部、６７…ＣＰＵ、６８…プログラムメモリ、６９…メインメモリ、７０…キースイッチ部、７１…インジケータ部、７２…音声処理部、７３…スピーカ、ＤＰ…ドキュメント用紙、ＬＰ…レーザポインタ、Ｐ１〜Ｐ３…ポイント位置、ＲＭ…リターンマーク、ＳＢ１，ＳＢ２…システムバス、ＳＣ…スクリーン、ＳＭａ〜ＳＭｄ…スクロールマーク。

Claims (7)

1. カメラ部で撮影される撮影画像を逐次出力すると共に、その出力される撮影画像に対する画像処理を行う画像処理装置であって、
   所定被写体を含む上記撮影画像内におけるユーザによる任意の指示操作を、その撮影画像内の画像走査により検出する検出手段と、
   上記検出手段で検出された上記撮影画像内での上記指示操作の指示位置が、上記撮影画像内における上記所定被写体の位置か否かを判別する判別手段と、
   上記指示位置が上記撮影画像内の所定被写体の位置であると判別されたことを条件に、当該被写体を撮影した撮影画像を上記指示操作時のジェスチャ指示動作の種類に対応する種類の画像処理を行って出力する出力制御手段と、
   を具備したことを特徴とする画像処理装置。
2. 上記判別手段で上記所定被写体の位置ではないと判別された場合には、その時点における上記撮影画像の出力状態が上記画像処理された後の撮影画像の出力状態にあるか否かを判別し、上記画像処処理された後の撮影画像であると判別された場合には、その出力された上記撮影画像に対してスクロール処理して出力する第２出力制御手段と、ことを特徴とする請求項１に記載の画像処理装置。
3. 上記第２出力制御手段は、上記スクロール処理する際は、上記所定被写体の位置を基準にした場合の指示位置の方向に応じて、その方向にスクロール処理する、
   ことを特徴とする請求項１または２に記載の画像処理装置。
4. 上記第２出力制御手段は、上記判別手段で上記所定被写体の位置ではないと判別され、上記撮影画像の出力状態が上記画像処理された後の画像の出力状態にないと判別された場合には、当該指示操作を無効として処理する、
   ことを特徴とする請求項２〜３の何れか１項に記載の画像処理装置。
5. 上記ジェスチャ指示動作の種類は、上記所定被写体の１点位置を指示するジェスチャ指示操作の種類、あるいは上記所定被写体に対する描くジェスチャ指示操作の種類である、
   ことを特徴とする請求項１〜４の何れか１項に記載の画像処理装置。
6. 上記画像処理は、上記所定被写体の画像の内で上記指示された位置の部分画像を画像拡大する画像拡大処理であり、
   上記第１出力制御手段は、上記ジェスチャ指示動作の種類に応じて、その拡大倍率を決定して上記画像拡大処理を行う、
   ことを特徴とする請求項１〜５の何れか１項に記載の画像処理装置。
7. カメラ部で撮影される撮影画像を逐次出力すると共に、その出力される撮影画像に対する画像処理を行う画像処理装置のコンピュータを制御するためのプログラムであって、
   前記コンピュータを、
   所定被写体を含む上記撮影画像内におけるユーザによる任意の指示操作を、その撮影画像内の画像走査により検出する検出手段、
   上記検出手段で検出された上記撮影画像内での上記指示操作の指示位置が、上記撮影画像内における上記所定被写体の位置か否かを判別する判別手段、
   上記指示位置が上記撮影画像内の所定被写体の位置であると判別されたことを条件に、当該被写体を撮影した撮影画像を上記指示操作時のジェスチャ指示動作の種類に対応する種類の画像処理を行って出力する出力制御手段、
   として機能させるようにしたコンピュータ読み取り可能なプログラム。

Images