JP2010081504A - 画像処理装置、画像処理システム、情報処理システム及び画像処理装置の制御プログラム - Google Patents

Abstract

【課題】撮像された画像に明度の低い領域がある場合でも、当該領域に投影される注釈画像が鮮明になる画像処理装置、情報処理システム及び情報処理システムの制御プログラムを提供する。
【解決手段】画像処理装置の検出部は撮像装置が撮像した、対象物を表す撮像画像の画素に基づき、撮像画像の明度を検出する。画像修正部は、背景画像が投影された場合に、撮像装置が撮像する撮像画像において対象物の注釈画像が映らない領域と重なる背景画像の領域の明度を高く修正する。投影制御部は端末装置から受信した注釈画像と修正された背景画像とを対象物に投影するように投影装置を制御する。
【選択図】図８

Description

本発明は、画像処理装置、画像処理システム、情報処理システム及び画像処理装置の制御プログラムに関する。

ビデオカメラ等の撮像装置及びプロジェクタ等の投影装置に接続されているサーバと、例えばインターネット等のネットワークを介してサーバに接続されているクライアントとを備える遠隔指示システムが利用されている（例えば特許文献１及び２参照）。

特許文献１には、ビデオカメラが対象物を撮像し、撮像された画像をサーバからクライアントへ送信し、クライアントで記入されたアノテーション（注釈）画像をサーバへ送信し、プロジェクタで投影する技術が開示されている。特許文献２には、少なくともマーカ（注釈画像）が投影されていない期間において、プロジェクタが撮像範囲に照明光を照射する技術が開示されている。
特開２００５−３３７５６号公報 特開２００７−２０６６１９号公報

本発明は、撮像された画像に明度の低い領域がある場合でも、当該領域に投影される注釈画像が鮮明になる画像処理装置、情報処理システム及び情報処理システムの制御プログラムを提供することを目的とする。

請求項１の画像処理装置は、対象物を注釈する注釈画像の受信及び前記注釈画像と前記注釈画像の背景となる背景画像とが投影された前記対象物を撮像する撮像装置から取得した前記対象物を表す撮像画像の送信を端末装置との間で行う通信手段と、前記撮像画像の画素に基づき、前記撮像画像の明度を検出する検出手段と、前記検出手段で検出された明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段と、前記通信手段で受信した前記注釈画像と前記画像修正手段で修正した前記背景画像とを前記対象物に投影するように投影装置を制御する投影制御手段と、を具備することを特徴とする。

請求項２の画像処理装置は、前記画像修正手段が、前記検出手段で検出された明度があらかじめ定められた閾値以下である前記対象物の領域と重なる前記背景画像の領域の明度を高く修正することを特徴とする。

請求項３の画像処理装置は、前記修正された背景画像の前記対象物の領域に投影される領域の明度が前記注釈画像の明度より高いことを特徴とする。

請求項４の画像処理装置は、前記修正された背景画像の前記対象物の領域に投影される領域の色彩が、前記注釈画像の色彩と異なる色彩であることを特徴とする。

請求項５の画像処理装置は、前記修正された背景画像の前記対象物の領域に投影される領域の色彩が前記注釈画像の色彩の補色であることを特徴とする。

請求項６の画像処理装置は、前記検出手段で検出された明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域を前記撮像画像から抽出する抽出手段をさらに備え、前記画像修正手段は前記抽出手段で抽出された前記対象物の領域と重なる前記投影される背景画像の領域を明度高く修正することを特徴とする。

請求項７の画像処理システムは、対象物を注釈する注釈画像と前記注釈画像の背景となる背景画像とを前記対象物に投影する投影装置と、前記投影装置が前記注釈画像と前記背景画像とを投影した前記対象物を撮像する撮像装置と、前記撮像装置が撮像した前記対象物を表す撮像画像の画素から検出した明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段を有する画像処理装置と、を具備することを特徴とする。

請求項８の情報処理システムは、対象物を注釈する注釈画像と前記注釈画像の背景となる背景画像とを前記対象物に投影する投影装置と、前記投影装置が前記注釈画像と前記背景画像とを投影した前記対象物を撮像する撮像装置と、前記撮像装置が撮像した前記対象物を表す撮像画像の画素から検出した明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段を有する画像処理装置と、前記画像処理装置に送信する前記注釈画像を生成するとともに、前記画像処理装置から受信した前記注釈画像と前記背景画像とが投影された前記対象物の前記撮像画像を表示する表示手段を有する端末装置と、を具備することを特徴とする。

請求項９の画像処理装置の制御プログラムは、コンピュータを、対象物を注釈する注釈画像の受信及び前記注釈画像と前記注釈画像の背景となる背景画像とが投影された前記対象物を撮像する撮像装置から取得した前記対象物を表す撮像画像の送信を端末装置との間で行う通信手段、前記撮像画像の画素に基づき、前記撮像画像の明度を検出する検出手段、前記検出手段で検出された明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段、前記通信手段で受信した前記注釈画像と前記画像修正手段で修正した前記背景画像とを前記対象物に投影するように投影装置を制御する投影制御手段、として機能させることを特徴とする。

請求項１記載の発明によれば、撮像された画像に明度の低い領域がある場合でも、当該領域に投影される注釈画像を鮮明にできる。

請求項２記載の発明によれば、撮像された画像に明度の低い領域があるか画一的に判断できる。

請求項３記載の発明によれば、本件発明の構成を有しない場合に比較して注釈画像をより鮮明にできる。

請求項４記載の発明によれば、本件発明の構成を有しない場合に比較して注釈画像をより鮮明にできる。

請求項５記載の発明によれば、本件発明の構成を有しない場合に比較して注釈画像をより鮮明にできる。

請求項６記載の発明によれば、より精度良く明度の低い領域を抽出できる。

請求項７記載の発明によれば、撮像された画像に明度の低い領域がある場合でも、当該領域に投影される注釈画像を鮮明にできる。

請求項８記載の発明によれば、撮像された画像に明度の低い領域がある場合でも、当該領域に投影される注釈画像を鮮明にできる。

請求項９記載の発明によれば、撮像された画像に明度の低い領域がある場合でも、当該領域に投影される注釈画像を鮮明にできる。

以下、図面を参照し、本件発明を実施するための最良の形態について説明する。

図１は実施例に係る画像処理システム及び情報処理システムの構成例を示すブロック図である。

図１に示すように、図中点線で囲った画像処理システム１００は例えばパーソナルコンピュータ（ＰＣ）等である画像処理装置２、例えばカメラである撮像装置８、例えばプロジェクタである投影装置１４、例えばスピーカである音声出力装置１８、及び例えばマイクである音声入力装置２０を備えている。撮像装置８、投影装置１４、音声出力装置１８及び音声入力装置２０は画像処理装置２に接続されている。

図中破線で囲った情報処理システム２００は、上記の画像処理システム１００に加え、例えばＰＣ等である端末装置４、例えばスピーカ等である音声出力装置２２、例えばマイク等である音声入力装置２４、例えば液晶ディスプレイ等である表示装置２６（表示手段）、及び例えばマウス並びにキーボードである操作装置２８を備えている。ここで、サーバとして機能する画像処理装置２とクライアントとして機能する端末装置４とは、例えばインターネット等である通信網６を介して接続されている。音声出力装置２２、音声入力装置２４、表示装置２６及び操作装置２８は端末装置４に接続されている。

画像処理装置に接続された投影装置１４はハーフミラー１６を介して、対象物１０を注釈する注釈画像と注釈画像の背景となる背景画像とをステージ１２上の対象物１０に投影する。撮像装置８は注釈画像と背景画像とが投影された対象物１０を撮像し、画像処理装置２に対象物１０を表す撮像画像を出力する。投影装置１４と撮像装置８とでは、ハーフミラー１６を介して各々の画角と光軸とが一致している。投影装置１４から投影される光はハーフミラー１６を通過して対象物１０に到達する。また、撮像装置８はハーフミラー１６で反射された対象物１０の光を撮像する。

システム構成は図１に示した例に限定されるものではない。ここで図２を参照に、画像処理システム構成の別の構成例について説明する。図２はハーフミラー１６を用いない場合の画像処理システム１００の構成例を示すブロック図である。図２に示すように、投影装置１４と撮像装置８とを、各々の画角と光軸とが一致するように配置する構成を採用できる。

画像処理装置２は撮像装置８から入力された撮像画像を、通信網６を介して端末装置４に送信する。端末装置４に接続された表示装置２６は表示領域２７に撮像画像及びユーザインターフェース（ＵＩ）２９を表示する。なお、図１及び図２においては、端末装置４と表示装置２６と操作装置２８とを分けて図示しているが、例えばノート型ＰＣのように端末装置４と表示装置２６と操作装置２８とは一体であってもよい。また、情報処理システム２００には端末装置４が複数あってもよい。

ＵＩ２９は注釈画像として図形を入力するためのペン、注釈画像として文字を入力するためのテキスト、及び入力された図形や文字を消去するための消去等のボタンと、注釈画像の線種を定めるアイコン、並びに注釈画像の色を定めるアイコン等を含む。端末装置４のユーザは、操作装置２８を用いてＵＩ２９から例えばペンボタンを選択し表示領域２７に表示された撮像画像に図形等を記載する。ユーザが入力した図形等が対象物１０を注釈する注釈画像となる。ユーザが入力した注釈画像の情報は、端末装置４から通信網６及び画像処理装置２を介して投影装置１４に入力される。入力された注釈画像の情報により定められた注釈画像が投影装置１４から対象物１０へと投影される。なお、投影される注釈画像には、線、文字図形、記号、色等の態様が含まれる。

画像処理装置２は音声出力装置１８及び音声入力装置２０に接続され、端末装置４は音声出力装置２２及び音声入力装置２４に接続されている。画像処理装置２に接続された音声出力装置１８は端末装置４のユーザが音声入力装置２４に入力した指示などの音声を出力する。一方で、端末装置４に接続された音声出力装置２２は画像処理装置２のユーザが音声入力装置２０に入力した指示などの音声を出力する。すなわち、画像処理装置２のユーザと端末装置４のユーザとは、互いに音声でコミュニケーションする。

図１及び図２に例示したシステムを実現するための画像処理装置２及び端末装置４の機能構成について説明する。図３は画像処理装置２及び端末装置４の機能構成を例示したブロック図である。

図３に示すように、画像処理装置２は制御部３０と、記憶部３２と、撮像装置８、投影装置１４、音声出力装置１８及び音声入力装置２０に接続するための仲介部３４と、通信網６を介して端末装置４との通信を行う通信仲介部３６とを備えている。また、画像処理装置２は、図中点線で示した表示装置１９を備えていてもよい。

端末装置４は制御部４０と、記憶部４２と、音声出力装置２２、音声入力装置２４、表示装置２６及び操作装置２８に接続されるための仲介部４４と、通信網６を介して画像処理装置２との通信を行う通信仲介部４６とを備えている。

図３に例示した機能構成を実現するためのハードウェア構成について説明する。図４（ａ）は画像処理装置２のハードウェア構成を例示するブロック図であり、図４（ｂ）は端末装置４のハードウェア構成を例示するブロック図である。

図４（ａ）に示すように、画像処理装置２は、装置を制御するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）５０、制御プログラムを記憶するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）５１、ＣＰＵ５０の作業領域（ワーキングエリア）として機能するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）５２、情報やプログラムを記憶するハードディスクドライブ（ＨＤＤ：Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）５３、他のコンピュータと接続するためのネットワークインターフェース５４、及びＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）インターフェース５５を備えている。ＣＰＵ５０はシステムバス５８を介してＲＯＭ５１、ＲＡＭ５２、ＨＤＤ５３、ネットワークインターフェース５４及びＵＳＢインターフェース５５に接続されている。

図３の画像処理装置２の制御部３０は制御プログラムに従って処理を実行するＣＰＵ５０、記憶部３２はＨＤＤ５３、仲介部３４はＵＳＢインターフェース５５、通信仲介部３６はネットワークインターフェース５４に各々相当する。

図４（ｂ）に示すように、端末装置４は、装置を制御するＣＰＵ６０、制御プログラムを記憶するＲＯＭ６１、ワーキングエリアとして機能するＲＡＭ６２、情報やプログラムを記憶するＨＤＤ６３、他のコンピュータと接続するためのネットワークインターフェース６４、及びＵＳＢインターフェース６５を備えている。ＣＰＵ６０はシステムバス６８を介してＲＯＭ６１、ＲＡＭ６２、ＨＤＤ６３、ネットワークインターフェース６４、及びＵＳＢインターフェース６５に接続されている。

図３の端末装置４の制御部４０は制御プログラムに従って処理を実行するＣＰＵ６０、記憶部４２はＨＤＤ６３、仲介部４４はＵＳＢインターフェース６５、通信仲介部４６はネットワークインターフェース６４に各々相当する。

次に、本件発明に係るシステムの処理について説明する前に、従来のシステムにより処理された画像の例について説明する。図５（ａ）から図５（ｃ）は撮像画像の例を示す図であり、図５（ｄ）から図５（ｅ）は投影画像の例を示す図である。

図５（ａ）に示すように、対象物１０がない状態では、撮像装置８はステージ１２のみを撮像する。また、図５（ｄ）に示すように、投影装置１４は背景画像として、例えば全体が黒色である画像を投影する。

図５（ｂ）に示すように、対象物１０が配置されると、撮像装置８は背景画像が投影された対象物１０を表す撮像画像を撮像する。このとき投影装置１４は、図５（ｄ）で示したものと同様の背景画像を投影している。また、対象物１０には明度の低い領域１１があるものとする。

図５（ｅ）に示すように、端末装置４のユーザが例えば矢印等の注釈画像を入力すると、投影装置１４は背景画像とユーザにより入力された注釈画像１３とを重畳して対象物１０に投影する。図５（ｃ）に示すように、撮像装置８は注釈画像１３と背景画像とが投影された対象物１０の画像を撮像する。しかし、対象物１０の明度の低い領域１１は、投影された注釈画像１３の光を拡散させ、十分に反射しない。従って、投影された注釈画像１３に対象物１０の明度の低い領域１１と重なる部分がある場合、撮像画像において注釈画像１３の領域１１と重なる部分は映らない。対象物１０の明度の低い領域１１は光の反射率が低い領域であり、より具体的には色彩が例えば黒色の領域である。

以下、本件発明に係るシステムの機能について説明する。図６は画像処理装置２の制御部３０及び端末装置４の制御部４０の機能構成を例示するブロック図である。

図６に示すように、画像処理装置２の制御部３０は、画像取得部７０（画像取得手段）、検出部７２（検出手段）、抽出部７３（抽出手段）、投影制御部７４（投影制御手段）、画像修正部７６（画像修正手段）、及び通信部７８（通信手段）を備える。画像取得部７０は撮像装置８が撮像した撮像画像を取得する。検出部７２は画像取得部７０が取得した撮像画像の画素に基づき、撮像画像の明度を検出する。抽出部７３は、検出部７２が検出した撮像画像の明度に基づき、対象物１０の明度の低い領域１１を撮像画像から抽出する。画像修正部７６は、抽出部７３が抽出した対象物１０の明度の低い領域１１と重なる、投影装置１４により投影される背景画像の領域の明度を高く修正する。通信部７８は、対象物１０を注釈する注釈画像の受信及び画像取得部７０が取得した撮像画像の送信を、通信網６を介して端末装置４との間で行う。投影制御部７４は通信部７８が受信した注釈画像と画像修正部７６により修正された背景画像とを対象物１０に投影するように投影装置１４を制御する。

また、端末装置４の制御部４０は、表示制御部８０、注釈画像生成部８２、及び通信部８４を備えている。注釈画像生成部８２は対象物１０を注釈する注釈画像を生成する。通信部８４は、撮像画像の受信及び注釈画像生成部８２で生成された注釈画像の送信を、通信網６を介して画像処理装置２との間で行う。表示制御部８０は通信部８４が受信した撮像画像を表示するように表示装置２６を制御する。

次に、画像処理装置２の処理及び端末装置４の処理について説明する。図７は画像処理装置２の処理及び端末装置４の処理を示すフローチャートを例示する図である。最初に、画像処理装置２の処理について説明する。

図７に示すように、まず、制御部３０を構成する投影制御部７４は背景画像を投影するように投影装置１４を制御する（ステップＳ１０）。このときの背景画像は、図５（ｄ）に示したように例えば全体が黒色の画像である。

制御部３０は、撮像装置８が撮像した、背景画像が投影されている対象物を表す撮像画像を端末装置４に出力するように撮像装置８を制御する（ステップＳ１１）。その後、制御部３０は撮像画像を対象に、背景画像が投影された場合に対象物の明度が低い領域と重なる背景画像の領域の明度を高くする照明処理を行う（ステップＳ１２）。照明処理については後述する。

制御部３０は端末装置４からのコマンドを受信するまで待つ（ステップＳ１３）。端末装置４からのコマンドとは、注釈画像のデータを含む注釈画像を投影させるコマンドである。

制御部３０が端末装置４からのコマンドを受信する（ステップＳ１４）。その後、制御部３０を構成する投影制御部７４は、受信したコマンドに従い、通信部７８が受信した注釈画像を対象物に投影するように投影装置１４を制御する（ステップＳ１５）。

次に制御部３０は、あらかじめ設定された撮像画像の保存タイミングであるか否かを判断する（ステップＳ１６）。あらかじめ設定された保存タイミングとは、例えば０．２秒ごとに撮像画像を保存すると設定されている場合には、０．２秒が経過するタイミングである。Ｙｅｓの場合、制御部３０は撮像画像を保存する（ステップＳ１７）。Ｎｏの場合、ステップＳ１４に戻る。

ステップＳ１７の後、制御部３０は処理が全て終了したか判断する（ステップＳ１８）。Ｙｅｓの場合、画像処理装置２の処理を終了する。Ｎｏの場合、ステップＳ１４に戻る。

次に端末装置４の処理について説明する。まず、制御部４０は、ユーザが操作装置２８を用いて入力したコマンドを受け付ける（ステップＳ１９）。制御部４０は、受け付けたコマンドが注釈画像を描画する画像描画処理コマンドか否か判断する（ステップＳ２０）。

Ｎｏの場合、ステップＳ２３に進む。Ｙｅｓの場合、制御部４０を構成する注釈画像生成部８２は、画像描画処理コマンドに従って注釈画像を生成し、制御部４０を構成する表示制御部８０は生成された注釈画像を表示するように表示装置２６を制御する（ステップＳ２１）。

制御部４０を構成する通信部８４が注釈画像投影のコマンドを画像処理装置２に送信する（ステップＳ２２）。ステップＳ２２の後、制御部４０は処理が全て終了したか判断する（ステップＳ２３）。Ｙｅｓの場合、端末装置４の処理を終了する。Ｎｏの場合、ステップＳ１９に戻る。

次に、照明処理について説明する。図８は図７のステップＳ１２で実行される照明処理のフローチャートを例示する図である。なお、図５（ｂ）に示した撮像画像を対象に照明処理を行うものとする。

まず、画像処理装置２の制御部３０を構成する画像取得部７０が撮像画像を取得する（ステップＳ３０）。制御部３０は、取得した撮像画像に明度が未検出である画素があるか判断する（ステップＳ３１）。Ｎｏの場合、すなわち制御部３０を構成する検出部７２が撮像画像の全ての画素について明度の検出を行った場合、制御部３０は照明処理を終了する。

Ｙｅｓの場合、制御部３０を構成する検出部７２は撮像画像の画素に基づき、明度の検出を行う（ステップＳ３２）。明度の検出方法としては従来用いられている方法を適宜利用することができる。具体例として、撮像画像の画素ごとにＲＧＢ（Ｒｅｄ、Ｇｒｅｅｎ及びＢｌｕｅ）の各要素のうちから検出した最大値を明度とする方法、または画素ごとに検出したＲＧＢを表す情報を変換テーブルに従ってＬ＊ａ＊ｂ＊情報に変換し明度を表すＬ＊値を算出する方法などがある。

制御部３０は、検出された明度があらかじめ定められた閾値以下か判断する（ステップＳ３３）。Ｎｏの場合、ステップＳ３１に戻る。Ｙｅｓの場合、制御部３０を構成する抽出部７３は撮像画像において明度が閾値以下である対象物の領域を、撮像画像から抽出する（ステップＳ３４）。閾値は任意に定めることができる。実施例では、抽出部７３が、図５（ｂ）に示した撮像画像において注釈画像が映らない対象物１０の領域１１を抽出するように閾値が設定されている。閾値を定めることで、撮像画像に明度の低い領域があるか画一的に判断される。

その後、制御部３０を構成する画像修正部７６は、背景画像が投影装置１４により投影された場合に、抽出部７３で抽出された対象物１０の領域１１と重なる背景画像の領域の明度を高く修正する（ステップＳ３５）。ステップＳ３５の後、ステップＳ３１に戻る。

ステップＳ３０の撮像画像取得処理を実行するＣＰＵは図６の画像取得部７０に相当する。ステップＳ３２の明度検出処理を実行するＣＰＵは検出部７２に相当する。ステップＳ３４の領域抽出処理を実行するＣＰＵは抽出部７３に相当する。ステップＳ１０、及びステップＳ１５の投影処理を実行するＣＰＵは投影制御部７４に相当する。ステップＳ３５の背景画像修正処理を実行するＣＰＵは画像修正部７６に相当する。ステップＳ１４のコマンド受信処理を実行するＣＰＵは通信部７８に相当する。

撮像画像表示処理を実行するＣＰＵは図６の表示制御部８０に相当する。ステップＳ２１の画像描画処理を実行するＣＰＵは注釈画像生成部８２に相当する。ステップＳ２２のコマンド送信処理を実行するＣＰＵは通信部８４に相当する。

次に、上記の照明処理が行われた場合の撮像画像及び投影画像について説明する。図９（ａ）及び図９（ｂ）は照明処理における撮像画像の例を示す図であり、図９（ｃ）及び図９（ｄ）は投影画像の例を示す図である。

図９（ｃ）は修正後の背景画像を示す図である。図９（ｃ）に示すように、画像修正部７６は、投影装置１４により投影された場合に、抽出部７３で抽出された対象物１０の領域１１と重なる背景画像の領域１５の明度を高く修正する。具体的には、背景画像の領域１５を白色やグレー等のような明度の高い色に修正する。すなわち、領域１５は例えば白色で、それ以外の領域は例えば黒色である背景画像となる。

図９（ａ）は画像修正部７６により修正された背景画像が対象物１０に投影された場合に、撮像装置８が撮像する撮像画像である。図９（ａ）に示すように、照明処理実行前（図５（ｂ）の状態）よりも、対象物１０の領域１１の明度が高い。

図９（ｄ）は、修正された背景画像と注釈画像１３とが重畳された状態での背景画像を例示する図である。図９（ｄ）に示すように、投影制御部７４は通信部７８が受信した注釈画像１３と画像修正部７６により修正された背景画像とを対象物１０に投影するように投影装置１４を制御する。

図９（ｂ）は注釈画像１３と修正された背景画像とが投影された対象物１０を表す撮像画像を示す図である。図９（ｂ）の状態においては、背景画像と注釈画像１３とで明度の差異が大きい。

画像修正部７６が背景画像の領域１５の明度をどの程度高くするかは任意に定めることができ、実施例では修正された背景画像の領域１５の明度を注釈画像１３の明度よりも高くなるように修正している。

修正された背景画像の領域１５の色彩は白色やグレーに限定されない。また、修正された背景画像の領域１５の色彩は、注釈画像１３の色彩とは異なる色彩、特に注釈画像１３の色彩の補色である。

画像処理装置２及び端末装置４の機能を実現するためのソフトウェアのプログラムが記録されている例えばＣＤ−ＲＯＭやＤＶＤ等の記録媒体を、画像処理装置２及び端末装置４に供給し、画像処理装置２の制御部３０及び端末装置４の制御部４０が記憶媒体に格納されたプログラムを読み出し実行することによっても、上記実施例と同様の効果を奏する。

また、画像処理装置２の制御部３０及び端末装置４の制御部４０が機能を実現するためのソフトウェアのプログラムを実行することによっても、上記実施例と同様の効果を奏する。

以上、本発明の実施例について詳述したが、本発明は係る特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

図１は実施例１に係る情報処理システムのシステム構成例を示すである。 図２は実施例１に係る情報処理システムの別のシステム構成例を示す図である。 図３は実施例１に係る情報処理システムの機能構成を例示するブロック図である。 図４（ａ）は画像処理装置のハードウェア構成を例示する図である、図４（ｂ）は端末装置のハードウェア構成を例示する図である。 図５（ａ）から図５（ｃ）は撮像画像の例を示す図であり、図５（ｄ）及び図５（ｅ）は投影画像の例を示す図である。 図６は実施例に係る画像処理システムの制御部の構成例、及び端末装置の制御部の構成例を示す図である。 図７は実施例に係る画像処理装置の処理及び端末装置４の処理のフローチャートを例示する図である。 図８は実施例に係る画像処理装置の照明処理のフローチャートを例示する図である。 図９（ａ）及び図９（ｂ）は照明処理における撮像画像の例を示す図であり、図９（ｃ）及び図９（ｄ）は投影画像の例を示す図である。

符号の説明

画像処理装置 ２
端末装置 ４
通信網 ６
撮像装置 ８
対象物 １０
領域 １１、１５
注釈画像 １３
投影装置 １４
表示装置 ２６
画像取得部 ７０
検出部 ７２
抽出部 ７３
投影制御部 ７４
画像修正部 ７６
通信部 ７８、８４
表示制御部 ８０
注釈画像生成部 ８２
画像処理システム １００
情報処理システム ２００

Claims (9)

1. 対象物を注釈する注釈画像の受信及び前記注釈画像と前記注釈画像の背景となる背景画像とが投影された前記対象物を撮像する撮像装置から取得した前記対象物を表す撮像画像の送信を端末装置との間で行う通信手段と、
   前記撮像画像の画素に基づき、前記撮像画像の明度を検出する検出手段と、
   前記検出手段で検出された明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段と、
   前記通信手段で受信した前記注釈画像と前記画像修正手段で修正した前記背景画像とを前記対象物に投影するように投影装置を制御する投影制御手段と、を具備することを特徴とする画像処理装置。
2. 前記画像修正手段は、前記検出手段で検出された明度があらかじめ定められた閾値以下である前記対象物の領域と重なる前記背景画像の領域の明度を高く修正することを特徴とする請求項１記載の画像処理装置。
3. 前記修正された背景画像の前記対象物の領域に投影される領域の明度は前記注釈画像の明度より高いことを特徴とする請求項１または２記載の画像処理装置。
4. 前記修正された背景画像の前記対象物の領域に投影される領域の色彩は、前記注釈画像の色彩と異なる色彩であることを特徴とする請求項１から３いずれか一項記載の画像処理装置。
5. 前記修正された背景画像の前記対象物の領域に投影される領域の色彩は前記注釈画像の色彩の補色であることを特徴とする請求項４記載の画像処理装置。
6. 前記検出手段で検出された明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域を前記撮像画像から抽出する抽出手段をさらに備え、
   前記画像修正手段は前記抽出手段で抽出された前記対象物の領域と重なる前記投影される背景画像の領域を明度高く修正することを特徴とする請求項１から５いずれか一項記載の画像処理装置。
7. 対象物を注釈する注釈画像と前記注釈画像の背景となる背景画像とを前記対象物に投影する投影装置と、
   前記投影装置が前記注釈画像と前記背景画像とを投影した前記対象物を撮像する撮像装置と、
   前記撮像装置が撮像した前記対象物を表す撮像画像の画素から検出した明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段を有する画像処理装置と、を具備することを特徴とする画像処理システム。
8. 対象物を注釈する注釈画像と前記注釈画像の背景となる背景画像とを前記対象物に投影する投影装置と、
   前記投影装置が前記注釈画像と前記背景画像とを投影した前記対象物を撮像する撮像装置と、
   前記撮像装置が撮像した前記対象物を表す撮像画像の画素から検出した明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段を有する画像処理装置と、
   前記画像処理装置に送信する前記注釈画像を生成するとともに、前記画像処理装置から受信した前記注釈画像と前記背景画像とが投影された前記対象物の前記撮像画像を表示する表示手段を有する端末装置と、を具備することを特徴とする情報処理システム。
9. コンピュータを、
   対象物を注釈する注釈画像の受信及び前記注釈画像と前記注釈画像の背景となる背景画像とが投影された前記対象物を撮像する撮像装置から取得した前記対象物を表す撮像画像の送信を端末装置との間で行う通信手段、
   前記撮像画像の画素に基づき、前記撮像画像の明度を検出する検出手段、
   前記検出手段で検出された明度に基づき、前記撮像画像において前記注釈画像が映らない前記対象物の領域と重なる前記投影される背景画像の領域の明度を高く修正する画像修正手段、
   前記通信手段で受信した前記注釈画像と前記画像修正手段で修正した前記背景画像とを前記対象物に投影するように投影装置を制御する投影制御手段、として機能させることを特徴とする画像処理装置の制御プログラム。

Images