JP2011009813A - 画像切出装置 - Google Patents

Abstract

【課題】書画台に書類全体が載置されていなくても書類全体を表す画像を切り出すことができる画像切出装置を提供すること。
【解決手段】書画台に載置された書類が撮影された映像に基づいて、この書類の輪郭のうち書画台に載置された１辺を検出する載置辺検出部２０と、検出された１辺に対する対辺の位置を推定する対辺推定部２１と、検出された１辺の位置および推定された対辺の位置に基づいて、映像から書類画像を切り出す画像切出部２２と、切り出した複数の書類画像が同一の内容を表す場合にこの内容を表す書類画像を原画像として記憶する原画像記憶部２４と、各書類画像の変化に応じて、変化後の各書類画像と原画像との差分画像を原画像に合成して１つの書類画像を生成する画像合成部２６とを備える。
【選択図】図４

Description

本発明は、書類が撮影された映像から書類を表す画像を切り出す画像切出装置に関する。

従来、会議等の参加者に書類を提示するため、書画台に載置された書類が撮影された映像から書類を表す画像を切り出してプロジェクタやモニタに表示させる画像切出装置が既に知られている。このような画像切出装置によって、書類および書類に対する書き込みの情報を参加者の間で容易に共有することができる。

このような画像切出装置としては、書類が載置されていない書画台が撮影された映像から書画台の輪郭を検出して登録し、書類が載置された書画台が撮影された映像に対して、登録した書画台の輪郭をマスクすることにより、書類の輪郭を検出して書類を表す画像を切り出すものがある（例えば、特許文献１参照）。

しかしながら、上述したような従来の技術においては、書画台上の書類の輪郭を検出して画像を切り出すため、書画台に書類全体が載置されていなければ書類全体を表す画像を切り出すことができないという課題があった。

本発明は、このような従来の課題を解決するためになされたもので、書画台に書類全体が載置されていなくても書類全体を表す画像を切り出すことができる画像切出装置を提供することを目的とする。

本発明の画像切出装置は、書画台に載置された書類が撮影された映像から前記書類を表す書類画像を切り出す画像切出装置において、前記映像に基づいて前記書類の輪郭のうち前記書画台に載置された１辺を検出する載置辺検出部と、前記載置辺検出部によって検出された１辺に対する対辺の位置を推定する対辺推定部と、前記載置辺検出部によって検出された１辺の位置および前記対辺推定部によって推定された対辺の位置に基づいて、前記映像から前記書類画像を切り出す画像切出部とを備えた構成を有している。

この構成により、本発明の画像切出装置は、書類の輪郭のうち書画台に載置された１辺を検出することにより対辺の位置を推定して書類画像を切り出すので、書画台に書類全体が載置されていなくても書類全体を表す画像を切り出すことができる。

また、前記載置辺検出部は、前記映像に基づいて前記書類の輪郭のうち前記書画台に載置されたコーナーを検出し、検出したコーナーのうち前記書類のコーナーが折り返されて形成されたコーナーを抽出し、抽出したコーナーに基づいて折り返される前のコーナーを推定し、検出したコーナーおよび推定したコーナーに基づいて前記書類の１辺を検出してもよい。

この構成により、本発明の画像切出装置は、書類のコーナーが折り返されて形成されたコーナーに基づいて折り返される前のコーナーを推定するので、ステープラ等で綴られてコーナーが折り返された書類の１辺が書画台に載置されていても書類全体を表す画像を切り出すことができる。

また、本発明の画像切出装置は、複数の前記書類画像が同一の内容を表す場合にこの内容を表す書類画像を原画像として記憶する原画像記憶部と、前記各書類画像の変化に応じて、変化後の各書類画像と前記原画像との差分画像を前記原画像に合成して１つの書類画像を生成する画像合成部とをさらに備えた構成を有している。

この構成により、本発明の画像切出装置は、複数の書類画像が同一の内容を表す場合に、各書類画像の変化に応じて、変化後の各書類画像と原画像との差分画像を原画像に合成して１つの書類画像を生成するので、同一の内容を持つ複数の書類に対する書き込み等を１つの書類画像に合成して利用者間で共有させることができる。

また、本発明の画像切出装置は、前記書類画像および前記差分画像を他の画像切出装置との間で送受信する画像送受信部をさらに備え、前記原画像記憶部は、前記画像切出部によって切り出された書類画像および前記画像送受信部によって受信された書類画像が同一の内容を表す場合にこの内容を表す書類画像を前記原画像として記憶し、前記画像合成部は、前記各書類画像の変化に応じて、前記画像切出部によって切り出された変化後の書類画像と前記原画像との差分画像および前記画像送受信部によって受信された変化後の書類画像と前記原画像との差分画像を前記原画像に合成して１つの書類画像を生成してもよい。

この構成により、本発明の画像切出装置は、切り出した書類画像および他の画像切出装置から受信した書類画像が同一の内容を表す場合に、各書類画像の変化に応じて、切り出した変化後の書類画像と原画像との差分画像および他の画像切出装置から受信した変化後の書類画像と原画像との差分画像を原画像に合成して１つの書類画像を生成するので、同一の内容を持つ複数の書類を表す書類画像を各画像切出装置でそれぞれ切り出す場合に、各書類に対する書き込みを１つの書類画像に合成して各画像切出装置の利用者間で共有させることができる。

また、本発明の画像切出システムは、書類の１辺が載置される書画台と、前記書類を撮影する撮影装置と、前記撮影装置によって撮影された映像から前記書類を表す書類画像を切り出す画像切出装置とを備え、前記画像切出装置は、前記映像に基づいて前記書類の輪郭のうち前記書画台に載置された１辺を検出する載置辺検出部と、前記載置辺検出部によって検出された１辺に対する対辺の位置を推定する対辺推定部と、前記載置辺検出部によって検出された１辺の位置および前記対辺推定部によって推定された対辺の位置に基づいて、前記映像から前記書類画像を切り出す画像切出部とを有している。

この構成により、本発明の画像切出システムは、書類の輪郭のうち書画台に載置された１辺を検出することにより対辺の位置を推定して書類画像を切り出すので、書画台に書類の１辺が載置されているだけで書類全体を表す画像を切り出すことができる。

また、本発明の画像切出方法は、書画台に載置された書類が撮影された映像から前記書類を表す書類画像を切り出す画像切出装置に、前記映像に基づいて前記書類の輪郭のうち前記書画台に載置された１辺を検出する載置辺検出ステップと、前記載置辺検出ステップによって検出された１辺に対する対辺の位置を推定する対辺推定ステップと、前記載置辺検出ステップによって検出された１辺の位置および前記対辺推定部によって推定された対辺の位置に基づいて、前記映像から前記書類画像を切り出す画像切出ステップとを実行させるものである。

したがって、本発明の画像切出方法は、書類の輪郭のうち書画台に載置された１辺を検出することにより対辺の位置を推定して書類画像を切り出すので、書画台に書類全体が載置されていなくても書類全体を表す画像を切り出すことができる。

本発明は、書画台に書類全体が載置されていなくても書類全体を表す画像を切り出すことができる画像切出装置を提供することができる。

本発明の実施の形態としての共有書画カメラシステムのブロック図である。 本発明の実施の形態において書類の１辺が載置される書画台を説明するための概念図である。 本発明の実施の形態における画像切出装置のハードウェア構成図である。 本発明の実施の形態における画像切出装置の機能ブロック図である。 本発明の実施の形態において書類の１辺の検出について説明するための概念図である。 本発明の実施の形態においてコーナーが折り返された書類の１辺の検出について説明するための概念図である。 本発明の実施の形態において書類画像の合成について説明するための概念図である。 本発明の実施の形態における画像切出装置の動作を説明するフローチャートである。 本発明の実施の形態における画像切出装置の画像切出動作を説明するフローチャートである。

以下、図面を参照して本発明の実施の形態について説明する。なお、本発明の実施の形態では、複数の本発明の画像切出システムによって構成される共有書画カメラシステムについて説明する。

図１に示すように、本発明の実施の形態としての共有書画カメラシステム１は、複数の会議室等の拠点にそれぞれ設けられた画像切出システム２ａおよび２ｂ（以下、総称して「画像切出システム２」とも記載する）を備えている。

画像切出システム２ａおよび２ｂは、それぞれ書画台３ａおよび３ｂ（以下、総称して「書画台３」とも記載する）と、撮影装置４ａおよび４ｂ（以下、総称して「撮影装置４」とも記載する）と、画像切出装置５ａおよび５ｂ（以下、総称して「画像切出装置５」とも記載する）と、液晶ディスプレイまたはプロジェクタ等の表示装置６ａおよび６ｂ（以下、総称して「表示装置６」とも記載する）とを備え、画像切出装置５ａおよび５ｂはインターネット等のネットワークを介して互いに接続されている。

なお、図１には２つの画像切出システム２を示しているが、本実施の形態の共有書画カメラシステムが備える画像切出システムの数を限定するものではない。

書画台３は、書類の１辺を載置可能な台であり、板、布または紙等の部材によって構成される。書画台３の載置面は、利用が想定されるサイズの書類の１辺を、想定される枚数分重ねずに載置できる大きさを持っている。書画台３の載置面の大きさは、載置される書類全体より小さくてもよい。

例えば、図２に示すように、書画台３は、書類を横に２枚重ねずに載置できる幅を持ち、書類の縦の長さより短い奥行を持ち、図示しない机の上に設置されている。

また、書画台３の載置面は、書類と識別可能に配色されている。ここで、書類と識別可能であるとは、書類が載置された書画台３が撮影された映像において、書類を表す画像と載置面を表す画像との境界が検出可能であることをいう。例えば、各画素の輝度に基づいて境界を検出する周知の技術を用いる場合、想定される書類の色が白であれば、載置面の色は黒が適している。なお、書画台３の載置面は、書類と識別可能であれば一色に限らず、複数の色によって構成されるパターン等その他の意匠を持っていてもよい。

撮影装置４は、図２に示すように、書画台３および書画台３に載置される書類全体を撮影範囲ａとするよう支柱７に取り付けられている。撮影装置４は、一般的なビデオカメラによって構成され、撮影した映像を電気信号に変換し、外部に接続される画像切出装置５に出力するようになっている。

なお、撮影装置４は、支柱７に取り付けられる代わりに、上部から吊り下げられていてもよい。

画像切出装置５は、図３に示すように、ＣＰＵ（Central Processing Unit）１０と、ＲＡＭ（Random Access Memory）１１と、ＲＯＭ（Read Only Memory）１２と、ハードディスク装置１３と、入力装置１４と、ビデオ出力モジュール１５と、外部機器インタフェース１６と、ネットワークインタフェース１７とを備えたコンピュータ装置によって構成されている。

ＲＯＭ１２およびハードディスク装置１３には、コンピュータ装置を画像切出装置５として機能させるためのプログラムが記憶されている。すなわち、ＣＰＵ１０がＲＡＭ１１を作業領域としてＲＯＭ１２およびハードディスク装置１３に記憶されたプログラムを実行することにより、コンピュータ装置は、画像切出装置５として機能する。

入力装置１４は、キーボードやマウス等によって構成され、利用者による画像切出装置５に対する操作を受け付けるようになっている。

ビデオ出力モジュール１５は、画像切出装置５によって切り出される書類画像を映像信号として表示装置６に出力するようになっている。

外部機器インタフェース１６は、外部に接続される機器とのデータ通信を行い、撮影装置４によって撮影された映像が入力されるようになっている。

ネットワークインタフェース１７は、ネットワークを介して通信を行い、他の画像切出装置５との間でデータを送受信するようになっている。

画像切出装置５は、図４に示すように、撮影装置４によって撮影される映像に基づいて書類の輪郭のうち書画台３に載置された１辺を検出する載置辺検出部２０と、検出された１辺に対する対辺の位置を推定する対辺推定部２１と、検出された１辺の位置および推定された対辺の位置に基づいて映像から書類画像を切り出す画像切出部２２と、他の画像切出装置５との間でデータを送受信する画像送受信部２３と、同一の内容を表す書類画像を原画像として記憶する原画像記憶部２４と、変化後の書類画像と原画像との差分画像を抽出する差分抽出部２５と、差分画像を合成して１つの書類画像を生成する画像合成部２６とを備えている。

ここで、載置辺検出部２０、対辺推定部２１、画像切出部２２、差分抽出部２５、および画像合成部２６は、ＣＰＵ１０によって構成され、画像送受信部２３は、ＣＰＵ１０およびネットワークインタフェース１７によって構成され、原画像記憶部２４は、ＣＰＵ１０およびハードディスク装置１３によって構成される。

載置辺検出部２０は、画像の各画素の輝度に基づいてコーナーを検出する周知の技術を用いて実現される。載置辺検出部２０は、図５に示すように、書類が撮影装置４によって撮影された映像の１フレームから輝度に基づいてコーナーを検出し、検出したコーナーに基づいて書類の輪郭のうち書画台３に載置された１辺を検出するようになっている。なお、検出されるコーナーは、凸を持つ方向を表す情報を持っているものとする。

また、載置辺検出部２０は、書画台３に載置される書類がステープラ等によって綴られることによりコーナーが折り返されている場合にも、書類が撮影された映像に基づいて書類の１辺を検出するようになっている。

ここで、図６を用いて、コーナーが折り返された書類の１辺の検出例について説明する。図６において、コーナーＰおよびＱは、書類のコーナーが折り返されて形成されたコーナーを表し、コーナーＸは、書類が折り返される前のコーナーを表している。載置辺検出部２０は、画素の輝度に基づいて検出したコーナーからコーナーＰおよびＱを抽出し、抽出したコーナーＰおよびＱに基づいてコーナーＸを推定する。

具体的には、載置辺検出部２０は、画素の輝度に基づいて検出したコーナーのうち、２つのコーナーの各角度が９０度より大きく１８０度未満でその和が２７０度であり、コーナー間の距離があらかじめ定められた値より短いものを、書類のコーナーが折り返されて形成されたものとして抽出する。

このとき、折り返される前のコーナーＸは、コーナーＰおよびＱを結ぶ線分ＰＱを直径とする円上に存在することになる。載置辺検出部２０は、Ｐを中心として直線ＰＱを角度ＸＰＱだけ回転させ、回転させた直線と線分ＰＱを直径とする円との交点をコーナーＸとして推定する。

なお、図６において、角度ＸＰＱの値は、コーナーＰを中心とした任意の半径の円に含まれる画素のうち書類を表す画素によって形成される扇型の重心をＧとすると、１８０−２×角度ＧＰＱによって算出される。

また、載置辺検出部２０は、Ｑを中心として直線ＰＱを角度ＸＱＰだけ回転させ、回転させた直線と線分ＰＱを直径とする円との交点をコーナーＸ２として求め、コーナーＸとコーナーＸ２との中点を、折り返される前のコーナーとして推定してもよい。

さらに、載置辺検出部２０は、このようにして推定した折り返される前のコーナーと、輝度に基づいて検出したコーナーのうち角度が９０度のコーナーとから、対になるものをペアにして、これらのコーナーのペアから書類の１辺の両端を表すペアを抽出するようになっている。

ここで、対になるコーナーとは、コーナーを形成する２つの半直線のうち一方の半直線同士が重なり合うものである。

具体的には、載置辺検出部２０は、対になるコーナーをペアにするため、コーナーを中心とした任意の半径の円に含まれる画素のうち書類を表す画素によって形成される扇型の重心を凸方向に基づいて算出し、コーナーおよび扇型の重心を通る直線同士が直交する交点と各コーナーとによって二等辺三角形が形成されるコーナー同士をペアにする。

さらに、載置辺検出部２０は、あらかじめハードディスク装置１３に格納された用紙サイズを表す情報を参照し、ペアにしたコーナー間の距離が用紙サイズの横の長さに相当するものを、書類の１辺の両端を表すペアとすることにより、書類の１辺を検出する。

ここで、ハードディスク装置１３には、利用が想定される用紙サイズの縦および横の長さを表す情報があらかじめ格納されている。本実施の形態では、Ａ３横、Ａ４横、Ａ４縦、Ｂ５横、およびＢ５縦の５種類の用紙サイズについてそれぞれ縦および横の長さを表す情報が格納されているものとする。なお、ハードディスク装置１３に格納される用紙サイズを表す情報は、横の長さとして一意な値を持つものとする。

また、載置辺検出部２０は、書類の１辺を検出する際に、撮影装置４によって撮影された映像に台形歪みがあれば台形補正を行ってから１辺を検出する。また、載置辺検出部２０は、撮影装置４によって撮影された映像に魚眼レンズ等による歪みがあれば、書画台３が映されている領域に合わせた歪み補正を行ってから１辺を検出する。

対辺推定部２１は、載置辺検出部２０によって検出された１辺の位置に基づいて対辺の位置を推定するようになっている。対辺推定部２１は、載置辺検出部２０によって１辺の長さが横の長さに相当するとして参照された用紙サイズの縦の長さをハードディスク装置１３から取得することにより、対辺の位置を推定する。

例えば、対辺推定部２１は、検出された１辺の両端から用紙サイズの縦の長さ分、この１辺と垂直に撮影装置４から遠ざかる方向へそれぞれ進んだ位置を対辺の両端とすることにより、対辺の位置を推定する。

画像切出部２２は、載置辺検出部２０によって検出された１辺の位置および対辺推定部２１によって推定された対辺の位置に基づいて画像を切り出すようになっている。画像切出部２２は、映像の１フレームにおいて１辺の位置および対辺の位置によって区切られる紙面領域を書類画像として切り出す。

なお、画像切出部２２は、１辺の位置および対辺の位置によって区切られる紙面領域が、同一のフレームにおいて検出される他の１辺の位置、および、これに対応して推定される他の対辺の位置に基づいて区切られる他の紙面領域に包含されるか否かを判断し、包含されない場合にこの紙面領域を書類画像として切り出すようになっている。

また、画像切出部２２は、載置辺検出部２０によって１辺を検出する際に、書画台３が映された領域に合わせて歪み補正が行われていた場合は、紙面領域に合わせて歪み補正を行ってから書類画像を切り出すようにする。

画像送受信部２３は、画像切出部２２によって切り出された書類画像を、この書類画像と原画像との差分画像とともに、ネットワークインタフェース１７を介して他の画像切出装置５との間で送受信するようになっている。

原画像記憶部２４は、画像切出部２２によって切り出された複数の書類画像が同一の内容を表す場合、または、画像切出部２２によって切り出された書類画像と画像送受信部２３によって受信された書類画像とが同一の内容を表す場合に、この内容を表す書類画像を原画像としてハードディスク装置１３に格納して記憶するようになっている。

差分抽出部２５は、画像切出部２２によって切り出される書類画像と原画像との差分画像を抽出するようになっている。

なお、差分抽出部２５は、差分画像を画素単位で抽出してもよく、黒画素の連結成分を包含する最小の矩形単位で抽出してもよい。

画像合成部２６は、同一の内容を表していた各書類画像の変化に応じて、変化後の各書類画像と原画像との差分画像をこの原画像に合成して１つの書類画像を生成するようになっている。

ここで、画像合成部２６は、画像切出部２２によって切り出された複数の書類画像が同一の内容を表していた場合、変化後の各書類画像と原画像との差分画像を原画像に合成する。

また、画像合成部２６は、画像切出部２２によって切り出された書類画像と画像送受信部２３によって受信された書類画像とが同一の内容を表していた場合、画像切出部２２によって切り出される変化後の書類画像と原画像との差分画像、および、画像送受信部２３によって受信される変化後の書類画像と原画像との差分画像を原画像に合成する。

また、画像合成部２６は、画像切出部２２によって切り出された複数の書類画像が同一の内容を表していた場合、画像送受信部２３によって送信する差分画像として、変化後の各書類画像と原画像との差分画像を合成して１つの差分画像を生成してもよい。

また、画像合成部２６は、複数の変化後の書類画像に基づいて、差分画像を合成する際の位置合わせを行う。例えば、画像合成部２６は、複数の変化後の書類画像を重ね合わせ、画素値がもっとも重なる位置を求めることにより、位置合わせを行う。

ここで、図７を用いて、画像合成部２６が、差分画像を書類画像に合成する例を説明する。

図７において、書画台３に載置された書類Ｄ１および書類Ｄ２は同一の内容を持っており、これらの書類に対して、各利用者によって書き込みｄ１および書き込みｄ２がなされ、さらに、利用者によって書類Ｄ１の一部を指し示す動作が行われている。この場合、原画像記憶部２４は、無記入状態の書類Ｄ１または書類Ｄ２の内容を表す画像を原画像として記憶し、差分抽出部２５は、書類Ｄ１の差分画像として書き込みｄ１および手を表す画像を抽出し、書類Ｄ２の差分画像として書き込みｄ２を表す画像を抽出する。画像合成部２６は、これらの差分画像を原画像に合成することにより１つの書類画像Ｄ３を生成する。

また、画像合成部２６は、合成した書類画像をビデオ出力モジュール１５を介して表示装置６に表示させるようになっている。例えば、画像合成部２６は、同一の内容を持つ複数の書類に対する異なる書き込みを合成した書類画像毎に、１つのウィンドウを生成して表示装置６に表示させてもよい。

また、画像合成部２６は、入力装置１４による操作に応じて、合成した書類画像をハードディスク装置１３に格納するようにしてもよい。

以上のように構成された共有書画カメラシステム１の画像切出装置５の動作を図８を用いて説明する。

なお、画像切出装置５ａおよび５ｂは、書画台３ａに１辺が載置された無記入状態の書類と同一の内容を持つ書類の１辺が書画台３ｂに載置されている状態で、以下の動作をそれぞれ開始するものとする。

また、各撮影装置４は、書画台３に載置された書類全体をそれぞれ撮影し、撮影した映像を表すデータを継続的に画像切出装置５に出力していくものとする。

図８に示すように、まず、撮影装置４から入力される映像に基づいて、無記入状態の書類が映されたフレームから書類画像が画像切出部２２によって切り出され、原画像として原画像記憶部２４によってハードディスク装置１３に格納される（ステップＳ１）。

続いて、撮影装置４から入力される映像の一定間隔フレーム毎に以下のステップＳ２〜Ｓ６の処理が繰り返し実行される。

ここでは、まず、該当するフレームから、書類画像が画像切出部２２によって切り出される（ステップＳ２）。

次に、ステップＳ２で切り出された書類画像と、ハードディスク装置１３に格納された原画像との差分画像が、差分抽出部２５によって抽出される（ステップＳ３）。

次に、ステップＳ２で切り出された書類画像と、ステップＳ３で抽出された差分画像とが、画像送受信部２３によって他の画像切出装置５との間で送受信される（ステップＳ４）。

次に、ステップＳ２で切り出された書類画像およびステップＳ４で受信された書類画像に基づいて、画像合成部２６によって位置合わせが行われる（ステップＳ５）。

次に、ステップＳ３で抽出された差分画像およびステップＳ４で受信された差分画像が、画像合成部２６によって、ハードディスク装置１３に格納された原画像に合成されて１つの書類画像が生成される（ステップＳ６）。

画像切出装置５は、以上のように合成した書類画像を表示装置６に表示させ、撮影装置４からの映像の入力が終了するまで処理を継続する。

次に、ステップＳ１およびステップＳ２における画像切出動作について、図９を用いて説明する。

図９に示すように、まず、載置辺検出部２０によって、該当するフレームにおけるコーナーが全て検出されるとともに、検出されたコーナーのうち折り返されて形成されたコーナーがあれば折り返される前のコーナーが推定される（ステップＳ１０）。

次に、検出されたコーナーおよび推定されたコーナーのうち対になるコーナーが、載置辺検出部２０によってペアにされる（ステップＳ１１）。

続いて、ステップＳ１１で組み合わせられた各ペアについてステップＳ１２〜ステップＳ１８の処理が実行される。

ここでは、まず、このペアのコーナー間の長さが、載置辺検出部２０によって算出される（ステップＳ１２）。

ここで、算出したコーナー間の長さに相当する横の長さを持つ用紙サイズを表す情報がハードディスク装置１３に格納されていない場合（ステップＳ１３でＮｏ）、このペアは書類の１辺の両端を表していないとして、次のペアについてステップＳ１２からの処理が実行される。

一方、算出したコーナー間の長さに相当する横の長さを持つ用紙サイズを表す情報がハードディスク装置１３に格納されている場合（ステップＳ１３でＹｅｓ）、このペアが書類の１辺として載置辺検出部２０によって検出される（ステップＳ１４）。

次に、該当する用紙サイズの縦の長さが、対辺推定部２１によってハードディスク装置１３から取得される（ステップＳ１５）。

次に、ステップＳ１４で検出された１辺の位置およびステップＳ１５で取得された縦の長さに基づいて対辺の位置が、対辺推定部２１によって推定される（ステップＳ１６）。

次に、ステップＳ１４で検出された１辺の位置およびステップＳ１６で推定された対辺の位置によって区切られる紙面領域が、他のペアに基づいて区切られる他の紙面領域に包含されるか否かが、画像切出部２２によって判断される（ステップＳ１７）。

ここで、この紙面領域が他の紙面領域に包含されていると判断された場合、この紙面領域は書類を表していないとして、次のペアについてステップＳ１２からの処理が実行される。

一方、この紙面領域が他の紙面領域に包含されていないと判断された場合、この紙面領域が書類画像として、画像切出部２２によって切り出され、回転が補正され、ハードディスク装置１３に格納される（ステップＳ１８）。

ステップＳ１１で組み合わせられた全てのペアについて上述の処理が終了すると、画像切出動作が終了する。

以上説明したように、本発明の実施の形態における画像切出装置５は、書類の輪郭のうち書画台３に載置された１辺を検出することにより対辺の位置を推定して書類画像を切り出すので、書画台３に書類全体が載置されていなくても書類全体を表す画像を切り出すことができる。

また、本発明の実施の形態における画像切出装置５は、切り出した書類画像および他の画像切出装置から受信した書類画像が同一の内容を表す場合に、各書類画像の変化に応じて、切り出した変化後の書類画像と原画像との差分画像および他の画像切出装置から受信した変化後の書類画像と原画像との差分画像を原画像に合成して１つの書類画像を生成するので、同一の内容を持つ複数の書類を表す書類画像を各画像切出装置でそれぞれ切り出す場合に、各書類に対する書き込みを１つの書類画像に合成して各画像切出装置の利用者間で共有させることができる。

なお、本発明の実施の形態において、各画像切出装置５がそれぞれ１つの書類を表す書類画像を切り出す動作例について説明したが、各画像切出装置５は、複数の書類をそれぞれ表す複数の書類画像を切り出してもよい。

また、本発明の実施の形態において、各画像切出装置５が互いに同一の内容を表す書類画像を切り出して差分画像を合成する動作例について説明したが、各画像切出装置５は、互いに異なる内容を表す書類画像を切り出して送受信してもよい。

また、本発明の実施の形態における画像切出装置５は、スタンドアロンで動作させてもよい。

１ 共有書画カメラシステム
２、２ａ、２ｂ 画像切出システム
３、３ａ、３ｂ 書画台
４、４ａ、４ｂ 撮影装置
５、５ａ、５ｂ 画像切出装置
６、６ａ、６ｂ 表示装置
７ 支柱
１０ ＣＰＵ
１１ ＲＡＭ
１２ ＲＯＭ
１３ ハードディスク装置
１４ 入力装置
１５ ビデオ出力モジュール
１６ 外部機器インタフェース
１７ ネットワークインタフェース
２０ 載置辺検出部
２１ 対辺推定部
２２ 画像切出部
２３ 画像送受信部
２４ 原画像記憶部
２５ 差分抽出部
２６ 画像合成部

特開２００５−２６０６９１号公報

Claims (6)

1. 書画台に載置された書類が撮影された映像から前記書類を表す書類画像を切り出す画像切出装置において、
   前記映像に基づいて前記書類の輪郭のうち前記書画台に載置された１辺を検出する載置辺検出部と、
   前記載置辺検出部によって検出された１辺に対する対辺の位置を推定する対辺推定部と、
   前記載置辺検出部によって検出された１辺の位置および前記対辺推定部によって推定された対辺の位置に基づいて、前記映像から前記書類画像を切り出す画像切出部とを備えたことを特徴とする画像切出装置。
2. 前記載置辺検出部は、前記映像に基づいて前記書類の輪郭のうち前記書画台に載置されたコーナーを検出し、検出したコーナーのうち前記書類のコーナーが折り返されて形成されたコーナーを抽出し、抽出したコーナーに基づいて折り返される前のコーナーを推定し、検出したコーナーおよび推定したコーナーに基づいて前記書類の１辺を検出することを特徴とする請求項１に記載の画像切出装置。
3. 複数の前記書類画像が同一の内容を表す場合にこの内容を表す書類画像を原画像として記憶する原画像記憶部と、
   前記各書類画像の変化に応じて、変化後の各書類画像と前記原画像との差分画像を前記原画像に合成して１つの書類画像を生成する画像合成部とをさらに備えたことを特徴とする請求項１または請求項２に記載の画像切出装置。
4. 前記書類画像および前記差分画像を他の画像切出装置との間で送受信する画像送受信部をさらに備え、
   前記原画像記憶部は、前記画像切出部によって切り出された書類画像および前記画像送受信部によって受信された書類画像が同一の内容を表す場合にこの内容を表す書類画像を前記原画像として記憶し、
   前記画像合成部は、前記各書類画像の変化に応じて、前記画像切出部によって切り出された変化後の書類画像と前記原画像との差分画像、および、前記画像送受信部によって受信された変化後の書類画像と前記原画像との差分画像を前記原画像に合成して１つの書類画像を生成することを特徴とする請求項３に記載の画像切出装置。
5. 書類の１辺が載置される書画台と、
   前記書類を撮影する撮影装置と、
   前記撮影装置によって撮影された映像から前記書類を表す書類画像を切り出す画像切出装置とを備え、
   前記画像切出装置は、
   前記映像に基づいて前記書類の輪郭のうち前記書画台に載置された１辺を検出する載置辺検出部と、
   前記載置辺検出部によって検出された１辺に対する対辺の位置を推定する対辺推定部と、
   前記載置辺検出部によって検出された１辺の位置および前記対辺推定部によって推定された対辺の位置に基づいて、前記映像から前記書類画像を切り出す画像切出部とを有する画像切出システム。
6. 書画台に載置された書類が撮影された映像から前記書類を表す書類画像を切り出す画像切出装置に、
   前記映像に基づいて前記書類の輪郭のうち前記書画台に載置された１辺を検出する載置辺検出ステップと、
   前記載置辺検出ステップによって検出された１辺に対する対辺の位置を推定する対辺推定ステップと、
   前記載置辺検出ステップによって検出された１辺の位置および前記対辺推定ステップによって推定された対辺の位置に基づいて、前記映像から前記書類画像を切り出す画像切出ステップとを実行させることを特徴とする画像切出方法。

Images