JP7206739B2 - 撮影装置およびプログラム - Google Patents

Description

本発明は、撮影装置およびプログラムに関する。

下記特許文献１には、撮影対象物の少なくとも２箇所の所定位置に、多値化された図形のシンボルコードにより形成された位置決め用シンボルを設け、撮像手段によって撮影対象物を撮影し、撮影された原画像から位置決め用シンボルを検出し、この位置決め用シンボルを基準に画像補正（台形補正）を行うことにより、ドキュメントの再現性を高める撮像技術が開示されている。

特許第５６０２９２５号

本発明の目的は、撮影対象を１回だけ撮影した場合と比較して、より精密な画像データを取得することが可能な撮影装置およびプログラムを提供することである。

請求項１に係る本発明は、
撮影対象を、複数の領域に分けて複数の分割画像として撮影する撮影手段と、
前記撮影手段により撮影された前記複数の分割画像を補正するとともに、前記複数の分割画像の縦方向と横方向のエッジ検出を行い、検出された横方向と縦方向のエッジの交点からそれぞれの分割画像の少なくとも４点の印字端を特定することにより前記複数の領域間の境界を検出する補正手段と、
前記補正手段による補正後の複数の分割画像を、検出された境界どうしを合わせて合成することにより１つの合成画像を生成する生成手段と、
を備える撮影装置である。

請求項２に係る本発明は、前記補正手段が、前記複数の分割画像を、目的とする大きさおよび形状となるようにそれぞれ補正する請求項１記載の撮影装置である。

請求項３に係る本発明は、前記補正手段が、前記複数の分割画像の大きさ、歪み、傾きをそれぞれ補正する請求項１記載の撮影装置である。

請求項４に係る本発明は、当該撮影対象の用紙情報を取得する取得手段をさらに備え、前記補正手段が、前記取得手段が取得した撮影対象の用紙情報を用いて前記複数の分割画像を補正する請求項１から３いずれかに記載の撮影装置である。

請求項５に係る本発明は、前記撮影対象は周囲に余白が設けられており、前記用紙情報には前記撮影対象の用紙の大きさ、余白、分割数が含まれており、前記補正手段が、前記分割画像の余白以外の部分を、前記用紙情報に含まれる用紙の大きさを前記分割数で分割してさらに余白を差し引いた大きさに補正する請求項４記載の撮影装置である。

請求項６に係る本発明は、前記撮影対象のどの領域をどの向きで撮影するかを表示する表示手段を備える請求項１から５いずれかに記載の撮影装置である。

請求項７に係る本発明は、前記表示手段が、前記撮影手段によって撮影される前記撮影対象の画像と、前記撮影対象の撮影対象領域の四隅の目標位置を表示し、前記撮影手段は、前記目標位置と前記撮影対象領域の四隅の位置とが前記表示手段に表示された画像内において予め定められた範囲内で一致した場合に、前記撮影対象領域を撮影する請求項６記載の撮影装置である。

請求項８に係る本発明は、
撮影装置を構成するコンピュータに、
撮影対象を、複数の領域に分けて複数の分割画像として撮影するステップと、
前記複数の分割画像を補正するとともに、前記複数の分割画像の縦方向と横方向のエッジ検出を行い、検出された横方向と縦方向のエッジの交点からそれぞれの分割画像の少なくとも４点の印字端を特定することにより前記複数の領域間の境界を検出するステップと、
補正後の複数の分割画像を、検出された境界どうしを合わせることにより合成することにより１つの合成画像を生成するステップと、
を実行させるプログラムである。

請求項１に係る本発明によれば、撮影対象を１回だけ撮影した場合と比較して、より精密な画像データを取得することが可能な撮影装置を提供できる。また、分割画像のエッジ検出を行わない場合と比較して、複数の分割画像を、それぞれの領域間の境界線においてより正確につなぎ合わせた合成画像を得ることが可能となる。

請求項２に係る本発明によれば、複数の領域を撮影する際に、それぞれの領域が異なる角度から撮影されたり、撮影されたそれぞれの領域の分割画像の倍率が異なったりする場合でも、撮影対象を１回だけ撮影した場合と比べて精密な合成画像を得ることが可能となる。

請求項３に係る本発明によれば、複数の領域を撮影する際に、それぞれの領域が異なる角度から撮影されたり、撮影されたそれぞれの領域の分割画像の倍率が異なったりする場合でも、撮影対象を１回だけ撮影した場合と比べて精密な合成画像を得ることが可能となる。

請求項４に係る本発明によれば、撮影対象の用紙情報を用いない場合と比較して、撮影対象の用紙情報を反映したより正確な合成画像を得ることが可能となる。

請求項５に係る本発明によれば、撮影対象が余白を含んでいて、余白と背景が同色であるような場合でも、撮影対象の倍率および余白の大きさに正しく対応した合成画像を得られる。

請求項６に係る本発明によれば、複数の分割画像が正しい向きおよび順序で繋げられた合成画像を得られる。

請求項７に係る本発明によれば、それぞれの分割領域を撮影する際に、当該領域をより実物に近い形状および大きさで撮影できるとともに、手ぶれによって撮影画像がぼやけることを防止できる。

請求項８に係る本発明によれば、撮影装置を構成するコンピュータに、撮影対象を１回だけ撮影した場合と比較して、より精密な画像データを取得することを可能とするプログラムを実行させることが可能となる。また、分割画像のエッジ検出を行わない場合と比較して、複数の分割画像を、それぞれの領域間の境界線においてより正確につなぎ合わせた合成画像を得ることが可能となる。

図１（Ａ）は、本実施形態における撮影装置２０の一例を示す外観斜視図であり、図１（Ｂ）は、撮影装置２０を使用して撮影対象３０を撮影した場合の斜視図である。 図２（Ａ）は、撮影対象３０を中央線で２つ折にして、第１面を撮影する場合の説明図であり、図２（Ｂ）は、撮影対象３０を２つ折にしたまま裏表をひっくり返した状態を説明する説明図であり、図２（Ｃ）は、撮影対象３０の第２面を上にした状態で撮影した場合の説明図である。 本実施形態の撮影装置２０のハードウェア構成を示す図である。 図３の撮影装置２０の機能ブロックを示す図である。 本実施形態の撮影装置２０における画像合成処理の流れを示すフローチャートである。 ディスプレイ２０４に表示される用紙情報入力画面６００の一例を示す図である。 撮影対象３０の第１面を撮影する指示を表示する撮影指示表示画面７００の一例を示す。 撮影対象３０の分割領域撮影時の撮影画面８００の一例を示す。 撮影対象３０の第２面を撮影する指示を表示する撮影指示表示画面９００の一例を示す。 図１０（Ａ）は、撮影された分割画像を示し、図１０（Ｂ）は、図１０（Ａ）の分割画像からエッジ検出により、印字部分のみを抽出した状態を示し、図１０（Ｃ）は、図１０（Ｂ）の抽出された印字部分の画像を設定された大きさ、形状となるように補正した状態を示し、図１０（Ｄ）は、図１０（Ｂ）の画像に対して設定された余白を復元した状態を示す。 図１０において補正された分割画像を合成した合成画像を示す。 図１２（Ａ）は、遮蔽用の紙を、撮影対象３０の上に、分割線７２４を境界として片側を被せて覆い隠した状態を示し、図１２（Ｂ）は、撮影対象３０と同じ大きさの用紙を二つ折りにして撮影対象３０に被せ、一方の分割領域のみを撮影可能とした状態を示す。 図１３（Ａ）は、帯状の印刷パターンを撮影対象３０の紙面の上下余白内側に印字しておき、撮影時に一方の分割領域のみを撮影可能とした状態を示し、図１３（Ｂ）は、ブロック状の印刷パターンを撮影対象３０の紙面の上下余白内側に印字しておき、撮影時に一方の分割領域のみを撮影可能とした状態を示す。

本発明の一実施形態における撮影装置２０について、図１を参照して説明する。図１（Ａ）は、本実施形態における撮影装置２０の一例を示す外観斜視図であり、図１（Ｂ）は、撮影装置２０を使用して撮影対象３０を撮影した場合の斜視図である。図１に示すように、本実施形態における撮影装置２０は例えばタブレット型コンピュータであるが、本発明はこれに限定されず、下記に説明する構成を有するものであれば、スマートフォンやデジタルカメラであってもよいし、カメラ装置を備えたノートブック型コンピュータなど他の端末装置であってもよい。撮影装置２０の筐体２００には、裏面にカメラ２０６が設けられる。さらに、撮影装置２０の筐体２００の表面にはその大部分を占めるようにディスプレイ２０４が設けられている。

後述するが、撮影対象３０を撮影する際に、カメラ２０６によって捕捉される撮影対象３０の画像はディスプレイ２０４にリアルタイムに表示され、ユーザはディスプレイ２０４に映し出される撮影対象３０を視認しながらディスプレイ２０４上に配置された入力インタフェース（後述する）を操作して撮影対象３０を撮影することができる。

なお、本実施形態において、撮影対象３０は、プリンタや複合機などの画像形成装置により出力されたテスト画像であり、このテスト画像は、例えば黒色、シアン、マゼンタ、イエローのうちの一色、あるいは混合した一色をある濃度で、紙面の余白以外の部分全体に印刷した塗りつぶし画像、あるいは全面ハーフトーン画像である。特に、ある一定の階調値の画像データを印刷出力した場合のむらの有無やバンディングの有無を確認することを可能とする画像を出力するテスト画像である。もちろん、本発明で撮影の対象とされるものはこの例に限定されず、他の画像であってもよい。

上述したような撮影対象３０を撮影装置２０により撮影する際に、撮影対象３０が比較的大きい場合がある。例えば、撮影対象３０の用紙サイズが「Ａ３」サイズのように大きい場合、この撮影対象３０を撮影装置２０によって一回で撮影しようとすると、撮影装置２０のカメラ２０６を撮影対象３０からある程度遠ざけなければならなくなり、高精度の画像を得ることができなくなる。高精度の画像を得ることができなくなると、上述のようなある一定の階調値の画像データを印刷出力した場合のむらの有無やバンディングの有無を確認する際には不都合が生じるため、可能な限り高精度の画像を撮影したほうが良い。

そのため、本実施形態の撮影装置２０では、撮影対象３０を複数の領域に分けて撮影して補正し、補正後の複数の分割画像を合成することにより、精度の高い１つの合成画像を生成している。例えば、図２（Ａ）に示すように、撮影対象３０を中央線３０Ｃで２つ折にして、第１面３０Ａを撮影する。次いで図２（Ｂ）に示すように、撮影対象３０を２つ折にしたまま裏表をひっくり返し、図２（Ｃ）に示すように第２面３０Ｂを上にした状態で第２面３０Ｂを撮影する。そして撮影装置２０において、第１面３０Ａを撮影した分割画像と第２面３０Ｂを撮影した分割画像とを補正し、１枚の合成画像を生成する。

図３を参照して、本実施形態の撮影装置２０の構成について説明する。なお、図３は、本実施形態の撮影装置２０のハードウェア構成を示す図である。

図３に示すように、撮影装置２０は、制御用マイクロプロセッサ２０１、メモリ２０２、記憶装置２０３、ディスプレイ２０４、入力インタフェース２０５、カメラ２０６を有し、それぞれの構成要素は制御用バス２０７に接続される。

制御用マイクロプロセッサ２０１は、記憶装置２０３に記憶された制御プログラムに基づいて、撮影装置２０の各部の動作を制御する。

メモリ２０２には、カメラ２０６によって撮影された撮影対象３０の画像、および後述する用紙情報取得部により取得された撮影対象の用紙情報、画像補正部によって補正された画像、および画像生成部により生成される合成画像が記憶される。

記憶装置２０３は、ソリッド・ステート・ドライブ（ＳＤＤ）やハードディスク（ＨＤＤ）によって構成され、撮影装置２０の各部を制御するための制御プログラムが格納される。

ディスプレイ２０４は、この撮影装置２０の筐体２００の表面に設けられた液晶ディスプレイや有機ＥＬディスプレイで構成され、後述する表示制御部によって生成される情報が表示される。

入力インタフェース２０５は、上記ディスプレイ２０４の表面に重ねて配置された透明なタッチパネルであり、撮影装置２０を操作するユーザが指示を入力するための入力手段である。

カメラ２０６は、撮影装置２０の筐体２００の裏面に設けられ、後述するカメラ制御部の指示、あるいはユーザが入力インタフェース２０５を操作することにより入力される指示により撮影対象３０の画像を分割して撮影し、撮影した画像をメモリ２０２に記憶する。

次に、図４を参照して、本実施形態における撮影装置２０の機能について説明する。図４は、図３の撮影装置２０の機能ブロックを示す図である。図４に示すように、撮影装置２０は、記憶装置２０３に記憶された制御プログラムを制御用マイクロプロセッサ２０１において実行することにより、カメラ制御部２１１、用紙情報取得部２１２、画像補正部２１３、画像生成部２１４、表示制御部２１５の各機能を発揮する。

カメラ制御部２１１は、カメラ２０６の動作を制御する。カメラ制御部２１１は、カメラ２０６によって捉えられた映像の中に撮影対象３０が所定の条件、例えばディスプレイ２０４に表示される目標位置と撮影対象領域の四隅の位置とがディスプレイ２０４に表示された画像内において予め定められた範囲内で一致した場合に、焦点を合わせ、撮影対象領域を撮影し、撮影された画像をメモリ２０２に記憶する。このとき、カメラ制御部２１１は、撮影対象３０を、複数の領域に分けられた複数の分割画像として撮影する。

用紙情報取得部２１２は、撮影対象の用紙情報を取得する。撮影対象は一般に周囲に余白が設けられており、用紙情報には撮影対象の用紙の大きさ、余白、分割数といった用紙の特性情報が含まれる。なお、本実施形態においては、撮影対象は用紙に印字されたものであるが、本発明の撮影対象である用紙は、紙に限定されず、プラスチック板、布などの印刷媒体など、印字可能なもの、あるいは印字されたものであれば任意に採用することができる。用紙情報取得部２１２は、表示制御部２１５に用紙情報を入力するようユーザに求めるユーザインタフェースを表示するよう指示し、入力インタフェース２０５をユーザが入力することにより入力された用紙情報をメモリ２０２に記憶する。

画像補正部２１３は、カメラ２０６によって撮影された複数の分割画像を補正する。具体的には、画像補正部２１３は、当該複数の分割画像を、目的とする大きさおよび形状となるようにそれぞれ補正する。あるいは、画像補正部２１３は、当該複数の分割画像の大きさ、歪み、傾きをそれぞれ補正する。なお、その際に、画像補正部２１３は、用紙情報取得部２１２が取得した撮影対象の用紙情報を用いて複数の分割画像を補正する。

つまり、撮影対象３０を撮影装置２０のカメラ２０６で撮影した場合、多くの場合に撮影対象３０はわずかに斜めに撮影されたり、撮影の度に撮影対象３０との距離が異なるために異なる大きさで撮影されたりするため、撮影された画像を射影変換することによって歪みを除去するとともに画像の大きさを調節する。その際に、画像補正部２１３は、分割画像の余白以外の部分を、用紙情報取得部２１２によって取得された用紙情報に含まれる用紙の大きさを設定された分割数で分割してさらに余白を差し引いた大きさおよび形状となるように補正する。この補正の際に、画像補正部２１３は、補正された余白以外の画像の周囲に、つまり余白があるべき部分に、用紙情報に含まれる余白に相当する無地の画像を追加する補正を行う。

なお、画像補正部２１３は、上記分割画像の余白以外の部分を特定するため、また、複数の領域間の境界を検出するため、それぞれの分割画像のエッジ検出を行う。具体的には、画像補正部２１３は、分割画像における縦方向と横方向のエッジを検出することにより、その交点から印字領域の頂点を特定する。

画像生成部２１４は、画像補正部２１３により補正された補正後の複数の分割画像を、上記画像補正部２１３により検出された境界どうしを繋ぎ合わせることにより合成された１つの合成画像を生成する。

表示制御部２１５は、ディスプレイ２０４に表示する画像を生成、処理する。表示制御部２１５は、カメラ２０６によって撮影対象を撮影する際にカメラ２０６が捉えている映像をディスプレイ２０４に表示したり、画像生成部２１４により生成された画像をディスプレイ２０４に表示したり、ユーザに対して用紙情報の入力を含む様々な指示の入力を求めるユーザインタフェース（ＵＩ）をディスプレイ２０４に表示させる制御を行う。さらに、表示制御部２１５は、カメラ２０６によって撮影される撮影対象３０の画像をリアルタイムにディスプレイ２０４に表示させたり、撮影対象３０の撮影対象領域の四隅の目標位置をディスプレイ２０４に表示させたりする。

次に、図５～図９を参照して、本実施形態の撮影装置２０における処理の流れを説明する。なお、図５は、本実施形態の撮影装置２０における画像合成処理の流れを示すフローチャートである。なお、以下の説明においては、撮影対象３０がＡ３用紙の場合を例として説明するが、本発明は、撮影対象３０がＡ３用紙の場合に限られず、他の大きさの用紙にも等しく適用可能である。

図５のステップＳ５０１において、用紙情報取得部２１２は、表示制御部２１５に用紙情報を入力するようユーザに求めるユーザインタフェースを表示するよう指示する。表示制御部２１５は、図６に示すような用紙情報入力画面６００を生成してディスプレイ２０４に表示する。なお、図６は、ディスプレイ２０４に表示される用紙情報入力画面６００の一例を示す図である。

図６に示すように、用紙情報入力画面６００は、「用紙情報を入力してください」といった入力要請メッセージ６１０、用紙サイズ入力欄６２０、余白情報入力欄６３０、分割数入力欄６４０を含む。なお、図６では、用紙サイズ入力欄６２０に、用紙サイズ「Ａ３」、余白情報入力欄６３０に「上部余白」、「下部余白」、「左余白」「右余白」としてそれぞれ「６．０ｍｍ」が入力され、さらに分割数入力欄６４０に「２」が入力された例を示している。用紙情報取得部２１２は、これらユーザが入力インタフェース２０５を操作することにより入力された用紙情報をメモリ２０２に記憶する。

ステップＳ５０２において、カメラ制御部２１１は、撮影回数を表す変数Ｎ＝１と設定する。

ステップＳ５０３において、表示制御部２１５は、第Ｎ面、つまり第Ｎ個目の分割領域を撮影する旨をディスプレイ２０４に表示させる。なお、撮影回数がＮ＝１回目の場合、第１面、つまり第１個目の分割領域を撮影する旨をディスプレイ２０４に表示する。図７は、撮影対象３０の第１面を撮影する指示を表示する撮影指示表示画面７００の一例を示す。図７に示すように、撮影指示表示画面７００には、「第１面を撮影します」といった説明文７１０、撮影対象３０である用紙全体のどの領域を撮影するかを示す簡易図７２０、および「確認」ボタンが含まれる。

この簡易図７２０では、撮影対象３０である用紙全体を簡略的に示した用紙外形７２１と、余白７２２、用紙の向きを示す方向表示マーク７２３、および分割線７２４を含む。なお、方向表示マーク７２３は、図８では、図面左側を向いた三角形の印であり、横方向の用紙の左端を左側とし、分割線７２４を中心として左側を第１回目の撮影で撮影することを示している。ユーザは、この簡易図７２０を参照しつつ、撮影対象３０である用紙を分割線７２４（用紙の中央線３０Ｃ：実際にはこの中央線３０Ｃは印字されているわけではない）に沿って山折りにし、用紙左端が左側を向くように机などに載置し、「確認」ボタン７３０を選択する。

次いで、図５のステップＳ５０４に進み、カメラ制御部２１１はカメラ２０６を起動させ、表示制御部２１５は、カメラ２０６によって捕捉される撮影対象３０を含む画像をリアルタイムにディスプレイ２０４に表示する。同時に、撮影対象３０の撮影対象領域の四隅の目標位置をディスプレイ２０４に表示させる。図８は、撮影対象３０の分割領域撮影時の撮影画面８００の一例を示す。図８に示すように、撮影画面８００には、四隅の目標位置を示す補助マーク８１０、撮影対象３０である用紙の向きを表す方向表示マーク、およびカメラ２０６によって捕捉される撮影対象３０の画像８３０が表示されている。

図５のステップＳ５０５において、カメラ制御部２１１は、カメラ２０６によって捉えられた映像の中に撮影対象３０が所定の条件、例えばディスプレイ２０４に表示される補助マーク８１０と撮影対象領域の四隅の位置とがディスプレイ２０４に表示された画像内において予め定められた範囲内で一致しているか否かを判断する。条件を満たしていないと判断した場合、ステップＳ５０４に戻り、カメラ２０６によって撮影対象３０の捕捉を継続して行うとともにその画像をディスプレイ２０４に表示する。条件を満たしていると判断した場合、ステップＳ５０６に進む。

ステップＳ５０６において、カメラ制御部２１１は、カメラ２０６によって撮影対象３０に焦点を合わせ、第Ｎ個目の分割領域の撮影を行い、撮影された分割画像をメモリ２０２に保存する。

ステップＳ５０７において、カメラ制御部２１１は、撮影回数が撮影対象３０である用紙の分割数（撮影回数Ｎ＝分割数）であるか否かを判断する。撮影回数Ｎが分割数に等しくない場合、あるいは撮影回数Ｎが分割数より少ない場合、ステップＳ５０８においてカメラ制御部２１１は撮影回数Ｎ＝Ｎ+１とし、ステップＳ５０３に戻る。例えば、撮影対象３０の分割数が「２」であり、撮影回数が「１」、つまり第１の分割領域のみ撮影が終了している場合には、撮影回数Ｎが分割数より少ないので、ステップＳ５０３に戻り、ステップＳ５０３～ステップＳ５０７の処理を、撮影対象３０の第２の分割領域に対して実行する。

この２回目の撮影処理の際、ステップＳ５０３において、表示制御部２１５は、第２面、つまり２個目の分割領域を撮影する旨をディスプレイ２０４に表示させる。図９は、撮影対象３０の第２面を撮影する指示を表示する撮影指示表示画面９００の一例を示す。図９に示すように、撮影指示表示画面９００には、「第２面を撮影します」といった説明文９１０、撮影対象３０である用紙全体のどの領域を撮影するかを示す簡易図９２０、および「確認」ボタン９３０が含まれる。

なお、図７の場合と異なり、簡易図９２０の用紙の向きを示す方向表示マーク９２３は撮影対象３０である用紙の右側にある。さらに、方向表示マーク９２３の向きは、反対方向、つまり図面右側を向いており、横方向の用紙の右端を右側とし、分割線９２４を中心として右側を第２回目の撮影で撮影することを示している。ユーザは、この簡易図９２０を参照しつつ、撮影対象３０である用紙を分割線９２４（用紙の中央線３０Ｃ）に沿ってひっくり返し、用紙右端が右側を向くように机などに載置し、「確認」ボタン９３０を選択する。

図５のステップＳ５０７において、撮影回数Ｎが分割数に等しい場合、ステップＳ５０９に進む。例えば、本実施形態において、撮影対象の分割数が「２」であり、既に実行された撮影回数が「２」回である場合、ステップＳ５０９に進む。

図１０（Ａ）～１０（Ｄ）は、ステップＳ５０９、ステップＳ５１０で行われる、画像補正部２１３による補正処理の概念を示す説明図である。なお、図１０（Ａ）は、撮影された分割画像を示す。図１０（Ａ）に示すように、上述のステップＳ５０６において撮影された分割画像には、撮影対象３０の分割領域そのもの以外にも、用紙端周囲の背景画像などが含まれている。図１０（Ａ）では、撮影対象３０の第１面を撮影した第１の分割画像１０１０と第２面を撮影した第２の分割画像１０２０が図示されている。第１の分割画像１０１０と第２の分割画像１０２０は、第１の分割領域の画像１０１１と第２の分割領域の画像１０２１そのもの以外にもその周囲の背景の画像１０１２、１０２２が含まれる。多くの場合、この背景の画像１０１２、１０２２と、第１の分割領域の画像１０１１と第２の分割領域の画像１０１２に含まれる余白１０１３、１０２３は無地であったりする。

そのため、ステップＳ５０９において、画像補正部２１３は、メモリ２０２に保存されたそれぞれの分割画像のエッジ検出を行うことにより、それぞれの分割画像の４点の印字端を検出する。エッジ検出は、微分フィルタやハフ変換などの演算により行う。具体的には、縦方向と横方向のエッジを検出し、その交点から印字領域の角となる点を特定する。図１０（Ｂ）に示すように、画像補正部２１３は、エッジ検出により、第１の分割領域の画像１０１１と第２の分割領域の画像の、余白を含まない領域１０１４、１０２４のみを抽出する。なお、図１０（Ｂ）は、図１０（Ａ）の分割画像からエッジ検出により、印字部分のみを抽出した状態を示している。

ステップＳ５１０において、画像補正部２１３は、それぞれの分割画像において、ステップＳ５０９によって特定された４つの印字端、つまり余白以外の部分が、用紙情報取得部２１２により取得された用紙サイズを分割数で分割した分割領域からさらに余白の部分を差し引いた大きさおよび形状となるように射影変換し、メモリ２０２に保存する。このときの状態が図１０（Ｃ）に示されている。図１０（Ｃ）は、図１０（Ｂ）の抽出された印字部分の画像を設定された大きさ、形状となるように補正した状態を示している。

図６でユーザにより入力されたように、用紙サイズが「Ａ３」であり、この用紙に上下左右それぞれ６ｍｍの余白が設けられており、この用紙を２分割して撮影すると設定した場合には、画像補正部２１３により、分割画像の印字端内側の領域の画像が、上「６ｍｍ」、下「６ｍｍ」、左右のいずれか「６ｍｍ」の余白を除いた大きさである、縦「２８５ｍｍ」（２９７ｍｍ－１２ｍｍ）、横「２０４ｍｍ」（２１０ｍｍ－６ｍｍ）の長方形状となるように補正を行う。

次いで、画像補正部２１３は、図１０（Ｄ）示されるように、補正された余白なしの画像の上下、および左側または左側に、当初存在したはずである「６ｍｍ」の無地の余白１０１５、１０２５を付加し、補正後の分割画像１０１６、１０２６とする。なお、図１０（Ｄ）は、図１０（Ｂ）の画像に対して設定された余白を復元した状態を示している。

次いで、図５のステップＳ５１１において、画像生成部２１４は、画像補正部２１３により補正された補正後の複数の分割画像を、分割された境界線でつなぎあわせて合成することにより１つの合成画像を生成し、メモリ２０２に保存する。この状態が図１１に示されているが、図１１では、図１０において補正された２つの分割画像が境界線においてつなぎ合わされ、一つの合成画像１１００となっている。

図５のステップＳ５１２において、表示制御部２１５は、ステップＳ５１１において合成された合成画像をディスプレイ２０４に表示し、処理を終了する。

なお、上記の例においては、撮影対象３０が「Ａ３」用紙の場合を例とし、この撮影対象３０を２回に分けて撮影、つまり２つの分割領域に分けて撮影し、それぞれの分割領域に対応する分割画像を補正し、補正後の分割画像を合成して精度の高い合成画像を得る場合について説明した。しかしながら、本発明は、上記の例に限定されず、撮影対象３０が「Ａ２」、「Ａ１」や「Ｂ３」、「Ｂ２」などの比較的大判の用紙に対しても有効である。また、撮影対象を２回に分けて撮影するだけでなく、３回以上、例えば４回に分けて撮影してもよい。

また、上記の例においては、撮影対象３０を、中央線３０Ｃを中心にして二つ折りにすることで、第１の分割領域、第２の分割領域を別々に撮影可能とした場合を例に説明した。しかしながら、本発明は、上記の例に限定されず、他の方法で複数の分割領域を撮影するようにしてもよい。

例えば、印字などしていない無地の遮蔽用の紙を、撮影対象３０の上に、中央線３０Ｃを境界として右側、あるいは左側に載置して覆い隠すことにより、遮蔽用の紙がない部分の撮影対象３０を、第１の分割領域、第２の分割領域としてそれぞれ別々に撮影してもよい。撮影対象３０が上述のように塗りつぶし画像であり、遮蔽用の紙が白色無地の用紙であれば、画像補正部２１３によりエッジ検出を行った際に、分割画像の印字端として特定できる（図１２（Ａ）参照）。

あるいは、撮影対象３０が上記のように「Ａ４」用紙である場合、印字などしていない同じ大きさの「Ａ４」用紙（遮蔽用の紙）を２つ折にし、撮影対象である「Ａ４」用紙の用紙端から中央線３０Ｃまでの半分の領域を覆い隠し、覆い隠されていない側を第１の分割領域として撮影し、次いで同様に反対側の半分の領域を遮蔽用の紙で覆い隠して第２の分割領域を撮影してもよい（図１２（Ｂ）参照）。

さらに、上記の例では、撮影対象３０は、紙面の余白以外の部分全体に一色を塗りつぶした画像を例として説明したが、本発明は上記の例に限られない。例えば、図１３（Ａ）に示すように、撮影対象３０の紙面の中央線３０Ｃに対して垂直方向に伸びる帯状の印刷パターンを、紙面の上下余白の内側に印字しておいてもよい。その場合、中心の中央線３０Ｃで撮影対象３０を折り返した場合、あるいは中央線３０Ｃの位置まで無地の遮蔽用の紙で覆い隠した場合に、帯状の印刷パターンが中央線３０Ｃで終端するようになることから、画像補正部２１３によりエッジ検出を行った際に、分割画像の印字端として特定できる。

図１３（Ａ）では帯状の印刷パターンを撮影対象３０の紙面の上下余白の内側に印字した例を示したが、帯状の印刷パターンでなくてもよい。例えば、図１３（Ｂ）に示すように、撮影対象３０の紙面の中央線３０Ｃに対して垂直方向に沿って、ブロック状の印刷パターンを紙面の上下余白の内側に、複数配置してもよい。この場合、上下の印刷パターンが少なくとも中央線３０Ｃ部分に重なるようにする。そうすると、中心の中央線３０Ｃで撮影対象３０を折り返した場合、あるいは中央線３０Ｃの位置まで無地の遮蔽用の紙で覆い隠した場合に、上下の印刷パターンが中央線３０Ｃで終端するようになることから、画像補正部２１３によりエッジ検出を行った際に、分割画像の印字端として特定できる。

なお、上述の図１～図１３を参照して説明した実施形態においては、撮影対象３０の撮影および画像の合成処理を、単一の撮影装置２０において行った場合を説明したが、本発明は上記の例に限定されず、撮影対象３０の撮影、および画像処理後の合成画像の表示を撮影装置２０において行い、画像処理そのものは画像処理サーバ（図示せず）において行うようにしてもよい。

その場合、撮影装置２０にカメラ制御部２１１、用紙情報取得部２１２、表示制御部２１５に相当する機能をもたせ、画像処理サーバに上述の画像補正部２１３、画像生成部２１４に相当する機能をもたせるようにすればよい。

なお、その場合、図５のステップＳ５０１～ステップＳ５０８に相当する、撮影対象３０を複数回に分けて分割して撮影する処理を撮影装置２０において行う。次いで、撮影装置２０において撮影された分割画像を画像処理サーバに送信し、画像処理サーバにおいて、図５のステップＳ５０９～ステップＳ５１１に相当する処理を実行し、合成画像を生成する。次いで、合成された合成画像を画像処理サーバから撮影装置２０に送信し、図５のステップＳ５１２のように撮影装置２０のディスプレイ２０４に合成画像を表示させる。あるいは、画像処理サーバから他の端末装置（図示せず）に合成画像を送信し、当該端末装置が備えるディスプレイに合成画像を表示するようにしてもよい。

２０ 撮影装置
３０ 撮影対象
３０Ａ 第１面
３０Ｂ 第２面
３０Ｃ 中央線
２００ 筐体
２０１ 制御用マイクロプロセッサ
２０２ メモリ
２０３ 記憶装置
２０４ ディスプレイ
２０５ 入力インタフェース
２０６ カメラ
２０７ 制御用バス
２１１ カメラ制御部
２１２ 用紙情報取得部
２１３ 画像補正部
２１４ 画像生成部
２１４ 表示制御部
６００ 用紙情報入力画面
６１０ 入力要請メッセージ
６２０ 用紙サイズ入力欄
６３０ 余白情報入力欄
６４０ 分割数入力欄
７００ 撮影指示表示画面
７１０ 説明文
７２０ 簡易図
７２１ 用紙外形
７２２ 余白
７２３ 方向表示マーク
７２４ 分割線
７３０ 「確認」ボタン
８００ 撮影画面
８１０ 補助マーク
８２０ 方向表示マーク
８３０ 撮影対象の画像
９００ 撮影指示表示画面
９１０ 説明文
９２０ 簡易図
９２３ 方向表示マーク
９２４ 分割線
９３０ 「確認」ボタン

Claims (8)

1. 撮影対象を、複数の領域に分けて複数の分割画像として撮影する撮影手段と、
   前記撮影手段により撮影された前記複数の分割画像を補正するとともに、前記複数の分割画像の縦方向と横方向のエッジ検出を行い、検出された横方向と縦方向のエッジの交点からそれぞれの分割画像の少なくとも４点の印字端を特定することにより前記複数の領域間の境界を検出する補正手段と、
   前記補正手段による補正後の複数の分割画像を、検出された境界どうしを合わせて合成することにより１つの合成画像を生成する生成手段と、
   を備える撮影装置。
2. 前記補正手段は、前記複数の分割画像を、目的とする大きさおよび形状となるようにそれぞれ補正する請求項１記載の撮影装置。
3. 前記補正手段は、前記複数の分割画像の大きさ、歪み、傾きをそれぞれ補正する請求項１記載の撮影装置。
4. 当該撮影対象の用紙情報を取得する取得手段をさらに備え、
   前記補正手段は、前記取得手段が取得した撮影対象の用紙情報を用いて前記複数の分割画像を補正する請求項１から３いずれかに記載の撮影装置。
5. 前記撮影対象は周囲に余白が設けられており、
   前記用紙情報には前記撮影対象の用紙の大きさ、余白、分割数が含まれており、
   前記補正手段は、前記分割画像の余白以外の部分を、前記用紙情報に含まれる用紙の大きさを前記分割数で分割してさらに余白を差し引いた大きさに補正する請求項４記載の撮影装置。
6. 前記撮影対象のどの領域をどの向きで撮影するかを表示する表示手段を備える請求項１から５いずれかに記載の撮影装置。
7. 前記表示手段は、前記撮影手段によって撮影される前記撮影対象の画像と、前記撮影対象の撮影対象領域の四隅の目標位置を表示し、
   前記撮影手段は、前記目標位置と前記撮影対象領域の四隅の位置とが前記表示手段に表示された画像内において予め定められた範囲内で一致した場合に、前記撮影対象領域を撮影する請求項６記載の撮影装置。
8. 撮影装置を構成するコンピュータに、
   撮影対象を、複数の領域に分けて複数の分割画像として撮影するステップと、
   前記複数の分割画像を補正するとともに、前記複数の分割画像の縦方向と横方向のエッジ検出を行い、検出された横方向と縦方向のエッジの交点からそれぞれの分割画像の少なくとも４点の印字端を特定することにより前記複数の領域間の境界を検出するステップと、
   補正後の複数の分割画像を、検出された境界どうしを合わせることにより合成することにより１つの合成画像を生成するステップと、
   を実行させるプログラム。
   

Images