JP5858388B2 - 画像記録装置、画像記録方法、画像記録用プログラム及び情報記録媒体 - Google Patents

Description

本発明は、画像記録装置、画像記録方法、画像記録用プログラム及び情報記録媒体の技術分野に属する。より詳細には、カメラ等の撮像手段を備える画像記録装置及び当該画像記録装置において実行される画像記録方法、当該画像記録装置で用いられる画像記録用プログラム及び当該画像記録用プログラムが記録された情報記録媒体の技術分野に属する。

近年の情報化社会においては、業務以外の個人の日常生活においても、書面（紙）等に文字や記号又は図形として記載されている情報を、高画質且つ高解像度或いは広範囲でデジタル的に画像化したいという要望は依然として多い。ここで、上記のような画像化のためには、いわゆるスキャナを用いることが一般的である。この場合のスキャナとしては、例えばいわゆるフラットベッド型のスキャナ等が一般的である。

しかしながら、このようなスキャナを例えば業務以外の個人用として保有することは、コスト、設置場所又は取り扱いの煩雑さ等の面から便利でない場合が多い。また近年では、個人としてパーソナルコンピュータを保有しない場合も多くなり、よって上記スキャナを接続する本体としてのパーソナルコンピュータがそもそも存在しない環境も、個人宅等においては増加している。更に、一般に大型のフラットベッド型スキャナが必要な単行本、雑誌又は大型紙などに記載されている情報の画像化は、上記のような事情でより困難である場合が多い。

一方、個人が手軽に扱える撮像用装置としては、いわゆるデジタルカメラが一般化している。しかしながら現在入手可能なデジタルカメラをスキャナ代わりに用いようとしても、一般の個人が扱う場合は、例えば撮像時に手ブレが起きる、或いは周囲の照明が不適切といった理由により、スキャナとしては撮像に失敗する場合が多い。また、複数回の撮像（スキャン）を行おうとすると、当該撮像の度に、撮像対象となる書面等をセットし直し、更にデジタルカメラを持ち直して撮像する、と言った煩雑な手間を繰り返す必要がある。

他方、手書きの書面等の場合、当該書面上への記入順序が後ほど重要となる場合が多いが、手書きが完了した後の最終的な書面等を撮像しただけでは、一般に書面等上の内容が手書きされた順序を読み取ることはできない。そして、このような手書きの順序を情報として保存するためには、一つの情報が手書きされる度にその手書き作業を中断して手書きされた内容を撮像しなければならないと言った大変煩雑な手間が必要となる。

更に、上記スキャナをパーソナルコンピュータに接続して画像化を行う場合、読み取られた画像データ等は、基本的にはそのパーソナルコンピュータ内に記憶又は蓄積される。この場合、例えば外出先や他人所有のスキャナを用いると、その読み取られた画像データ等は当該外出先又は他人所有のパーソナルコンピュータに記憶等されることとなり、結果として、例えば機密保持上の問題やその画像データ等を改めて自身のパーソナルコンピュータ等に移動する手間が必要である等、使い勝手が悪い場合が多い。

他方、最近では、いわゆるスマートフォンやタブレット型情報端末など、カメラが内蔵された携帯型の情報機器を誰もが携行するようになってきており、しかもそれらは常に身に着けられている場合が多い。また、当該情報機器に備えられたカメラが備える撮像能力や画像処理能力、或いはネットワークへの接続能力は、いずれも近年大きく向上してきており、今後も急速な改善が期待される。

なお、上述したスキャナ又は撮像処理に関連する先行技術としては、例えば下記特許文献１及び特許文献２に開示されている内容が知られている。

米国特許第６，０６１，４７８号公報 米国特許第７，９４９，３７０ Ｂ１号公報

以上のように、書面等に記載されている情報を手軽に画像化したいという要望が多いにも拘わらず、それを個人でも簡易に実現できる有効な方法は、現状では存在していない。よって、このような画像化の方法の確立が望まれている。

そこで、本発明は上記の要望に鑑みて為されたもので、その課題の一例は、書面等の撮像対象物に記載されている情報を簡易に且つ高画質に撮像して記録することが可能な画像記録装置及び当該画像記録装置において実行される画像記録方法、当該画像記録装置で用いられる画像記録用プログラム及び当該画像記録用プログラムが記録された情報記録媒体を提供することにある。

上記の課題を解決するために、請求項１に記載の発明は、書面等の撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力するカメラ等の撮像手段と、各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別するＣＰＵ等の識別手段と、前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報をＲＯＭ等の記録媒体に記録するＣＰＵ等の記録手段と、を備える。

上記の課題を解決するために、請求項３３に記載の発明は、書面等の撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力するカメラ等の撮像手段を備える画像記録装置において実行される画像記録方法において、各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別工程と、前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録工程と、を含む。

上記の課題を解決するために、請求項３４に記載の発明は、書面等の撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力するカメラ等の撮像手段を備える画像記録装置に含まれるコンピュータを、各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別手段、及び、前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録手段、として機能させる。

上記の課題を解決するために、請求項３５に記載の発明は、書面等の撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力するカメラ等の撮像手段を備える画像記録装置に含まれるコンピュータを、各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別手段、及び、前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録手段、として機能させる画像記録用プログラムが前記コンピュータにより読み取り可能に記録されている。

請求項１又は請求項３３から請求項３５のいずれか一項に記載の発明によれば、撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段により連続して撮像物載置位置又は撮像対象物を撮像し、各撮像情報に基づいて対象物載置位置に撮像対象物が置かれていることが識別されたとき、当該識別がされたタイミングに対応して出力された撮像情報を自動的に記録媒体に記録するので、例えば記録や撮像のための撮像手段に対する使用者の操作によるぶれを防止しつつ、撮像対象物上に記載されている情報を簡易に撮像して記録することができる。

上記の課題を解決するために、請求項２に記載の発明は、請求項１に記載の画像記録装置において、前記識別手段は、前記撮像手段からそれぞれ出力された前記撮像情報に基づき、当該各撮像情報における前記撮像対象物と当該撮像対象物の周囲とを画する境界が識別されたとき、前記対象物載置位置に前記撮像対象物が置かれていると識別するように構成される。

請求項２に記載の発明によれば、請求項１に記載の発明の作用に加えて、撮像手段からそれぞれ出力された撮像情報に基づき、各撮像情報における撮像対象物と当該撮像対象物の周囲とを画する境界が識別されたとき、対象物載置位置に撮像対象物が置かれていると識別するので、より確実且つ簡易に撮像対象物を撮像してそれに記載されている情報を記録することができる。

上記の課題を解決するために、請求項３に記載の発明は、請求項２に記載の画像記録装置において、前記境界が識別されたとき、当該識別された境界を示す境界線を前記撮像情報における前記撮像対象物に対応付けて表示する表示部等の表示手段を更に備える。

請求項３に記載の発明によれば、請求項２に記載の発明の作用に加えて、撮像対象物と周囲との境界が識別されたとき、当該境界を示す境界線を撮像対象物に対応付けて表示するので、より正確に当該表示がされるように例えばユーザが撮像対象物を移動させる等することにより、当該境界の認識精度及び撮像自体の成功率を向上させることができる。

上記の課題を解決するために、請求項４に記載の発明は、請求項１に記載の画像記録装置において、前記識別手段は、前記撮像手段からそれぞれ出力された前記撮像情報に基づき、当該各撮像情報の一部又は全部が時系列において所定量変化し、その後に当該変化がなくなったと識別されたとき、前記対象物載置位置に前記撮像対象物が置かれていると識別するように構成される。

請求項４に記載の発明によれば、請求項１に記載の発明の作用に加えて、撮像手段からそれぞれ出力された撮像情報に基づき、撮像情報の一部又は全部が時系列において所定量変化し、その後に当該変化がなくなったと識別されたとき、対象物載置位置に前記撮像対象物が置かれていると識別するので、より確実且つ簡易に撮像対象物を撮像してそれに記載されている情報を記録することができる。

上記の課題を解決するために、請求項５に記載の発明は、請求項１に記載の画像記録装置において、前記識別手段は、前記撮像対象物が載置される載置台の前記対象物載置位置に相当する部分の特徴を示す特徴情報に基づいて、前記載置台の前記対象物載置位置が遮られたことが認識されたとき、前記対象物載置位置に前記撮像対象物が置かれていると識別するように構成される。

請求項５に記載の発明によれば、請求項１に記載の発明の作用に加えて、撮像対象物が載置される載置台の対象物載置位置に相当する部分の特徴を示す特徴情報に基づいて、載置台の対象物載置位置が遮られたことが認識されたとき、対象物載置位置に撮像対象物が置かれていると識別するので、より確実且つ簡易に撮像対象物を撮像してそれに記載されている情報を記録することができる。

上記の課題を解決するために、請求項６に記載の発明は、請求項１に記載の画像記録装置において、前記識別手段は、前記撮像対象物が置かれていない前記対象物載置位置に相当する前記撮像情報と、他の前記撮像情報と、の差分に基づいて、前記対象物載置位置に前記撮像対象物が置かれていると識別するように構成される。

請求項６に記載の発明によれば、請求項１に記載の発明の作用に加えて、撮像対象物が置かれていない対象物載置位置に相当する撮像情報と、他の撮像情報と、の差分に基づいて、対象物載置位置に撮像対象物が置かれていると識別するので、より確実且つ簡易に撮像対象物を撮像してそれに記載されている情報を記録することができる。

上記の課題を解決するために、請求項７に記載の発明は、請求項１から請求項６にいずれか一項に記載の画像記録装置において、前記撮像対象物が置かれていることが認識されているか否かを逐次告知する表示部等の告知手段を更に備える。

請求項７に記載の発明によれば、請求項１から請求項６のいずれか一項に記載の発明の作用に加えて、撮像対象物が置かれていることが認識されているか否かが逐次告知されるので、当該告知に基づいて例えばユーザが撮像対象物を移動させる等することにより、当該置かれていることの認識精度及び撮像自体の成功率を向上させることができる。なおこの場合の告知は、視覚による方法、聴覚による方法又は画像記録装置を振動させる方法などを用いることができる。

上記の課題を解決するために、請求項８に記載の発明は、請求項１から請求項７のいずれか一項に記載の画像記録装置において、前記対象物載置位置に前記撮像対象物が置かれていると識別された後、前記撮像情報における少なくとも前記撮像対象物が予め設定された所定時間静止しているか否かを判定するＣＰＵ等の判定手段と、前記判定手段による前記撮像対象物が前記所定時間静止している旨の判定に対応して出力された前記撮像情報を前記記録媒体に記録するように前記記録手段を制御するＣＰＵ等の制御手段と、を備える。

請求項８に記載の発明によれば、請求項１から請求項７のいずれか一項に記載の発明の作用に加えて、撮像対象物が置かれていると識別された後、撮像情報における少なくとも撮像対象物が予め設定された所定時間静止している旨の判定に対応して出力された撮像情報を記録媒体に記録するので、少なくとも撮像対象物に変化がない状態で撮像することにより、より高画質に撮像対象物を撮像することができる。

上記の課題を解決するために、請求項９に記載の発明は、請求項１から請求項８のいずれか一項に記載の画像記録装置において、前記対象物載置位置に前記撮像対象物が置かれていると識別された後、前記撮像情報における前記撮像対象物の範囲内に当該撮像対象物以外の他の物が撮像されているか否かを判定するＣＰＵ等の判定手段と、前記撮像情報における前記撮像対象物の範囲内に前記他の物が撮像されていると判定されたとき、当該判定されたタイミングに対応して出力された前記撮像情報の前記記録媒体への記録を禁止するように前記記録手段を制御するＣＰＵ等の制御手段と、を備える。

請求項９に記載の発明によれば、請求項１から請求項８のいずれか一項に記載の発明の作用に加えて、撮像対象物が置かれていると識別された後、撮像対象物の範囲内に他の物が撮像されていると判定されたとき、そのタイミングに対応して出力された撮像情報の記録を禁止するので、撮像対象物以外の他の物が撮像された撮像情報が記録されることを防止することができる。

上記の課題を解決するために、請求項１０に記載の発明は、請求項１から請求項９のいずれか一項に記載の画像記録装置において、前記記録媒体に記録済みの第１撮像情報における前記撮像対象物と、前記第１撮像情報が前記記録媒体に記録されたタイミングより後に前記撮像手段から出力された第２撮像情報における前記撮像対象物と、を各前記撮像ごとに比較するＣＰＵ等の比較手段と、前記第１撮像情報における前記撮像対象物と、前記第２撮像情報における前記撮像対象物と、が同一であるとき、前記第２撮像情報の前記記録媒体への記録を禁止するように前記記録手段を制御するＣＰＵ等の制御手段と、を備える。

請求項１０に記載の発明によれば、請求項１から請求項９のいずれか一項に記載の発明の作用に加えて、記録済みの第１撮像情報における撮像対象物と、未記録の第２撮像情報における撮像対象物と、を各撮像ごとに比較し、両者が同一であるとき、第２撮像情報の記録を禁止するので、同一の撮像対象物を含む撮像情報が重複して記録されることを防止できる。

上記の課題を解決するために、請求項１１に記載の発明は、請求項１から請求項１０のいずれか一項に記載の画像記録装置において、前記撮像対象物に関連する関連対象物の像を前記撮像対象物上に投影するプロジェクタ等の投影手段を備え、前記像が投影されているタイミングにおいて前記撮像手段から出力された前記撮像情報を前記記録媒体に記録するように前記記録手段を制御するように構成される。

請求項１１に記載の発明によれば、請求項１から請求項１０のいずれか一項に記載の発明の作用に加えて、撮像対象物に関連する関連対象物の像を撮像対象物上に投影し、その像が投影されているタイミングにおいて出力された撮像情報を記録するので、関連対象物との関係を明確としつつ、撮像対象物を撮像して記録することができる。

上記の課題を解決するために、請求項１２に記載の発明は、請求項１１に記載の画像記録装置において、前記像が投影されている前記撮像対象物に相当する前記撮像情報と、前記像の投影が一時的に中断されている間の前記撮像対象物に相当する前記撮像情報と、を共に前記記録媒体に記録するように前記記録手段を制御するように構成される。

請求項１２に記載の発明によれば、請求項１１に記載の発明の作用に加えて、関連撮像対象物の像が投影されている撮像対象物に相当する撮像情報と、当該像の投影が一時的に中断されている間の撮像対象物に相当する撮像情報と、を共に記録媒体に記録するので、当該像の投影が終了した撮像対象物に相当する撮像情報を選択的に記録することができる。

上記の課題を解決するために、請求項１３に記載の発明は、請求項１から請求項１２のいずれか一項に記載の画像記録装置において、同一の前記撮像対象物に相当する複数の前記撮像情報を合成して合成撮像情報を生成するＣＰＵ等の合成手段を更に備え、前記生成された合成撮像情報を前記記録媒体に記録するように前記記録手段を制御するように構成される。

請求項１３に記載の発明によれば、請求項１から請求項１２のいずれか一項に記載の発明の作用に加えて、同一の撮像対象物に相当する複数の撮像情報を合成して合成撮像情報を生成して記録するので、より高画質或いは広範囲の撮像対象物に相当する撮像情報を記録することができる。

上記の課題を解決するために、請求項１４に記載の発明は、請求項１３に記載の画像記録装置において、前記合成手段は、同一の前記撮像対象物に相当する複数の前記撮像情報であって、前記撮像対象物の撮像条件が相互に異なる複数の前記撮像情報を合成して前記合成撮像情報を生成するように構成される。

請求項１４に記載の発明によれば、請求項１３に記載の発明の作用に加えて、同一の撮像対象物に相当し且つ撮像対象物の撮像条件が相互に異なる複数の撮像情報を合成して合成撮像情報を生成するので、例えば立体的に撮像対象物を撮像することができ、より高画質且つ高精度の撮像対象物に相当する撮像情報を記録することができる。

上記の課題を解決するために、請求項１５に記載の発明は、請求項１３に記載の画像記録装置において、前記撮像手段と前記撮像対象物との相対的な位置の、前後する撮像間における変更に基づき、前記合成手段は、同一の前記撮像対象物に相当する当該変更前後の複数の前記撮像情報を用いて、当該各撮像情報それぞれに相当する画像よりも高画質或いは広範囲の合成画像に相当する前記合成撮像情報を生成するように構成される。

請求項１５に記載の発明によれば、請求項１３に記載の発明の作用に加えて、撮像手段と撮像対象物との相対的な位置の、前後する撮像間における変更に基づき、同一の撮像対象物に相当する当該変更前後の複数の撮像情報それぞれに相当する画像よりも高画質或いは広範囲の合成画像に相当する合成撮像情報を生成するので、撮像対象物に相当するより高画質或いは広範囲の合成撮像情報を記録することができる。

上記の課題を解決するために、請求項１６に記載の発明は、請求項１から請求項１５のいずれか一項に記載の画像記録装置において、前記撮像対象物は、人を個人的に特定する個人情報が記載された撮像対象物であるように構成される。

請求項１６に記載の発明によれば、請求項１から請求項１５のいずれか一項に記載の発明の作用に加えて、撮像対象物に個人情報が記載されているので、個人情報を改めて記入したり入力したりする手間を省くことができる。

上記の課題を解決するために、請求項１７に記載の発明は、請求項１から請求項１６のいずれか一項に記載の画像記録装置において、前記撮像情報が前記記録媒体に記録されたとき、当該記録された撮像情報に関連付けられ、且つ当該記録された撮像情報に関連するイベントを特定するイベント情報を生成するＣＰＵ等のイベント情報生成手段と、前記生成されたイベント情報がイベント情報記録手段に既に記録されているいずれかのイベント情報と同一のイベントに対応しているか否かを照合するＣＰＵ等の照合手段と、前記生成されたイベント情報が前記イベント情報記録手段に記録されているいずれのイベント情報と同一のイベントにも対応していないとき、当該生成されたイベント情報を当該イベント情報記録手段に記録させる通信インターフェース等の送信手段と、を更に備える。

請求項１７に記載の発明によれば、請求項１から請求項１６のいずれか一項に記載の発明の作用に加えて、撮像情報が記録媒体に記録されたとき、記録された撮像情報に関連付けられ且つ当該撮像情報に関連するイベントを特定するイベント情報を生成し、それがイベント情報記録手段に記録されているいずれのイベント情報と同一のイベントにも対応していない場合に当該イベント情報記録手段にその生成されたイベント情報を記録させるので、撮像対象物に関連付けられ且つ撮像情報に関連するイベントを特定するイベント情報を簡易に生成して記録させることで、当該イベント情報を簡易に維持管理することができる。

上記の課題を解決するために、請求項１８に記載の発明は、請求項１７に記載の画像記録装置において、前記生成されたイベント情報が前記イベント情報記録手段に記録されているいずれかのイベント情報と同一のイベントに対応しているとき、当該生成されたイベント情報に関連付けられる前記撮像情報の当該関連付け先を、前記同一のイベントの前記イベント情報に変更するＣＰＵ等の関連付変更手段を更に備える。

請求項１８に記載の発明によれば、請求項１７に記載の発明の作用に加えて、生成されたイベント情報が、記録されているいずれかのイベント情報と同一のイベントに対応しているとき、当該生成されたイベント情報に関連付けられる撮像情報の関連付け先を当該同一のイベントのイベント情報に変更するので、複数の撮像情報を記録済みのイベント情報に関連付けて管理することができる。

上記の課題を解決するために、請求項１９に記載の発明は、請求項１から請求項１８のいずれか一項に記載の画像記録装置において、前記撮像情報が前記記録媒体に記録されたとき、当該記録された撮像情報に関連付けられ且つ当該記録された撮像情報に関連する個人を特定する個人情報を生成するＣＰＵ等の個人情報生成手段と、前記生成された個人情報が個人情報記録手段に既に記録されているいずれかの個人情報により示される個人に対応しているか否かを照合するＣＰＵ等の照合手段と、前記生成された個人情報が前記個人情報記録手段に記録されているいずれの個人情報により示される個人とも対応していないとき、当該生成された個人情報を当該個人情報記録手段に記録させる通信インターフェース等の送信手段と、を更に備える。

請求項１９に記載の発明によれば、請求項１から請求項１８のいずれか一項に記載の発明の作用に加えて、撮像情報が記録媒体に記録されたとき、記録された撮像情報に関連付けられた個人情報を生成し、それが個人情報記録手段内に記録されているいずれの個人情報により示される個人とも対応していない場合に当該個人情報記録手段にその生成された個人情報を記録させるので、撮像対象物に関連する個人情報を簡易に生成して記録させることで、当該個人情報を簡易に維持管理することができる。

上記の課題を解決するために、請求項２０に記載の発明は、請求項１９に記載の画像記録装置において、前記生成された個人情報が前記個人情報記録手段に記録されているいずれかの個人情報により示される個人に対応しているとき、当該生成された個人情報に関連付けられる前記撮像情報の当該関連付け先を、前記記録されている個人の前記個人情報に変更するＣＰＵ等の関連付変更手段を更に備える。

請求項２０に記載の発明によれば、請求項１９に記載の発明の作用に加えて、生成された個人情報が、記録されているいずれかの個人情報により示される個人に対応しているとき、当該生成された個人情報に関連付けられる撮像情報の関連付け先を当該記録されている個人の個人情報に変更するので、複数の撮像情報を記録済みの個人情報に関連付けて管理することができる。

上記の課題を解決するために、請求項２１に記載の発明は、請求項１から請求項２０のいずれか一項に記載の画像記録装置において、前記撮像情報が前記記録媒体に記録されたとき、当該記録された撮像情報に関連付けられ、且つ当該記録された撮像情報に関連する個人及びイベントを特定するリンク情報を生成するＣＰＵ等のリンク情報生成手段と、前記生成されたリンク情報が、リンク情報記録手段に既に記録されているいずれかのリンク情報と同一の個人及びイベントを特定しているか否かを照合するＣＰＵ等の照合手段と、前記生成されたリンク情報が、前記リンク情報記録手段に記録されているいずれのリンク情報により特定される個人及びイベントをも特定していないとき、当該生成されたリンク情報を当該リンク情報記録手段に記録させる通信インターフェース等の送信手段と、を更に備える。

請求項２１に記載の発明によれば、請求項１から請求項２０のいずれか一項に記載の発明の作用に加えて、撮像情報が記録媒体に記録されたときリンク情報を生成し、それがリンク情報記録手段内に記録されているいずれのリンク情報により特定される個人及びイベントをも特定していない場合にリンク情報記録手段にその生成されたリンク情報を記録させるので、撮像情報に関連付けられるリンク情報を簡易に生成して記録させることで、当該リンク情報を簡易に維持管理することができる。

上記の課題を解決するために請求項２２に記載の発明は、請求項２１に記載の画像記録装置において、前記生成されたリンク情報が前記リンク情報記録手段に記録されているいずれかのリンク情報により特定される前記個人及び前記イベントを特定しているとき、当該生成されたリンク情報に関連付けられる前記撮像情報の当該関連付け先を、前記記録されているリンク情報に変更するＣＰＵ等の関連付変更手段を更に備える。

請求項２２に記載の発明によれば、請求項２１に記載の発明の作用に加えて、生成されたリンク情報がリンク情報記録手段内に記録されているいずれかのリンク情報により特定される個人及びイベントを特定しているとき、当該生成されたリンク情報に関連付けられる撮像情報の関連付け先を当該記録されているリンク情報に変更するので、複数の撮像情報を記録済みのリンク情報に関連付けて管理することができる。

上記の課題を解決するために、請求項２３に記載の発明は、請求項１７又は請求項１８に記載の画像記録装置において、前記撮像情報が前記記録媒体に記録されたときの前記撮像手段の位置を検出し、検出された位置を示す位置情報を生成するＣＰＵ等の位置検出手段を更に備え、前記イベント情報生成手段は、前記生成された位置情報を含ませて前記イベント情報を生成するように構成される。

請求項２３に記載の発明によれば、請求項１７又は請求項１８に記載の発明の作用に加えて、撮像情報が記録されたときの撮像手段の位置を示す位置情報がイベント情報に含まれるので、利用価値の高いイベント情報を簡易に維持管理することができる。

上記の課題を解決するために、請求項２４に記載の発明は、請求項１から請求項２３のいずれか一項に記載の画像記録装置において、前記撮像手段は、携帯可能な情報処理装置に備えられた撮像手段であるように構成される。

請求項２４に記載の発明によれば、請求項１から請求項２３のいずれか一項に記載の発明の作用に加えて、撮像手段が携帯可能な情報処理装置に備えられているので、簡易な構成で撮像対象物を撮像することができる。

上記の課題を解決するために、請求項２５に記載の発明は、請求項１から請求項２４のいずれか一項に記載の画像記録装置において、前記撮像手段は、携帯可能な保持具に当該画像記録装置が保持されることにより前記相対的な位置が一定とされる撮像手段であるように構成される。

請求項２５に記載の発明によれば、請求項１から請求項２４のいずれか一項に記載の発明の作用に加えて、撮像手段の相対的な位置が、携帯可能な保持具に当該画像記録装置が保持されることにより一定とされるので、簡易な構成で撮像対象物を撮像することができる。

上記の課題を解決するために、請求項２６に記載の発明は、請求項２４又は請求項２５に記載の画像記録装置において、前記撮像手段は、保持具に当該画像記録装置が保持されることにより前記相対的な位置が一定とされる撮像手段であり、前記保持具が、折り曲げ可能なシート状材料を折り曲げて組み立てられる保持具であって、携帯時には展開されてシート状とされ、使用時には折り曲げて組み立てられて前記画像記録装置を保持可能とされる保持具であるように構成される。

請求項２６に記載の発明によれば、請求項２４又は請求項２５に記載の発明の作用に加えて、保持具に画像記録装置が保持されることにより撮像手段の相対的な位置が一定とされ、当該保持具が、折り曲げ可能なシート状材料を折り曲げて組み立てられる保持具であって、携帯時には展開されてシート状とされ、使用時には折り曲げて組み立てられて画像記録装置を保持可能とされる保持具であるので、安価／軽量で携帯性の高い保持具だけで、安定して撮像対象物を撮像することができる。

上記の課題を解決するために、請求項２７に記載の発明は、請求項１から請求項２６のいずれか一項に記載の画像記録装置において、前記対象物載置位置に前記撮像対象物が置かれていると識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報に対して、広告の内容を有する広告情報を加えるＣＰＵ等の画像処理手段を更に備え、前記記録手段は、前記広告情報が加えられた前記撮像情報を前記記録媒体に記録するように構成される。

請求項２７に記載の発明によれば、請求項１から請求項２６のいずれか一項に記載の発明の作用に加えて、広告情報が加えられた撮像情報が記録されるので、広告を画像によって配信することで、ユーザがより安価に本発明に関連するサービスを享受することができる。

上記の課題を解決するために、請求項２８に記載の発明は、請求項２７に記載の画像記録装置において、前記画像処理手段は、前記対象物載置位置に前記撮像対象物が置かれていると識別されたタイミングに対応して出力された前記撮像情報の少なくとも一部を外部の情報処理装置に送信する通信インターフェース等の撮像情報送信手段と、前記送信された撮像情報の内容の前記情報処理装置における認識結果に基づいて当該情報処理装置において前記広告情報が加えられた当該撮像情報を受信する通信インターフェース等の撮像情報受信手段と、を備え、前記記録手段は、前記受信された撮像情報を前記記録媒体に記録するように構成される。

請求項２８に記載の発明によれば、請求項２７に記載の発明の作用に加えて、撮像対象物が置かれていると識別されたタイミングに対応して出力された撮像情報の少なくとも一部を外部の情報処理装置に送信してその内容の認識及び広告情報の追加を行わせ、当該広告情報が加えられた撮像情報を受信して記録するので、画像記録装置における処理負荷を軽減しつつ、撮像された情報と共に広告をも記録して爾後に参照することができる。

上記の課題を解決するために、請求項２９に記載の発明は、請求項２７に記載の画像記録装置において、前記画像処理手段は、前記広告情報を予め一又は複数記録するＲＯＭ等の広告情報記録手段と、前記対象物載置位置に前記撮像対象物が置かれていると識別されたタイミングに対応して出力された前記撮像情報の内容を認識するＣＰＵ等の認識手段と、前記認識された内容に対応する前記広告情報を前記広告情報記録手段から読み出すＣＰＵ等の読出手段と、を備え、当該画像処理手段は、前記読み出された広告情報を前記内容が認識された前記撮像情報に加えるように構成される。

請求項２９に記載の発明によれば、請求項２７に記載の発明の作用に加えて、撮像対象物が置かれていると識別されたタイミングに対応して出力された撮像情報の内容に対応する広告情報を広告情報記録手段から読み出して撮像情報に加えるので、画像記録装置内で完結する構成により、撮像された情報と共に広告をも記録して爾後に参照することができる。

上記の課題を解決するために、請求項３０に記載の発明は、請求項２７に記載の画像記録装置において、前記画像処理手段は、前記対象物載置位置に前記撮像対象物が置かれていると識別されたタイミングに対応して出力された前記撮像情報の内容を認識するＣＰＵ等の認識手段と、前記認識手段による認識結果を外部の情報処理装置に送信する通信インターフェース等の認識結果送信手段と、前記送信された認識結果に基づいて当該情報処理装置から送信された前記広告情報を受信する通信インターフェース等の広告情報受信手段と、を備え、当該画像処理手段は、前記受信された広告情報を前記内容が認識された前記撮像情報に加えるように構成される。

請求項３０に記載の発明によれば、請求項２７に記載の発明の作用に加えて、撮像対象物が置かれていると識別されたタイミングに対応して出力された撮像情報の内容の認識結果を外部の画像処理装置に送信し、その認識結果に基づく広告情報を受信して撮像情報に加えるので、撮像された情報と共に広告をも記録して爾後に参照することができる。

上記の課題を解決するために、請求項３１に記載の発明は、請求項１から請求項３０のいずれか一項に記載の画像記録装置において、前記撮像情報を前記記録媒体に記録する際、前記記録手段は、各前記撮像情報を識別するための識別情報、当該撮像情報に相当する前記撮像対象物が撮像された時を示す時刻情報又は当該撮像が行われた場所を示す場所情報の少なくともいずれか一つを前記撮像情報内に画像として埋め込んだ後、当該撮像情報を前記記録媒体に記録するように構成される。

請求項３１に記載の発明によれば、請求項１から請求項３０のいずれか一項に記載の発明の作用に加えて、撮像情報を記録する際、識別情報、時刻情報又は場所情報の少なくともいずれか一つを撮像情報内に画像として埋め込んだ後に記録するので、記録後の撮像情報を容易に識別することができる。

上記の課題を解決するために、請求項３２に記載の発明は、請求項３１に記載の画像記録装置において、前記記録手段は、撮像された前記撮像情報内に他の前記識別情報が既に含まれていることを認識したとき、当該認識した他の前記識別情報に関連する新たな識別情報を生成し、当該撮像により前記記録媒体に記録する当該撮像情報内に当該生成された新たな識別情報を埋め込んで記録するように構成される。

請求項３２に記載の発明によれば、請求項３１に記載の発明の作用に加えて、撮像された撮像情報内に他の識別情報が既に含まれていることを認識したとき、当該他の識別情報に関連する新たな識別情報を生成して撮像情報内に埋め込んで記録するので、識別情報の関連性により、複数回に渡る撮像により得られた撮像情報を確実に識別することができる。

本発明によれば、撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段により連続して撮像物載置位置又は撮像対象物を撮像し、各撮像情報に基づいて対象物載置位置に撮像対象物が置かれていることが識別されたとき、当該識別がされたタイミングに対応して出力された撮像情報を自動的に記録媒体に記録する。

従って、例えば記録や撮像のための撮像手段に対する使用者の操作によるぶれを防止しつつ、撮像対象物上に記載されている情報を簡易に撮像して記録することができる。

第１実施形態に係るキャプチャシステムの概要構成を示す外観斜視図等であり、（ａ）は当該外観斜視図であり、（ｂ）は撮像された画像を例示する図である。 第１実施形態に係るスマートフォンの概要構成を示すブロック図である。 第１実施形態に係るキャプチャ処理を示すフローチャートである。 第１実施形態に係るキャプチャ処理を例示する図（Ｉ）であり、（ａ）はキャプチャ処理の第１例を示す図であり、（ｂ）はキャプチャ処理の第２例を示す図である。 第１実施形態に係るキャプチャ処理を例示する図（II）であり、（ａ）はキャプチャ処理の第３例を示す図であり、（ｂ）はキャプチャ処理の第４例を示す図であり、（ｃ）はキャプチャ処理の第５例を示す図であり、（ｄ）はキャプチャ処理の第６例を示す図であり、（ｅ）はキャプチャ処理の第７例を示す図である。 第１実施形態に係るキャプチャシステムに含まれるスタンドの他の例を示す外観斜視図（Ｉ）である。 第１実施形態に係るキャプチャシステムに含まれるスタンドの他の例を示す外観斜視図（II）であり、（ａ）は組立前の当該スタンドを示す正面図であり、（ｂ）は組立後の当該スタンドの使用例を示す外観斜視図である。 第２実施形態に係るキャプチャシステムの第１例の概要構成を示す外観斜視図である。 第２実施形態に係るキャプチャシステムの第２例の概要構成を示す外観斜視図である。 第２実施形態に係るキャプチャシステムの第３例の概要構成を示す外観斜視図である。 第３実施形態に係るキャプチャシステムの概要構成を示す外観斜視図である。 第４実施形態に係るキャプチャシステムに含まれるスマートフォンの概要構成を示すブロック図である。 第４実施形態に係るキャプチャ処理を示すフローチャートである。 第４実施形態に係る位置合わせ処理を例示する図（ｉ）であり、（ａ）は位置合わせ前の状態を例示する図であり、（ｂ）は位置合わせ処理中を例示する図（ｉ）であり、（ｃ）は位置合わせ処理中を例示する図（ii）である。 第４実施形態に係る位置合わせ処理を例示する図（ii）であり、（ａ）は位置合わせ処理中を例示する図（iii）であり、（ｂ）は位置合わせ処理中を例示する図（iv）であり、（ｃ）は位置合わせ処理中を例示する図（ｖ）であり、（ｄ）は位置合わせ処理中を例示する図（vi）である。 第４実施形態に係る位置合わせ処理を例示する図（iii）である。

次に、本発明を実施するための形態について、図面に基づいて説明する。なお、以下に説明する各実施形態は、連写及び動画の撮像が可能なデジタルカメラ（以下、単にカメラと称する）を備える携帯可能なスマートフォンを用いて画像をキャプチャ（即ち記録する）するキャプチャシステムに対して本発明を適用した場合の実施の形態である。なお当該スマートフォンに備えられているデジタルカメラではなく、装置として独立したデジタルカメラを用いて画像をキャプチャするキャプチャシステムに対して本発明を適用しても良い。また、本発明に係るスマートフォンの携帯者を、以下、単に「携帯者」と称する。
（Ｉ）第１実施形態
初めに、本発明に係る第１実施形態について、図１乃至図７を用いて説明する。なお、図１は第１実施形態に係るキャプチャシステムの概要構成を示す外観斜視図等であり、図２は第１実施形態に係るスマートフォンの概要構成を示すブロック図であり、図３は第１実施形態に係るキャプチャ処理を示すフローチャートである。また図４及び図５は第１実施形態に係るキャプチャ処理をそれぞれ例示する図であり、図６及び図７は第１実施形態に係るキャプチャシステムに含まれるスタンドの他の例をそれぞれ示す外観斜視図である。

第１実施形態に係るキャプチャシステムでは、撮像対象物の一例としての例えば書面又は立体物上に文字、記号又は図形等を用いて記載されている情報を、当該撮像対象物が置かれる位置に対して相対的に一定の位置にある上記スマートフォンのカメラを用いて、連写又は動画撮像する。その後、当該撮像された画像に相当する画像データの中から、後述するキャプチャ処理により選択された画像データを記録（キャプチャ）する。

即ち図１（ａ）に示すように、第１実施形態に係るキャプチャシステムＣＳは、カメラ９を備えるスマートフォンＳと、当該カメラ９が撮像対象物の一例である書面Ｐに対向するようにスマートフォンＳを支持するスタンドＳＴと、により構成されている。この場合のスマートフォンＳが本発明に係る「画像記録装置」の一例に相当する。このスタンドＳＴによりスマートフォンＳが動かないように支持されることで、カメラ９（及びその撮像範囲ＡＲ）の位置が、書面Ｐが置かれる位置に対して相対的に一定とされる。スタンドＳＴにより支持されているスマートフォンＳのカメラ９により、撮像範囲ＡＲ内の例えば机Ｄ上に置かれている書面Ｐを撮像した場合、当該撮像により得られる画像は、例えば図１（ｂ）に示すような机Ｄ上の書面Ｐを含むものとなる。なお図１（ｂ）に示す机Ｄ上に置かれている書面Ｐが撮像対象物である例は、後述する図４及び図５においても同様である。

図１に示す状態でスマートフォンＳは、カメラ９を用いて書面Ｐを連写又は動画撮像し、撮像された画像に相当する画像データの中から、後述するキャプチャ処理により選択された画像データを当該スマートフォンＳ内に記録（キャプチャ）する。これにより、第１実施形態に係る書面Ｐ（換言すれば書面Ｐ上に記載された情報）のキャプチャ処理が行われる。

次に、図２乃至図５を用いて、第１実施形態に係るキャプチャシステムＣＳの構成及び動作の細部について説明する。

先ず図２に示すように、第１実施形態に係るキャプチャシステムＣＳに含まれるスマートフォンＳは、ＣＰＵ１と、ＲＯＭ（Read Only Memory）２と、ＲＡＭ（Random Access Memory）３と、操作ボタン及びタッチパネル等からなる操作部４と、当該タッチパネルがその表面に配置されている液晶ディスプレイ等からなるディスプレイ５と、スピーカ７及びマイク８が接続されている通話制御部６と、本発明に係る「撮像手段」の一例としての上記カメラ９と、図１において図示しない外部のネットワーク（無線ＬＡＮ（Local Area Network）、専用回線、インターネット又はいわゆる３Ｇ回線等のネットワーク）に接続するためのアンテナＡＮＴを備える通信インターフェース１０と、カメラ９による撮像の対象となる上記撮像対象物の一部又は全部を当該撮像時に照らすライト１１と、により構成されている。またＲＡＭ３内には、ＣＰＵ１を中心とした第１実施形態に係るキャプチャ処理を実行するために必要なバッファとして、カレント画像バッファ３２が揮発性の記憶領域として形成されている。

上記の構成のうちＣＰＵ１が、本発明に係る「識別手段」の一例、「記録手段」の一例、「判定手段」の一例、「制御手段」の一例、「比較手段」の一例、「合成手段」の一例、「イベント情報生成手段」の一例、「照合手段」の一例、「個人情報生成手段」の一例、「位置検出手段」の一例、「画像処理手段」の一例、「読出手段」の一例、及び「リンク情報生成手段」の一例に、それぞれ相当する。また通信インターフェース１０が、「送信手段」の一例、「撮像情報送信手段」の一例、「撮像情報受信手段」の一例、「認識結果送信手段」の一例、「撮像情報受信手段」の一例及び「広告情報受信手段」の一例に、それぞれ相当する。更にディスプレイ５が、本発明に係る「表示手段」の一例及び「告知手段」の一例に、それぞれ相当する。更にまたＲＯＭ２が、本発明に係る「記録媒体」の一例、「イベント情報記録手段」の一例、「個人情報記録手段」の一例、「リンク情報記録手段」の一例及び「広告情報記録手段」の一例に、それぞれ相当する。

この構成において通信インターフェース１０は、ＣＰＵ１の制御の下、アンテナＡＮＴを介した上記ネットワークとのデータの授受を制御する。この時通信インターフェース１０は、アンテナＡＮＴを介した無線によるデータの授受だけでなく、例えば有線ＬＡＮやいわゆるＵＳＢ（Universal Serial Bus）等を介した有線によるデータの授受を制御するように構成することもできる。

また通話制御部６は、ＣＰＵ１の制御の下、マイク８及びスピーカ７を用いたスマートフォンＳとしての音声通話を制御する。更に操作部４は、スマートフォンＳの使用者による操作に基づいて、当該操作に対応する操作信号を生成してＣＰＵ１に出力する。これによりＣＰＵ１は、当該操作信号に基づいてスマートフォンＳ全体を制御する。

一方ＲＯＭ２には、後述する第１実施形態に係るキャプチャ処理を初めとするスマートフォンＳとしての処理のためのプログラム等が予め不揮発性に記録されている。またＲＯＭ２には書き換え可能な領域が含まれており、この書き換え可能なＲＯＭ２の領域内には、第１実施形態に係るキャプチャ処理によりキャプチャされた画像に相当する画像データが記録される。そしてＣＰＵ１は、ＲＯＭ２に記録されている上記プログラム等を読み出して実行することにより、上記スマートフォンＳとしての処理を制御する。この他ＲＯＭ２内の上記書き換え可能な領域内には、例えば電話番号データやアドレスデータ等、スマートフォンＳとしての処理に必要なデータも不揮発性に記録される。

一方ＲＡＭ３は、上記カレント画像バッファ３２として必要なデータを一時的に記憶し、更に上記スマートフォンＳとしての処理に必要な他のデータを一時的に記憶する。更にディスプレイ５は、ＣＰＵ１の制御の下、第１実施形態に係るキャプチャ処理のために必要な情報に加えて、スマートフォンＳとしての処理に必要な情報を、その携帯者に対して表示する。

他方、カメラ９は、ＣＰＵ１の制御の下、上記書面Ｐ等上の情報を連写又は動画撮像し、当該撮像した画像に対応する画像データ（デジタル化された画像データ）を、当該連写の都度又は動画撮像の場合にあっては連続して、ＣＰＵ１に出力する。これによりＣＰＵ１は、出力された画像データをＲＡＭ３内のカレント画像バッファ３２に一時的に入力する。そしてＣＰＵ１は、カレント画像バッファ３２に記憶されている画像データを用いて、第１実施形態に係るキャプチャ処理を実行する。またこの際にライト１１は、ＣＰＵ１の制御の下、カメラ９により撮像される上記書面Ｐ等の一部又は全部を、当該撮像時において当該撮像に好適な照度となるように照らす。

次に、ＲＡＭ３内のカレント画像バッファ３２は、その時点で第１実施形態に係るキャプチャ処理の対象となっている一フレーム分の画像データを記憶する。この場合の一フレーム分の画像データ（フレーム画像データ）に相当する画像を、「カレント画像」と称する。

次に、第１実施形態に係るキャプチャ処理について、具体的に図３乃至図５を用いて説明する。第１実施形態に係るキャプチャ処理は、例えば携帯者による所定の操作が操作部４において実行されたときに開始される。

そして書面Ｐが置かれて当該キャプチャ処理が開始されると、図３に示すようにＣＰＵ１は先ず、撮像範囲ＡＲ内に置かれている書面Ｐを撮像すべく、カメラ９を起動する（ステップＳ１）。これにより、書面Ｐに相当する画像（カレント画像に相当する画像）が、連写又は動画により複数撮像される。そしてＣＰＵ１は、当該撮像に伴ってカメラ９から入力されてくるカレント画像の画像データを、カレント画像バッファ３２に一時的に入力する（ステップＳ２）。次にＣＰＵ１は、ステップＳ１の処理により撮像された画像において、それに映っている書面Ｐとその周囲との境界（図１及び図４に例示する場合には、図４（ａ）右に例示する書面Ｐと机Ｄとの境界ＢＤ）の全部が認識されるか否かを識別する（ステップＳ３）。ステップＳ３の識別においていずれかの画像において当該境界の全体が認識されている場合（ステップＳ３；ＹＥＳ）、ＣＰＵ１は次に、その時点でカレント画像バッファ３２に記憶されている画像データにおいて、予め設定された所定時間、当該画像に写っている書面Ｐ等が静止しているか否かを判定する（ステップＳ４）。なおこの場合、例えば境界が認識されたとき、当該認識された境界に相当する位置に、図４に例示する境界ＢＤを書面Ｐの画像に合わせて表示させるように構成することもできる。また、書面Ｐが置かれていることが認識されているか否かを、例えばディスプレイ５やライト１１の点滅、或いはスピーカ７からの放音等を用いて逐次告知するように構成することもできる。

ステップＳ４の判定において当該画像内の書面Ｐ等が所定時間静止していると判定された場合（ステップＳ４；ＹＥＳ）、次にＣＰＵ１は、その時点でカレント画像バッファ３２に記憶されている画像データの画像と、その直前にキャプチャされてＲＯＭ２に記録されている画像データの画像と、を比較し、両者が同一か否かを判定する（ステップＳ５）。ステップＳ５の判定において両者が同一でない場合（ステップＳ５；ＮＯ）、ＣＰＵ１は、その時点でカレント画像バッファ３２に記憶されている画像データをＲＯＭ２に記録（即ちキャプチャ）する（ステップＳ６）。その後ＣＰＵ１は、操作部４において第１実施形態に係るキャプチャ処理を終了する旨の操作が例えば携帯者により行われたか否かを判定し（ステップＳ８）、当該終了操作が行われたときは（ステップＳ８；ＹＥＳ）、第１実施形態に係るキャプチャ処理を終了する。一方ステップＳ８の判定において当該終了操作が行われていないとき（ステップＳ８；ＮＯ）、ＣＰＵ１は上記ステップＳ２に戻って、次の撮像を行う。

一方、上記ステップＳ３の識別において、カレント画像バッファ３２に記憶されている画像において書面Ｐとその周囲との境界の全体が認識されていない場合（ステップＳ３；ＮＯ）、又は上記ステップＳ４の判定において、カレント画像バッファ３２に記憶されている画像データの画像内の書面Ｐ等が所定時間静止していないと判定された場合（ステップＳ４；ＮＯ）、或いは上記ステップＳ５の判定においてカレント画像バッファ３２に記憶されている画像データの画像と、その直前にキャプチャされてＲＯＭ２に記録されている画像データの画像と、が同一である場合（ステップＳ５；ＹＥＳ）、ＣＰＵ１は、その時点でカレント画像バッファ３２に記憶されている画像データはキャプチャに適さないとして、これらを破棄し（ステップＳ７）、その後上記ステップＳ８の処理に移行する。

以上の第１実施形態に係るキャプチャ処理が実行された場合、例えば図４（ａ）に示すように、書面Ｐと机Ｄとの間の境界ＢＤの全てが認識されており（上記ステップＳ３；ＹＥＳ参照）、且つ書面Ｐを含む画像内が上記所定時間だけ静止している場合に（上記ステップＳ４；ＹＥＳ参照）のみ、その時にカレント画像バッファ３２に記憶されている画像データがキャプチャの対象とされ得ることになる。従って、例えば図４（ｂ）に示すように、書面Ｐに書き込みをするための筆記具を持つ手Ｈが書面Ｐ上にあることで境界ＢＤの一部が画像内で認識されていない場合（上記ステップＳ３；ＮＯ参照）、及び当該手Ｈによる書き込みのため書面Ｐを含む画像内が上記所定時間静止していない場合（上記ステップＳ４；ＮＯ参照）には、その時にカレント画像バッファ３２に記憶されている画像データは、キャプチャの対象とはされずに破棄される（上記ステップＳ７参照）。

更に図５に他の例として示すように、初めに図５（ａ）に示す書面Ｐ及び机Ｄが映った画像がキャプチャされた（上記ステップＳ６参照）後に、図５（ｂ）に例示するように手Ｈが書面Ｐ上に入ったが書面Ｐ上に何ら書き込みがされなかった場合（即ち書面Ｐとしては直前のキャプチャ時と同一である場合）、手Ｈが書面Ｐ上から出た以降上記所定時間が経過したとしても（上記ステップＳ４；ＹＥＳ参照）、図５（ｃ）に例示するように書面Ｐとしては直前のキャプチャ時（図５（ａ）参照）と同一であるので（上記ステップＳ５；ＹＥＳ参照）、その時にカレント画像バッファ３２に記憶されている画像データは、キャプチャの対象とはされずに破棄される（上記ステップＳ７参照）。これに対して、図５（ｂ）に例示するように手Ｈが書面Ｐ上に入り、更に図５（ｄ）に例示するように例えば文字Ｌが書面Ｐに書き込まれた場合（即ち書面Ｐとしては直前のキャプチャ時と同一でなくなった場合）、手Ｈが書面Ｐ上から出た以降上記所定時間が経過したら（上記ステップＳ４；ＹＥＳ参照）、書面Ｐとしては直前のキャプチャ時と同一でないため（上記ステップＳ５；ＮＯ参照）、その時にカレント画像バッファ３２に記憶されている画像データがキャプチャされる（上記ステップＳ６参照）。

以上説明したように、第１実施形態に係るキャプチャシステムＣＳの動作によれば、書面Ｐが置かれる位置に対する相対的な位置が一定とされるカメラ９により連続して書面Ｐを撮像し、各画像データに基づいてその位置に書面Ｐが置かれていることが識別されたとき、当該識別がされたタイミングに対応して出力された画像データを自動的にキャプチャするので、例えば記録や撮像のためのカメラ９に対する使用者の操作によるぶれを防止しつつ、書面Ｐ上に記載されている情報を簡易に且つ高画質にキャプチャすることができる。

また、カメラ９からそれぞれ出力された画像データに基づき、各画像データにおける書面Ｐと当該書面Ｐの周囲とを画する境界ＢＤが識別されたとき、所定位置に書面Ｐが置かれていると識別するので、より確実且つ簡易に書面Ｐを撮像してそれに記載されている情報をキャプチャすることができる。

更に、書面Ｐが置かれていると識別された後、画像データにおける少なくとも書面Ｐが予め設定された所定時間静止している旨の判定に対応して出力された画像データをキャプチャするので、少なくとも書面Ｐが当該所定時間静止している状態で撮像することにより、より高精度に書面Ｐを撮像することができる。

更にまた、書面Ｐが置かれていると識別された後、書面Ｐの範囲内に手Ｈ等の他の物が撮像されていると判定されたとき、そのタイミングに対応して出力された画像データのキャプチャを禁止するので、書面Ｐ以外の他の物が撮像された画像データが記録されることを防止することができる。

また、キャプチャ済みの画像データにおける書面Ｐと、未キャプチャの画像データにおける書面Ｐと、を各撮像ごとに比較し、両者が同一であるとき、画像データのキャプチャを禁止するので、同一の書面Ｐで且つ当該書面Ｐに新たな書き込み等がない場合に、当該書面Ｐを含む画像データが重複してキャプチャされることを防止できる。

更に、カメラ９が携帯可能なスマートフォンＳに備えられており、またカメラ９の相対的な位置が、例えば携帯可能なスタンド（図７参照）にスマートフォンＳが保持されることにより一定とされるので、カメラ９と書面Ｐとの相対的な位置を一定としつつ、簡易な構成で書面Ｐを撮像することができる。

また、当該スタンドを、折り曲げ可能なシート状材料を折り曲げて組み立てられるスタンド（後述の図７参照）とした場合は、より簡易な構成により書面Ｐを撮像することができる。

更に、書面Ｐと周囲との境界が識別されたとき、その境界を示す境界ＢＤを書面Ｐの画像に対応付けて表示する場合には、より正確に当該表示がされるように例えばユーザが書面Ｐを移動させる等することにより、境界の認識精度及びキャプチャ自体の成功率を向上させることができる。

更にまた、書面Ｐが置かれていることが認識されているか否かが逐次表示等により告知する場合には、当該告知に基づいて例えばユーザが書面Ｐを移動させる等することにより、当該置かれていることの認識及び撮像自体の成功率を向上させることができる。

なお、上述した第１実施形態に係るキャプチャ処理においては、上記ステップＳ３乃至ステップＳ５の処理によりキャプチャ対象であるカレント画像としての適合性が判定された画像の画像データをキャプチャすることとした。しかしながら、キャプチャ対象たる画像データは書面Ｐの認識（識別）に用いられた画像の画像データ自体に限られず、例えば、書面Ｐの認識（識別）が完了したタイミング以降に新たに撮像された画像（例えばカメラ９を静止画モードに換えて撮像された高画質の静止画像）の画像データをキャプチャ（上記ステップＳ６参照）するように構成してもよい。

また、第１実施形態に係るスマートフォンＳの書面Ｐ等に対する設置方法は、図１（ａ）に例示するスタンドＳＴによる方法には限られない。

例えば図６に例示するキャプチャシステムＣＳ１のように、載置台Ｂ上に置かれている撮像対象物ＰＰに例えばアクリルやガラス等の透明板ＴＢを被せ、この撮像対象物ＰＰを載置台Ｂに固定された支持部ＢＳ１により支持されているライトＬＴにより透明板ＴＢ越しに照らし、更に載置台Ｂに固定された支持部ＢＳ２により撮像対象物ＰＰに対して一定位置に支持されている保持台ＰＴ上にカメラ９が撮像対象物ＰＰに対向するように置かれているスマートフォンＳの当該カメラ９により撮像する（上記ステップＳ１参照）ように構成することもできる。

この場合の透明板ＴＢは、撮像対象物ＰＰの出し入れが容易となるように開閉可能とするようにしても良い。また載置台Ｂの底板は、撮像対象物ＰＰの高さ等に応じて透明板ＴＢとの間隔を調整できるように、図６において上下方向に移動可能にしても良い。更に載置台Ｂは、透明板ＴＢを解放せずとも撮像対象物ＰＰが出し入れできる構造としても良い。また支持部ＢＳ２は撮像対象物ＰＰに対するカメラ９の位置や角度を調整できる機構とするのが好ましい。更に保持台ＰＴは、スマートフォンＳを静止保持できるように、凹み付のトレイ型のものやスマートフォンＳの外部形状にあった形状の着脱可能式のホルダ等により構成することができる。更にライトＬＴは、スマートフォンＳが保持台ＰＴに載置されたのと連動して自動的に点灯する構成とするのが便利である。

更に図６に例示するキャプチャシステムＣＳ１の応用例として、例えば撮像対象物が薄い原稿やフィルム状のものである場合、当該撮像対象物の裏から照らすライトを用いて撮像しても良い。また、図６に例示する場合とは逆に、カメラ９を上に向けてスマートフォンＳを設置し、透明板ＴＢの上側（即ち、カメラ９を上向きに置いたスマートフォンＳの上方）に書面Ｐを下向きに置いて撮像するように構成しても良い。更には、スマートフォンＳから、撮像した画像データを有線又は無線により図示しないプロジェクタに出力して投影させることで、いわゆるＯＨＰ（Over Head Projector）としてキャプチャシステムＣＳ１を用いることもできる。また、スマートフォンＳのＣＰＵ１の制御の下で駆動され、撮像対象物ＰＰ上におけるカメラ９の撮像範囲を移動させる駆動部を保持台ＰＴが備えていても良い。更に、カメラ９又はライトＬＴの近傍に、支持部ＢＳ１により、例えば所定のレンズ又は偏光フィルタ等の光学機構を備えるように構成しても良い。

また他の例として、図７（ａ）に示すように、一枚のシート状素材（例えば段ボール紙等）から切り出してなる折り曲げ可能なスタンドＳＴ１により、書面Ｐに対してカメラ９が対向するようにスマートフォンＳを保持するように構成しても良い。

図７（ａ）に示すスタンドＳＴ１は、当該一枚のシート状素材により形成される保持台ＰＴ１、支持部ＰＴ２及びＰＴ３からなるように構成されている。また図７（ａ）において、保持台ＰＴ１と支持部ＰＴ２との接合部及び支持部ＰＴ２と支持部ＰＴ３との接合部において、実線は切り込みを示しており、一点鎖線はスタンドＳＴ１としての組立時において谷折りとされる線部を示している。図７（ｂ）には、実際にスタンドＳＴ１が組み立てられ、更にカメラ９が、図７（ｂ）において図示しないが撮像時にはスマートフォンＳの下方に載置される書面に対向するようにスマートフォンＳが保持台ＰＴ１上に置かれて撮像可能となっている状態のキャプチャシステムの外観斜視図が示されている。

以上の図６及び図７に例示する構成によっても、第１実施形態に係るキャプチャシステムＣＳと同様の効果を奏することができる。

なお、上述した第１実施形態に係るキャプチャ処理において、書面Ｐが置かれていると識別された後にカメラ９における振動等に起因する動きが検出されたとき、そのタイミングに対応して出力された画像データのキャプチャを禁止するように構成すれば、カメラ９の動きによってぶれた画像データがキャプチャされることを防止することができる。

また、（例えば原稿台上の）書面Ｐが置かれる位置に予め形成されている参照用の模様やパターンなどの特徴を示す特徴データを用いて、その位置が（書面Ｐにより）が遮られたことが認識されたとき、ＣＰＵ１がその位置に書面Ｐが置かれていると識別するように構成することもできる。

更に、（例えば原稿台上の）書面Ｐが置かれていない位置に相当する画像データと、それ以外の他の画像データ（例えばその前後の画像データ）と、の差分に基づいて、当該位置に書面Ｐが置かれていると識別するように構成することもできる。
（II）第２実施形態
次に、本発明に係る他の実施形態である第２実施形態について、図８乃至図１０を用いて説明する。なお図８乃至図１０は、第２実施形態に係るキャプチャシステムの各例の概要構成をそれぞれ示す外観斜視図である。また第２実施形態に係るスマートフォンのハードウエア的な構成において、第１実施形態に係るスマートフォンＳと同一の部材は、同一の部材番号を用いてその構成及び機能等を説明する。

上述した第１実施形態に係るキャプチャシステムＣＳのキャプチャ処理では、書面Ｐのみをキャプチャする構成であった。これに対し、以下に説明する第２実施形態に係るキャプチャシステムの各例では、書面Ｐを、当該書面Ｐ上に投影された他の情報と共にキャプチャする。

即ち図８に示すように、先ず第１例として、第２実施形態に係るキャプチャシステムＣＳ２−１は、第１実施形態に係るキャプチャシステムＳと同様のスタンドＳＴに支持されているスマートフォンＳのカメラ９により、その撮像範囲ＡＲ内に置かれている書面Ｐを撮像する。

このとき第２実施形態に係るスマートフォンＳには、カメラ９の他にプロジェクタ２０が備えられている。プロジェクタ２０は、例えばレーザ方式又は他の光学方式により、書面Ｐと共にキャプチャされるべき他の投影情報ＰＪを、書面Ｐの撮像時において当該書面Ｐ上に投影する。このプロジェクタ２０が、本発明における「投影手段」の一例に相当する。この場合に投影情報ＰＪとして書面Ｐ上に投影される画像としては、例えば、書面Ｐ上に書き込みをする場合に用いられる罫線や、書き込まれるべき部分が空白とされている様式、或いは書き込み時に参照されるべき他の図形や文字等を含む画像である。この投影情報ＰＪは、例えば第２実施形態に係るスマートフォンＳのＲＯＭ２内に予め記憶されているものを読み出して投影しても良いし、或いは記録媒体又は通信インターフェース１０を介して、外部において電子的に生成された画像或いは非画像の電子的データを当該外部から取得して投影するように構成しても良い。

更に撮像時にあっては、書面Ｐ上に投影情報ＰＪを投影しているタイミングにおいて両者を合わせてキャプチャする（図３ステップＳ６参照）ように構成することができる。この場合には、手で書き込まれるべき情報のみを書面Ｐ上に残すことができると共に、キャプチャされる画像としては投影情報ＰＪの内容と、それに基づいて書面Ｐに書き込まれた情報と、が合わさった画像をキャプチャすることができる。またこの他に、投影情報ＰＪが投影されている状態で書き込みがされた書面Ｐのみを、投影情報ＰＪの投影を終了させた後又は一時的に中断させている間に、投影情報ＰＪとは別個にキャプチャする（図３ステップＳ６参照）ように構成することができる。この場合には、参照されるべき投影情報ＰＪの内容とは別個に書面Ｐ上に書き込まれた情報をキャプチャすることができる。

なお、第２実施形態に係るキャプチャシステムの第２例としては、例えば図９に示すキャプチャシステムＣＳ２−２のように、投影情報ＰＪを、書面Ｐの裏に配置されたプロジェクタ２０から投影するように構成しても良い。この場合、投影情報ＰＪの内容を書面Ｐの表面（撮像される面）から見透せる程度に書面Ｐが薄ければ、図８に示したキャプチャシステムＣＳ２と同様の効果を奏することができる。

更にまた、第３例として例えば図１０に示すキャプチャシステムＣＳ２−３のように、投影情報ＰＪを、書面Ｐの裏に配置された表示デバイスＤＤを用いて、書面Ｐの裏側から透明シートＴＳを介して投影するように構成しても良い。この場合も、投影情報ＰＪの内容を書面Ｐの表面から見透せる程度に書面Ｐが薄ければ、図８に示したキャプチャシステムＣＳ２と同様の効果を奏することができる。このときの表示デバイスＤＤとしては、例えば、液晶パネル又はいわゆるタブレット型のコンピュータ等を用いることができる。

以上説明したように、第２実施形態に係るキャプチャシステムＣＳ２−１乃至キャプチャシステムＣＳ２−３それぞれの動作によれば、第１実施形態に係るキャプチャシステムＣＳの動作による作用効果に加えて、ＲＯＭ２から読み出された投影情報ＰＪの像を書面Ｐ上に投影し、その像が投影されているタイミングにおいて出力された画像データをキャプチャするので、投影情報ＰＪとの関係を明確としつつ、書面Ｐを撮像して記録することができる。

また、投影情報ＰＪが投影されている書面Ｐに相当する画像データと、当該投影が一時的に中断されている間の書面Ｐに相当する画像データと、を共にキャプチャするので、当該投影が終了した書面Ｐに相当する画像データを選択的に記録することができる。
（III）第３実施形態
次に、本発明に係る他の実施形態である第３実施形態について、図１１を用いて説明する。なお図１１は、第３実施形態に係るキャプチャシステムの概要構成をそれぞれ示す外観斜視図である。また第３実施形態に係るスマートフォンのハードウエア的な構成において、第１実施形態に係るスマートフォンＳと同一の部材は、同一の部材番号を用いてその構成及び機能等を説明する。

例えば上述した第１実施形態に係るキャプチャシステムＣＳのキャプチャ処理では、単一のカメラ９を用いて書面Ｐをキャプチャする構成であった。これに対し、以下に説明する第３実施形態に係るキャプチャシステムでは、撮像対象物を複数のカメラを用いてキャプチャする。

即ち図１１に示すように、第３実施形態に係るキャプチャシステムＣＳ３は、第１実施形態に係るキャプチャシステムＣＳと同様のスタンドＳＴに支持されているスマートフォンＳ３のカメラ９Ａによりその撮像範囲ＡＲ１内に置かれている撮像対象物ＰＰを撮像することに加えて、同じスマートフォンＳ３に更に備えられたカメラ９Ｂにより、その撮像範囲ＡＲ２内に置かれている当該撮像対象物ＰＰを撮像する。そして第３実施形態に係るスマートフォンＳ３では、カメラ９Ａにより撮像された画像とカメラ９Ｂにより撮像された画像とをＣＰＵ１により合成し、撮像対象物ＰＰを撮像した一つの合成画像を生成し、これをキャプチャする（即ち、ＲＯＭ２内に記録する）。この場合、別々のカメラ９Ａ及びカメラ９Ｂで別個に撮像された画像が合成されることで、より高画質或いは広範囲に撮像対象物ＰＰをキャプチャすることができる。

なおこの場合、カメラ９Ａとカメラ９Ｂとの間で、例えば、撮像角度、焦点、ズーム度又はカメラ９Ａ及びカメラ９Ｂ毎に備えられた図示しないライトの照度などを変えるように構成することができる。これにより、撮像対象物ＰＰが図１１に例示するような立体的な撮像対象物ＰＰであったとしても、その立体的な形状や配置などを認識した上で撮像対象物ＰＰの幾何学的補正の精度を向上させて合成画像を生成することができる。より具体的には、例えば撮像対象物ＰＰが厚い書籍が見開かれたものである場合の表面の湾曲などを補正して高精度の合成画像を生成することができる。

更には、各カメラ９Ａ及びカメラ９Ｂそれぞれが撮像した画像（例えば時間的に前後して撮像された画像）をＣＰＵ１により比較し、その比較結果に基づいて、例えばスマートフォンＳ３自体の振動等に起因してカメラ９Ａ及びカメラ９Ｂが動いた（ブれた）ことを検出したとき、そのタイミングでのキャプチャを禁止するように構成することができる。

以上説明したように、第３実施形態に係るキャプチャシステムＣＳ３の動作によれば、第１実施形態に係るキャプチャシステムＣＳの動作による作用効果に加えて、同一の撮像対象物ＰＰに相当し且つ撮像対象物ＰＰの撮像条件が相互に異なる複数の画像データを合成して合成画像を生成するので、例えば立体的に撮像対象物ＰＰを撮像することができ、より高画質且つ高精度の撮像対象物ＰＰに相当する画像データを記録することができる。

なお、撮像条件としてのフォーカス深度が異なる複数の画像データを合成することにより、撮像対象物ＰＰ全体の各部でピントが合致した画像をキャプチャするように構成することもできる。また、撮影条件の異なる複数の画像データを得るに当たっては、第３実施形態のように複数のカメラ９Ａ及び９Ｂを用いることは、必ずしも必要ではない。具体的に例えば、一つのカメラ９でフォーカス深度を変えながら複数の画像データを撮像し、それらを合成することにより撮影対象物ＰＰ全体の各部でピント等が合致した画像をキャプチャするように構成することもできる。
（IV）第４実施形態
最後に、本発明に係る他の実施形態である第４実施形態について、図１２乃至図１６を用いて説明する。なお図１２は第４実施形態に係るキャプチャシステムに含まれるスマートフォンの概要構成を示すブロック図であり、図１３は第４実施形態に係るキャプチャを示すフローチャートである。また図１４乃至図１６は第４実施形態に係る位置合わせ処理をそれぞれ例示する図である。更に第４実施形態に係るスマートフォンのハードウエア的な構成において、第１実施形態に係るスマートフォンＳと同一の部材は、同一の部材番号を用いてその構成及び機能等を説明する。

例えば上述した第１実施形態に係るキャプチャシステムＣＳのキャプチャ処理では、単一のカメラ９を用いて、その撮像範囲ＡＲ内に収まる大きさの書面Ｐをキャプチャする構成であった（図１（ａ）参照）。これに対し、以下に説明する第４実施形態に係るキャプチャシステムでは、例えば、撮像範囲ＡＲに収まらない大きさの書面Ｐのキャプチャ（図３ステップＳ６に係るキャプチャ）を、一つのカメラ９を用いて当該書面Ｐの部分（撮像範囲ＡＲ内に収まる大きさの部分）毎にキャプチャした後に、これを合成して元の大きな書面Ｐのキャプチャを行う。またこの他に、撮像範囲ＡＲに収まる大きさの書面Ｐであっても、その部分毎に撮像することを書面Ｐの全体に渡って繰り返して合成画像を生成することにより、書面Ｐのキャプチャを全体として高画質化する場合に第４実施形態を適用することもできる。なお第４実施形態に係るキャプチャ処理では、上記ステップＳ６に係るキャプチャ以外の処理は、基本的には第１実施形態に係るキャプチャ処理（図３参照）と同様の処理が実行されるため、それらの詳細な説明は省略する。

初めに第４実施形態に係るスマートフォンの構成について、図１２を用いて説明する。図１２に示すように第４実施形態に係るスマートフォンＳ４は、第１実施形態に係るスマートフォンＳと同様のＣＰＵ１、ＲＯＭ２、操作部４、ディスプレイ５、通信制御部６、スピーカ７、マイク８、カメラ９、アンテナＡＮＴを備える通信インターフェース１０及びライト１１を備える。これに加えて第４実施形態に係るスマートフォンＳ４のＲＡＭ３内には、ＣＰＵ１を中心とした第４実施形態に係るキャプチャ処理を実行するために必要なバッファとして、第１実施形態に係るスマートフォンＳと同様のカレント画像バッファ３２に加えて、合成画像バッファ３１と、位置合わせ済みカレント画像バッファ３３と、が、揮発性の記憶領域として形成されている。

ここで、当該ＲＡＭ３内のカレント画像バッファ３２以外の各バッファについて、具体的に説明する。

先ず合成画像バッファ３１は、第４実施形態に係るキャプチャのうちの合成処理により高画質／広範囲化して形成された合成画像に相当する画像データを、当該合成処理の進捗に合わせて逐次記憶する。次に位置合わせ済みカレント画像バッファ３３は、第４実施形態に係る画像処理のうちの位置合わせ処理後で、且つこれから合成処理の対象となる一フレーム分の画像データを記憶する。なお第４実施形態に係るカレント画像バッファ３２に記憶されているカレント画像が、その時点での後述する位置合わせ処理の対象となる。

次に、第４実施形態に係るキャプチャ（第１実施形態に係るキャプチャ処理（図３）におけるステップＳ６に相当）について、具体的に図１２乃至図１６を用いて説明する。なお第４実施形態においては、スマートフォンＳ４の合成画像バッファ３１が、第４実施形態の処理を含む図３に示したキャプチャ全体の開始時に、一度「ゼロ」に初期化されている。

そして、図３に示すステップＳ３乃至ステップＳ５と同様の処理によりカレント画像バッファ３２にその時点で記憶されている（図３ステップＳ２参照）画像データの、キャプチャ対象であるカレント画像としての適合性が判定されると、次にＣＰＵ１は、図１３に示す第４実施形態に係る位置合わせ処理を開始する。

即ちＣＰＵ１は、図１３に示すように、第４実施形態に係る非剛体の位置合わせ処理を、カレント画像バッファ３２に記憶されている画像データを用いて行う（ステップＳ２１）。このときの非剛体の位置合わせ処理は、カレント画像として撮像された書面Ｐの部分と、先に撮像されて合成画像バッファ３１に記憶されている書面Ｐに他の部分と、を比較し、両者の重複部分が画像として不連続とならずに両者が継ぎ合わされるように、カレント画像の位置合わせを行う処理である。当該位置合わせ処理についてより具体的には、図１４乃至図１６を用いて後ほど詳説する。

カレント画像に相当する画像データに対する非剛体の位置合わせ処理が完了すると（ステップＳ２１）、ＣＰＵ１は、当該位置合わせ処理後のカレント画像の画像データを位置合わせ済みカレント画像バッファ３３に記憶させる（ステップＳ２２）。

次にＣＰＵ１は、位置合わせ済みカレント画像バッファ３３内の画像データを合成画像バッファ３１内の画像データに追加し、重複している画像の領域がある場合は例えば画素値の平均値等を用いて画質を向上させる（ステップＳ２３）。このステップＳ２３の処理により、それまでに合成されていた合成画像にカレント画像が追加される。これにより、書面Ｐ全体に占める合成画像の領域的な割合が拡大されたり、或いは該当する部分の画質が向上したりすることになる。その後ＣＰＵ１は、第４実施形態に係る現在合成中の合成画像の生成を終了するか否かを確認する（ステップＳ２４）。この終了確認処理として具体的には、例えば、予め設定されている撮像回数分だけカレント画像の撮像が完了しているか否かを確認することにより、当該撮像回数分の撮像が完了していれば終了するように構成することができる。この他に例えば、所定の終了操作によって終了させることとしてもよい。

ステップＳ２４の確認において引き続き同一の合成画像の生成を行う場合（ステップＳ２４；ＮＯ）、ＣＰＵ１は、第４実施形態に係るキャプチャを一旦終了して、図３に示すステップＳ８と同様の処理に移行する。一方ステップＳ２４の確認において現在合成中の合成画像の生成を終了する場合（ステップＳ２４；ＹＥＳ）、ＣＰＵ１は、その時点で合成画像バッファ３１に記憶されている合成画像に相当する画像データをＲＯＭ２に記録（即ちキャプチャ）し（ステップＳ２５）、次に合成画像バッファ３１を初期化した上で（ステップＳ２６）、図３に示すステップＳ８と同様の処理に移行する。

次に、上記ステップＳ２１に係る非剛体の位置合わせ処理について、具体的に図１４乃至図１６を用いて説明する。

上記ステップ２１に係る位置合わせ処理は、上述したように、カレント画像として撮像された書面Ｐの部分と、合成画像（合成画像バッファ３１に記憶されている画像データ）と、を比較し、両者の重複部分が画像として不連続とならずに両者が継ぎ合わされるように、カレント画像の位置合わせ（変形）を行う処理である。ここで、図１４乃至図１６に示す例では、図１４（ａ）左に示す合成画像ＧＡ（合成画像バッファ３１に記憶されている画像データ）を基準画像とし、図１４（ａ）右に示すカレント画像ＧＴについて非剛体の位置合わせ処理を行うものとする。

ステップＳ２１に係る位置合わせ処理として先ずＣＰＵ１は、図１４（ｂ）に例示するように、カレント画像ＧＴを所定数に分割する。図１４（ｂ）右に例示する場合では、カレント画像ＧＴを四つの分割画像ＧＴａ乃至ＧＴｄに分割しているが、より高画質を得るためには分割数は多いほどよい。次にＣＰＵ１は、図１４（ｃ）に例示するように一つの分割画像に着目する。図１４（ｃ）に例示する場合、ＣＰＵ１は分割画像ＧＴａに着目している。

次にＣＰＵ１は、図１５（ａ）に例示するように、着目している分割画像ＧＴａを、その時点までに合成されている合成画像ＧＡに重ねる。なお図１５における座標軸は、合成画像ＧＡにおける各分割画像に対応する領域の左上隅と、各分割画像の左上隅と、を原点（０，０）とし、図１５において右方向がｘ座標軸の正方向、図１５において下方向がｙ座標軸の正方向である。図１５（ａ）において分割画像ＧＴａを合成画像ＧＡに最初に重ねる場合、そのオフセットは（０，０）とされる。

その後ＣＰＵ１は、図１５（ｂ）に例示するように、合成画像ＧＡ内において、分割画像ＧＴａとその内容が最もよく一致する位置（オフセット）を探索する。なお、画像同士の内容の一致を定量化するためには、例えば相互情報量（Mutual Information）を用いる手法や、対象となる領域（図１５（ｂ）に例示する場合は、分割画像ＧＴａの領域）に対する輝度差の総和（ＳＡＤ（Sum of Absolute Difference））を用いる手法などが好適である。図１５（ｂ）の例でＣＰＵ１は、当該オフセットとして座標データ（−２，＋３）が得られている。

その後ＣＰＵ１は、図１５に例示する分割画像ＧＴａ以外の他の分割画像ＧＴｂ乃至分割画像ＧＴｄについても、同様にその内容が最もよく一致する位置（オフセット）を合成画像ＧＡ内において探索する。図１５（ｃ）に例示する場合、分割画像ＧＴａの場合は当該オフセットとして座標データ（−２，＋３）が、分割画像ＧＴｂの場合は当該オフセットとして座標データ（＋２，＋３）が、分割画像ＧＴｃの場合は当該オフセットとして座標データ（＋４，−１）が、分割画像ＧＴｄの場合は当該オフセットとして座標データ（−３，−１）が、それぞれＣＰＵ１により得られている。

以上の一連の処理により、ステップＳ２１に係る位置合わせ処理として各分割画像ＧＴａ乃至分割画像ＧＴｄそれぞれの中心点が移動されるべき量が、上記オフセットとして、例えば図１５（ｄ）右に例示するようにそれぞれ得られる。なおこの中心点は、一般に「アンカー」と称されることもある。

この他、各分割画像ＧＴａ乃至分割画像ＧＴｄそれぞれのアンカーの移動量に基づいたいわゆる内挿法又は外挿法により、図１６に例示するようにカレント画像ＧＴ全体を変形させるように位置合わせ処理を行うことも可能である。この場合には、カレント画像ＧＴの内容と合成画像ＧＡの内容とを、より一致させることができる。更には、カレント画像ＧＴ全体、或いは分割画像ＧＴａ乃至分割画像ＧＴｄ全体の移動や変形（それらの回転、拡大／縮小又は台形変形等を含む）を用いることもできる。

以上説明したように、第４実施形態に係るキャプチャシステムの動作によれば、第１実施形態に係るキャプチャシステムＣＳの動作による作用効果に加えて、同一の書面Ｐに相当する複数の画像データを合成して合成画像を生成してキャプチャするので、より高画質或いは広範囲の書面Ｐに相当する画像データをキャプチャすることができる。

なお、各キャプチャの間に書面Ｐを例えば携帯者がずらすことにより、一度のキャプチャでは全体をキャプチャし切れない大きさの書面Ｐであっても、高画質にキャプチャすることができる。即ち、前後する撮像の間にカメラ９と書面Ｐとの相対的な位置が適切に変更されることによって同一の書面Ｐに相当する当該変更前後の複数の画像データそれぞれに相当する画像よりも高画質或いは広範囲の合成画像を生成するので、書面Ｐに相当するより高画質の合成画像をキャプチャすることができる。
（Ｖ）変形形態
なお、本発明は、上述してきた各実施形態以外にも様々な応用が可能である。
（ａ）第一の変形形態
先ず第一の変形形態として、撮像される書面Ｐを、人を個人的に特定する個人情報が記載された書面Ｐとしてもよい。この場合には、書面Ｐに個人情報が記載されていても、それがスマートフォンＳの外部に流出することがないので、当該個人情報を簡易に且つ確実に保護することができると共に、当該個人情報を改めて記入したり入力したりする手間を省くことができる。
（ｂ）第二の変形形態
また第二の変形形態として、一の画像データがキャプチャされたとき、当該キャプチャされた画像データに関連付けられるイベントを特定するイベント情報（即ち、会議、試合又は登山等の、画像に関連付けられるイベントを示すイベント情報。またこのイベント情報には、例えばそれに関連する日時や場所を示す情報を含めることが、一般的に考えられる。以下、同様。）を自動的に生成し、この生成されたイベント情報が例えば外部のイベント情報管理サーバ又はＲＯＭ２内に既に記録されているいずれかのイベント情報と同一のイベントに対応しているか否かを照合するように構成する。そして当該イベント情報が、イベント情報管理サーバ等に記録されているいずれのイベント情報と同一のイベントにも対応していないとき、当該新たに生成されたイベント情報をイベント情報管理サーバ等に記録させるように構成することができる。この場合には、書面Ｐに関連付けられたイベント情報を簡易に生成して記録させることで、当該イベント情報を簡易に維持管理することができる。

なお、上記第二の変形形態の場合において、画像データがキャプチャされたときのカメラ９（スマートフォンＳ）の位置を例えばＧＰＳ（Global Positioning System）等を用いて検出し、その検出された位置を示す位置データを含ませて上記イベント情報を生成するように構成してもよい。この場合は、利用価値の高いイベント情報を簡易に維持管理することができる。
（ｃ）第三の変形形態
次に第三の変形形態として、一の画像データがキャプチャされたとき、キャプチャされた画像データに関連付けられ、且つキャプチャされた画像データに関連する個人を特定する個人情報を自動的に生成し、この生成された個人情報が外部の個人情報管理サーバ等内又はスマートフォンＳ自体内に既に記録されているいずれかの個人情報により示される個人に対応しているか否かを照合するように構成する。そして当該個人情報が、個人情報管理サーバ等内又はスマートフォンＳ自体内に記録されているいずれの個人情報により示される個人とも対応していないとき、当該新たに生成された個人情報を個人情報管理サーバ等に送信して記録させるように構成することができる。この場合には、書面Ｐに関連する個人情報を簡易に生成して記録させることで、当該個人情報を簡易に維持管理することができる。

なお、上記第二の変形形態及び第三の変形形態の場合において、一の画像データがキャプチャされたとき、上記イベント情報及び上記個人情報に加えて、これらにより示されるイベント及び個人を特定するリンク情報を自動的に生成するように構成しても良い。このリンク情報として具体的には、例えば、当該イベント情報により示されるイベントに、当該個人情報により特定される個人が参加する場合の、当該参加の旨の出席情報がこれに相当する。そして、当該出席情報が、上記イベント情報管理サーバ等及び上記個人情報管理サーバ等とは別個の例えば出席情報管理サーバ等に記録／蓄積するように構成する。そして、イベント情報、個人情報に加えて出席情報の記録の有無が、それぞれ上記イベント情報管理サーバ等、上記個人情報管理サーバ等及び上記出席情報管理サーバ等との間で照合され、それらの記録の有無が確認されるように構成する。これにより、新たなイベント情報（個人情報又は出席情報）がイベント情報管理サーバ等（個人情報管理サーバ等又は出席情報管理サーバ等）内に記録されていなければ、画像データとの関連付けはそのままに、その新たなイベント情報（個人情報又は出席情報）をイベント情報管理サーバ等（個人情報管理サーバ等又は出席情報管理サーバ等）内に新たに記録する。これに対し、新たなイベント情報（個人情報又は出席情報）がイベント情報管理サーバ等（個人情報管理サーバ等又は出席情報管理サーバ等）内に記録されていれば、キャプチャされた画像データの関連付けを、当該記録済みのイベント情報（個人情報又は出席情報）に変更する。このようにすれば、一つのイベント情報（個人情報又は出席情報）に対して複数の画像データを関連付けることができ、この結果として、例えば、一つの個人情報への複数の画像データの関連付け、一つのイベント情報への複数の画像データの関連付け、一つのイベントへの複数の出席者、一人の個人の複数のイベントへの出席、のそれぞれの情報管理が可能となることになる。
（ｄ）第四の変形形態
更に第四の変形形態として、所定位置に書面Ｐが置かれていると識別されたとき、当該識別されたタイミングに対応して出力された画像データに対して、例えば広告の内容を有する画像データや文字列データ等を追加するか又は一部を置き換えて挿入し、その画像データ又は文字列データが加えられた画像データをキャプチャするように構成してもよい。この場合は、撮像された情報と共に広告をも記録して爾後に参照することができ、更に広告を画像によって配信することで、ユーザがより安価に本発明に関連するサービスを享受することができる。

なおこの場合に、上記所定位置に書面Ｐが置かれていると識別されたタイミングに対応して出力された画像データの少なくとも一部を外部の画像処理サーバ等に送信し、その送信された画像データの内容の画像処理サーバ等における認識結果に基づいて当該画像処理サーバにおいて広告の内容を有する画像データが加えられた画像データを受信し、これをキャプチャするように構成しても良い。この場合には、スマートフォンＳにおける処理負荷を軽減しつつ、撮像された情報と共に広告をも記録して爾後に参照することができる。

またこれとは異なり、スマートフォンＳのＲＯＭ２内に広告の内容を有する画像データを予め一又は複数記録しておき、上記所定位置に書面Ｐが置かれていると識別されたタイミングに対応して出力された画像データの内容をＣＰＵ１において認識し、認識された内容に対応する広告の内容を有する画像データをＲＯＭ２から読み出して加えるように構成してもよい。この場合には、スマートフォンＳ内で完結する構成により、撮像された情報と共に広告をも記録して爾後に参照することができる。

他方、上記所定位置に書面Ｐが置かれていると識別されたタイミングに対応して出力された画像データの内容をＣＰＵ１において認識し、その認識結果を外部の画像処理サーバ等に送信し、その認識結果に基づいて画像処理サーバ等から送信された広告の内容を有する画像データを受信して加えるように構成してもよい。この場合には、撮像された情報と共に広告をも記録して爾後に参照することができる。

更には、本発明は以下のような様々な変形が可能である。
・各実施形態に係るスタンドＳＴを、角度や高さの調整が可能な構成とすることができる。
・撮像時においてスマートフォンＳのライト１１により照明を補って撮影を行うように構成することができる。
・キャプチャした画像を幾何補正して、一般的な長方形の文書画像にするように構成することができる。なおこの場合、スマートフォンＳに備えられた姿勢センサ（加速度センサやジャイロセンサ）を用いて書面Ｐに対するカメラ９の角度を検出し、これを上記幾何補正に用いるように構成することができる。
・スタンドＳＴと文書（ノートなど）を物理的にクリップなどで固定するように構成することができる。この場合、文書を手で動かすと、スタンドもこれに合わせて一緒に動くことになる。
・自動でキャプチャが行われた瞬間に、音声、ＬＥＤ等の発光体又は振動などの表示以外の方法で携帯者に通知するように構成しても良い。
・書面Ｐを置く位置を決める際に、書面Ｐを置く推奨位置をスマートフォンＳ又はスタンドＳＴからの光やレーザ光線、或いはディスプレイで提示すると共に、実際のキャプチャ時には、書面Ｐの位置に対して最適となるように、カメラ９のズーム又は首振り角度等の自動的に調節するように構成することができる。
・一つの書面Ｐだけでなく、複数の撮像対象物（例えば、名刺等の小さい書面等）を同時に認識してキャプチャするように構成することができる。
・本発明に係る撮像対象物としては、各実施形態において説明した書面Ｐ、即ち紙だけではなく、例えばスレート型のパーソナルコンピュータやいわゆる電子ブックの表示装置等の携帯型の表示装置に表示されている画像等を撮像するように構成することができる。
・更に、キャプチャの際、各画像データを識別するための識別情報（シリアル番号等の文字列等）、当該画像データが撮像された時を示す時刻情報、又は当該キャプチャが行われた場所を示す場所情報の少なくともいずれか一つを画像データ内に画像として埋め込んだ後、記録するように構成することができる。この場合には、画像データをキャプチャする際、識別情報、時刻情報又は場所情報の少なくともいずれか一つを画像として埋め込んだ後に記録するので、記録後の画像データを容易に識別することができる。また、例えば過去にキャプチャして「１２３４」なる文字列（例えばシリアル番号等）が埋め込まれた画像データを印刷し、それに新しい書き込みを入れた上で再度キャプチャする場合、そのキャプチャされる印刷物のシリアル番号等（「１２３４」）を、例えば画像を入力とする文字認識機能により認識し、これに関連した、例えば「１２３４−２」といった文字列（関連のない例えば「３４５６」などではない、関連した文字列）を新たにキャプチャする画像データ内に埋め込んだ後に記録するように構成してもよい。この場合には、キャプチャされた画像データ内に他の文字列等が既に含まれていることを認識したとき、当該他の文字列等に関連する新たな文字列等を生成して画像データ内に新たに埋め込んで記録するので、文字列等の関連性により、複数回に渡る撮像により得られた画像データを確実に識別することができることになる。

なお、図３及び図１３に示すフローチャートに対応するプログラムを、インターネット等のネットワークを介して取得し、或いは光ディスク等の情報記録媒体に記録されているものを取得して、例えば汎用のマイクロコンピュータによりこれを読み出して実行するように構成することもできる。この場合のマイクロコンピュータは、各実施形態に係るＣＰＵ１と同様の処理を実行することになる。

以上夫々説明したように、本発明は画像記録装置の分野に利用することが可能であり、特にカメラ９により撮像された画像をキャプチャする画像記録装置の分野に適用すれば特に顕著な効果が得られる。また上述したように、いつでも誰でもどこででも、個人ならそのプライバシーを、仕事なら関連する情報のセキュリティを、それぞれ最高レベルで確保しながら、手間を取らずに簡単に高画質或いは広範囲の画像合成を行うことができる。これは、今までの装置等にはなかった、画期的な価値である。

１ ＣＰＵ
２ ＲＯＭ
３ ＲＡＭ
４ 操作部
５ ディスプレイ
６ 通話制御部
７ スピーカ
８ マイク
９、９Ａ、９Ｂ カメラ
１０ 通信インターフェース
２０ プロジェクタ
３１ 合成画像バッファ
３２ カレント画像バッファ
３３ 位置合わせ済みカレント画像バッファ
４Ａ、４Ｂ、４Ｃ 操作ボタン
Ｓ、Ｓ３、Ｓ４ スマートフォン
Ｐ 書面
Ｄ 机
Ｈ 手
Ｌ 文字
ＢＤ 境界
ＤＤ 表示デバイス
ＴＳ 透明シート
ＰＪ 投影情報
ＰＴ、ＰＴ１ 保持台
ＳＴ、ＳＴ２ スタンド
Ｂ 載置台
ＰＰ 撮像対象物
ＴＢ 透明板
ＢＳ１、ＢＳ２、ＰＴ２、ＰＴ３ 支持部
ＬＴ ライト
ＡＲ、ＡＲ１、ＡＲ２ 撮像範囲
ＣＳ、ＣＳ１、ＣＳ２−１、ＣＳ２−２、ＣＳ２−３、ＣＳ３ キャプチャシステム
ＡＮＴ アンテナ
ＧＡ 合成画像
ＧＴ カレント画像
ＧＴａ、ＧＴｂ、ＧＴｃ、ＧＴｄ 分割画像

Claims (34)

1. 撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力する撮像手段と、
   各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別手段と、
   前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録手段と、
   前記撮像対象物に関連する関連対象物の像を前記撮像対象物上に投影する投影手段とを備え、
   前記像が投影されているタイミングにおいて前記撮像手段から出力された前記撮像情報を前記記録媒体に記録するように前記記録手段を制御することを特徴とする画像記録装置。
2. 請求項１に記載の画像記録装置において、
   前記識別手段は、前記撮像手段からそれぞれ出力された前記撮像情報に基づき、当該各撮像情報における前記撮像対象物と当該撮像対象物の周囲とを画する境界が識別されたとき、前記対象物載置位置に前記撮像対象物が置かれていると識別することを特徴とする画像記録装置。
3. 請求項２に記載の画像記録装置において、
   前記境界が識別されたとき、当該識別された境界を示す境界線を前記撮像情報における前記撮像対象物に対応付けて表示する表示手段を更に備えることを特徴とする画像記録装置。
4. 請求項１に記載の画像記録装置において、
   前記識別手段は、前記撮像手段からそれぞれ出力された前記撮像情報に基づき、当該各撮像情報の一部又は全部が時系列において所定量変化し、その後に当該変化がなくなったと識別されたとき、前記対象物載置位置に前記撮像対象物が置かれていると識別することを特徴とする画像記録装置。
5. 請求項１に記載の画像記録装置において、
   前記識別手段は、前記撮像対象物が載置される 載置台の前記対象物載置位置に相当する部分の特徴を示す特徴情報に基づいて、前記載置台の前記対象物載置位置が遮られたことが認識されたとき、前記対象物載置位置に前記撮像対象物が置かれていると識別することを特徴とする画像記録装置。
6. 請求項１に記載の画像記録装置において、
   前記識別手段は、前記撮像対象物が置かれていない前記対象物載置位置に相当する前記撮像情報と、他の前記撮像情報と、の差分に基づいて、前記対象物載置位置に前記撮像対象物が置かれていると識別することを特徴とする画像記録装置。
7. 請求項１から請求項６のいずれか一項に記載の画像記録装置において、
   前記撮像対象物が置かれていることが認識されているか否かを逐次告知する告知手段を更に備えることを特徴とする画像記録装置。
8. 請求項１から請求項７のいずれか一項に記載の画像記録装置において、
   前記対象物載置位置に前記撮像対象物が置かれていると識別された後、前記撮像情報における少なくとも前記撮像対象物が予め設定された所定時間静止しているか否かを判定する判定手段と、
   前記判定手段による前記撮像対象物が前記所定時間静止している旨の判定に対応して出力された前記撮像情報を前記記録媒体に記録するように前記記録手段を制御する制御手段と、
   を備えることを特徴とする画像記録装置。
9. 請求項１から請求項８のいずれか一項に記載の画像記録装置において、
   前記対象物載置位置に前記撮像対象物が置かれていると識別された後、前記撮像情報における前記撮像対象物の範囲内に当該撮像対象物以外の他の物が撮像されているか否かを判定する判定手段と、
   前記撮像情報における前記撮像対象物の範囲内に前記他の物が撮像されていると判定されたとき、当該判定されたタイミングに対応して出力された前記撮像情報の前記記録媒体への記録を禁止するように前記記録手段を制御する制御手段と、
   を備えることを特徴とする画像記録装置。
10. 請求項１から請求項９のいずれか一項に記載の画像記録装置において、
    前記記録媒体に記録済みの第１撮像情報における前記撮像対象物と、前記第１撮像情報が前記記録媒体に記録されたタイミングより後に前記撮像手段から出力された第２撮像情報における前記撮像対象物と、を各前記撮像ごとに比較する比較手段と、
    前記第１撮像情報における前記撮像対象物と、前記第２撮像情報における前記撮像対象物と、が同一であるとき、前記第２撮像情報の前記記録媒体への記録を禁止するように前記記録手段を制御する制御手段と、
    を備えることを特徴とする画像記録装置。
11. 請求項１から請求項１０のいずれか一項に記載の画像記録装置において、
    前記像が投影されている前記撮像対象物に相当する前記撮像情報と、前記像の投影が一時的に中断されている間の前記撮像対象物に相当する前記撮像情報と、を共に前記記録媒体に記録するように前記記録手段を制御することを特徴とする画像記録装置。
12. 請求項１から請求項１１のいずれか一項に記載の画像記録装置において、
    同一の前記撮像対象物に相当する複数の前記撮像情報を合成して合成撮像情報を生成する合成手段を更に備え、
    前記生成された合成撮像情報を前記記録媒体に記録するように前記記録手段を制御することを特徴とする画像記録装置。
13. 請求項１２に記載の画像記録装置において、
    前記合成手段は、同一の前記撮像対象物に相当する複数の前記撮像情報であって、前記撮像対象物の撮像条件が相互に異なる複数の前記撮像情報を合成して前記合成撮像情報を生成することを特徴とする画像記録装置。
14. 請求項１２に記載の画像記録装置において、
    前記撮像手段と前記撮像対象物との相対的な位置の、前後する撮像間における変更に基づき、前記合成手段は、同一の前記撮像対象物に相当する当該変更前後の複数の前記撮像情報を用いて、当該各撮像情報それぞれに相当する画像よりも高画質或いは広範囲の合成画像に相当する前記合成撮像情報を生成することを特徴とする画像記録装置。
15. 請求項１から請求項１４のいずれか一項に記載の画像記録装置において、
    前記撮像対象物は、人を個人的に特定する個人情報が記載された撮像対象物であることを特徴とする画像記録装置。
16. 請求項１から請求項１５のいずれか一項に記載の画像記録装置において、
    前記撮像情報が前記記録媒体に記録されたとき、当該記録された撮像情報に関連付けられ、且つ当該記録された撮像情報に関連するイベントを特定するイベント情報を生成するイベント情報生成手段と、
    前記生成されたイベント情報がイベント情報記録手段に既に記録されているいずれかのイベント情報と同一のイベントに対応しているか否かを照合する照合手段と、
    前記生成されたイベント情報が前記イベント情報記録手段に記録されているいずれのイベント情報と同一のイベントにも対応していないとき、当該生成されたイベント情報を当該イベント情報記録手段に記録させる送信手段と、
    を更に備えることを特徴とする画像記録装置。
17. 請求項１６に記載の画像記録装置において、
    前記生成されたイベント情報が前記イベント情報記録手段に記録されているいずれかのイベント情報と同一のイベントに対応しているとき、当該生成されたイベント情報に関連付けられる前記撮像情報の当該関連付け先を、前記同一のイベントの前記イベント情報に変更する関連付変更手段を更に備えることを特徴とする画像記録装置。
18. 請求項１から請求項１７のいずれか一項に記載の画像記録装置において、
    前記撮像情報が前記記録媒体に記録されたとき、当該記録された撮像情報に関連付けられ且つ当該記録された撮像情報に関連する個人を特定する個人情報を生成する個人情報生成手段と、
    前記生成された個人情報が個人情報記録手段に既に記録されているいずれかの個人情報により示される個人に対応しているか否かを照合する照合手段と、
    前記生成された個人情報が前記個人情報記録手段に記録されているいずれの個人情報により示される個人とも対応していないとき、当該生成された個人情報を当該個人情報記録手段に記録させる送信手段と、
    を更に備えることを特徴とする画像記録装置。
19. 請求項１８に記載の画像記録装置において、
    前記生成された個人情報が前記個人情報記録手段に記録されているいずれかの個人情報により示される個人に対応しているとき、当該生成された個人情報に関連付けられる前記撮像情報の当該関連付け先を、前記記録されている個人の前記個人情報に変更する関連付変更手段を更に備えることを特徴とする画像記録装置。
20. 請求項１から請求項１９のいずれか一項に記載の画像記録装置において、
    前記撮像情報が前記記録媒体に記録されたとき、当該記録された撮像情報に関連付けられ、且つ当該記録された撮像情報に関連する個人及びイベントを特定するリンク情報を生成するリンク情報生成手段と、
    前記生成されたリンク情報が、リンク情報記録手段に既に記録されているいずれかのリンク情報と同一の個人及びイベントを特定しているか否かを照合する照合手段と、
    前記生成されたリンク情報が、前記リンク情報記録手段に記録されているいずれのリンク情報により特定される個人及びイベントをも特定していないとき、当該生成されたリンク情報を当該リンク情報記録手段に記録させる送信手段と、
    を更に備えることを特徴とする画像記録装置。
21. 請求項２０に記載の画像記録装置において、
    前記生成されたリンク情報が前記リンク情報記録手段に記録されているいずれかのリンク情報により特定される前記個人及び前記イベントを特定しているとき、当該生成されたリンク情報に関連付けられる前記撮像情報の当該関連付け先を、前記記録されているリンク情報に変更する関連付変更手段を更に備えることを特徴とする画像記録装置。
22. 請求項１６又は請求項１７に記載の画像記録装置において、
    前記撮像情報が前記記録媒体に記録されたときの前記撮像手段の位置を検出し、検出された位置を示す位置情報を生成する位置検出手段を更に備え、
    前記イベント情報生成手段は、前記生成された位置情報を含ませて前記イベント情報を生成することを特徴とする画像記録装置。
23. 請求項１から請求項２２のいずれか一項に記載の画像記録装置において、
    前記撮像手段は、携帯可能な情報処理装置に備えられた撮像手段であることを特徴とする画像記録装置。
24. 請求項１から請求項２３のいずれか一項に記載の画像記録装置において、
    前記撮像手段は、携帯可能な保持具に当該画像記録装置が保持されることにより前記相対的な位置が一定とされる撮像手段であることを特徴とする画像記録装置。
25. 請求項２３又は請求項２４に記載の画像記録装置において、
    前記撮像手段は、保持具に当該画像記録装置が保持されることにより前記相対的な位置が一定とされる撮像手段であり、
    前記保持具が、折り曲げ可能なシート状材料を折り曲げて組み立てられる保持具であって、携帯時には展開されてシート状とされ、使用時には折り曲げて組み立てられて前記画像記録装置を保持可能とされる保持具であることを特徴とする画像記録装置。
26. 請求項１から請求項２５のいずれか一項に記載の画像記録装置において、
    前記対象物載置位置に前記撮像対象物が置かれていると識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報に対して、広告の内容を有する広告情報を加える画像処理手段を更に備え、
    前記記録手段は、前記広告情報が加えられた前記撮像情報を前記記録媒体に記録することを特徴とする画像記録装置。
27. 請求項２６に記載の画像記録装置において、
    前記画像処理手段は、
    前記対象物載置位置に前記撮像対象物が置かれていると識別されたタイミングに対応して出力された前記撮像情報の少なくとも一部を外部の情報処理装置に送信する撮像情報送信手段と、
    前記送信された撮像情報の内容の前記情報処理装置における認識結果に基づいて当該情報処理装置において前記広告情報が加えられた当該撮像情報を受信する撮像情報受信手段と、
    を備え、
    前記記録手段は、前記受信された撮像情報を前記記録媒体に記録することを特徴とする画像記録装置。
28. 請求項２６に記載の画像記録装置において、
    前記画像処理手段は、
    前記広告情報を予め一又は複数記録する広告情報記録手段と、
    前記対象物載置位置に前記撮像対象物が置かれていると識別されたタイミングに対応して出力された前記撮像情報の内容を認識する認識手段と、
    前記認識された内容に対応する前記広告情報を前記広告情報記録手段から読み出す読出手段と、
    を備え、
    当該画像処理手段は、前記読み出された広告情報を前記内容が認識された前記撮像情報に加えることを特徴とする画像記録装置。
29. 請求項２６に記載の画像記録装置において、
    前記画像処理手段は、
    前記対象物載置位置に前記撮像対象物が置かれていると識別されたタイミングに対応して出力された前記撮像情報の内容を認識する認識手段と、
    前記認識手段による認識結果を外部の情報処理装置に送信する認識結果送信手段と、
    前記送信された認識結果に基づいて当該情報処理装置から送信された前記広告情報を受信する広告情報受信手段と、
    を備え、
    当該画像処理手段は、前記受信された広告情報を前記内容が認識された前記撮像情報に加えることを特徴とする画像記録装置。
30. 請求項１から請求項２９のいずれか一項に記載の画像記録装置において、
    前記撮像情報を前記記録媒体に記録する際、前記記録手段は、各前記撮像情報を識別するための識別情報、当該撮像情報に相当する前記撮像対象物が撮像された時を示す時刻情報又は当該撮像が行われた場所を示す場所情報の少なくともいずれか一つを前記撮像情報内に画像として埋め込んだ後、当該撮像情報を前記記録媒体に記録することを特徴とする画像記録装置。
31. 請求項３０に記載の画像記録装置において、
    前記記録手段は、撮像された前記撮像情報内に他の前記識別情報が既に含まれていることを認識したとき、当該認識した他の前記識別情報に関連する新たな識別情報を生成し、当該撮像により前記記録媒体に記録する当該撮像情報内に当該生成された新たな識別情報を埋め込んで記録することを特徴とする画像記録装置。
32. 撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力する撮像手段を備える画像記録装置において実行される画像記録方法において、
    各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別工程と、
    前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録工程と、
    前記撮像対象物に関連する関連対象物の像を前記撮像対象物上に投影する投影工程と、
    を含み、
    前記記録工程は、前記像が投影されているタイミングにおいて前記撮像手段から出力された前記撮像情報を前記記録媒体に記録することを特徴とする画像記録方法。
33. 撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力する撮像手段と前記撮像対象物に関連する関連対象物の像を前記撮像対象物上に投影する投影手段とを備える画像記録装置に含まれるコンピュータを、
    各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別手段、及び、
    前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録手段として機能させ、
    前記像が投影されているタイミングにおいて前記撮像手段から出力された前記撮像情報を前記記録媒体に記録するように前記記録手段を制御することを特徴とする画像記録用プログラム。
34. 撮像対象物が置かれる対象物載置位置に対する相対的な位置が一定とされる撮像手段であって、前記撮像対象物が置かれていない前記対象物載置位置又は当該対象物載置位置に置かれている前記撮像対象物を連続して撮像し、当該対象物載置位置又は当該撮像対象物に相当する撮像情報を当該撮像ごとに出力する撮像手段と前記撮像対象物に関連する関連対象物の像を前記撮像対象物上に投影する投影手段とを備える画像記録装置に含まれるコンピュータを、
    各前記出力された撮像情報に基づいて、前記対象物載置位置に前記撮像対象物が置かれているか否かを識別する識別手段、及び、
    前記撮像対象物が置かれていることが識別されたとき、当該識別されたタイミングに対応して出力された前記撮像情報を記録媒体に記録する記録手段として機能させ、
    前記像が投影されているタイミングにおいて前記撮像手段から出力された前記撮像情報を前記記録媒体に記録するように前記記録手段を制御する画像記録用プログラムが前記コンピュータにより読み取り可能に記録されていることを特徴とする情報記録媒体。