JP5962975B2 - 情報処理装置及びプログラム - Google Patents

Description

本発明は、紙媒体（例えば、ノートブックや書籍）に記載されている情報を撮影する撮像手段を備えた情報処理装置及びプログラムに関する。

一般に、紙媒体（例えば、ノートブックや書籍）に記載されている情報を読み取る画像読取装置としては、その紙媒体をスキャナで走査することによってイメージデータとして読み取ったり、デジタルカメラで撮影することによって撮影画像として読み取ったりするようにしている。そして、従来、紙媒体をデジタルカメラによって読み取る技術としては、例えば、第１の筐体と第２の筐体とがヒンジ部を介して回動可能（開閉可能）に取り付けられているノートパソコンにおいて、第１の筐体のキートップに資料を置き、撮像部を備えた第２の筐体がキートップの全体を撮影可能となる位置で所定時間保持されたときに、撮像部を動作させて資料の撮影を開始するようにした技術が提案されている（特許文献１参照）。

特開２０１１−７６２６７号公報

しかしながら、特許文献１の技術にあっては、キートップ上に置いた資料を撮影するためには、第１の筐体と第２の筐体（撮像部）とを所定のヒンジ角度に調整した後、第２の筐体をその角度を所定時間保持するという特別な操作を必要とする技術であった。その結果、上述のような特別な操作を行わずに第１の筐体と第２の筐体とを完全に閉じてしまったときには、資料の撮影も行われないままとなってしまう。また、所定時間保持という特別な操作を行ったつもりでも、その操作が不完全であれば、資料の撮影が行われないままとなってしまう。

本発明の課題は、特別な操作を行わなくても、第１の筐体と第２の筐体を閉じるという不可欠な操作を行うだけで、一方の筐体側に配置されている紙媒体を確実に撮影できるようにすることである。

上述した課題を解決するために本発明の情報処理装置は、
第１の筐体と第２の筐体とを見開き状に開閉可能な情報処理装置であって、
読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
前記撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記指標を認識する認識手段と、
前記認識手段による指標の認識結果に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する判別手段と、
前記判別手段により前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する決定手段と、
を備え、
前記所定指標は、前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであり、
前記認識手段は、前記撮像手段によって撮影された前記マークにフォーカスが合っているか否かを認識し、
前記判別手段は、前記認識手段によって前記マークにフォーカスが合っていると認識されたか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ことを特徴とする情報処理装置である。

上述した課題を解決するために本発明のプログラムは、
コンピュータに対して、
読取対象の紙媒体が配置される第１の筐体と、前記第１の筐体に対向し、かつ見開き状に開閉可能な第２の筐体に設けられた撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記指標を認識する認識機能と、
前記指標の認識結果に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する判別機能と、
前記第１の筐体と前記第２の筐体とが前記所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する機能と、
を実現させるためのプログラムであって、
前記所定指標は、前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであり、
前記認識機能は、前記撮像手段によって撮影された前記マークにフォーカスが合っているか否かを認識し、
前記判別機能は、前記認識機能によって前記マークにフォーカスが合っていると認識されたか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ことを特徴とするプログラムである。

本発明によれば、特別な操作を行わなくても、第１の筐体と第２の筐体を閉じるという不可欠な操作を行うだけで、一方の筐体側に配置されている紙媒体を確実に撮影することができ、撮り忘れを防ぐことが可能となる。

情報処理装置として適用したカメラ付きタブレット端末装置の基本的な構成要素を示したブロック図。 カメラ付きタブレット端末装置１１、紙媒体１２をバインダ１３に装着した状態を示した外観斜視図。 バインダ１３を構成する第１の筐体１３ａと第２の筐体１３ｂとを閉じる際に撮像部６によって紙媒体１２を撮影したときの撮影画角と紙媒体１２との関係を説明するための図。 タブレット端末装置１１の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャート。 撮影画像内において閉じ角認識用のマーク１４の映り具合（形状）が第１の筐体１３ａと第２の筐体１３ｂとの閉じ角度に応じて変化する様子を概念的に示した図。 （１）、（２）は、本実施形態の変形例として閉じ角認識用のマーク１４の他の例を説明するための図。 本実施形態の変形例として、マーク以外の他の指標例を説明するための図。

以下、図１〜図５を参照して本発明の実施形態を説明する。
本実施形態は、情報処理装置として撮像機能（デジタルカメラ）を備えたタブレット端末装置に適用した場合を例示したもので、図１は、このカメラ付きタブレット端末装置の基本的な構成要素を示したブロック図である。
タブレット端末装置は、その筐体全体が、例えば、Ａ５サイズの携帯型情報端末装置であり、タッチ入力機能、無線通信機能などの基本機能のほか、後で詳述するが、このタブレット端末装置に接近配置されている紙媒体（例えば、ノート、リポート用紙、書籍など）を撮影することによりその紙媒体に記載されている情報（文字や図表など）を光学的に読み取る画像読取機能を備えている。本実施形態において、紙媒体とは、撮影すべき情報が記載されている媒体を示すものであり、素材が紙であることを特定するものではない。即ち、本実施形態において、紙媒体とは情報が記載されている被写体を意味している。また、本実施形態において、紙媒体には、情報を電子的に表示可能な電子ペーパーも含まれる。

制御部１は、電源部（二次電池）２からの電力供給によって動作し、記憶部３内の各種のプログラムに応じてこのタブレット端末装置の全体動作を制御するもので、この制御部１には図示しないＣＰＵ（中央演算処理装置）やメモリなどが設けられている。記憶部３は、例えば、ＲＯＭ、フラッシュメモリなどを有する構成で、図４に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されているプログラムメモリ３ａと、このタブレット端末装置が動作するために必要となる各種の情報（例えば、フラグなど）を一時的に記憶するワークメモリ３ｂなどを有している。なお、記憶部３は、例えば、ＳＤカード、ＩＣカードなど、着脱自在な可搬型メモリ（記録メディア）を含む構成であってもよく、図示しないが、通信機能を介してネットワークに接続されている状態においては所定のサーバ装置側の記憶領域を含むものであってもよい。

操作部４は、押しボタン式のキーとして、図示省略したが、電源をオン／オフさせる電源キーなどを備え、制御部１は、この操作部４から操作キーに対応して出力される入力操作信号に応じた処理を行う。タッチ表示部５は、表示パネル５ａにタッチパネル５ｂを積層配設した構成で、表示パネル５ａは、縦横比（例えば、横４：縦３）の異なる画面を有した高精細液晶ディスプレイあるいは有機ＥＬ（Electro Luminescence）ディスプレイである。タッチパネル５ｂは、撮影者の指などでタッチ操作された位置を検知してその座標データを入力するタッチスクリーンを構成するもので、例えば、静電容量方式あるいは抵抗膜方式を採用しているが、その他の方式であってもよい。

撮像部６は、画像読取機能を構成するもので、図示省略したが、光学レンズからの被写体像が撮像素子（ＣＣＤやＣＭＯＳなど）に結像されることにより被写体を高精細に撮影可能なデジタルカメラ部で、撮影レンズ、撮像素子、各種のセンサ、アナログ処理部、デジタル処理部を有している。撮像部６は、画像読取機能の動作時に、例えば、フレームレートが秒１５コマ（１５ｆｐｓ）の連続撮影（高速撮影）が可能となっている。無線ＬＡＮ（Local Area Network）通信部７は、高速大容量の通信が可能な無線通信モジュールで、最寄りの無線ＬＡＮルータ（図示省略）を介してインターネットに接続可能となっている。

図２は、カメラ付きタブレット端末装置１１、紙媒体１２をバインダ１３に装着した状態における外観斜視図である。
タブレット端末装置１１と紙媒体（例えば、ノート、リポート用紙、書籍）１２とは、バインダ１３に装着されている。バインダ１３は、第１の筐体１３ａと第２の筐体１３ｂとをヒンジ部１３ｃを介して見開き状に開閉可能となるように取り付けた構成で、図示の例では、右側に第１の筐体１３ａが配置され、左側に第２の筐体１３ｂが配置されている。なお、第１の筐体１３ａと第２の筐体１３ｂとは、図示の場合とは逆の関係であってもよい。第１の筐体１３ａ及び第２の筐体１３ｂは、厚い平板状長方形（同形同大）の紙部材（厚紙）で、縦長の第１の筐体１３ａ及び第２の筐体１３ｂを左右に配置した状態においてヒンジ部１３ｃを介して開閉可能に連結されている。即ち、第１の筐体１３ａと第２の筐体１３ｂとは、ヒンジ部１３ｃを回転軸として開閉可能に構成されている。

そして、第１の筐体１３ａと第２の筐体１３ｂとは、図示のように１８０°開いた状態から第１の筐体１３ａの上に第２の筐体１３ｂが重なり合う状態（完全に閉じた状態）まで開閉可能なもので、ユーザにあってはバインダ１３を１８０°開いた状態においてタブレット端末装置１１を使用したり、紙媒体１２に文字や図表などを書き入れたりするようにしている。また、タブレット端末装置１１及び紙媒体１２を使用しないときには、第１の筐体１３ａと第２の筐体１３ｂとを閉じてバインダ１３を完全に閉じるようにしている。

タブレット端末装置１１は、その全体が薄型の直方体で、バインダ１３を構成する第２の筐体１３ｂ上に装着されていると共に、縦長の第２の筐体１３ｂに対してタブレット端末装置１１も縦長となる向きに配設されている。また、バインダ１３を構成する他方の筐体（第１の筐体）１３ａ上には紙媒体１２を配置されている。紙媒体１２は、一枚のシート状の用紙であってもよいし、書籍のように冊子の状態（製本状態）であってもよい。なお、バインダ１３上において、タブレット端末装置１１と紙媒体１２との配置関係は、上述とは逆の関係であってもよい。また、タブレット端末装置１１、紙媒体１２は、バインダ１３に着脱可能に装着されているが、その装着の仕方は、例えば、留め具、フックを使用するなど、任意である。

このようにバインダ１３の第２の筐体１３ｂにタブレット端末装置１１が装着されている状態において、タブレット端末装置１１のタッチ表示部５及び撮像部６は、タブレット端末装置１１の表面側に位置するように配設され、更に撮像部６は、表面側の一端中央部（図示の例では表面左端中央部）に位置するように配設されている。また、バインダ１３を構成する第１の筐体１３ａの表面一端中央部（図示の例では表面右端中央部）には、閉じ角認識用の指標としてマーク１４が装着されている。この閉じ角認識用のマーク１４は、例えば、矩形の黒マークで、第１の筐体１３ａの上面に印刷されたものであるが、印刷に限らず、マーク付シールを貼り付けるようにしてもよい。

図３は、バインダ１３を構成する第１の筐体１３ａと第２の筐体１３ｂとを閉じる際に撮像部６によって紙媒体１２を撮影したときの撮影画角と紙媒体１２との関係を説明するための図である。
撮像部６の画角は、バインダ１３の閉じているときの閉じ角度や紙媒体１２の大きさにもよるが、バインダ１３が徐々に閉じられていく過程において、紙媒体１２、閉じ角認識用のマーク１４を撮影可能な範囲で、制御部１は、撮像部６によって撮影された撮影画像を取得して、その撮影画像を解析することにより閉じ角認識用のマーク１４を認識し、そのマークの認識結果に応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態（例えば、閉じ角度：略１１０°）まで閉じられたか否かを判別するようにしている。

この場合、バインダ１３が閉じられるにしたがってその閉じ角度は、次第に小さくなっていくが、その閉じ角度に応じてマーク１４の映り具合が変化するようになるために、その変化を認識するようにしている。すなわち、制御部１は、撮影画像内のマーク１４の形状変化を認識し、その形状が台形から正方形に変化したか否かに基づいて所定の状態（閉じ角度：略１１０°）まで閉じられたか否かを判別するようにしている。これによって第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられた際に、制御部１は、第１の筐体１３ａと第２の筐体１３ｂとの角度が撮影に最適な角度になったとして認識し、撮像部６からの撮影画像を保存対象として決定するようにしている。なお、制御部１は、認識用のマーク１４の形状変化を認識することによって撮影に最適な角度として略１１０°を検出した際に、撮像部６から撮影画像を保存対象として決定するが、この撮影に最適な角度（略１１０°）に合わせてフォーカス、露出などの撮影条件が設定されており、その条件で撮影された画像を撮像部６から取得して保存対象とするようにしている。

次に、本実施形態におけるタブレット端末装置１１の動作概念を図４に示すフローチャートを参照して説明する。ここで、このフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム／データを利用して本実施形態特有の動作を実行することもできる。

図４は、タブレット端末装置１１の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートであり、電源投入に応じて実行開始される。
先ず、制御部１は、電源投入操作（電源オン操作）に応じてメモリなどをクリアする初期化処理を実行すると共に、撮影に最適な角度（略１１０°）に合わせてフォーカス、露出などの撮影条件を設定した後、撮像部６を動作させて撮影を開始させる（ステップＳ１）。そして、制御部１は、電源オフ操作が行われたかを調べ（ステップＳ２）、電源オフ操作が行われなければ（ステップＳ２でＮＯ）、撮像部６から１フレーム分の撮影画像を取得し（ステップＳ３）、この撮影画像を解析することにより閉じ角認識用のマーク（指標）１４の有無を調べる（ステップＳ４）。

ここで、閉じ角認識用のマーク１４を認識することができなければ（ステップＳ４でＮＯ）、上述のステップＳ２に戻るが、撮影画像内に閉じ角認識用のマーク１４が映っていてそれを認識できたときには（ステップＳ４でＹＥＳ）、その撮影画像内からそのマーク１４を抽出する（ステップＳ５）。そして、マーク１４の映り具合（マークの形状）を認識し（ステップＳ６）、マーク１４の形状は台形から正方形に変化したかを調べる（ステップＳ７）。

図５は、撮影画像内において閉じ角認識用のマーク１４の映り具合（形状）が第１の筐体１３ａと第２の筐体１３ｂとの閉じ角度に応じて変化している様子を概念的に示した図で、第１の筐体１３ａと第２の筐体１３ｂとの閉じ角度が略１５０°、略１３０°、略１１０°、略９０°の場合におけるマーク１４の映り具合（形状）を示している。
ここで、閉じ角認識用のマーク１４の形状は、閉じ角度が略１５０°以上や略１５０°〜略１３０°の場合には台形として認識されるが、略１１０°の場合には正方形として認識され、略９０°の場合には、逆型の台形として認識されるようになる。その際、マーク１４の形状が正方形として認識されるのは、閉じ角度が１１０°±αの範囲となるが、そのうち１１０°が紙媒体１２の撮影に適した最適な撮影角度となる。

いま、マーク１４の形状変化として、台形から正方形への変化を認識しなければ（ステ
ップＳ７でＮＯ）、閉じ角度は、略１３０°、略１５０°のように略１１０°以上であると判断して、上述のステップＳ２に戻るが、台形から正方形への変化を認識したときには（ステップＳ７でＹＥＳ）、そのときの撮影画像を保存候補の画像としてワークメモリ３ｂに一時記憶させる（ステップＳ８）。そして、撮像部６から撮影画像を取得して（ステップＳ９）、この撮影画像内からマーク１４を抽出して（ステップＳ１０）、そのマーク１４の映り具合（マークの形状）を認識する（ステップＳ１１）。ここで、マーク１４の形状変化として、正方形から台形への変化を認識したかを調べるが（ステップＳ１２）、いま、正方形のままであれば（ステップＳ１２でＮＯ）、上述のステップＳ８に戻って撮影画像を保存候補の画像として一時記憶させる動作を繰り返す。

また、マーク１４の形状変化として、正方形から台形への変化を認識したときには（ステップＳ１２でＹＥＳ）、ワークメモリ３ｂに一時記憶されている保存候補画像群の中から、例えば、その中間位置に相当する撮影画像（閉じ角度１１０°で撮影された画像）を最適画像として選択する（ステップＳ１３）。なお、中間位置に限らず、その選択の仕方は任意である。また、複数の保存候補画像を位置合わせを行いながら重ね合わせた合成画像を最適画像としててもよい。次に、この最適画像を保存対象の画像として決定して（ステップＳ１４）、この保存対象画像に対して台形歪の補正処理を行うが（ステップＳ１５）、その際、角度１１０°に応じた台形歪補正を行うようにしている。
即ち、ステップＳ１５では、閉じ角度１１０°で撮影された保存対象画像に含まれる台形歪みの程度（度合い）を予め想定しておき、保存対象画像を台形歪みのない矩形画像に補正するための補正処理を行う。

これによって補正した保存対象画像と記憶部３のＳＤカードなどに保存されている保存済み画像とを比較し（ステップＳ１６）、保存対象画像と同一の画像は既に保存されているか、つまり保存対象画像は保存済みであるかを調べ（ステップＳ１７）、保存済みであれば（ステップＳ１７でＹＥＳ）、ステップＳ１９に移り、撮像部６の動作を停止させると共に電源をオフする処理を行う。また、保存対象画像が保存済みでなければ（ステップＳ１７でＹＥＳ）、保存対象画像を記憶部３のＳＤカードなどに記録保存する処理（ステップＳ１８）を行った後、ステップＳ１９に移り、撮像部６の動作を停止させると共に電源をオフする処理を行う。

以上のように、本実施形態におけるタブレット端末装置１１は、見開き状に開閉可能なバインダ１３を構成する第１の筐体１３ａに読取対象の紙媒体１２が配置されている状態において、第２の筐体１３ｂに設けられた撮像部６によって第１の筐体１３ａ側の所定指標が撮影された際に、その撮影画像を解析することによりその指標を認識し、その認識結果に応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別し、所定の状態まで閉じられた際に、撮像部６からの撮影画像を保存対象として決定するようにしたので、特別な操作を行わなくても、第１の筐体１３ａと第２の筐体１３ｂを閉じるという不可欠な操作を行うだけで、一方の筐体側に配置されている紙媒体１２を確実に撮影することができ、撮り忘れを防ぐことが可能となる。

タブレット端末装置１１は、第１の筐体１３ａと第２の筐体１３ｂとの閉じ状態に応じて変化する指標の映り具合を認識し、その映り具合に応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別するようにしたので、閉じ角を検出するための専用センサを設けることなく、指標の映り具合の変化から閉じ状態を容易に判別することができる。

タブレット端末装置１１は、指標の映り具合としてその指標の形状を認識し、指標の形状が所定の形状になったか否かに応じて所定の状態まで閉じられたか否かを判別するようにしたので、指標の形状変化から閉じ状態を容易に判別することができる。

所定指標は、第１の筐体１３ａ上に付加されている所定のマークであり、タブレット端末装置１１は、マークの形状を認識した際に所定の形状（例えば、正方形）であるか否かに基づいて所定の状態（例えば、閉じ角度が略１１０°）まで閉じられたか否かを判別するようにしたので、マークの形状変化から閉じ状態を判別することができる。

保存対象として決定した撮影画像を所定の閉じ状態に応じて台形歪補正を行うようにしたので、所定の閉じ状態で撮影したとしても歪のない画像を保存することができる。

保存対象として決定した撮影画像と保存済み画像とが同一の画像ではないことを条件に、その保存対象の画像を新規に記録保存するようにしたので、同一画像が重複して保存されることを確実に防ぐことができる。

なお、上述した実施形態においては、撮影画像内の閉じ角認識用のマーク１４の形状が台形から正方形に変化した際の撮影画像を保存候補として取得するようにしたが、マーク１４の形状は任意であり、例えば、二本の線「ハの字」であってもよい。図６（１）は、撮影画像内において閉じ角認識用のマーク（二本の線）１４の映り具合（形状）が閉じ角度に応じて変化する様子を概念的に示した図で、第１の筐体１３ａと第２の筐体１３ｂとの閉じ角度が略１５０°、略１３０°、略１１０°、略９０°の場合におけるマーク（二本の線）１４の映り具合（形状）を示している。ここで、閉じ角認識用のマーク１４の形状は、閉じ角度が略１５０°以上や略１５０°〜略１３０°の場合には「ハの字」として認識されるが、略１１０°の場合には「平行線」として認識され、略９０°の場合には、「逆ハの字」として認識されるようになる。

図６（２）は、更に、閉じ角認識用のマーク１４の他の形状を示し、黒ラインの中間部分に空白部が出現してその中間部分が離れるか、中間部分が連結されたままとなるかによってマーク形状の変化を認識するようにしている。図示の例は、第１の筐体１３ａと第２の筐体１３ｂとの閉じ角度が略１３０°、略１１０°の場合における閉じ角認識用のマーク（黒ライン）１４の映り具合（形状）を示し、その形状は、閉じ角度が略１３０°以上では連結した状態の黒ラインとなるが、略１１０°では中間部分が離れた状態の黒ラインとなる。その他、閉じ角認識用のマーク１４の形状は任意である。

上述した実施形態においては、閉じ角認識用のマーク１４の形状変化から所定の状態まで閉じられたか否かを判別するようにしたが、マーク１４の形状に限らず、マーク１４の大きさや位置の変化に応じて所定の状態まで閉じられたか否かを判別するようにしてもよい。更に、閉じ角認識用のマーク１４の形状、大きさ、位置のうち、その２以上を組合せを認識するようにしてもよい。このように閉じ角認識用のマーク１４の形状変化に限らず、その大きさや位置の変化を認識することによってその変化をより確実に認識することが可能となる。

また、上述した実施形態においては、第１の筐体１３ａの表面一端中央部（図２では表面右端中央部）には、閉じ角認識用のマーク１４を配置するようにしたが、その位置は、それに限らず、筐体１３ａの角部などであってもよい。また、第１の筐体１３ａに装着する場合に限らず、紙媒体１２内に印刷したり、紙媒体１２内にマーク付シールを貼付したりするようにしてもよい。

また、上述した実施形態においては、閉じ角認識用の指標としてマークを例示したが、第１の筐体１３ａの一部分をその指標としてもよい。
図７は、第１の筐体１３ａの一部分を閉じ角認識用の指標とした場合を説明するための撮影画像を示した図である。この場合、指標は、第１の筐体１３ａの端部であり、制御部１は、第１の筐体１３ａの端部が撮像部６の画角から外れた際の端部の切れ方として、その端部の位置を認識し、その端部の切れ方が所定の切れ方であるか否かに基づいて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別するようにしている。

図示の例は、第１の筐体１３ａと第２の筐体１３ｂとの閉じ角度に応じて第１の筐体１３ａの外郭線の映り具合が変化する様子を示した図である。
図中、第１の筐体１３ａの外郭線を示す実線は、閉じ角度が略１１０°の場合を示し、一点破線は、閉じ角度が略１３０°の場合を示し、二点破線は、閉じ角度が略１５０°の場合を示している。このように第１の筐体１３ａの端部が撮像部６の画角から外れた際の端部の切れ方、つまり、第１の筐体１３ａの端部と画角線とが交差する位置は、閉じ角度に応じて変化するようになる。この場合、撮影画像の縦方向において、閉じ角度が略１１０°、略１３０°、略１５０°の順にその縦方向中央部に近づくようになり、略１１０°の場合が最も近くなる。

このように第１の筐体１３ａの端部が撮像部６の画角から外れた際の切れ方に応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別するようにすれば、上述した実施形態と同様に、特別な操作を行わなくても、第１の筺体１３ａと第２の筺体１３ｂを閉じるという不可欠な操作を行うだけで、一方の筺体側に配置されている紙媒体１２を確実に撮影することができ、撮り忘れを防ぐことが可能となるほか、マークなどが不要となる。

なお、第１の筐体１３ａの端部が撮像部６の画角から外れた際の切れ方としては、第１の筐体１３ａの端部と画角線とが交差する位置の変化を認識する場合に限らず、第１の筐体１３ａの端部外郭線の傾き（画角線に対する傾き）を認識したり、その端部の形状を認識したりするようにしてもよい。

さらに、上述した実施形態においては、閉じ角認識用のマーク１４の形状変化や大きさや位置の変化に応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別するようにしたが、マーク１４の形状変化や大きさや位置の変化に限らず、マーク１４を撮像部６で撮影した際に、マーク１４にフォーカスが合っているか否か、即ち、フォーカスが合焦しているか否かに応じて第１の筐体１３ａと第２の筐体１３ｂとが所定の状態まで閉じられたか否かを判別するようにしてもよい。
この場合、図４のステップＳ６及びＳ１１は「マークにフォーカスが合っているか否かを判別」とし、ステップＳ７は「マークにフォーカスが合ったか？」とし、ステップＳ１２は「マークからフォーカスが外れたか？」とする。

また、上述した実施形態においては、情報処理装置としてタブレット端末装置１１に適用した場合を示したが、これに限らず、カメラ機能付きパーソナルコンピュータ・ＰＤＡ（個人向け携帯型情報通信機器）・デジタルカメラ・音楽プレイヤーなどであってもよく、勿論、デジタルカメラ自体であってもよい。

また、上述した各実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。

以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
（付記）
（請求項１）
請求項１に記載の発明は、
第１の筐体と第２の筐体とを見開き状に開閉可能な情報処理装置であって、
読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
前記撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記指標を認識する認識手段と、
前記認識手段による指標の認識結果に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する判別手段と、
前記判別手段により前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する決定手段と、
を備えたことを特徴とする情報処理装置である。
（請求項２）
請求項２に記載の発明は、請求項１に記載の情報処理装置において、
前記認識手段は、前記第１の筐体と前記第２の筐体との閉じ状態に応じて変化する前記指標の映り具合を認識し、
前記判別手段は、前記認識手段によって認識された指標の映り具合に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ようにしたことを特徴とする情報処理装置である。
（請求項３）
請求項３に記載の発明は、請求項２に記載の情報処理装置において、
前記認識手段は、前記指標の映り具合としてその指標の形状あるいは位置を認識し、
前記判別手段は、前記認識手段によって認識された指標の形状あるいは位置が所定の形状あるいは位置になったか否かに応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ようにしたことを特徴とする情報処理装置である。
（請求項４）
請求項４に記載の発明は、請求項１〜請求項３のいずれかに記載の情報処理装置において、
前記所定指標は、前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであり、
前記認識手段は、前記マークの状態として少なくともその形状、位置、大きさのいずれかを認識する、
前記判別手段は、前記認識手段によって認識されたマークの状態が所定の状態であるか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ようにしたことを特徴とする情報処理装置である。
（請求項５）
請求項５に記載の発明は、請求項１〜請求項３のいずれかに記載の情報処理装置において、
前記所定指標は、前記撮像手段によって撮影された撮影画像内での前記第１の筐体の端部であり、
前記認識手段は、記撮像手段の画角から当該第１の筐体の端部が外れた際の当該端部の切れ方として、少なくともその端部の位置、傾きのいずれか一方を認識し、
前記判別手段は、前記認識手段によって認識された第１の筐体の端部の切れ方が所定の切れ方であるか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ようにしたことを特徴とする情報処理装置である。
（請求項６）
請求項６に記載の発明は、請求項１〜請求項３のいずれかに記載の情報処理装置において、
前記所定指標は、前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであり、
前記認識手段は、前記撮像手段によって撮影された前記マークにフォーカスが合っているか否かを認識し、
前記判別手段は、前記認識手段によって前記マークにフォーカスが合っていると認識されたか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
ようにしたことを特徴とする情報処理装置である。
（請求項７）
請求項７に記載の発明は、請求項１〜請求項６のいずれかに記載の情報処理装置において、
前記決定手段によって保存対象として決定された撮影画像を前記所定の閉じ状態に応じて歪補正を行う歪補正手段を更に備える、
ようにしたことを特徴とする情報処理装置である。
（請求項８）
請求項８に記載の発明は、請求項１〜請求項７のいずれかに記載の情報処理装置において、
前記決定手段によって保存対象として決定された撮影画像と保存済み画像とが同一の画像ではないことを条件に、当該保存対象の画像を新規に記録保存する保存手段を更に備える、
ようにしたことを特徴とする情報処理装置である。
（請求項９）
請求項９に記載の発明は、
コンピュータに対して、
読取対象の紙媒体が配置される第１の筐体と、前記第１の筐体に対向し、かつ見開き状に開閉可能な第２の筐体に設けられた撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記指標を認識する機能と、
前記指標の認識結果に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する機能と、
前記第１の筐体と前記第２の筐体とが前記所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する機能と、
を実現させるためのプログラムである。

１ 制御部
３ 記憶部
６ 撮像部
３ａ プログラムメモリ
１１ タブレット端末装置
１２ 紙媒体
１３ バインダ
１３ａ 第１の筐体
１３ｂ 第２の筐体
１４ 閉じ角認識用のマーク

Claims (8)

1. 第１の筐体と第２の筐体とを見開き状に開閉可能な情報処理装置であって、
   読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
   前記撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記指標を認識する認識手段と、
   前記認識手段による指標の認識結果に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する判別手段と、
   前記判別手段により前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する決定手段と、
   を備え、
   前記所定指標は、前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであり、
   前記認識手段は、前記撮像手段によって撮影された前記マークにフォーカスが合っているか否かを認識し、
   前記判別手段は、前記認識手段によって前記マークにフォーカスが合っていると認識されたか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
   ことを特徴とする情報処理装置。
2. 前記決定手段によって保存対象として決定された撮影画像を前記所定の閉じ状態に応じて歪補正を行う歪補正手段を更に備える、
   ようにしたことを特徴とする請求項１に記載の情報処理装置。
3. 前記決定手段によって保存対象として決定された撮影画像と保存済み画像とが同一の画像ではないことを条件に、当該保存対象の画像を新規に記録保存する保存手段を更に備える、
   ようにしたことを特徴とする請求項１または２に記載の情報処理装置。
4. コンピュータに対して、
   読取対象の紙媒体が配置される第１の筐体と、前記第１の筐体に対向し、かつ見開き状に開閉可能な第２の筐体に設けられた撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記指標を認識する認識機能と、
   前記指標の認識結果に応じて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する判別機能と、
   前記第１の筐体と前記第２の筐体とが前記所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する機能と、
   を実現させるためのプログラムであって、
   前記所定指標は、前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであり、
   前記認識機能は、前記撮像手段によって撮影された前記マークにフォーカスが合っているか否かを認識し、
   前記判別機能は、前記認識機能によって前記マークにフォーカスが合っていると認識されたか否かに基づいて前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する、
   ことを特徴とするプログラム。
5. 第１の筐体と第２の筐体とを見開き状に開閉可能な情報処理装置であって、
   読取対象の紙媒体が配置される前記第１の筐体に対向して前記第２の筐体に設けられた撮像手段と、
   前記撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記所定指標が前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであることを認識する認識手段と、
   前記撮像手段によって撮像され前記認識手段により認識された前記マークにフォーカスが合っているか否かによって、前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する判別手段と、
   前記判別手段により前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する決定手段と、
   を備えたことを特徴とする情報処理装置。
6. 前記決定手段によって保存対象として決定された撮影画像を前記所定の閉じ状態に応じて歪補正を行う歪補正手段を更に備える、
   ようにしたことを特徴とする請求項５に記載の情報処理装置。
7. 前記決定手段によって保存対象として決定された撮影画像と保存済み画像とが同一の画像ではないことを条件に、当該保存対象の画像を新規に記録保存する保存手段を更に備える、
   ようにしたことを特徴とする請求項５または６に記載の情報処理装置。
8. コンピュータに対して、
   読取対象の紙媒体が配置される第１の筐体と、前記第１の筐体に対向し、かつ見開き状に開閉可能な第２の筐体に設けられた撮像手段によって前記第１の筐体側の所定指標が撮影された際に、その撮影画像を解析することにより前記所定指標が前記第１の筐体上あるいは前記第１の筐体に配置されている紙媒体上に付加されている所定のマークであることを認識する機能と、
   前記撮像手段によって撮像され認識された前記所定のマークにフォーカスが合っているか否かによって、前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたか否かを判別する機能と、
   前記第１の筐体と前記第２の筐体とが所定の状態まで閉じられたことが判別された際に、前記撮像手段からの撮影画像を保存対象として決定する機能と、
   を実現させるためのプログラム。

Images