JP6819658B2 - 情報処理装置、画像処理方法とプログラム、ならびに、ｐｏｓ端末装置 - Google Patents

Description

本発明は、物体の識別技術を用いる装置に関する。または、物体の識別技術を用いるＰＯＳ（Ｐｏｉｎｔ Ｏｆ Ｓａｌｅｓ）端末装置に関する。

特許文献１は、バーコードスキャナ技術を開示する。まず、バーコードスキャナの画像判定部が撮像画像のフレーム内にバーコードの候補となる画像があるか否かを判定する。続いて、デコード処理部がバーコード候補画像の部分的な欠落を検出した場合、撮像画像表示部がバーコード候補画像をバーコードとして撮像できるように案内するためのガイド画像を表示器に表示する。

特開２０１０−２３１４３６号公報

しかしながら、特許文献１のように、バーコード候補画像の部分的な欠落が検出できない場合、案内するためのガイド画像を表示することができず、物体を迅速に識別できなくなるという課題がある。

本発明の目的は、上記の課題を解決するために、物体を迅速に認識することができる技術を提供することにある。

本発明の一態様であるＰＯＳ端末装置は、物体を撮像して画像を生成する撮像手段と、前記画像を表示する表示手段と、前記画像内に前記物体の少なくとも一部があるか否かを判定する判定手段と、前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合する照合手段と、前記照合された結果、前記物体がどの商品であるかを特定できない場合、前記表示手段に表示されている前記画像が変わるように誘導する表示を表示するように制御する制御手段と、を備える。

本発明の一態様である情報処理装置は、撮像された画像内に物体の少なくとも一部があるか否かを判定する判定手段と、前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合する照合手段と、前記照合された結果、前記物体がどの商品であるかを特定できない場合、表示手段に表示されている前記画像が変わるように誘導する表示を、前記表示手段で表示するように制御する制御手段とを備える。

本発明の一形態である画像処理方法は、コンピュータが、撮像した画像内に物体の少なくとも一部があるか否かを判定し、前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合し、前記照合された結果、前記物体がどの商品であるかを特定できない場合、表示手段に表示されている前記画像が変わるように誘導する表示を、前記表示手段で表示するように制御する。

本発明の一形態であるプログラムは、コンピュータを、撮影した画像内に物体の少なくとも一部があるか否かを判定する判定手段、前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合する照合手段、前記照合された結果、前記物体がどの商品であるかを特定できない場合、表示手段に表示されている前記画像が変わるように誘導する表示を、前記表示手段で表示するように制御する制御手段、として機能させる。

本発明によれば、物体を迅速に認識することができる。

本発明の第１の実施形態にかかるＰＯＳ端末装置の概要を示す図である。 第１の実施形態にかかるＰＯＳ端末装置の外観を示す側面図である。 第１の実施形態にかかるＰＯＳ端末装置の構成を示すブロック図である。 第１の実施形態にかかるＰＯＳ端末装置および情報処理装置の動作を示すフローチャートである。 第１の実施形態にかかる物体と撮像可能領域との位置関係を示す図である。 表示部に表示される誘導表示を示す図である。 表示部に表示される誘導表示を示す図である。 第１の実施形態にかかる物体と撮像可能領域との位置関係を示す図である。 表示部に表示される誘導表示を示す図である。 第２の実施形態にかかるＰＯＳ端末装置の構成を示すブロック図である。 第２の実施形態にかかるＰＯＳ端末装置および情報処理装置の動作を示すフローチャートである。 コンピュータによるハードウェア構成を示す図である。

（第１の実施形態）
本発明にかかる第１の実施形態の概要を説明する。図１は、本発明の第１の実施形態の一例であるＰＯＳ端末装置１の概要を示す図である。図１に示すように、ＰＯＳ端末装置１は、撮像部１０と、表示部２０と、情報処理装置５０とを備える。情報処理装置５０は、判定部３０と、制御部４０とを備える。

撮像部１０は、物体を撮像して画像を生成する。表示部２０は、撮像部１０が生成した画像を表示する。情報処理装置５０の判定部３０は、撮像部１０が生成した画像内に物体の少なくとも一部があるか否かを判定する。情報処理装置５０の制御部４０は、撮像部１０が生成した画像内に物体の一部がある場合、画像内の物体を所定の方向に誘導するための誘導表示を表示部２０に表示する。例えば、制御部４０の誘導表示は、物体の画像が表示部２０の表示画面にすべて表示されるように誘導する誘導表示であってもよく、物体の画像のピントが合う方向に物体を誘導する誘導表示であってもよい。なお、制御部４０は、誘導表示を表示部２０に表示しつつ、撮像部１０が撮像している物体の画像を表示部２０に表示するように制御してもよい。

本発明の実施形態にかかるＰＯＳ端末装置１は、画像内に物体の少なくとも一部がある場合、画像内の物体を所定の方向に誘導するための誘導表示を表示部２０に表示する。これにより、迅速に物体を認識することができる。

以上は、ＰＯＳ端末装置１が撮像部１０と、表示部２０と、情報処理装置５０とを備える構成の一例であるが、これに限られるものではない。例えば、ＰＯＳ端末装置１が撮像部１０と、表示部２０とを備え、ＰＯＳ端末装置１の外部に設置された情報処理装置５０が判定部３０と制御部４０とを備え、ＰＯＳ端末装置１と情報処理装置５０とが有線や無線で接続される構成でもよい。

以下、第１の実施形態の具体例について、図面を用いてより詳細に説明する。図２は、第１の実施形態の１つの具体例であるＰＯＳ端末装置１００の外観を示す側面図である。また、図３は、第１の実施形態にかかるＰＯＳ端末装置１００の構成を示すブロック図である。ＰＯＳ端末装置１００は、店員用表示部１１０と、顧客用表示部１１２と、情報処理装置１２０と、商品読取装置１４０と、を備える。図２の店員用表示部１１０は、店員のための情報を表示し、顧客用表示部１１２は、顧客のための情報を表示する。

店員用表示部１１０および顧客用表示部１１２は、タッチパネルディスプレイ、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）を用いることができる。店員用表示部１１０および顧客用表示部１１２は、キーボード等の入力装置を備えていてもよい。店員用表示部１１０は、情報処理装置１２０の制御によって、店員に必要な情報を表示し、店員の操作を受け付ける。

顧客用表示部１１２は、情報処理装置１２０の制御によって、顧客に必要な情報を表示する。必要に応じて顧客の操作を受け付けてもよい。

情報処理装置１２０は、店員用表示部１１０、顧客用表示部１１２及び商品読取装置１４０の動作を制御する。また、情報処理装置１２０は、店員用表示部１１０によって受け付けられた操作に応じて必要な処理をする。また、情報処理装置１２０は、商品読取装置１４０によって読み取られた画像情報に応じて、画像処理等の必要な処理をする。

商品読取装置１４０は、筐体１４２と、撮像部１３０とを有する。筐体１４２の一部には、光透過性がある商品読取面１４４が設けられている。商品読取面１４４は、店員の作業のために筐体１４２の店員側の面に設けられ、物体を撮像させるときに、その物体が向けられる。撮像部１３０は、筐体１４２の内部に設けられている。店員が顧客から受け取った物体を商品読取面１４４に向けると、撮像部１３０が物体の画像を読み取る。これにより、ＰＯＳ端末装置１００は、物体の認識処理をする。

撮像部１３０が物体を撮像できる範囲（以下、撮像可能範囲と示す）は、撮像部１３０のレンズの画角および焦点などの光学特性に依存する。撮像可能領域Ａは、画角等によりレンズを通して撮像部１３０に写り込む画角範囲と、焦点を合わせたときに鮮明な像が得られる焦点範囲で構成される。このため、図２のＰＯＳ端末装置１００における撮像可能領域は、一点鎖線で囲まれた撮像可能領域Ａのように示される。図２において、画角範囲のうち上下方向は、撮像部１３０から商品読取面１４４を経て広がる鎖線で示される。図２上、画角範囲の左右方向は示されない。なお上下方向、左右方向は、撮像部１３０の位置を起点としている。焦点範囲は、撮像部１３０から商品読取面１４４への奥行方向の範囲となる。このとき図２に示されない画角範囲の左右方向は、当該上下方向と当該奥行方向に垂直な方向となる。

撮像部１３０については、以下に詳述する。撮像部１３０は、少なくとも以下の３通りの形態をとることができる。第１の場合、撮像部１３０は、２次元の画像を撮像する２次元画像撮像部と、商品までの距離を計測する距離センサと、距離画像生成部と、を備える。２次元画像撮像部は、商品読取面１４４に向けられた物体を撮像して、その物体の画像を含む２次元のカラー画像又は２次元のモノクロ画像を生成する。

距離センサは例えばＴＯＦ（Ｔｉｍｅ Ｏｆ Ｆｌｉｇｈｔ）方式で、距離センサから商品読取面１４４に向けられた物体の位置までの距離を計測する。つまり、距離センサは、赤外線等の光線を照射し、照射された光線が物体まで往復するのにかかる時間から距離を計測する。距離画像生成部は、物体の各位置で距離を計測し、２次元画像を重ね合わせて距離画像（３次元画像）を生成する。第１の場合、撮像部１３０は、商品までの距離が所定範囲（例えば１５ｃｍ〜３０ｃｍ）内にある物体を撮像することができる。

第２の場合、撮像部１３０は、２次元の画像を撮像する２次元画像撮像部を１個、備える。第２の場合、撮像部１３０があらかじめ撮像しておいた背景画像と、物体を含む画像との差分をとって物体の画像を取得することができる。

第３の場合、撮像部１３０は、２次元の画像を撮像する２次元画像撮像部を複数個と、距離画像生成部と、を備える。距離画像生成部は、複数の撮像部間の視野の違いにより距離画像（３次元画像）を生成することができる。

判定部１２２は、画像内に物体の少なくとも一部があるか否かを判定する。この処理は、例えば、制御部１２４の制御によって、プログラムを実行させることによって実現できる。具体的には、記憶部（図示せず）に格納されたプログラムを実行して実現する。

図４は、ＰＯＳ端末装置１００、および、情報処理装置１２０の動作を示すフローチャートである。図４において、ステップＳ１００〜Ｓ３００は、ＰＯＳ端末装置１００の動作を示すフローチャーチであり、その一部であるステップＳ２００〜Ｓ３００は、情報処理装置１２０の動作を示すフローチャートである。

ＰＯＳ端末装置１００の撮像部１３０は物体を撮像して画像を生成する（Ｓ１００）。次に、情報処理装置１２０の判定部１２２は、画像内に物体の少なくとも一部があるか否かを判定する（Ｓ２００）。具体的には、画像が距離情報を含む距離画像の場合、撮像可能領域Ａである、所定の上下方向の範囲、左右方向の範囲および奥行方向内の範囲内に、物体の少なくとも一部があるか否かを判定する。また、画像が距離情報を含まない、通常の２次元画像の場合、撮像可能領域Ａである所定の上下方向の範囲及び左右方向の範囲内に物体の少なくとも一部があるか否かを判定する。

次に、画像内に物体の少なくとも一部がない場合（Ｓ２００でＮＯ）、ステップＳ１００に戻り、撮像部１３０は再び物体を撮像する。

次に、画像内に物体の少なくとも一部がある場合（Ｓ２００でＹＥＳ）、制御部１２４は、画像内の物体を所定の方向に誘導するための誘導表示を店員用表示部１１０に表示する（Ｓ３００）。一例として、制御部１２４は、撮像可能領域Ａに物体の全体が入るように誘導する誘導表示を表示するように制御する。物体の全体が入るように誘導する誘導表示を表示することにより、店員は誘導表示に従って物体を動かす。その結果、物体の全体が撮像部１３０により撮像されるため、商品画像のデータベースとの画像マッチングを迅速に行うことができる。

図５Ａは、物体１３１と、図２のＰＯＳ端末装置１００の撮像部１３０における撮像可能領域Ａとの位置関係の一例を示す図である。図５Ａにおける撮像可能領域Ａは、撮像部１３０から物体側の方向に設定された領域である。図５Ａは、物体１３１の一部が撮像部１３０の撮像可能領域Ａに含まれる状態を示している。図５Ａで、物体を丸で示しているが、具体例としては、トマトやリンゴのような生鮮食品、又は、パッケージされたお菓子である。なお、物体は、丸形以外の形状でも適用可能である。図５Ａでは、物体１３１は、撮像部１３０側から見て一部が撮像可能領域Ａの右上側に存在する。

図５Ｂは、図３又は図４の店員用表示部１１０に表示される誘導表示１１１の一例を示す図である。撮像部１３０（図４）が撮像した画像内に物体１３１の少なくとも一部がある場合、制御部１２４（図４）は、画像処理することにより、画像のどの部分に物体１３１の一部があるかを認識する。

撮像部１３０で撮影される画像は、上下方向および左右方向に区切られた画素で構成される。そして、制御部１２４は、どの画素に物体があるかを認識する。さらに、制御部１２４は、撮像可能領域Ａに物体１３１の全体が入るように誘導する方向を決定する。誘導する方向は、制御部１２４が、物体が撮像された画素位置から、全体画像の略中心の画素位置までの方向を計算して決定する。この際、撮像部１３０が撮像する物体の画像の位置と、店員が作業位置から見る物体の位置は、左右対称となる。制御部１２４はこの点を考慮して誘導する方向に対応した誘導表示１１１を店員用表示部１１０に表示する。

また、図５Ｃに示すように、制御部１２４は、撮像した物体の画像１１４を、誘導表示１１１とともに、店員用表示部１１０に表示してもよい。撮像した物体の画像１１４を店員用表示部１１０に表示する場合も、撮像部１３０が撮像する物体の画像の位置と、店員が作業位置から見る物体の位置が左右対称となる。このため、制御部１２４は、画像の中心を境に左右を反転させた画像を店員用表示部１１０に表示する。店員は、物体がある位置と、誘導表示とを店員用表示部１１０で確認することができるため、物体全体を撮像できるように、物体を移動することができる。その結果、物体の全体が撮像部１３０により撮像されるため、商品画像のデータベースとの画像マッチングを迅速に行うことができる。

図５Ａ〜Ｃに示すような矢印による誘導表示の他に、制御部１２４は、物体１３１の移動に伴い店員用表示部１１０に表示する色を変化させてもよい。例えば、撮像可能領域Ａに物体の全てが入っている場合は緑色、物体の半分以上が入っている場合は黄色、物体の半分未満が入っている場合は赤色を表示させてもよい。

図６Ａは、第１の実施形態にかかる物体と撮像可能領域Ａとの位置関係を示す図である。ＰＯＳ端末装置の一部である商品読取装置１４０内に設置された撮像部１３０は、商品読取面１４４を介して物体１３１を撮像する。図６Ａに示すように、物体１３１は、撮像可能領域Ａに一部が入っており、撮像可能領域Ａより撮像部１３０に近い方に位置している。

この場合、制御部１２４（図４）は、撮像可能領域Ａより撮像部１３０に近い方に位置していることを、撮像部１３０が上述した第１の場合と第２の場合に物体までの距離を取得できることに基づいて判断する。制御部１２４は、取得した距離の情報から、画像の奥行方向のどの部分に物体１３１の一部があるかを認識する。続いて、制御部１２４は、画像内の物体を所定の方向に誘導するための誘導表示を店員用表示部１１０に表示する。望ましい例として、物体の全体が撮像可能領域Ａに入るように、誘導表示を店員用表示部１１０に表示する。

図６Ｂは、店員用表示部１１０に表示される誘導表示を示す図である。図６Ａに示すように、物体を撮像部１３０に対して奥行方向に動かす必要がある場合、制御部１２４は、誘導表示１１３として、「商品を商品読取面から遠ざけてください。」との文字を表示する。別の誘導表示として、制御部１２４は、物体１３１と商品読取面１４４との距離が近づきすぎる場合、赤色を表示し、物体と商品読取面１４４との距離が遠すぎる場合、緑色を表示する。

以上、ＰＯＳ端末装置１００が、撮像部１３０と、店員用表示部１１０と、判定部１２２と、制御部１２４とを備える構成について説明したが本実施形態は上記の例に限られるものではない。例えば、ＰＯＳ端末装置１００が撮像部１３０と、店員用表示部１１０とを備え、ＰＯＳ端末装置１００の外部に設置された情報処理装置１２０が判定部１２２と制御部１２４とを備え、ＰＯＳ端末装置１００と情報処理装置１２０とが有線や無線で接続される構成でもよい。

（第２の実施形態）
次に、第２の実施形態について説明する。第２の実施形態においては、情報処理装置１２０が、記憶部１２６と、照合部１２８とを備える点が第１の実施形態と異なる。なお、第１の実施形態と実質的に同様の構成部分については同じ符号を付し、説明を省略する。

図７は、第２の実施形態にかかるＰＯＳ端末装置１００の構成を示すブロック図である。第２の実施形態のＰＯＳ端末装置１００は、図３の場合に加えて、記憶部１２６と、照合部１２８とを備える。記憶部１２６は、商品画像のデータベースを記憶している。ここで、商品画像のデータベースは、各商品の商品画像の特徴である形状、色の情報である。照合部１２８は、撮像部１３０が撮像した画像と、商品画像のデータベースの商品画像の特徴を照合することにより、撮像した画像が、どの商品であるかを特定する。

判定部１２２、照合部１２８は、例えば、制御部１２４の制御によって、プログラムを実行させることによって実現できる。具体的には、記憶部１２６に格納されたプログラムを実行して実現する。なお、上記説明では、商品画像のデータベースは記憶部１２６で記憶されているが、これに限られるものではない。ＰＯＳ端末装置１００の外部に設置された記憶装置（図示せず）に商品画像のデータベースが保存されてもよい。その場合、照合部１２８は、記憶装置から商品画像の特徴を取得して撮像部１３０が撮像した画像と照合することになる。

図８は、ＰＯＳ端末装置１００、又は、情報処理装置１２０の動作示すフローチャートである。図８において、図４において、ステップＳ１００〜Ｓ３００は、ＰＯＳ端末装置１００の動作を示すフローチャーチであり、その一部であるステップＳ２００〜Ｓ２３０は、情報処理装置１２０の動作を示すフローチャートである。

ＰＯＳ端末装置１００の撮像部１３０は物体を撮像して画像を生成する（Ｓ１００）。次に、情報処理装置１２０の判定部１２２は、画像内に物体の少なくとも一部があるか否かを判定する（Ｓ２００）。具体的には、画像が距離情報を含む距離画像の場合、撮像可能領域Ａである、所定の上下方向の範囲、左右方向の範囲および奥行方向内の範囲内に、物体の少なくとも一部があるか否かを判定する。また、画像が距離情報を含まない、通常の２次元画像の場合、撮像可能領域Ａである所定の上下方向の範囲及び左右方向の範囲内に物体の少なくとも一部があるか否かを判定する。

次に、画像内に物体の少なくとも一部がない場合（Ｓ２００でＮＯ）、Ｓ１００に戻り、撮像部１３０は再び物体を撮像する。

なお、判定部１２２はＳ２００でＮＯの処理を行わないこと、としてもよい。これは、次のステップの画像照合により商品が特定できる可能性があるためである。

次に、画像内に物体の少なくとも一部がある場合（Ｓ２００でＹＥＳ）、照合部１２８は、撮像した画像と、記憶部１２６に記憶された商品画像データベースとを照合する。照合部１２８は、照合することにより撮像した画像がどの商品であるかを特定した場合、制御部１２４は、特定された商品として決済処理に進む（Ｓ３００）。照合部１２８は、照合した結果、どの商品であるかを特定できない場合、制御部１２４は店員用表示部１１０に誘導表示を表示する（Ｓ２３０）。誘導表示は、図５Ｂ又はＣ、図６Ｂで示した表示と同様である。

以上、ＰＯＳ端末装置１が撮像部１３０と、店員用表示部１１０と、判定部１２２と、照合部１２８と、制御部１２４とを備える場合について説明したが、これに限られるものではない。例えば、ＰＯＳ端末装置１００が撮像部１３０と、店員用表示部１１０とを備え、ＰＯＳ端末装置１００の外部に設置された情報処理装置１２０が判定部１２２と制御部１２４と照合部１２８を備え、ＰＯＳ端末装置１００と情報処理装置１２０とが有線や無線で接続される構成でもよい。

前述した情報処理装置５０、１２０の少なくとも一部は、プログラム（ソフトウェアプログラム，コンピュータプログラム）が図９に示すコンピュータ９００のＣＰＵ９１０において実行されることにより実現されてもよい。具体的には、図１の判定部３０、制御部４０、図３、図７の判定部１２２、制御部１２４、図７の照合部１２８の構成要素とするプログラムを実行することにより実現できる。これらの構成要素は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９１０がＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）９３０あるいはハードディスクドライブ９４０からプログラムを読み込み、読み込んだプログラムを、例えば図４、図８に示したフローチャートの手順の如くＣＰＵ９１０、及び、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９２０を用いて実行することにより実現されてもよい。そして、このような場合において、上述した実施形態を例に説明した本発明は、係るコンピュータプログラムを表すコードあるいはそのコンピュータプログラムを表すコードが格納されたコンピュータ読み取り可能な記憶媒体によって構成されると捉えることができる。コンピュータ読み取り可能な記憶媒体は、例えばハードディスクドライブ９４０や、不図示の着脱可能な磁気ディスク媒体，光学ディスク媒体やメモリカードなどである。なお、図１の判定部３０、制御部４０、図３、図７の判定部１２２、制御部１２４、図７の照合部１２８は、集積回路による専用のハードウェアであってもよい。

以上、上述した実施形態を模範的な例として本発明を説明した。しかしながら、本発明は、上述した実施形態には限定されない。即ち、本発明は、本発明のスコープ内において、当業者が理解し得る様々な態様を適用することができる。

この出願は、２０１４年３月２７日に出願された日本出願特願２０１４−０６５９３２を基礎とする優先権を主張し、その開示の全てをここに取り込む。

１ ＰＯＳ端末装置
１０ 撮像部
２０ 表示部
３０ 判定部
４０ 制御部
５０ 情報処理装置
１００ ＰＯＳ端末装置
１１０ 店員用表示部
１１１ 誘導表示
１１２ 顧客用表示部
１１３ 誘導表示
１１４ 物体の画像
１２０ 情報処理装置
１２２ 判定部
１２４ 制御部
１２８ 照合部
１３０ 撮像部
１３１ 物体
１４０ 商品読取装置
１４２ 筐体
１４４ 商品読取面
９００ コンピュータ
９１０ ＣＰＵ
９２０ ＲＡＭ
９３０ ＲＯＭ
９４０ ハードディスクドライブ
９５０ 通信インターフェース

Claims (11)

1. 物体を撮像して画像を生成する撮像手段と、
   前記画像を表示する表示手段と、
   前記画像内に前記物体の少なくとも一部があるか否かを判定する判定手段と、
   前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合する照合手段と、
   照合された結果、該当する商品があると判断できなかった場合、前記表示手段に表示されている前記画像が変わるように誘導する表示を表示するように制御する制御手段と、
   を備え、
   前記誘導する表示は前記物体の位置に応じた表示であるＰＯＳ端末装置。
2. 前記誘導する表示とは、前記画像内の前記物体がどの商品か前記照合手段で特定可能となるように誘導する表示である、
   請求項１に記載のＰＯＳ端末装置。
3. 前記画像が変わるように誘導するとは、前記撮像手段の撮像可能領域に前記物体の全体が入るように誘導することである、
   請求項１又は２に記載のＰＯＳ端末装置。
4. 前記画像が変わるように誘導するとは、撮像可能領域における前記撮像手段の焦点範囲に含まれる奥行方向へ誘導することである、
   請求項１乃至３のいずれか１項に記載のＰＯＳ端末装置。
5. 前記画像が変わるように誘導するとは、撮像可能領域における上下方向、左右方向、又は、これらを組合せた方向への誘導である、
   請求項１乃至３のいずれか１項に記載のＰＯＳ端末装置。
6. 前記誘導する表示は、前記画像内の前記物体の位置に応じた色の変化である、
   請求項１乃至５のいずれか１項に記載のＰＯＳ端末装置。
7. 撮像された画像内に物体の少なくとも一部があるか否かを判定する判定手段と、
   前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合する照合手段と、
   照合された結果、該当する商品があると判断できなかった場合、表示手段に表示されている前記画像が変わるように誘導する表示を、前記表示手段で表示するように制御する制御手段と、
   を備え、
   前記誘導する表示は前記物体の位置に応じた表示である情報処理装置。
8. コンピュータが、
   撮像した画像内に物体の少なくとも一部があるか否かを判定し、
   前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合し、
   照合された結果、該当する商品があると判断できなかった場合、表示手段に表示されている前記画像が変わるように誘導する、前記物体の位置に応じた表示を、前記表示手段で表示するように制御する、画像処理方法。
9. コンピュータを、
   撮影した画像内に物体の少なくとも一部があるか否かを判定する判定手段、
   前記画像内に前記物体の少なくとも一部がある場合、前記画像と商品画像データベースとを照合する照合手段、
   照合された結果、該当する商品があると判断できなかった場合、表示手段に表示されている前記画像が変わるように誘導する、前記物体の位置に応じた表示を、前記表示手段で表示するように制御する制御手段、として機能させるためのプログラム。
10. 物体を撮像して画像を生成する撮像手段と、
    前記画像を表示する表示手段と、
    前記画像と商品画像データベースとを照合する照合手段と、
    照合された結果、前記物体がどの商品であるかを特定できない場合、前記画像における前記物体の位置に応じて、前記物体を移動させるよう誘導する表示を前記表示手段に表示させるように制御する制御手段と、
    を備えるＰＯＳ端末装置。
11. 物体を撮像して画像を生成する撮像手段と、
    前記画像を表示する表示手段と、
    前記画像と商品画像データベースとを照合する照合手段と、
    照合された結果、前記物体がどの商品であるかを特定できない場合、前記物体の画像における位置を認識し、前記認識した物体を移動させるよう誘導する表示を前記表示手段に表示させるように制御する制御手段と、
    を備えるＰＯＳ端末装置。

Images