JP2004310197A - 画像データ処理システム及びプログラム - Google Patents
画像データ処理システム及びプログラム Download PDFInfo
- Publication number
- JP2004310197A JP2004310197A JP2003099360A JP2003099360A JP2004310197A JP 2004310197 A JP2004310197 A JP 2004310197A JP 2003099360 A JP2003099360 A JP 2003099360A JP 2003099360 A JP2003099360 A JP 2003099360A JP 2004310197 A JP2004310197 A JP 2004310197A
- Authority
- JP
- Japan
- Prior art keywords
- image
- visitor
- customer
- image data
- condition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 67
- 238000000034 method Methods 0.000 claims description 46
- 238000003384 imaging method Methods 0.000 claims 2
- 238000013500 data storage Methods 0.000 abstract description 12
- 238000004891 communication Methods 0.000 description 38
- 238000010191 image analysis Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000007726 management method Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Landscapes
- Alarm Systems (AREA)
- Studio Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
- Accommodation For Nursing Or Treatment Tables (AREA)
- Image Processing (AREA)
Abstract
【課題】補助の必要な入場者であるか否かを判断して、補助の必要な入場者が入場した際に報知することが可能な画像データ処理システムを提供する。
【解決手段】本発明の画像データ処理装置システム１００によれば、入口付近の様子を撮影するカメラｃから取り込まれた画像データから客画像が認識され、客画像メモリ１６１に記録され、客画像が解析される。客画像に条件画像格納部１７２の部品画像が含まれる場合は、店員端末２０へカメラ位置情報及びその客画像が送信される。また、客画像メモリ１６１に既にその顧客の客画像が記録されている場合には、その客画像と撮影された客画像が比較解析して歩行速度が算出され、当該顧客の歩行速度が条件データ格納部１７１を超えない場合に、店員端末２０へカメラ位置情報と客画像が送信される。
【選択図】 図１
【解決手段】本発明の画像データ処理装置システム１００によれば、入口付近の様子を撮影するカメラｃから取り込まれた画像データから客画像が認識され、客画像メモリ１６１に記録され、客画像が解析される。客画像に条件画像格納部１７２の部品画像が含まれる場合は、店員端末２０へカメラ位置情報及びその客画像が送信される。また、客画像メモリ１６１に既にその顧客の客画像が記録されている場合には、その客画像と撮影された客画像が比較解析して歩行速度が算出され、当該顧客の歩行速度が条件データ格納部１７１を超えない場合に、店員端末２０へカメラ位置情報と客画像が送信される。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は、店舗等の商業施設や公共施設等への入場者を撮影した画像データを解析し、補助が必要な入場者である場合に報知する画像データ処理システム及びプログラムに関する。
【０００２】
【従来の技術】
従来、各種商業又は公共施設におけるお年寄りや身体障害者等、介助が必要な入場者への対応は係員の個人的な判断に任されており、係員が忙しい場合等には、介助が必要な入場者に気付かずにいつまでも介助が行われない状態となることがあった。
【０００３】
例えば、特許文献１には、車椅子が階段にさしかかった場合、これを検知し、迅速な介護を促すことができる障害者介護システムが開示されている。
【０００４】
【特許文献１】
特開平０８−２６３７５０号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、特許文献１においては、車椅子により介助が必要であることを認識して係員に通知するので、車椅子を利用していないが介助が必要な人、例えば、お年寄りや怪我人等に対して迅速に介助することができなかった。
【０００６】
また、施設の駐車場において、初心者の入場者がスムーズに駐車ができるように誘導することが必要な場合があるが、係員がそばにいない場合等、迅速な誘導を行うことができないことがあった。
【０００７】
本発明の課題は、補助の必要な入場者であるか否かを判断して、補助の必要な入場者が入場した際に報知することが可能な画像データ処理システムを提供することである。
【０００８】
【課題を解決するための手段】
上記課題を解決するため、請求項１に記載の発明の画像データ処理システムは、
入場者の様子を撮影する撮影手段と、
前記入場者が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像を予め記憶する記憶手段と、
前記撮影手段に撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と前記記憶手段に記憶された条件データ又は条件画像に基づいて、前記入場者に補助が必要であるか否かを判断する判断手段と、
前記判断手段により補助が必要であると判断された場合に報知する報知手段と、
を備えたことを特徴としている。
【０００９】
請求項６に記載の発明のプログラムは、
コンピュータに、
入場者の様子を撮影する機能と、
前記撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と、予め記憶された、前記入場者の動作状態が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像とに基づいて、前記入場者に補助が必要であるか否かを判断する機能と、
前記判断により補助が必要であると判断された場合に報知する機能と、
を実現させるためのプログラムであることを特徴としている。
【００１０】
請求項１、６に記載の発明によれば、撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、取得された動作状態と、予め記憶された、入場者の動作状態が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像に基づいて、入場者に補助が必要であるか否かを判断し、入場者に補助が必要であると判断された場合に報知する。従って、係員が補助の必要な人が入場したことを直ちに把握することができ、迅速な対応を行うことができるようになる。
【００１１】
【発明の実施の形態】
〔第１の実施の形態〕
以下、図を参照して本発明の実施の形態を詳細に説明する。
まず、構成を説明する。
図１に、本発明に係る画像データ処理システム１００の構成を示し、図２に、店舗の入口において、画像データ処理システム１００のカメラｃにより来店した顧客を撮影する様子を示す。画像データ処理システム１００は、店舗に設置され、入口の様子を撮影することにより来店した顧客を撮影し、撮影した画像から健常者であるか否かの判断を行って、健常者でない場合に係員に報知するシステムである。なお、本実施の形態においては、本発明を店舗に適用した例を説明するが、ホテル、レジャー施設、映画館、劇場等、各種商業施設や公共施設等において適用可能である。
【００１２】
画像データ処理システム１００は、図１に示すように、各種処理及び精算を行うＥＣＲ（Ｅｌｅｃｔｒｏｎｉｃ Ｃａｓｈ Ｒｅｇｉｓｔｅｒ）１０と、各店員が携帯する店員端末２０と、ＥＣＲ１０での精算時の顧客の顔を撮影するカメラａと、店舗の入口に設けられ、入店する顧客を撮影する撮影手段としてのカメラｃと、を備える。カメラａ，ｃはＥＣＲ１０に接続されたＤＣＥ（デジタルスチルカメラ）又はデジタルビデオカメラ等であり、静止画又は動画の画像データを撮影する。また、店員端末２０は、ＥＣＲ１０と無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）接続されている。
【００１３】
ＥＣＲ１０は、ＣＰＵ１１、入力部１２、表示部１３、カメラ接続部１４、通信部１５、ＲＡＭ１６、記録部１７等により構成され、各部はバス１８により接続されている。
【００１４】
ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１は、記録部１７に記憶されているシステムプログラムを読み出し、ＲＡＭ１６内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、ＣＰＵ１１は、記録部１７に記憶されている各種処理プログラムを読み出してワークエリアに展開し、後述する客画像解析処理、取引処理を始めとする各種処理を実行し、それらの処理結果をＲＡＭ１６のワークエリアに記憶する。そして、ワークエリアに格納した処理結果を記録部１７内の指定の保存先に保存させる。
【００１５】
入力部１２は、図示しない数字キー、ＥＣＲ１０を使用する取引担当者（クラーク）を設定するクラークキー、ＥＣＲ１０の各種動作（登録、点検、精算、停止等）を切り換えるモードキー、「解除」キーなどのファンクションキー、締め処理（一取引の合計金額、さらに必要があれば釣銭演算して釣銭金額を求めてレシートに印刷しレシート発行したり、一日の売上合計データや取引データ等の更新をする処理）を行うための締めキー等を備え、ユーザーによる各キー操作に応じた操作信号をＣＰＵ１１出力する。また、必要に応じて表示部１３にタッチパネル等のポインティングデバイスを備える構成としてもよい。
【００１６】
表示部１３は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）やＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）等により構成され、ＣＰＵ１１から入力される表示信号の指示に従って、表示画面上に、客画像等を表示する。
【００１７】
カメラ接続部１４は、ＥＣＲ１０にカメラａ，ｃを接続するためのインターフェースである。
【００１８】
通信部１５は、店員端末２０と無線ＬＡＮ通信を行う無線ＬＡＮカード、アクセスポイント等から構成されるが、上記の通信ネットワークに接続する構成でもよい。その場合、通信ネットワークは、無線ＬＡＮだけでなく、有線ＬＡＮ、ＷＡＮを含めてもよく、電話回線網、ＩＳＤＮ回線網、広帯域通信回線網、専用線、移動体通信網、通信衛星回線、ＣＡＴＶ回線、光通信回線、無線通信回線と、それらを接続するインターネットサービスプロバイダ等を含む構成でもよい。
【００１９】
ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１６は、ＣＰＵ１１により実行されるシステムプログラム、各種処理プログラム、各処理において処理中のデータ、処理結果などを一時的に記憶するワークエリアを形成する。また、ＲＡＭ１６は、客画像メモリ１６１を有する。図３に示すように、客画像メモリ１６１は、入店した顧客の客画像データを格納する客画像データ領域１６１ａと、客画像の撮影日時を示すデータを格納する撮影日時領域１６１ｂと、割引フラグ（１又は空欄）を格納する割引フラグ領域１６１ｃと、を有している。
【００２０】
記録部１７は、ＥＣＲ１０に対応するシステムプログラム、客画像解析処理プログラム、取引処理プログラムを始めとする各種処理プログラム、各種データ等が予め記憶されており、この記録部１７は、磁気的、光学的記録媒体、若しくは半導体メモリなどＣＰＵ１１で読取り可能な記録媒体を含んだ構成である。この記録媒体はＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。また、記録媒体に格納するプログラム、データ等の一部若しくは全部をサーバやクライアントからＷＡＮ、ＬＡＮなどの通信ネットワークを介して受信する構成にしてもよく、更に、記録媒体は通信ネットワーク上に構築されたサーバやクライアントの記録媒体であってもよい。
【００２１】
本実施の形態において、記録部１７は、補助が必要な動作状態の顧客であるか否かの判断基準となる条件データを記憶する条件データ格納部１７１と、補助が必要である動作状態の顧客であるか否か判断基準となる条件画像を記憶する条件画像格納部１７２と、を有している。具体的には、条件データ格納部１７１には、健常者か否かの判断基準となる基準歩行速度が格納され、条件画像格納部１７２には、車椅子、杖等の健常者でない顧客が所有しうる部品の画像が格納されている。
【００２２】
なお、ＥＣＲ１０は、本実施の形態において、１台の情報処理装置で構成しているが、例えば通信ネットワークを介した複数の機器を設置すること等により、各種機能を複数の機器で分散して実行する構成でもよい。この場合、各種機能を実行する負荷が分散される。また、１種類のカメラａ、ｃにより撮影する構成としたが、２種類以上のカメラを入口及びＥＣＲ１０付近に設置するようにして、立体的な客画像を撮影するようにしてもよい。
【００２３】
店員端末２０は、図示しないが、ＣＰＵ、ＲＡＭ、入力部、表示部、記録部、音声出力部と、ＥＣＲ１０と無線ＬＡＮ通信を行う通信部を備える。店員端末２０のＣＰＵは、通信部によりＥＣＲ１０からの報知情報を受信すると、受信通知を音声出力するとともに、受信した報知情報をその表示部に表示する。
【００２４】
次に、画像データ処理システム１００の動作について説明する。
図４に、ＥＣＲ１０のＣＰＵ１１により実行される客画像解析処理を示す。この客画像解析処理は、一定時間毎に割り込みで行われる処理である。
【００２５】
カメラｃにより撮影された入口付近の画像データがカメラ接続部１４を介して取り込まれ、取り込まれた画像データに客画像が撮影されているか否かが判断される（ステップＳ１）。客画像が撮影されていない場合は（ステップＳ１；ＮＯ）、本処理は終了する。
【００２６】
客画像が撮影されている場合は（ステップＳ１；ＹＥＳ）、撮影された各客画像が認識され、前方の客画像（先を行く顧客の画像）から順に客画像１、２、・・・と番号が付与され（ステップＳ２）、ポインタＸに１、ポインタＹに客数（認識された客画像数）が格納される（ステップＳ３）。
【００２７】
次いで、客画像Ｘと客画像メモリ１６１に記録されている各客画像との比較、解析が行われることにより（ステップＳ４）、客画像Ｘの顧客の客画像が客画像メモリ１６１に未記録であるか否かが判断される（ステップＳ５）。客画像Ｘが客画像メモリ１６１に未記録である場合は（ステップＳ５；ＮＯ）、客画像Ｘ及び撮影日時が客画像メモリ１６１に記録される（ステップＳ６）。次いで、記録部１７の条件画像格納部１７２から部品画像が読み出され、客画像Ｘに部品画像と近似した画像が含まれているか否かが解析される（ステップＳ７）。客画像に部品画像が含まれていない場合は、健常者であると判断され（ステップＳ９；ＹＥＳ）、処理はステップＳ１２に移行してポインタＸがインクリメントされ、ポインタＸがポインタＹ、即ち、画像データ中の客数を超えない場合は（ステップＳ１３；ＮＯ）、処理はステップＳ４に戻りステップＳ４〜Ｓ１３が繰り返し実行され、ポインタＸの値が画像データ中の客数を超えると（ステップＳ１３；ＹＥＳ）、本処理は終了する。ステップＳ９において、客画像Ｘに部品画像が含まれている場合は、健常者ではないと判断され（ステップＳ９；ＮＯ）、処理はステップＳ１０に移行する。
【００２８】
一方、ステップＳ５において、客画像Ｘの顧客の客画像がすでに客画像メモリ１６１に記録されている場合は（ステップＳ５；ＹＥＳ）、客画像メモリ１６１に記録されている客画像と今回撮影された客画像Ｘを比較、解析することにより、その顧客の移動距離と所要時間に基づいて歩行速度が算出される（ステップＳ８）。例えば、図２に示すように、入口付近に顧客の移動距離を測るための基準点線（床などに等間隔に設けられたマーク）を予め設けておき、画像データの撮影間隔と顧客の到達した基準点線間隔とにより移動距離及び所要時間を求めることにより歩行速度が算出される。そして、算出された歩行速度が記録部１７の条件データ格納部１７１に記憶されている基準歩行速度と比較され、基準歩行速度以上である場合には、健常者であると判断され（ステップＳ９；ＹＥＳ）、ステップＳ１２に移行し、ポインタＸがインクリメントされ、ポインタＸがポインタＹ、即ち、画像データ中の客数を超えない場合は（ステップＳ１３；ＮＯ）、処理はステップＳ４に戻りステップＳ４〜Ｓ１３が繰り返し実行され、ポインタＸの値が画像データ中の客数を超えた場合に（ステップＳ１３；ＹＥＳ）、本処理は終了する。ステップＳ８で算出された歩行速度が基準歩行速度に満たない場合は、健常者ではないと判断され（ステップＳ９；ＮＯ）、処理はステップＳ１０に移行する。
【００２９】
ステップＳ１０においては、客画像メモリ１６１に今回撮影された客画像Ｘと対応付けて割引フラグ１が記録され、続いて店員端末２０にカメラｃの位置情報及び客画像Ｘが送信され、補助の必要な顧客が入店したことが店員に報知される（ステップＳ１１）。報知後、ポインタＸがインクリメントされ（ステップＳ１２）、ポインタＸがポインタＹ、即ち、画像データ中の客数を超えない場合は（ステップＳ１３；ＮＯ）、処理はステップＳ４に戻りステップＳ４〜Ｓ１３が繰り返し実行され、ポインタＸの値が画像データ中の客数を超えた場合に（ステップＳ１３；ＹＥＳ）、本処理は終了する。
【００３０】
なお、本実施の形態においては入口が１つの店舗を例にとり、カメラｃを一つ設置した例を説明したが、複数の入口ｅ１〜ｅｎ（ｎは任意の自然数）を有する店舗においては、入口ｅ１〜ｅｎ毎にカメラｃ１〜ｃｎを設置し、一定時間毎にカメラｃ１から順に上記客画像解析処理のステップＳ１〜Ｓ１３を繰り返し実行するようにする。また、客画像メモリ１６１には、カメラｃ１〜ｃｎ毎に客画像、撮影日時、割引フラグが記録される。
【００３１】
上記客画像解析処理により、補助の必要な顧客が来店したことを店員に報知するとともに、客画像メモリ１６１に客画像と割引フラグを記録する。
【００３２】
次に、図５を参照して顧客の精算時にＥＣＲ１０のＣＰＵ１１により実行される取引処理について説明する。
【００３３】
入力部１２により入力が行われると（ステップＳ２１；ＹＥＳ）、入力された指示の解析が行われ、入力された指示が商品登録の指示であるか否かが判断される（ステップＳ２２）。入力された指示が商品登録の指示である場合（ステップ２２；ＹＥＳ）、入力されたデータに基づいてＰＬＵファイル、部門ファイル（図示せず）等の売上データが更新されるとともに（ステップＳ２３）、その取引における取引金額である小計データが更新され、本処理は終了する（ステップＳ２４）。
【００３４】
一方、入力された指示が商品登録の指示ではない場合（ステップＳ２２；ＮＯ）、入力された指示が締め処理であるか否かが判断され（ステップＳ２５）、締め処理である場合（ステップＳ２５；ＹＥＳ）、カメラａにより精算顧客の撮影が行われてカメラ接続部１４を介して客画像が取り込まれる（ステップＳ２６）。次いで、客画像メモリ１６１から撮影された精算顧客の客画像が検索され（ステップＳ２７）、検索された客画像に割引フラグ１が対応付けられている場合は（ステップＳ２８；ＹＥＳ）、所定金額を取引合計金額から割引いて、割引後の金額を精算する締め処理が行われる（ステップＳ２９）。検索された客画像に割引フラグが対応付けられていない場合は（ステップ２８；ＮＯ）、特別に割引を行わない通常の締め処理が行われる（ステップＳ３０）。
【００３５】
締め処理後、客画像メモリ１６１から、検索された客画像に関するデータがクリアされ（ステップＳ３１）、小計データの格納エリアを始めとする、本処理で使用されたワークエリアが初期化され、本処理は終了する（ステップＳ３２）。一方、ステップＳ２５において、入力された指示が締め処理ではないと判断されると（ステップＳ２５；ＮＯ）、指示に応じたその他の処理が実行され（ステップＳ３３）、本処理は終了する。
【００３６】
以上説明したように、画像データ処理システム１００によれば、ＥＣＲ１０は、入口付近の様子をカメラｃにより撮影し、カメラｃから取り込まれた画像データから客画像を抽出し、客画像メモリ１６１に未登録の客画像については客画像メモリ１６１に記録し、客画像に条件画像格納部１７２に記憶されている条件画像（例えば、車椅子、杖等）が含まれるかを解析することにより撮影された顧客が健常者であるか否かを判断する。一方、客画像メモリ１６１にすでに記録されている顧客の客画像である場合は、客画像メモリ１６１に記録されている、その顧客の客画像と今回撮影された客画像を解析することにより、その顧客の移動距離と所要時間に基づいて歩行速度を算出し、条件データ格納部１７１に格納されている基準歩行速度以上であるか否かにより健常者か否かを判断する。健常者ではないと判断すると、客画像メモリ１６１の当該顧客の客画像と対応付けて割引フラグを記録し、店員端末２０へカメラ位置情報と客画像を送信して報知する。
【００３７】
また、顧客の精算時にカメラａにより客画像を撮影し、撮影された客画像が、割引フラグが対応付けられた客画像である場合には、取引合計金額から所定金額を割引いて締め処理を行う。
【００３８】
従って、店員端末２０を携帯する店員が、補助の必要な顧客が来店したことを直ちに把握することができるので、店員が入口にかけつけて迅速に対応することができるようになり、顧客サービスを向上させることができる。また、健常者ではない顧客に割引を行うサービスを提供することができる。
【００３９】
なお、上記実施の形態における記述内容は、本実施の形態における好適な一例であり、これに限定されるものではない。
【００４０】
例えば、健常者でないと判断された顧客に対するサービスは、ＥＣＲ１０における割引処理に限らず、おまけ、マッサージ等であってもよい。
【００４１】
また、例えば、入口付近に動く歩道を設置し、顧客が健常者でなければ、停止させてあった、動く歩道を自動で動かすようにしてもよい。
【００４２】
その他、画像データ処理システム１００の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【００４３】
〔第２の実施の形態〕
以下、図を参照して本発明の第２の実施の形態について説明する。
まず、構成を説明する。
図６に、本発明に係る画像データ処理システム２００の構成を示す。この画像データ処理システム２００は、店舗の駐車場の様子を撮影し、撮影した画像から来店した運転者の運転が未熟であるか否かの判断を行って、運転が未熟な場合に係員に報知して係員により誘導を行い、係員がふさがっている場合は店舗事務所であるバックヤードから音声誘導を行うシステムである。図７に、駐車場の一例を概念的に示す。図７に示すように、駐車は、複数の区画に分けられており、区画毎にその区画を撮影するカメラ及びその区画における音声誘導を出力するスピーカが配置されている。図７においては、駐車場１〜７に対してカメラｃ１、スピーカｓ１が、駐車場８〜１２に対してカメラｃ２、スピーカｓ２が、駐車場１３〜１９に対してカメラｃ３、スピーカｓ３が、駐車場２０〜２４に対してカメラｃ４、スピーカｓ４が、配置されている。なお、本実施の形態においては、本発明を店舗の駐車場に適用した例を説明するが、ホテル、レジャー施設、映画館、劇場等、各種商業施設や公共施設等の駐車場おいても適用可能である。
【００４４】
画像データ処理システム２００は、図６に示すように、各種処理及び精算を行うＥＣＲ３０と、駐車場の各係員が携帯する係員端末４０と、バックヤードに設置されたバックヤード端末５０と、駐車場に設けられ、駐車場の様子を撮影する撮影手段としてのカメラｃ１〜ｃｎと、音声誘導を出力するスピーカｓ１〜ｓｎを備える。カメラｃ１〜ｃｎはＥＣＲ３０に接続されたＤＣＥ（デジタルスチルカメラ）又はデジタルビデオカメラ等であり、静止画又は動画の画像データを撮影する。また、係員端末４０、バックヤード端末５０は、ＥＣＲ３０と無線ＬＡＮ接続されている。
【００４５】
図６に示すように、ＥＣＲ３０は、ＣＰＵ３１、入力部３２、表示部３３、カメラ接続部３４、通信部３５、ＲＡＭ３６、記録部３７等により構成され、各部はバス３８により接続されている。
【００４６】
ＣＰＵ３１は、記録部３７に記憶されているシステムプログラムを読み出し、ＲＡＭ３６内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、ＣＰＵ３１は、記録部３７に記憶されている各種処理プログラムを読み出してワークエリアに展開し、後述する車両画像解析処理を始めとする各種処理を実行し、それらの処理結果をＲＡＭ３６のワークエリアに記憶する。そして、ワークエリアに格納した処理結果を記録部３７内の指定の保存先に保存させる。
【００４７】
入力部３２は、図示しない数字キー、ＥＣＲ３０を使用する取引担当者（クラーク）を設定するクラークキー、ＥＣＲ３０の各種動作（登録、点検、精算、停止等）を切り換えるモードキー、「解除」キーなどのファンクションキー、締め処理（一取引の合計金額、さらに必要があれば釣銭演算して釣銭金額を求めてレシートに印刷しレシート発行したり、一日の売上合計データや取引データ等の更新をする処理）を行うための締めキー等を備え、ユーザーによる各キー操作に応じた操作信号をＣＰＵ３１出力する。また、必要に応じて表示部３３にタッチパネル等のポインティングデバイスを備える構成としてもよい。
【００４８】
表示部３３は、ＬＣＤやＣＲＴ等により構成され、ＣＰＵ３１から入力される表示信号の指示に従って、表示画面上に、車両画像等を表示する。
【００４９】
カメラ接続部３４は、ＥＣＲ３０にカメラｃ１〜ｃｎを接続するためのインターフェースである。
【００５０】
通信部３５は、係員端末４０、バックヤード端末５０と無線ＬＡＮ通信を行う無線ＬＡＮカード、アクセスポイント等から構成されるが、上記の通信ネットワークに接続する構成でもよい。その場合、通信ネットワークは、無線ＬＡＮだけでなく、有線ＬＡＮ、ＷＡＮを含めてもよく、電話回線網、ＩＳＤＮ回線網、広帯域通信回線網、専用線、移動体通信網、通信衛星回線、ＣＡＴＶ回線、光通信回線、無線通信回線と、それらを接続するインターネットサービスプロバイダ等を含む構成でもよい。
【００５１】
ＲＡＭ３６は、ＣＰＵ３１により実行されるシステムプログラム、各種処理プログラム、各処理において処理中のデータ、処理結果などを一時的に記憶するワークエリアを形成する。また、ＲＡＭ３６は、車両画像メモリ３６１を有している。図８に示すように、車両画像メモリ３６１は、駐車場における車両の車両画像データを格納する車両画像データ領域３６１ａと、車両画像の撮影日時を示すデータを格納する撮影日時領域３６１ｂと、画像の車両が駐車される駐車場番号を格納する駐車場番号領域３６１ｃと、誘導フラグ（１又は空欄）を格納する誘導フラグ領域３６１ｄと、を有している。
【００５２】
記録部３７は、ＥＣＲ３０に対応するシステムプログラム、車両画像解析処理プログラムを始めとする各種処理プログラム、各種データ等が予め記憶されており、この記録部３７は、磁気的、光学的記録媒体、若しくは半導体メモリなどＣＰＵ３１で読取り可能な記録媒体を含んだ構成である。この記録媒体はＣＤ−ＲＯＭ、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。また、記録媒体に格納するプログラム、データ等の一部若しくは全部をサーバやクライアントからＷＡＮ、ＬＡＮなどの通信ネットワークを介して受信する構成にしてもよく、更に、記録媒体は通信ネットワーク上に構築されたサーバやクライアントの記録媒体であってもよい。
【００５３】
本実施の形態において、記録部３７は、係員の補助、即ち誘導が必要である車両の条件データを記憶する条件データ格納部３７１と、駐車場番号の近くに位置しているとみなす係員端末４０の順位を格納する管理係員端末テーブル３７２と、を有している。具体的には、条件データ格納部３７１には、係員の誘導が必要であるか否か（運転が未熟であるか否か）の判断基準となる基準バック移動速度が格納されている。また、管理係員端末テーブル３７２は、図９に示すように、駐車場番号領域と、領域１、領域２、領域３、・・が設けられており、駐車場番号領域に格納された駐車場番号に対して最も近くに位置する係員端末とみなされる係員端末記号が領域１、次に近くに位置するとみなされる係員端末記号が領域２、・・・というように、駐車場番号の駐車場に近いとみなされる係員端末記号が番号の小さい領域から順に格納されている。
【００５４】
なお、ＥＣＲ３０は、本実施の形態において、１台の情報処理装置で構成しているが、例えば通信ネットワークを介した複数の機器を設置すること等により、各種機能を複数の機器で分散して実行する構成でもよい。この場合、各種機能を実行する負荷が分散される。また、駐車場の各区画は、１台のカメラｃ１〜ｃｎにより撮影する構成としたが、２台以上のカメラを各区画に設置するようにして、立体的な駐車場画像を撮影するようにしてもよい。
【００５５】
係員端末４０は、図示しないが、ＣＰＵ、ＲＡＭ、入力部、表示部、記録部、音声出力部と、ＥＣＲ３０と無線ＬＡＮ通信を行う通信部を備える。係員端末４０のＣＰＵは、通信部によりＥＣＲ３０からの報知情報を受信すると、受信通知を音声出力するとともに、受信した報知情報をその表示部に表示する。各係員端末４０には、係員端末を識別するための識別記号ａ、ｂ・・・が付されている。
【００５６】
バックヤード端末５０は、図１０に示すように、ＣＰＵ５１、入力部５２、表示部５３、カメラ・スピーカ接続部５４、通信部５５、ＲＡＭ５６、記録部５７、音声入力部５８、音声合成部５９により構成されており、各部はバス６０により接続されている。
【００５７】
ＣＰＵ５１は、記録部５７に記憶されているシステムプログラムを読み出し、ＲＡＭ５６内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、ＣＰＵ５１は、記録部５７に記憶されている各種処理プログラムを読み出してワークエリアに展開し、後述する音声誘導処理を始めとする各種処理を実行し、それらの処理結果をＲＡＭ５６のワークエリアに記憶する。そして、ワークエリアに格納した処理結果を記録部５７内の指定の保存先に保存させる。
【００５８】
入力部５２は、文字／英数字入力キー、カーソルキー、及び各種機能キー等を備えたキーボードと、ポインティングデバイスであるマウスと、を備えて構成され、キーボードで押下操作されたキーの押下信号とマウスによる操作信号とを、入力信号としてＣＰＵ５１に出力する。
【００５９】
表示部５３は、ＬＣＤやＣＲＴ等により構成され、ＣＰＵ５１から入力される表示信号の指示に従って、表示画面上に、カメラｃ１〜ｃｎから取り込まれた画像等を表示する。
【００６０】
カメラ・スピーカ接続部５４は、バックヤード端末５０にカメラｃ１〜ｃｎを接続するためのインターフェース及びスピーカｓ１〜ｓｎを接続するためのインターフェースを備える。
通信部５５は、無線ＬＡＮカード等により構成され、ＥＣＲ３０とデータの送受信を行う。
【００６１】
ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）５６は、ＣＰＵ５１により実行されるシステムプログラム、各種処理プログラム、各処理において処理中のデータ、処理結果などを一時的に記憶するワークエリアを形成する。
【００６２】
記録部５７は、バックヤード端末５０に対応するシステムプログラム、音声誘導処理プログラムを始めとする各種処理プログラム、各種データ等が予め記憶されており、この記録部５７は、磁気的、光学的記録媒体、若しくは半導体メモリなどＣＰＵ５１で読取り可能な記録媒体を含んだ構成である。この記録媒体はＣＤ−ＲＯＭ、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。また、記録媒体に格納するプログラム、データ等の一部若しくは全部をサーバやクライアントからＷＡＮ、ＬＡＮなどの通信ネットワークを介して受信する構成にしてもよく、更に、記録媒体は通信ネットワーク上に構築されたサーバやクライアントの記録媒体であってもよい。
【００６３】
本実施の形態において、記録部５７は、図１０に示すように、音声メッセージ５７１を格納している。音声メッセージ５７１は、誘導開始メッセージを生成するための基本となる音声データが格納されている。
【００６４】
音声入力部５８は、マイクにより構成され、音声信号を入力する。
音声合成部５９は、ＥＣＲ３０から受信された駐車場番号と音声メッセージ５７１を合成して誘導開始メッセージを生成する。
【００６５】
次に、画像データ処理システム２００の動作について説明する。
図１１に、ＥＣＲ３０のＣＰＵ３１により実行される車両画像解析処理を示す。この車両画像解析処理は、一定時間毎に割り込みで行われる処理である。
【００６６】
まず、ポインタＮが初期化されて１が格納され（ステップＳ４１）、カメラ接続部３４を介してカメラｃＮにより撮影された画像データが取り込まれ（ステップＳ４２）、取り込まれた画像データに客車両画像（以下、車両画像と称する）が撮影されているか否かが判断される（ステップＳ４３）。車両画像が撮影されていない場合は（ステップＳ４３；ＮＯ）、本処理は終了する。
【００６７】
車両画像が撮影されている場合は（ステップＳ４３；ＹＥＳ）、各車両画像が認識され、画像データ中の右側から順に車両画像１、２、・・・と番号が付与され（ステップＳ４４）、ポインタＸに１、Ｙに画像データ中の車両数（認識された車両画像数）が格納される（ステップＳ４５）。
【００６８】
次いで、車両画像Ｘと車両画像メモリ３６１に記録されている各車両画像との比較、解析が行われることにより（ステップＳ４６）、車両画像Ｘと同一車両の車両画像が車両画像メモリ３６１に未記録であるか否かが判断される（ステップＳ４７）。解析の結果、車両画像Ｘが車両画像メモリ３６１に未記録である場合は（ステップＳ４７；ＹＥＳ）、その車両の位置から、駐車しようとしている駐車場番号が認識され（ステップＳ４８）、車両画像Ｘ、駐車場番号及び撮影日時が車両画像メモリ３６１に記録され（ステップＳ４９）、処理はステップＳ６１に移行する。
【００６９】
ステップＳ４７において、撮影された車両画像Ｘの車両の画像がすでに車両画像メモリ３６１に記録されている場合は（ステップＳ４７；ＮＯ）、車両画像メモリ３６１に既に記録されている車両画像と今回撮影された車両画像Ｘとを比較して解析することにより、その車両のバック移動距離と所要時間に基づいてバック移動速度が算出される（ステップＳ５０）。例えば、図７に示すように、駐車場番号の付された各区画の中央に基準点線（第１の実施の形態の基準点線と同様）を予め設けておき、画像データの撮影時間間隔と車両の到達した基準点線間隔とにより求められたバック移動距離によりバック移動速度が算出される。
【００７０】
次いで、算出された結果に基づいて車両画像Ｘの運転者の運転が未熟であるか否かが判断される（ステップＳ５１）。例えば、算出されたバック移動速度が記録部３７の条件データ格納部３７１に記憶されている基準バック移動速度と比較され、基準バック移動速度に満たない場合には、運転が未熟と判断される（ステップＳ５１；ＹＥＳ）。運転が未熟と判断された場合には、車両画像メモリ３６１に記憶されている、車両画像Ｘの車両の画像と対応付けて誘導フラグが記録されているか否かが判断され（ステップＳ５２）、誘導フラグが記録されている場合には（ステップＳ５２；ＹＥＳ）、処理はステップＳ６１に移行する。ステップＳ５１において運転が未熟と判断されなかった場合も処理はステップＳ６１に移行する。
【００７１】
車両画像メモリ３６１において、車両画像Ｘの車両の画像と対応付けて誘導フラグが記録されていない場合には（ステップＳ５２；ＮＯ）、誘導フラグが記録され（ステップＳ５３）、当該車両が駐車しようとしている駐車場番号に最も近い係員端末４０に誘導要求及び駐車場番号が送信される（ステップＳ５４）。なお、駐車場番号に近い係員端末４０は、管理係員端末テーブル３７２を参照することにより決定される。
【００７２】
通信部３５により、誘導要求の送信先となった係員端末４０からの誘導実行が受信されると（ステップＳ５５；ＹＥＳ）、処理はステップＳ６１に移行する。誘導要求送信後、所定時間が経過しても誘導実行が受信されない場合は（ステップＳ５６；ＹＥＳ）、次に近い係員端末４０が検索され（ステップＳ５７）、次に近い係員端末４０が存在する場合は（ステップＳ５８；ＮＯ）、次に近い係員端末４０に誘導要求及び駐車場番号が送信される（ステップＳ５９）。全係員端末４０の検索が終了した場合には（ステップＳ５８；ＮＯ）、バックヤード端末５０に音声誘導要求が送信され（ステップＳ６０）、処理はステップＳ６１へ移行する。
【００７３】
ステップＳ６１においては、ポインタＸがインクリメントされ（ステップＳ６１）、ポインタＸの値がＹの値を超えない、即ち画像データ中の車両数を超えない場合は（ステップＳ６２；ＮＯ）、処理はステップＳ４６に戻り、ステップＳ４６〜Ｓ６２が繰り返し実行される。ポインタＸの値がＹの値を超えた、即ち画像データ中の車両数を超えた場合は（ステップＳ６２；ＹＥＳ）、ポインタＮがインクリメントされ（ステップＳ６３）、Ｎがカメラ台数を越えない場合は（ステップＳ６４；ＮＯ）、処理はステップＳ４２に戻り、ステップＳ４２〜６４が繰り返し実行される。Ｎがカメラ台数を超えた場合（ステップＳ６４；ＹＥＳ）、本処理は終了する。
【００７４】
次に、図１２を参照して、バックヤード端末５０のＣＰＵ５１により実行される音声誘導処理について説明する。
通信部５５を介してＥＣＲ３０から駐車場番号及び誘導要求が受信されると（ステップＳ７１；ＹＥＳ）、受信された駐車場番号と記録部５７に記録されている音声メッセージ５７１が合成されて誘導開始メッセージが作成され（ステップＳ７２）、カメラ・スピーカ接続部５４を介して、駐車場番号に対応するスピーカ（例えば、図７の駐車場番号１〜７の場合はスピーカｓ１）から誘導開始メッセージが出力される（ステップＳ７３）。例えば、駐車場番号７に駐車しようとしている車両の運転者に対する誘導メッセージは、「駐車場番号７番に駐車しようとしている方に音声による誘導を始めます。」となる。
【００７５】
次いで、カメラ・スピーカ接続部５４を介して、駐車場番号に対応するカメラ（例えば、図７の駐車場番号１〜７の場合はカメラｃ１）から画像が取り込まれて表示部５３に表示され（ステップＳ７４）、音声入力部５８により入力されたバックヤードの係員の誘導音声が駐車場番号に対応するスピーカから出力される（ステップＳ７５）。入力部５２により終了指示が入力されるまで（ステップＳ７６；ＮＯ）、ステップＳ７４、７５が繰り返し実行され、終了指示が入力されると（ステップＳ７６；ＹＥＳ）、車両画像メモリ３６１の当該車両画像及び対応するデータがクリアされて（ステップＳ７７）本処理は終了する。
【００７６】
なお、ＣＰＵ３１の制御により、車両画像メモリ３６１に記録後、所定時間（例えば、１時間）経過したデータはクリアされる。
【００７７】
以上説明したように、画像データ処理システム２００によれば、ＥＣＲ３０は、店舗の駐車場の様子をカメラｃ１〜ｃｎにより撮影し、取り込まれた画像データから車両画像を抽出し、車両画像メモリ３６１に未登録の車両画像については車両画像メモリ３６１に記録する。車両画像メモリ３６１に既に記録されている車両の車両画像である場合は、車両画像メモリ３６１に記録されている既に記録されている車両画像と今回撮影された車両画像を解析することにより、その車両の移動距離と所要時間に基づいてバック移動速度を算出し、条件データ格納部３７１に格納されている基準バック移動速度以上であるか否かにより運転が未熟か否かを判断する。運転が未熟であると判断すると、最も近い係員端末４０から順に誘導要求及び駐車場番号を送信することにより誘導が必要であることを報知し、誘導実行を応答する係員端末４０がなければバックヤード端末５０に誘導要求を行い、バックヤードの係員がカメラから取り込まれる画像を見ながら行う誘導をスピーカから出力する。
【００７８】
従って、係員端末４０を携帯する係員が、誘導が必要な顧客が来店して駐車場に入ったことを直ちに把握することができるので、係員がその駐車場番号のところにかけつけて迅速に対応することができるようになり、顧客サービスを向上させることができる。また、係員が誘導できない場合は、バックヤードにおいてフォローすることができる。
【００７９】
なお、上記実施の形態における記述内容は、本実施の形態における好適な一例であり、これに限定されるものではない。
【００８０】
例えば、上記実施の形態においては、車両画像の解析により算出したバック移動速度により運転者の運転が未熟か否かを判断したが、これに限定されず、例えば、条件データとして基準となる切替し回数を記録しておき、カメラから取り込まれた車両画像を車両画像メモリに蓄積して車両画像の履歴から切りまわし回数を解析し、基準回数以上か否かにより運転者の運転が未熟であるか否かを判断するようにしてもよい。また、記録部３７に初心者マーク等の条件画像を記憶しておき、車両画像に条件画像が含まれている場合に運転者の運転が未熟と判断して誘導を行うようにしてもよい。
【００８１】
また、バックヤードから誘導する際には、スピーカを使用せず、特定のラジオ周波数を使用して、車のラジオから誘導するようにしてもよい。また、来店する頻度が高いその店舗の会員等の顧客の場合には、予め顧客の携帯電話番号及び車のナンバーを登録しておき、車のナンバーを認識して携帯電話に電話するようにしてもよい。
【００８２】
その他、画像データ処理システム２００の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【００８３】
【発明の効果】
本発明によれば、補助の必要な入場者であるか否かを判断して、補助の必要な入場者が入場した際に報知することが可能な画像データ処理システムを提供することができる。
【図面の簡単な説明】
【図１】本発明の第１の形態における画像データ処理システム１００の全体構成を示す図である。
【図２】図１のカメラｃにより店舗の入口で来店した顧客を撮影する様子を概念的に示す図である。
【図３】図１の客画像メモリ１６１のデータ構成例を示す図である。
【図４】図１のＣＰＵ１１により実行される客画像解析処理を示すフローチャートである。
【図５】図１のＣＰＵ１１により実行される取引処理を示すフローチャートである。
【図６】本発明の第２の形態における画像データ処理システム２００の全体構成を示す図である。
【図７】図６のカメラｃ１〜ｃ４で店舗の駐車場を撮影する様子を概念的に示す図である。
【図８】図６の車両画像メモリ３６１のデータ格納例を示す図である。
【図９】図６の管理係員端末テーブル３７２のデータ格納例を示す図である。
【図１０】図６のバックヤード端末５０の構成を示すブロック図である。
【図１１】図６のＣＰＵ３１により実行される車両画像解析処理を示すフローチャートである。
【図１２】図１０のＣＰＵ５１により実行される音声誘導処理を示すフローチャートである。
【符号の説明】
１００、２００ 画像データ処理システム
１０、３０ ＥＣＲ
１１、３１ ＣＰＵ
１２、３２ 入力部
１３、３３ 表示部
１４、３４ カメラ接続部
１５、３５ 通信部
１６、３６ ＲＡＭ
１６１ 客画像メモリ
３６１ 車両画像メモリ
１７、３７ 記録部
１７１、３７１ 条件データ格納部
１７２ 条件画像格納部
３７２ 管理係員端末テーブル
１８、３８ バス
２０ 店員端末
４０ａ、４０ｂ 係員端末
５０ バックヤード端末
５１ ＣＰＵ
５２ 入力部
５３ 表示部
５４ カメラ・スピーカ接続部
５５ 通信部
５６ ＲＡＭ
５７ 記録部
５７１ 音声メッセージ
５８ 音声入力部
５９ 音声合成部
６０ バス
【発明の属する技術分野】
本発明は、店舗等の商業施設や公共施設等への入場者を撮影した画像データを解析し、補助が必要な入場者である場合に報知する画像データ処理システム及びプログラムに関する。
【０００２】
【従来の技術】
従来、各種商業又は公共施設におけるお年寄りや身体障害者等、介助が必要な入場者への対応は係員の個人的な判断に任されており、係員が忙しい場合等には、介助が必要な入場者に気付かずにいつまでも介助が行われない状態となることがあった。
【０００３】
例えば、特許文献１には、車椅子が階段にさしかかった場合、これを検知し、迅速な介護を促すことができる障害者介護システムが開示されている。
【０００４】
【特許文献１】
特開平０８−２６３７５０号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、特許文献１においては、車椅子により介助が必要であることを認識して係員に通知するので、車椅子を利用していないが介助が必要な人、例えば、お年寄りや怪我人等に対して迅速に介助することができなかった。
【０００６】
また、施設の駐車場において、初心者の入場者がスムーズに駐車ができるように誘導することが必要な場合があるが、係員がそばにいない場合等、迅速な誘導を行うことができないことがあった。
【０００７】
本発明の課題は、補助の必要な入場者であるか否かを判断して、補助の必要な入場者が入場した際に報知することが可能な画像データ処理システムを提供することである。
【０００８】
【課題を解決するための手段】
上記課題を解決するため、請求項１に記載の発明の画像データ処理システムは、
入場者の様子を撮影する撮影手段と、
前記入場者が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像を予め記憶する記憶手段と、
前記撮影手段に撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と前記記憶手段に記憶された条件データ又は条件画像に基づいて、前記入場者に補助が必要であるか否かを判断する判断手段と、
前記判断手段により補助が必要であると判断された場合に報知する報知手段と、
を備えたことを特徴としている。
【０００９】
請求項６に記載の発明のプログラムは、
コンピュータに、
入場者の様子を撮影する機能と、
前記撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と、予め記憶された、前記入場者の動作状態が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像とに基づいて、前記入場者に補助が必要であるか否かを判断する機能と、
前記判断により補助が必要であると判断された場合に報知する機能と、
を実現させるためのプログラムであることを特徴としている。
【００１０】
請求項１、６に記載の発明によれば、撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、取得された動作状態と、予め記憶された、入場者の動作状態が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像に基づいて、入場者に補助が必要であるか否かを判断し、入場者に補助が必要であると判断された場合に報知する。従って、係員が補助の必要な人が入場したことを直ちに把握することができ、迅速な対応を行うことができるようになる。
【００１１】
【発明の実施の形態】
〔第１の実施の形態〕
以下、図を参照して本発明の実施の形態を詳細に説明する。
まず、構成を説明する。
図１に、本発明に係る画像データ処理システム１００の構成を示し、図２に、店舗の入口において、画像データ処理システム１００のカメラｃにより来店した顧客を撮影する様子を示す。画像データ処理システム１００は、店舗に設置され、入口の様子を撮影することにより来店した顧客を撮影し、撮影した画像から健常者であるか否かの判断を行って、健常者でない場合に係員に報知するシステムである。なお、本実施の形態においては、本発明を店舗に適用した例を説明するが、ホテル、レジャー施設、映画館、劇場等、各種商業施設や公共施設等において適用可能である。
【００１２】
画像データ処理システム１００は、図１に示すように、各種処理及び精算を行うＥＣＲ（Ｅｌｅｃｔｒｏｎｉｃ Ｃａｓｈ Ｒｅｇｉｓｔｅｒ）１０と、各店員が携帯する店員端末２０と、ＥＣＲ１０での精算時の顧客の顔を撮影するカメラａと、店舗の入口に設けられ、入店する顧客を撮影する撮影手段としてのカメラｃと、を備える。カメラａ，ｃはＥＣＲ１０に接続されたＤＣＥ（デジタルスチルカメラ）又はデジタルビデオカメラ等であり、静止画又は動画の画像データを撮影する。また、店員端末２０は、ＥＣＲ１０と無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）接続されている。
【００１３】
ＥＣＲ１０は、ＣＰＵ１１、入力部１２、表示部１３、カメラ接続部１４、通信部１５、ＲＡＭ１６、記録部１７等により構成され、各部はバス１８により接続されている。
【００１４】
ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１は、記録部１７に記憶されているシステムプログラムを読み出し、ＲＡＭ１６内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、ＣＰＵ１１は、記録部１７に記憶されている各種処理プログラムを読み出してワークエリアに展開し、後述する客画像解析処理、取引処理を始めとする各種処理を実行し、それらの処理結果をＲＡＭ１６のワークエリアに記憶する。そして、ワークエリアに格納した処理結果を記録部１７内の指定の保存先に保存させる。
【００１５】
入力部１２は、図示しない数字キー、ＥＣＲ１０を使用する取引担当者（クラーク）を設定するクラークキー、ＥＣＲ１０の各種動作（登録、点検、精算、停止等）を切り換えるモードキー、「解除」キーなどのファンクションキー、締め処理（一取引の合計金額、さらに必要があれば釣銭演算して釣銭金額を求めてレシートに印刷しレシート発行したり、一日の売上合計データや取引データ等の更新をする処理）を行うための締めキー等を備え、ユーザーによる各キー操作に応じた操作信号をＣＰＵ１１出力する。また、必要に応じて表示部１３にタッチパネル等のポインティングデバイスを備える構成としてもよい。
【００１６】
表示部１３は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）やＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）等により構成され、ＣＰＵ１１から入力される表示信号の指示に従って、表示画面上に、客画像等を表示する。
【００１７】
カメラ接続部１４は、ＥＣＲ１０にカメラａ，ｃを接続するためのインターフェースである。
【００１８】
通信部１５は、店員端末２０と無線ＬＡＮ通信を行う無線ＬＡＮカード、アクセスポイント等から構成されるが、上記の通信ネットワークに接続する構成でもよい。その場合、通信ネットワークは、無線ＬＡＮだけでなく、有線ＬＡＮ、ＷＡＮを含めてもよく、電話回線網、ＩＳＤＮ回線網、広帯域通信回線網、専用線、移動体通信網、通信衛星回線、ＣＡＴＶ回線、光通信回線、無線通信回線と、それらを接続するインターネットサービスプロバイダ等を含む構成でもよい。
【００１９】
ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１６は、ＣＰＵ１１により実行されるシステムプログラム、各種処理プログラム、各処理において処理中のデータ、処理結果などを一時的に記憶するワークエリアを形成する。また、ＲＡＭ１６は、客画像メモリ１６１を有する。図３に示すように、客画像メモリ１６１は、入店した顧客の客画像データを格納する客画像データ領域１６１ａと、客画像の撮影日時を示すデータを格納する撮影日時領域１６１ｂと、割引フラグ（１又は空欄）を格納する割引フラグ領域１６１ｃと、を有している。
【００２０】
記録部１７は、ＥＣＲ１０に対応するシステムプログラム、客画像解析処理プログラム、取引処理プログラムを始めとする各種処理プログラム、各種データ等が予め記憶されており、この記録部１７は、磁気的、光学的記録媒体、若しくは半導体メモリなどＣＰＵ１１で読取り可能な記録媒体を含んだ構成である。この記録媒体はＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。また、記録媒体に格納するプログラム、データ等の一部若しくは全部をサーバやクライアントからＷＡＮ、ＬＡＮなどの通信ネットワークを介して受信する構成にしてもよく、更に、記録媒体は通信ネットワーク上に構築されたサーバやクライアントの記録媒体であってもよい。
【００２１】
本実施の形態において、記録部１７は、補助が必要な動作状態の顧客であるか否かの判断基準となる条件データを記憶する条件データ格納部１７１と、補助が必要である動作状態の顧客であるか否か判断基準となる条件画像を記憶する条件画像格納部１７２と、を有している。具体的には、条件データ格納部１７１には、健常者か否かの判断基準となる基準歩行速度が格納され、条件画像格納部１７２には、車椅子、杖等の健常者でない顧客が所有しうる部品の画像が格納されている。
【００２２】
なお、ＥＣＲ１０は、本実施の形態において、１台の情報処理装置で構成しているが、例えば通信ネットワークを介した複数の機器を設置すること等により、各種機能を複数の機器で分散して実行する構成でもよい。この場合、各種機能を実行する負荷が分散される。また、１種類のカメラａ、ｃにより撮影する構成としたが、２種類以上のカメラを入口及びＥＣＲ１０付近に設置するようにして、立体的な客画像を撮影するようにしてもよい。
【００２３】
店員端末２０は、図示しないが、ＣＰＵ、ＲＡＭ、入力部、表示部、記録部、音声出力部と、ＥＣＲ１０と無線ＬＡＮ通信を行う通信部を備える。店員端末２０のＣＰＵは、通信部によりＥＣＲ１０からの報知情報を受信すると、受信通知を音声出力するとともに、受信した報知情報をその表示部に表示する。
【００２４】
次に、画像データ処理システム１００の動作について説明する。
図４に、ＥＣＲ１０のＣＰＵ１１により実行される客画像解析処理を示す。この客画像解析処理は、一定時間毎に割り込みで行われる処理である。
【００２５】
カメラｃにより撮影された入口付近の画像データがカメラ接続部１４を介して取り込まれ、取り込まれた画像データに客画像が撮影されているか否かが判断される（ステップＳ１）。客画像が撮影されていない場合は（ステップＳ１；ＮＯ）、本処理は終了する。
【００２６】
客画像が撮影されている場合は（ステップＳ１；ＹＥＳ）、撮影された各客画像が認識され、前方の客画像（先を行く顧客の画像）から順に客画像１、２、・・・と番号が付与され（ステップＳ２）、ポインタＸに１、ポインタＹに客数（認識された客画像数）が格納される（ステップＳ３）。
【００２７】
次いで、客画像Ｘと客画像メモリ１６１に記録されている各客画像との比較、解析が行われることにより（ステップＳ４）、客画像Ｘの顧客の客画像が客画像メモリ１６１に未記録であるか否かが判断される（ステップＳ５）。客画像Ｘが客画像メモリ１６１に未記録である場合は（ステップＳ５；ＮＯ）、客画像Ｘ及び撮影日時が客画像メモリ１６１に記録される（ステップＳ６）。次いで、記録部１７の条件画像格納部１７２から部品画像が読み出され、客画像Ｘに部品画像と近似した画像が含まれているか否かが解析される（ステップＳ７）。客画像に部品画像が含まれていない場合は、健常者であると判断され（ステップＳ９；ＹＥＳ）、処理はステップＳ１２に移行してポインタＸがインクリメントされ、ポインタＸがポインタＹ、即ち、画像データ中の客数を超えない場合は（ステップＳ１３；ＮＯ）、処理はステップＳ４に戻りステップＳ４〜Ｓ１３が繰り返し実行され、ポインタＸの値が画像データ中の客数を超えると（ステップＳ１３；ＹＥＳ）、本処理は終了する。ステップＳ９において、客画像Ｘに部品画像が含まれている場合は、健常者ではないと判断され（ステップＳ９；ＮＯ）、処理はステップＳ１０に移行する。
【００２８】
一方、ステップＳ５において、客画像Ｘの顧客の客画像がすでに客画像メモリ１６１に記録されている場合は（ステップＳ５；ＹＥＳ）、客画像メモリ１６１に記録されている客画像と今回撮影された客画像Ｘを比較、解析することにより、その顧客の移動距離と所要時間に基づいて歩行速度が算出される（ステップＳ８）。例えば、図２に示すように、入口付近に顧客の移動距離を測るための基準点線（床などに等間隔に設けられたマーク）を予め設けておき、画像データの撮影間隔と顧客の到達した基準点線間隔とにより移動距離及び所要時間を求めることにより歩行速度が算出される。そして、算出された歩行速度が記録部１７の条件データ格納部１７１に記憶されている基準歩行速度と比較され、基準歩行速度以上である場合には、健常者であると判断され（ステップＳ９；ＹＥＳ）、ステップＳ１２に移行し、ポインタＸがインクリメントされ、ポインタＸがポインタＹ、即ち、画像データ中の客数を超えない場合は（ステップＳ１３；ＮＯ）、処理はステップＳ４に戻りステップＳ４〜Ｓ１３が繰り返し実行され、ポインタＸの値が画像データ中の客数を超えた場合に（ステップＳ１３；ＹＥＳ）、本処理は終了する。ステップＳ８で算出された歩行速度が基準歩行速度に満たない場合は、健常者ではないと判断され（ステップＳ９；ＮＯ）、処理はステップＳ１０に移行する。
【００２９】
ステップＳ１０においては、客画像メモリ１６１に今回撮影された客画像Ｘと対応付けて割引フラグ１が記録され、続いて店員端末２０にカメラｃの位置情報及び客画像Ｘが送信され、補助の必要な顧客が入店したことが店員に報知される（ステップＳ１１）。報知後、ポインタＸがインクリメントされ（ステップＳ１２）、ポインタＸがポインタＹ、即ち、画像データ中の客数を超えない場合は（ステップＳ１３；ＮＯ）、処理はステップＳ４に戻りステップＳ４〜Ｓ１３が繰り返し実行され、ポインタＸの値が画像データ中の客数を超えた場合に（ステップＳ１３；ＹＥＳ）、本処理は終了する。
【００３０】
なお、本実施の形態においては入口が１つの店舗を例にとり、カメラｃを一つ設置した例を説明したが、複数の入口ｅ１〜ｅｎ（ｎは任意の自然数）を有する店舗においては、入口ｅ１〜ｅｎ毎にカメラｃ１〜ｃｎを設置し、一定時間毎にカメラｃ１から順に上記客画像解析処理のステップＳ１〜Ｓ１３を繰り返し実行するようにする。また、客画像メモリ１６１には、カメラｃ１〜ｃｎ毎に客画像、撮影日時、割引フラグが記録される。
【００３１】
上記客画像解析処理により、補助の必要な顧客が来店したことを店員に報知するとともに、客画像メモリ１６１に客画像と割引フラグを記録する。
【００３２】
次に、図５を参照して顧客の精算時にＥＣＲ１０のＣＰＵ１１により実行される取引処理について説明する。
【００３３】
入力部１２により入力が行われると（ステップＳ２１；ＹＥＳ）、入力された指示の解析が行われ、入力された指示が商品登録の指示であるか否かが判断される（ステップＳ２２）。入力された指示が商品登録の指示である場合（ステップ２２；ＹＥＳ）、入力されたデータに基づいてＰＬＵファイル、部門ファイル（図示せず）等の売上データが更新されるとともに（ステップＳ２３）、その取引における取引金額である小計データが更新され、本処理は終了する（ステップＳ２４）。
【００３４】
一方、入力された指示が商品登録の指示ではない場合（ステップＳ２２；ＮＯ）、入力された指示が締め処理であるか否かが判断され（ステップＳ２５）、締め処理である場合（ステップＳ２５；ＹＥＳ）、カメラａにより精算顧客の撮影が行われてカメラ接続部１４を介して客画像が取り込まれる（ステップＳ２６）。次いで、客画像メモリ１６１から撮影された精算顧客の客画像が検索され（ステップＳ２７）、検索された客画像に割引フラグ１が対応付けられている場合は（ステップＳ２８；ＹＥＳ）、所定金額を取引合計金額から割引いて、割引後の金額を精算する締め処理が行われる（ステップＳ２９）。検索された客画像に割引フラグが対応付けられていない場合は（ステップ２８；ＮＯ）、特別に割引を行わない通常の締め処理が行われる（ステップＳ３０）。
【００３５】
締め処理後、客画像メモリ１６１から、検索された客画像に関するデータがクリアされ（ステップＳ３１）、小計データの格納エリアを始めとする、本処理で使用されたワークエリアが初期化され、本処理は終了する（ステップＳ３２）。一方、ステップＳ２５において、入力された指示が締め処理ではないと判断されると（ステップＳ２５；ＮＯ）、指示に応じたその他の処理が実行され（ステップＳ３３）、本処理は終了する。
【００３６】
以上説明したように、画像データ処理システム１００によれば、ＥＣＲ１０は、入口付近の様子をカメラｃにより撮影し、カメラｃから取り込まれた画像データから客画像を抽出し、客画像メモリ１６１に未登録の客画像については客画像メモリ１６１に記録し、客画像に条件画像格納部１７２に記憶されている条件画像（例えば、車椅子、杖等）が含まれるかを解析することにより撮影された顧客が健常者であるか否かを判断する。一方、客画像メモリ１６１にすでに記録されている顧客の客画像である場合は、客画像メモリ１６１に記録されている、その顧客の客画像と今回撮影された客画像を解析することにより、その顧客の移動距離と所要時間に基づいて歩行速度を算出し、条件データ格納部１７１に格納されている基準歩行速度以上であるか否かにより健常者か否かを判断する。健常者ではないと判断すると、客画像メモリ１６１の当該顧客の客画像と対応付けて割引フラグを記録し、店員端末２０へカメラ位置情報と客画像を送信して報知する。
【００３７】
また、顧客の精算時にカメラａにより客画像を撮影し、撮影された客画像が、割引フラグが対応付けられた客画像である場合には、取引合計金額から所定金額を割引いて締め処理を行う。
【００３８】
従って、店員端末２０を携帯する店員が、補助の必要な顧客が来店したことを直ちに把握することができるので、店員が入口にかけつけて迅速に対応することができるようになり、顧客サービスを向上させることができる。また、健常者ではない顧客に割引を行うサービスを提供することができる。
【００３９】
なお、上記実施の形態における記述内容は、本実施の形態における好適な一例であり、これに限定されるものではない。
【００４０】
例えば、健常者でないと判断された顧客に対するサービスは、ＥＣＲ１０における割引処理に限らず、おまけ、マッサージ等であってもよい。
【００４１】
また、例えば、入口付近に動く歩道を設置し、顧客が健常者でなければ、停止させてあった、動く歩道を自動で動かすようにしてもよい。
【００４２】
その他、画像データ処理システム１００の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【００４３】
〔第２の実施の形態〕
以下、図を参照して本発明の第２の実施の形態について説明する。
まず、構成を説明する。
図６に、本発明に係る画像データ処理システム２００の構成を示す。この画像データ処理システム２００は、店舗の駐車場の様子を撮影し、撮影した画像から来店した運転者の運転が未熟であるか否かの判断を行って、運転が未熟な場合に係員に報知して係員により誘導を行い、係員がふさがっている場合は店舗事務所であるバックヤードから音声誘導を行うシステムである。図７に、駐車場の一例を概念的に示す。図７に示すように、駐車は、複数の区画に分けられており、区画毎にその区画を撮影するカメラ及びその区画における音声誘導を出力するスピーカが配置されている。図７においては、駐車場１〜７に対してカメラｃ１、スピーカｓ１が、駐車場８〜１２に対してカメラｃ２、スピーカｓ２が、駐車場１３〜１９に対してカメラｃ３、スピーカｓ３が、駐車場２０〜２４に対してカメラｃ４、スピーカｓ４が、配置されている。なお、本実施の形態においては、本発明を店舗の駐車場に適用した例を説明するが、ホテル、レジャー施設、映画館、劇場等、各種商業施設や公共施設等の駐車場おいても適用可能である。
【００４４】
画像データ処理システム２００は、図６に示すように、各種処理及び精算を行うＥＣＲ３０と、駐車場の各係員が携帯する係員端末４０と、バックヤードに設置されたバックヤード端末５０と、駐車場に設けられ、駐車場の様子を撮影する撮影手段としてのカメラｃ１〜ｃｎと、音声誘導を出力するスピーカｓ１〜ｓｎを備える。カメラｃ１〜ｃｎはＥＣＲ３０に接続されたＤＣＥ（デジタルスチルカメラ）又はデジタルビデオカメラ等であり、静止画又は動画の画像データを撮影する。また、係員端末４０、バックヤード端末５０は、ＥＣＲ３０と無線ＬＡＮ接続されている。
【００４５】
図６に示すように、ＥＣＲ３０は、ＣＰＵ３１、入力部３２、表示部３３、カメラ接続部３４、通信部３５、ＲＡＭ３６、記録部３７等により構成され、各部はバス３８により接続されている。
【００４６】
ＣＰＵ３１は、記録部３７に記憶されているシステムプログラムを読み出し、ＲＡＭ３６内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、ＣＰＵ３１は、記録部３７に記憶されている各種処理プログラムを読み出してワークエリアに展開し、後述する車両画像解析処理を始めとする各種処理を実行し、それらの処理結果をＲＡＭ３６のワークエリアに記憶する。そして、ワークエリアに格納した処理結果を記録部３７内の指定の保存先に保存させる。
【００４７】
入力部３２は、図示しない数字キー、ＥＣＲ３０を使用する取引担当者（クラーク）を設定するクラークキー、ＥＣＲ３０の各種動作（登録、点検、精算、停止等）を切り換えるモードキー、「解除」キーなどのファンクションキー、締め処理（一取引の合計金額、さらに必要があれば釣銭演算して釣銭金額を求めてレシートに印刷しレシート発行したり、一日の売上合計データや取引データ等の更新をする処理）を行うための締めキー等を備え、ユーザーによる各キー操作に応じた操作信号をＣＰＵ３１出力する。また、必要に応じて表示部３３にタッチパネル等のポインティングデバイスを備える構成としてもよい。
【００４８】
表示部３３は、ＬＣＤやＣＲＴ等により構成され、ＣＰＵ３１から入力される表示信号の指示に従って、表示画面上に、車両画像等を表示する。
【００４９】
カメラ接続部３４は、ＥＣＲ３０にカメラｃ１〜ｃｎを接続するためのインターフェースである。
【００５０】
通信部３５は、係員端末４０、バックヤード端末５０と無線ＬＡＮ通信を行う無線ＬＡＮカード、アクセスポイント等から構成されるが、上記の通信ネットワークに接続する構成でもよい。その場合、通信ネットワークは、無線ＬＡＮだけでなく、有線ＬＡＮ、ＷＡＮを含めてもよく、電話回線網、ＩＳＤＮ回線網、広帯域通信回線網、専用線、移動体通信網、通信衛星回線、ＣＡＴＶ回線、光通信回線、無線通信回線と、それらを接続するインターネットサービスプロバイダ等を含む構成でもよい。
【００５１】
ＲＡＭ３６は、ＣＰＵ３１により実行されるシステムプログラム、各種処理プログラム、各処理において処理中のデータ、処理結果などを一時的に記憶するワークエリアを形成する。また、ＲＡＭ３６は、車両画像メモリ３６１を有している。図８に示すように、車両画像メモリ３６１は、駐車場における車両の車両画像データを格納する車両画像データ領域３６１ａと、車両画像の撮影日時を示すデータを格納する撮影日時領域３６１ｂと、画像の車両が駐車される駐車場番号を格納する駐車場番号領域３６１ｃと、誘導フラグ（１又は空欄）を格納する誘導フラグ領域３６１ｄと、を有している。
【００５２】
記録部３７は、ＥＣＲ３０に対応するシステムプログラム、車両画像解析処理プログラムを始めとする各種処理プログラム、各種データ等が予め記憶されており、この記録部３７は、磁気的、光学的記録媒体、若しくは半導体メモリなどＣＰＵ３１で読取り可能な記録媒体を含んだ構成である。この記録媒体はＣＤ−ＲＯＭ、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。また、記録媒体に格納するプログラム、データ等の一部若しくは全部をサーバやクライアントからＷＡＮ、ＬＡＮなどの通信ネットワークを介して受信する構成にしてもよく、更に、記録媒体は通信ネットワーク上に構築されたサーバやクライアントの記録媒体であってもよい。
【００５３】
本実施の形態において、記録部３７は、係員の補助、即ち誘導が必要である車両の条件データを記憶する条件データ格納部３７１と、駐車場番号の近くに位置しているとみなす係員端末４０の順位を格納する管理係員端末テーブル３７２と、を有している。具体的には、条件データ格納部３７１には、係員の誘導が必要であるか否か（運転が未熟であるか否か）の判断基準となる基準バック移動速度が格納されている。また、管理係員端末テーブル３７２は、図９に示すように、駐車場番号領域と、領域１、領域２、領域３、・・が設けられており、駐車場番号領域に格納された駐車場番号に対して最も近くに位置する係員端末とみなされる係員端末記号が領域１、次に近くに位置するとみなされる係員端末記号が領域２、・・・というように、駐車場番号の駐車場に近いとみなされる係員端末記号が番号の小さい領域から順に格納されている。
【００５４】
なお、ＥＣＲ３０は、本実施の形態において、１台の情報処理装置で構成しているが、例えば通信ネットワークを介した複数の機器を設置すること等により、各種機能を複数の機器で分散して実行する構成でもよい。この場合、各種機能を実行する負荷が分散される。また、駐車場の各区画は、１台のカメラｃ１〜ｃｎにより撮影する構成としたが、２台以上のカメラを各区画に設置するようにして、立体的な駐車場画像を撮影するようにしてもよい。
【００５５】
係員端末４０は、図示しないが、ＣＰＵ、ＲＡＭ、入力部、表示部、記録部、音声出力部と、ＥＣＲ３０と無線ＬＡＮ通信を行う通信部を備える。係員端末４０のＣＰＵは、通信部によりＥＣＲ３０からの報知情報を受信すると、受信通知を音声出力するとともに、受信した報知情報をその表示部に表示する。各係員端末４０には、係員端末を識別するための識別記号ａ、ｂ・・・が付されている。
【００５６】
バックヤード端末５０は、図１０に示すように、ＣＰＵ５１、入力部５２、表示部５３、カメラ・スピーカ接続部５４、通信部５５、ＲＡＭ５６、記録部５７、音声入力部５８、音声合成部５９により構成されており、各部はバス６０により接続されている。
【００５７】
ＣＰＵ５１は、記録部５７に記憶されているシステムプログラムを読み出し、ＲＡＭ５６内に形成されたワークエリアに展開し、該システムプログラムに従って各部を制御する。また、ＣＰＵ５１は、記録部５７に記憶されている各種処理プログラムを読み出してワークエリアに展開し、後述する音声誘導処理を始めとする各種処理を実行し、それらの処理結果をＲＡＭ５６のワークエリアに記憶する。そして、ワークエリアに格納した処理結果を記録部５７内の指定の保存先に保存させる。
【００５８】
入力部５２は、文字／英数字入力キー、カーソルキー、及び各種機能キー等を備えたキーボードと、ポインティングデバイスであるマウスと、を備えて構成され、キーボードで押下操作されたキーの押下信号とマウスによる操作信号とを、入力信号としてＣＰＵ５１に出力する。
【００５９】
表示部５３は、ＬＣＤやＣＲＴ等により構成され、ＣＰＵ５１から入力される表示信号の指示に従って、表示画面上に、カメラｃ１〜ｃｎから取り込まれた画像等を表示する。
【００６０】
カメラ・スピーカ接続部５４は、バックヤード端末５０にカメラｃ１〜ｃｎを接続するためのインターフェース及びスピーカｓ１〜ｓｎを接続するためのインターフェースを備える。
通信部５５は、無線ＬＡＮカード等により構成され、ＥＣＲ３０とデータの送受信を行う。
【００６１】
ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）５６は、ＣＰＵ５１により実行されるシステムプログラム、各種処理プログラム、各処理において処理中のデータ、処理結果などを一時的に記憶するワークエリアを形成する。
【００６２】
記録部５７は、バックヤード端末５０に対応するシステムプログラム、音声誘導処理プログラムを始めとする各種処理プログラム、各種データ等が予め記憶されており、この記録部５７は、磁気的、光学的記録媒体、若しくは半導体メモリなどＣＰＵ５１で読取り可能な記録媒体を含んだ構成である。この記録媒体はＣＤ−ＲＯＭ、メモリカード等の可搬型の媒体やハードディスク等の固定的な媒体を含む。また、記録媒体に格納するプログラム、データ等の一部若しくは全部をサーバやクライアントからＷＡＮ、ＬＡＮなどの通信ネットワークを介して受信する構成にしてもよく、更に、記録媒体は通信ネットワーク上に構築されたサーバやクライアントの記録媒体であってもよい。
【００６３】
本実施の形態において、記録部５７は、図１０に示すように、音声メッセージ５７１を格納している。音声メッセージ５７１は、誘導開始メッセージを生成するための基本となる音声データが格納されている。
【００６４】
音声入力部５８は、マイクにより構成され、音声信号を入力する。
音声合成部５９は、ＥＣＲ３０から受信された駐車場番号と音声メッセージ５７１を合成して誘導開始メッセージを生成する。
【００６５】
次に、画像データ処理システム２００の動作について説明する。
図１１に、ＥＣＲ３０のＣＰＵ３１により実行される車両画像解析処理を示す。この車両画像解析処理は、一定時間毎に割り込みで行われる処理である。
【００６６】
まず、ポインタＮが初期化されて１が格納され（ステップＳ４１）、カメラ接続部３４を介してカメラｃＮにより撮影された画像データが取り込まれ（ステップＳ４２）、取り込まれた画像データに客車両画像（以下、車両画像と称する）が撮影されているか否かが判断される（ステップＳ４３）。車両画像が撮影されていない場合は（ステップＳ４３；ＮＯ）、本処理は終了する。
【００６７】
車両画像が撮影されている場合は（ステップＳ４３；ＹＥＳ）、各車両画像が認識され、画像データ中の右側から順に車両画像１、２、・・・と番号が付与され（ステップＳ４４）、ポインタＸに１、Ｙに画像データ中の車両数（認識された車両画像数）が格納される（ステップＳ４５）。
【００６８】
次いで、車両画像Ｘと車両画像メモリ３６１に記録されている各車両画像との比較、解析が行われることにより（ステップＳ４６）、車両画像Ｘと同一車両の車両画像が車両画像メモリ３６１に未記録であるか否かが判断される（ステップＳ４７）。解析の結果、車両画像Ｘが車両画像メモリ３６１に未記録である場合は（ステップＳ４７；ＹＥＳ）、その車両の位置から、駐車しようとしている駐車場番号が認識され（ステップＳ４８）、車両画像Ｘ、駐車場番号及び撮影日時が車両画像メモリ３６１に記録され（ステップＳ４９）、処理はステップＳ６１に移行する。
【００６９】
ステップＳ４７において、撮影された車両画像Ｘの車両の画像がすでに車両画像メモリ３６１に記録されている場合は（ステップＳ４７；ＮＯ）、車両画像メモリ３６１に既に記録されている車両画像と今回撮影された車両画像Ｘとを比較して解析することにより、その車両のバック移動距離と所要時間に基づいてバック移動速度が算出される（ステップＳ５０）。例えば、図７に示すように、駐車場番号の付された各区画の中央に基準点線（第１の実施の形態の基準点線と同様）を予め設けておき、画像データの撮影時間間隔と車両の到達した基準点線間隔とにより求められたバック移動距離によりバック移動速度が算出される。
【００７０】
次いで、算出された結果に基づいて車両画像Ｘの運転者の運転が未熟であるか否かが判断される（ステップＳ５１）。例えば、算出されたバック移動速度が記録部３７の条件データ格納部３７１に記憶されている基準バック移動速度と比較され、基準バック移動速度に満たない場合には、運転が未熟と判断される（ステップＳ５１；ＹＥＳ）。運転が未熟と判断された場合には、車両画像メモリ３６１に記憶されている、車両画像Ｘの車両の画像と対応付けて誘導フラグが記録されているか否かが判断され（ステップＳ５２）、誘導フラグが記録されている場合には（ステップＳ５２；ＹＥＳ）、処理はステップＳ６１に移行する。ステップＳ５１において運転が未熟と判断されなかった場合も処理はステップＳ６１に移行する。
【００７１】
車両画像メモリ３６１において、車両画像Ｘの車両の画像と対応付けて誘導フラグが記録されていない場合には（ステップＳ５２；ＮＯ）、誘導フラグが記録され（ステップＳ５３）、当該車両が駐車しようとしている駐車場番号に最も近い係員端末４０に誘導要求及び駐車場番号が送信される（ステップＳ５４）。なお、駐車場番号に近い係員端末４０は、管理係員端末テーブル３７２を参照することにより決定される。
【００７２】
通信部３５により、誘導要求の送信先となった係員端末４０からの誘導実行が受信されると（ステップＳ５５；ＹＥＳ）、処理はステップＳ６１に移行する。誘導要求送信後、所定時間が経過しても誘導実行が受信されない場合は（ステップＳ５６；ＹＥＳ）、次に近い係員端末４０が検索され（ステップＳ５７）、次に近い係員端末４０が存在する場合は（ステップＳ５８；ＮＯ）、次に近い係員端末４０に誘導要求及び駐車場番号が送信される（ステップＳ５９）。全係員端末４０の検索が終了した場合には（ステップＳ５８；ＮＯ）、バックヤード端末５０に音声誘導要求が送信され（ステップＳ６０）、処理はステップＳ６１へ移行する。
【００７３】
ステップＳ６１においては、ポインタＸがインクリメントされ（ステップＳ６１）、ポインタＸの値がＹの値を超えない、即ち画像データ中の車両数を超えない場合は（ステップＳ６２；ＮＯ）、処理はステップＳ４６に戻り、ステップＳ４６〜Ｓ６２が繰り返し実行される。ポインタＸの値がＹの値を超えた、即ち画像データ中の車両数を超えた場合は（ステップＳ６２；ＹＥＳ）、ポインタＮがインクリメントされ（ステップＳ６３）、Ｎがカメラ台数を越えない場合は（ステップＳ６４；ＮＯ）、処理はステップＳ４２に戻り、ステップＳ４２〜６４が繰り返し実行される。Ｎがカメラ台数を超えた場合（ステップＳ６４；ＹＥＳ）、本処理は終了する。
【００７４】
次に、図１２を参照して、バックヤード端末５０のＣＰＵ５１により実行される音声誘導処理について説明する。
通信部５５を介してＥＣＲ３０から駐車場番号及び誘導要求が受信されると（ステップＳ７１；ＹＥＳ）、受信された駐車場番号と記録部５７に記録されている音声メッセージ５７１が合成されて誘導開始メッセージが作成され（ステップＳ７２）、カメラ・スピーカ接続部５４を介して、駐車場番号に対応するスピーカ（例えば、図７の駐車場番号１〜７の場合はスピーカｓ１）から誘導開始メッセージが出力される（ステップＳ７３）。例えば、駐車場番号７に駐車しようとしている車両の運転者に対する誘導メッセージは、「駐車場番号７番に駐車しようとしている方に音声による誘導を始めます。」となる。
【００７５】
次いで、カメラ・スピーカ接続部５４を介して、駐車場番号に対応するカメラ（例えば、図７の駐車場番号１〜７の場合はカメラｃ１）から画像が取り込まれて表示部５３に表示され（ステップＳ７４）、音声入力部５８により入力されたバックヤードの係員の誘導音声が駐車場番号に対応するスピーカから出力される（ステップＳ７５）。入力部５２により終了指示が入力されるまで（ステップＳ７６；ＮＯ）、ステップＳ７４、７５が繰り返し実行され、終了指示が入力されると（ステップＳ７６；ＹＥＳ）、車両画像メモリ３６１の当該車両画像及び対応するデータがクリアされて（ステップＳ７７）本処理は終了する。
【００７６】
なお、ＣＰＵ３１の制御により、車両画像メモリ３６１に記録後、所定時間（例えば、１時間）経過したデータはクリアされる。
【００７７】
以上説明したように、画像データ処理システム２００によれば、ＥＣＲ３０は、店舗の駐車場の様子をカメラｃ１〜ｃｎにより撮影し、取り込まれた画像データから車両画像を抽出し、車両画像メモリ３６１に未登録の車両画像については車両画像メモリ３６１に記録する。車両画像メモリ３６１に既に記録されている車両の車両画像である場合は、車両画像メモリ３６１に記録されている既に記録されている車両画像と今回撮影された車両画像を解析することにより、その車両の移動距離と所要時間に基づいてバック移動速度を算出し、条件データ格納部３７１に格納されている基準バック移動速度以上であるか否かにより運転が未熟か否かを判断する。運転が未熟であると判断すると、最も近い係員端末４０から順に誘導要求及び駐車場番号を送信することにより誘導が必要であることを報知し、誘導実行を応答する係員端末４０がなければバックヤード端末５０に誘導要求を行い、バックヤードの係員がカメラから取り込まれる画像を見ながら行う誘導をスピーカから出力する。
【００７８】
従って、係員端末４０を携帯する係員が、誘導が必要な顧客が来店して駐車場に入ったことを直ちに把握することができるので、係員がその駐車場番号のところにかけつけて迅速に対応することができるようになり、顧客サービスを向上させることができる。また、係員が誘導できない場合は、バックヤードにおいてフォローすることができる。
【００７９】
なお、上記実施の形態における記述内容は、本実施の形態における好適な一例であり、これに限定されるものではない。
【００８０】
例えば、上記実施の形態においては、車両画像の解析により算出したバック移動速度により運転者の運転が未熟か否かを判断したが、これに限定されず、例えば、条件データとして基準となる切替し回数を記録しておき、カメラから取り込まれた車両画像を車両画像メモリに蓄積して車両画像の履歴から切りまわし回数を解析し、基準回数以上か否かにより運転者の運転が未熟であるか否かを判断するようにしてもよい。また、記録部３７に初心者マーク等の条件画像を記憶しておき、車両画像に条件画像が含まれている場合に運転者の運転が未熟と判断して誘導を行うようにしてもよい。
【００８１】
また、バックヤードから誘導する際には、スピーカを使用せず、特定のラジオ周波数を使用して、車のラジオから誘導するようにしてもよい。また、来店する頻度が高いその店舗の会員等の顧客の場合には、予め顧客の携帯電話番号及び車のナンバーを登録しておき、車のナンバーを認識して携帯電話に電話するようにしてもよい。
【００８２】
その他、画像データ処理システム２００の細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【００８３】
【発明の効果】
本発明によれば、補助の必要な入場者であるか否かを判断して、補助の必要な入場者が入場した際に報知することが可能な画像データ処理システムを提供することができる。
【図面の簡単な説明】
【図１】本発明の第１の形態における画像データ処理システム１００の全体構成を示す図である。
【図２】図１のカメラｃにより店舗の入口で来店した顧客を撮影する様子を概念的に示す図である。
【図３】図１の客画像メモリ１６１のデータ構成例を示す図である。
【図４】図１のＣＰＵ１１により実行される客画像解析処理を示すフローチャートである。
【図５】図１のＣＰＵ１１により実行される取引処理を示すフローチャートである。
【図６】本発明の第２の形態における画像データ処理システム２００の全体構成を示す図である。
【図７】図６のカメラｃ１〜ｃ４で店舗の駐車場を撮影する様子を概念的に示す図である。
【図８】図６の車両画像メモリ３６１のデータ格納例を示す図である。
【図９】図６の管理係員端末テーブル３７２のデータ格納例を示す図である。
【図１０】図６のバックヤード端末５０の構成を示すブロック図である。
【図１１】図６のＣＰＵ３１により実行される車両画像解析処理を示すフローチャートである。
【図１２】図１０のＣＰＵ５１により実行される音声誘導処理を示すフローチャートである。
【符号の説明】
１００、２００ 画像データ処理システム
１０、３０ ＥＣＲ
１１、３１ ＣＰＵ
１２、３２ 入力部
１３、３３ 表示部
１４、３４ カメラ接続部
１５、３５ 通信部
１６、３６ ＲＡＭ
１６１ 客画像メモリ
３６１ 車両画像メモリ
１７、３７ 記録部
１７１、３７１ 条件データ格納部
１７２ 条件画像格納部
３７２ 管理係員端末テーブル
１８、３８ バス
２０ 店員端末
４０ａ、４０ｂ 係員端末
５０ バックヤード端末
５１ ＣＰＵ
５２ 入力部
５３ 表示部
５４ カメラ・スピーカ接続部
５５ 通信部
５６ ＲＡＭ
５７ 記録部
５７１ 音声メッセージ
５８ 音声入力部
５９ 音声合成部
６０ バス
Claims (6)
- 入場者の様子を撮影する撮影手段と、
前記入場者が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像を予め記憶する記憶手段と、
前記撮影手段に撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と前記記憶手段に記憶された条件データ又は条件画像に基づいて、前記入場者に補助が必要であるか否かを判断する判断手段と、
前記判断手段により補助が必要であると判断された場合に報知する報知手段と、
を備えたことを特徴とする画像データ処理システム。 - 前記記憶手段は、前記入場者が健常者であるか否かを判断するための条件データを予め記憶し、
前記判断手段は、前記撮影手段に撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と前記記憶手段に記憶された条件データ又は条件画像に基づいて、前記入場者が健常者であるか否かを判断し、
前記報知手段は、前記判断手段により前記入場者が健常者ではないと判断された場合に、報知することを特徴とする請求項１に記載の画像データ処理システム。 - 前記判断手段により前記入場者が健常者ではないと判断された場合に、所定の取引処理を行う取引処理手段を備えたことを特徴とする請求項２に記載の画像データ処理システム。
- 前記撮影手段は、駐車場の様子を撮影し、
前記記憶手段は、誘導を必要とする運転状態であるか否かを判断するための条件データ又は誘導を必要とする運転状態であるか否かを判断するための条件画像を予め記憶し、
前記判断手段は、前記撮影手段に撮影された画像データに含まれる車両画像を解析してその車両を運転している入場者の運転状態を取得し、前記取得された運転状態と前記記憶手段に記憶された条件データ又は条件画像に基づいて、前記入場者が誘導を必要とする運転者であるか否かを判断し、
前記報知手段は、前記判断手段により前記入場者が誘導を必要とする運転者であると判断された場合に、報知することを特徴とする請求項１に記載の画像データ処理システム。 - 前記判断手段により前記入場者が誘導を必要とする運転者であると判断された場合に、前記入場者に対する音声誘導を出力する音声誘導手段を備えたことを特徴とする請求項４に記載の画像データ処理システム。
- コンピュータに、
入場者の様子を撮影する機能と、
前記撮影された画像データに含まれる入場者の画像を解析してその入場者の動作状態を取得し、前記取得された動作状態と、予め記憶された、前記入場者の動作状態が補助を必要とする動作状態であるか否かを判断するための条件データ又は補助を必要とする動作状態であるか否かを判断するための条件画像とに基づいて、前記入場者に補助が必要であるか否かを判断する機能と、
前記判断により補助が必要であると判断された場合に報知する機能と、
を実現させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003099360A JP2004310197A (ja) | 2003-04-02 | 2003-04-02 | 画像データ処理システム及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003099360A JP2004310197A (ja) | 2003-04-02 | 2003-04-02 | 画像データ処理システム及びプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2004310197A true JP2004310197A (ja) | 2004-11-04 |
Family
ID=33463846
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003099360A Pending JP2004310197A (ja) | 2003-04-02 | 2003-04-02 | 画像データ処理システム及びプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2004310197A (ja) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013206338A (ja) * | 2012-03-29 | 2013-10-07 | Fujitsu Ltd | 応対支援システムおよび応対支援方法 |
| WO2015140953A1 (ja) * | 2014-03-19 | 2015-09-24 | 株式会社 テクノミライ | デジタルロス・デフェンスセキュリティシステム、方法及びプログラム |
| JP2016106301A (ja) * | 2016-01-12 | 2016-06-16 | 富士通株式会社 | 応対支援方法、応対支援装置および応対支援プログラム |
| JP2019101903A (ja) * | 2017-12-06 | 2019-06-24 | 本田技研工業株式会社 | 移動体情報管理装置及び移動体情報管理方法 |
| JPWO2021059526A1 (ja) * | 2019-09-27 | 2021-04-01 | ||
| US10984249B2 (en) | 2018-01-31 | 2021-04-20 | Canon Kabushiki Kaisha | Information processing apparatus, system, control method for information processing apparatus, and non-transitory computer readable storage medium |
| WO2021156920A1 (ja) * | 2020-02-03 | 2021-08-12 | 三菱電機株式会社 | 駐車場の管理システム |
-
2003
- 2003-04-02 JP JP2003099360A patent/JP2004310197A/ja active Pending
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013206338A (ja) * | 2012-03-29 | 2013-10-07 | Fujitsu Ltd | 応対支援システムおよび応対支援方法 |
| WO2015140953A1 (ja) * | 2014-03-19 | 2015-09-24 | 株式会社 テクノミライ | デジタルロス・デフェンスセキュリティシステム、方法及びプログラム |
| CN106104646A (zh) * | 2014-03-19 | 2016-11-09 | 株式会社技术未来 | 数字防丢失安防系统、方法和程序 |
| JP2016106301A (ja) * | 2016-01-12 | 2016-06-16 | 富士通株式会社 | 応対支援方法、応対支援装置および応対支援プログラム |
| JP2019101903A (ja) * | 2017-12-06 | 2019-06-24 | 本田技研工業株式会社 | 移動体情報管理装置及び移動体情報管理方法 |
| US10984249B2 (en) | 2018-01-31 | 2021-04-20 | Canon Kabushiki Kaisha | Information processing apparatus, system, control method for information processing apparatus, and non-transitory computer readable storage medium |
| JPWO2021059526A1 (ja) * | 2019-09-27 | 2021-04-01 | ||
| WO2021059526A1 (ja) * | 2019-09-27 | 2021-04-01 | 日本電気株式会社 | 情報処理装置、情報処理方法及び記録媒体 |
| JP7264265B2 (ja) | 2019-09-27 | 2023-04-25 | 日本電気株式会社 | 情報処理装置、情報処理方法及びプログラム |
| WO2021156920A1 (ja) * | 2020-02-03 | 2021-08-12 | 三菱電機株式会社 | 駐車場の管理システム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5666772B2 (ja) | 情報提供装置、情報提供方法及びプログラム | |
| JP5224360B2 (ja) | 電子広告装置、電子広告方法及びプログラム | |
| WO2002093487A1 (en) | Method and apparatus for assisting visitors in exhibition-like events using image-based crowd analysis | |
| JP6261197B2 (ja) | 表示制御装置、表示制御方法、及びプログラム | |
| JP5780348B1 (ja) | 情報提示プログラム及び情報処理装置 | |
| KR20070091555A (ko) | 검색 시스템, 촬상 장치, 데이터 보존 장치, 정보 처리장치, 촬상 화상 처리 방법, 정보 처리 방법, 및 프로그램 | |
| JP2011170565A (ja) | 顧客動向収集方法、装置及びプログラム | |
| JP5511035B2 (ja) | 広告配信対象者特定装置、および、広告配信装置 | |
| JP2004348618A (ja) | 顧客情報収集管理方法及びそのシステム | |
| JP2024015359A (ja) | 人物検出システム | |
| JP2007265290A (ja) | 待ち行列情報通知システム | |
| JP6744652B1 (ja) | 混雑情報報知システム | |
| US20160321618A1 (en) | System and method for recommending target locations | |
| WO2009142098A1 (ja) | 画像処理装置、カメラ、画像処理方法およびプログラム | |
| CN115516533A (zh) | 结账支付装置和结账支付系统 | |
| JP2004310197A (ja) | 画像データ処理システム及びプログラム | |
| JP2007011723A (ja) | 集計装置、集計方法、プログラム及び記録媒体 | |
| JP2010113691A (ja) | 行動分析装置及び行動分析方法並びにプログラム | |
| JP2018151840A (ja) | 照合システム、照合方法および照合プログラム | |
| US9851784B2 (en) | Movement line conversion and analysis system, method and program | |
| JP7505557B2 (ja) | 情報処理装置、顔認証促進システム、情報処理方法、プログラム | |
| WO2021241293A1 (ja) | 行動体特定システム | |
| JP2003208493A (ja) | 企業エントランスにおける自動受付に関する方法 | |
| JP7237871B2 (ja) | 対象検出方法 | |
| WO2020231211A1 (ko) | 행사 참여 유도 방법 및 시스템 |