JP4283080B2 - Image search system - Google Patents

Image search system Download PDF

Info

Publication number
JP4283080B2
JP4283080B2 JP2003346597A JP2003346597A JP4283080B2 JP 4283080 B2 JP4283080 B2 JP 4283080B2 JP 2003346597 A JP2003346597 A JP 2003346597A JP 2003346597 A JP2003346597 A JP 2003346597A JP 4283080 B2 JP4283080 B2 JP 4283080B2
Authority
JP
Japan
Prior art keywords
image
data
search
information
pos terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003346597A
Other languages
Japanese (ja)
Other versions
JP2005115504A (en
Inventor
稔浩 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MegaChips Corp
Original Assignee
MegaChips Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MegaChips Corp filed Critical MegaChips Corp
Priority to JP2003346597A priority Critical patent/JP4283080B2/en
Publication of JP2005115504A publication Critical patent/JP2005115504A/en
Application granted granted Critical
Publication of JP4283080B2 publication Critical patent/JP4283080B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

本発明は、店舗を撮影した画像の検索システムに関する。   The present invention relates to a search system for an image obtained by photographing a store.

コンビニエンスストア、スーパー、飲食店、電気店など様々な店舗において、商品の会計処理、飲食代の会計処理などがPOSターミナルを利用して行われる。商品を購入する客は、商品かごを持ってレジに向かう。そして、商品かごをレジカウンターに置いて店員によるレジ操作を待つ。あるいは、飲食を済ませた客は、伝票を持ってレジに向かう。そして、店員によるレジ操作を待つのである。   In various stores such as convenience stores, supermarkets, restaurants, electronics stores, etc., merchandise accounting processing, dining fee accounting processing, etc. are performed using the POS terminal. Customers who purchase products go to the cash register with a basket of products. Then, the product basket is placed at the cashier counter and waits for a cashier operation by the store clerk. Or the customer who finished eating and drinking goes to a cash register with a slip. Then, it waits for the cashier operation by the store clerk.

店員は、商品かごに入っている商品を1つづつキー操作しながらPOSターミナルに入力操作を行う。最近では殆どのPOSターミナルはバーコード読取機を備えており、レジ操作が簡便なものとなっている。あるいは、店員は、手書きあるいは印字された伝票を参照しながら、飲食代金をPOSターミナルに入力するのである。   The store clerk performs an input operation on the POS terminal while operating the products in the product basket one by one. Recently, most POS terminals are equipped with bar code readers, making cashier operation simple. Alternatively, the store clerk inputs the food and drink price into the POS terminal while referring to the handwritten or printed slip.

店員によるPOSターミナルへの入力操作が終了すると、客は代金を支払う。店員は代金をPOSターミナルのドロワに収納する。また、釣銭が必要な場合には、ドロワから現金を取り出し、客に釣銭を返す。   When the store clerk finishes the input operation to the POS terminal, the customer pays the price. The store clerk stores the money in the POS terminal drawer. When change is necessary, the cash is taken out from the drawer and returned to the customer.

以上のような一連の動作により会計処理が行われるが、この間、POSターミナルに入力された情報はジャーナルデータとして蓄積される。ジャーナルデータには、何時、どの商品が何個販売されたのか、合計金額はいくらであったか、釣銭はいくら返したか、といった情報が蓄積されている。   The accounting process is performed by the series of operations as described above. During this time, information input to the POS terminal is accumulated as journal data. The journal data stores information such as when and how many products were sold, how much the total amount was, and how much change was returned.

上記のように、POSターミナルはジャーナルデータを蓄積している。このデータを参照することによって、過去の取引履歴を知ることができる。また、ジャーナルデータを残すことで、誤ったレジ操作が行われた場合でも、後でミスの発生個所を特定することが可能である。また、不正な取引をある程度防止することが可能である。   As described above, the POS terminal stores journal data. By referring to this data, the past transaction history can be known. In addition, by leaving the journal data, it is possible to specify the location where a mistake has occurred later even if an erroneous registration operation is performed. It is also possible to prevent unauthorized transactions to some extent.

しかし、ジャーナルデータのみを参照しても、特定することのできない不正な取引がある。たとえば、店員が商品についてPOSターミナルに入力操作を行わず、現金のみを客から受け取ったとする。そして、この現金を店員がPOSターミナルに収納しなかった場合であっても、ジャーナルデータには何の記録も残らないだけである。   However, there are fraudulent transactions that cannot be identified by referring only to journal data. For example, it is assumed that a store clerk receives only cash from a customer without performing an input operation on a POS terminal for a product. Even if the cashier does not store the cash in the POS terminal, no record is left in the journal data.

そこで、本発明は前記問題点に鑑み、POSターミナルから取得可能な情報と、カメラによる撮影画像を利用して、適正な会計処理が行われることを確保するためのシステムを提供することを目的とする。   SUMMARY OF THE INVENTION In view of the above problems, the present invention has an object to provide a system for ensuring that proper accounting processing is performed using information that can be acquired from a POS terminal and an image captured by a camera. To do.

請求項記載の発明は、店舗の所定の領域を撮影する撮影手段と、前記撮影手段から出力された撮影時刻情報を含む画像データと、前記店舗に設置されたPOSターミナルが出力した操作時刻情報及びその操作内容を示す操作情報を含む操作履歴データとを蓄積するデータ記憶手段と、検索手段と、を備え、前記検索手段は、前記操作情報のいずれかを指定させる指定手段と、前記操作履歴データに含まれ前記指定手段によって指定された前記操作情報に対応する前記操作時刻情報と前記撮影時刻情報とを参照することにより、指定された前記操作情報が記録された時間帯の前記画像データを特定し、特定された前記画像データをディスプレイに表示する手段と、を含むことを特徴とする。 According to the first aspect of the present invention, there is provided imaging means for imaging a predetermined area of a store, image data including imaging time information output from the imaging means, and operation time information output from a POS terminal installed in the store. and a data storage means for storing the operation history data including operation information indicating the operation content, and a search means, said searching means, a designating means for designating any one of the previous Kimisao operation information, the by referring to the operation time information corresponding to the specified the operation information and the photographing time information by being included in the operation history data the designation unit, wherein the time period in which the operation information is specified is recorded Means for specifying image data and displaying the specified image data on a display.

請求項記載の発明は、請求項に記載の画像検索システムにおいて、前記データ記憶手段は、前記POSターミナルが出力した取引時刻情報を含む取引履歴データを蓄積する手段、を含み、前記検索手段は、前記データ記憶手段に蓄積されている前記操作時刻情報と前記取引時刻情報とを参照することにより、前記指定手段によって指定された操作情報が記録された時間帯の前記取引履歴データを特定し、特定された前記取引履歴データを前記ディスプレイに表示する手段、を含むことを特徴とする。 The invention of claim 2 wherein, in the image retrieval system according to claim 1, said data storage means includes means for storing transaction history data including transaction time information which the POS terminal is outputted, the searching means Refers to the operation time information and the transaction time information stored in the data storage means to identify the transaction history data in the time zone in which the operation information designated by the designation means is recorded. And means for displaying the identified transaction history data on the display.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記POSターミナルは、前記画像データの記録が行われていない状態で任意の入力操作が行われた際に開始情報を出力するとともに、所定の入力操作が行われた後所定時間経過後に終了情報を出力する手段、を含み、前記データ記憶手段は、前記開始情報を受信してから前記終了情報を受信するまで前記画像データを蓄積することを特徴とする。 According to a third aspect of the present invention, in the image search system according to any one of the first and second aspects, the POS terminal is subjected to an arbitrary input operation in a state where the image data is not recorded. Means for outputting start information at the same time and outputting end information after elapse of a predetermined time after a predetermined input operation is performed, wherein the data storage means receives the start information and then receives the end information. The image data is stored until the image is received.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記POSターミナルは、前記画像データの記録が行われていない状態で任意の入力操作が行われた際に開始情報を出力するとともに、所定の入力操作が行われた後所定時間経過後に終了情報を出力する手段、を含み、前記データ記憶手段は、前記開始情報を受信した時刻より所定時間前の時刻から前記終了情報を受信するまで前記画像データを蓄積することを特徴とする。 According to a fourth aspect of the present invention, in the image search system according to any one of the first and second aspects, the POS terminal is subjected to an arbitrary input operation in a state where the image data is not recorded. Means for outputting start information at the same time and outputting end information after elapse of a predetermined time after a predetermined input operation is performed, wherein the data storage means is a predetermined time before the time when the start information is received. The image data is stored from the time until the end information is received.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記撮影手段は、店舗に設置されたPOSターミナルを含む領域を撮影する手段、を含むことを特徴とする。 According to a fifth aspect of the present invention, in the image search system according to any one of the first to fourth aspects, the photographing means includes means for photographing an area including a POS terminal installed in a store. Features.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記撮影手段は、店舗に設置されたカウンターにおいて購入商品が載置される領域を撮影する手段、を含むことを特徴とする。 According to a sixth aspect of the present invention, in the image search system according to any one of the first to fourth aspects, the photographing unit photographs a region where the purchased product is placed at a counter installed in a store. , Including.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記撮影手段は、会計対象である伝票が載置される領域を撮影する手段、を含むことを特徴とする。 According to a seventh aspect, in the image retrieval system according to any one of claims 1 to 4, wherein the imaging means comprise means for imaging an area document is placed is placed the object It is characterized by.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記撮影手段は、複数の撮影手段を含み、前記データ記憶手段は、これら複数の撮影手段から出力された前記画像データをそれぞれ蓄積するものであり、前記検索手段は、検索結果としてそれぞれの前記画像データを前記ディスプレイに表示させることを特徴とする。 According to an eighth aspect of the present invention, in the image search system according to any one of the first to fourth aspects, the photographing unit includes a plurality of photographing units, and the data storage unit includes the plurality of photographing units. Each of the output image data is stored, and the search means displays each image data on the display as a search result.

請求項記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記データ記憶手段は、前記POSターミナルとはネットワークを介して接続されたデータ記憶装置に収容され、前記検索手段は、前記データ記憶装置とはネットワークを介して接続された検索端末に収容されており、前記検索手段は、ネットワーク経由で前記データ記憶手段にアクセスして検索処理を実行することを特徴とする。 According to a ninth aspect of the present invention, in the image search system according to any one of the first to eighth aspects, the data storage means is accommodated in a data storage device connected to the POS terminal via a network. The search means is accommodated in a search terminal connected to the data storage device via a network, and the search means accesses the data storage means via the network and executes search processing. Features.

請求項10記載の発明は、請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、前記データ記憶手段は、前記POSターミナルとはネットワークを介して接続されたデータ記憶装置が備えるリムーバブル記憶媒体であり、前記検索手段は、前記リムーバブル記憶媒体を挿入して前記リムーバブル記憶媒体に格納されたデータにアクセス可能な検索端末に収容され、前記検索端末に挿入された前記リムーバブル記憶媒体にアクセスして検索処理を実行することを特徴とする。 A tenth aspect of the present invention is the image search system according to any one of the first to eighth aspects, wherein the data storage means is provided in a data storage device connected to the POS terminal via a network. A storage medium, wherein the search means is accommodated in a search terminal capable of accessing the data stored in the removable storage medium by inserting the removable storage medium, and accesses the removable storage medium inserted in the search terminal Then, a search process is executed.

請求項11記載の発明は、請求項または請求項10に記載の画像検索システムにおいて、前記検索端末は、POSターミナル、を含むことを特徴とする。 According to an eleventh aspect of the present invention, in the image search system according to the ninth or tenth aspect , the search terminal includes a POS terminal.

請求項1ないし請求項11記載の発明は、店舗を撮影した画像データと、取引履歴あるいは操作履歴とを関連付けて参照する検索システムであり、過去の取引状態を把握し易くなり、店舗において適正な会計処理を行われることを確保することができる。 The invention according to claim 1 to claim 11 is a search system that refers to image data obtained by photographing a store and a transaction history or an operation history in association with each other. It is possible to ensure that accounting is performed.

{第1の実施の形態}
以下、図面を参照しつつ本発明の実施の形態について説明する。図1は、画像撮影、記録、検索を行うシステムの全体図である。第1の実施の形態は、たとえばコンビニエンスストアなどのレジで利用されるシステムである。レジカウンター40には、POSターミナル10が設置されている。POSターミナル10は、購買トランザクションを処理および記録する装置であり、各種キーで構成される入力部12および入力部12による操作内容や合計金額などを表示するディスプレイ11を備えている。また、入力部12には、図示せぬバーコード読取機が含まれる。なお、本実施の形態において、POSターミナル10は、レジスターとしての機能を備えている。
{First embodiment}
Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is an overall view of a system that performs image capturing, recording, and searching. The first embodiment is a system used at a cash register such as a convenience store. The cashier counter 40 is provided with a POS terminal 10. The POS terminal 10 is a device that processes and records purchase transactions, and includes an input unit 12 composed of various keys, and a display 11 that displays details of operations performed by the input unit 12, the total amount, and the like. The input unit 12 includes a bar code reader (not shown). In the present embodiment, the POS terminal 10 has a function as a register.

店員41は、レジカウンター40の内側でレジ操作などを行う。客42は、購入する商品43をレジカウンター40の上に置く。ここで、POSターミナル10の位置などから客42が商品43を載置する位置はある程度限られる。この商品43が載置される領域を領域44として図示している。   The store clerk 41 performs a cash register operation or the like inside the cash register counter 40. The customer 42 places the product 43 to be purchased on the cashier counter 40. Here, the position where the customer 42 places the product 43 is limited to some extent from the position of the POS terminal 10 or the like. An area where the product 43 is placed is illustrated as an area 44.

レジカウンター40の上方あるいは側方には、カメラ1,2が設置されている。カメラ1は、POSターミナル10を撮影するようにアングルが固定されている。カメラ1は、特に、POSターミナル10の入力部11や現金の出し入れが行われる場所が撮影されるように設定される。多くはPOSターミナル10の下部側にドロワ(金庫)が設けられているので、ドロワに対する現金の出し入れ操作が撮影可能にカメラ1が設置されている。   Cameras 1 and 2 are installed above or beside the cashier counter 40. The angle of the camera 1 is fixed so as to photograph the POS terminal 10. In particular, the camera 1 is set so that the input unit 11 of the POS terminal 10 and a place where cash is taken in and out are photographed. In many cases, since a drawer (safe) is provided on the lower side of the POS terminal 10, the camera 1 is installed so that cash can be taken in and out of the drawer.

また、カメラ2は、商品43が載置される領域44を中心として、店員41と客42を含むような領域を撮影するようにアングルが固定されている。この領域44は、店員41がたとえば、バーコード読取機を利用して商品43のバーコードを読み取る操作を行う領域も含まれている。   The angle of the camera 2 is fixed so that an area including the clerk 41 and the customer 42 is photographed around the area 44 where the product 43 is placed. The area 44 includes an area where the store clerk 41 performs an operation of reading the barcode of the product 43 by using, for example, a barcode reader.

カメラ1,2が撮影した画像データは、ケーブルを介してフォトジャーナルレコーダー20にリアルタイムで送信される。また、POSターミナル10とフォトジャーナルレコーダー20は、LAN6を介して接続されており、POSターミナル10とフォトジャーナルレコーダー20は、ネットワーク経由でデータの送受信を行うことが可能である。   Image data taken by the cameras 1 and 2 is transmitted to the photo journal recorder 20 in real time via a cable. In addition, the POS terminal 10 and the photo journal recorder 20 are connected via the LAN 6, and the POS terminal 10 and the photo journal recorder 20 can transmit and receive data via a network.

図2は、POSターミナル10およびフォトジャーナルレコーダー20の機能ブロック図である。各種キーおよびバーコード読取機などを備える入力部12において、購入する商品43の情報が入力されると、これらの情報がディスプレイ11に表示されるとともに、制御部13は、売上会計処理を実行する。売上会計処理とは売上合計金額の計算、釣銭の計算などを含む。また、制御部13が、取引履歴データであるジャーナルデータJDを記憶装置に蓄積する。ある客についての全ての会計が終了すると、ジャーナルデータJDに基づいて図示せぬ出力部よりレシートが出力される。また、記憶されたジャーナルデータJDは、通信部14を介してリアルタイムでフォトジャーナルレコーダー20に送信される。   FIG. 2 is a functional block diagram of the POS terminal 10 and the photojournal recorder 20. When information on the product 43 to be purchased is input in the input unit 12 including various keys and a barcode reader, the information is displayed on the display 11 and the control unit 13 executes sales accounting processing. . Sales accounting processing includes calculation of the total sales amount, calculation of change, and the like. Moreover, the control part 13 accumulate | stores the journal data JD which is transaction history data in a memory | storage device. When all the accounts for a certain customer are completed, a receipt is output from an output unit (not shown) based on the journal data JD. The stored journal data JD is transmitted to the photo journal recorder 20 via the communication unit 14 in real time.

また、入力部12を用いて行われた全ての操作に関する情報は、操作履歴データPDとして記憶装置に格納される。操作履歴データPDは、各種キーが選択操作されるごとに、あるいは、バーコード読取機によって読取操作が行われるごとに、全ての操作内容が操作時刻情報とともに逐次記録されたものである。従って、いったん行った操作は取り消し操作を行っても必ず操作履歴データPDに記録されることになる。記憶された操作履歴データPDは、通信部14を介してリアルタイムでフォトジャーナルレコーダー20に送信される。   Information regarding all operations performed using the input unit 12 is stored in the storage device as operation history data PD. The operation history data PD is a record in which all operation contents are sequentially recorded together with operation time information every time various keys are selected or each time a reading operation is performed by a barcode reader. Therefore, once an operation is performed, the operation history data PD is always recorded even if a cancel operation is performed. The stored operation history data PD is transmitted to the photo journal recorder 20 via the communication unit 14 in real time.

記録指示部15は、入力部12における操作入力を監視して、画像データの記録タイミングを指示する機能部である。画像データの記録操作が行われていない状態で、入力部12によりいずれかの入力操作が行われた場合には、記録指示部15は、通信部14を介してフォトジャーナルレコーダー20に対して画像記録の開始情報を送信する。一方、所定の入力操作が行われた後、所定時間経過後に、記録指示部15は、通信部14を介してフォトジャーナルレコーダー20に対して画像記録の終了情報を送信する。たとえば、レジ操作の最後に、"合計"キーが選択された後、30秒経過後に終了情報を送信する。   The recording instruction unit 15 is a functional unit that monitors the operation input in the input unit 12 and instructs the recording timing of the image data. When any input operation is performed by the input unit 12 in a state where the image data recording operation is not performed, the recording instruction unit 15 sends an image to the photojournal recorder 20 via the communication unit 14. Send recording start information. On the other hand, after a predetermined input operation has been performed, the recording instruction unit 15 transmits image recording end information to the photojournal recorder 20 via the communication unit 14 after a predetermined time has elapsed. For example, after the “total” key is selected at the end of the cash register operation, the end information is transmitted 30 seconds later.

フォトジャーナルレコーダー20は、画像入力部21によりカメラ1,2から出力される画像データを受信する。受信した画像データは、画像処理部22において圧縮処理などが行われ、メモリ25に格納される。メモリ25は、画像処理部22より受け取った所定フレーム数の画像データを格納可能としている。たとえば、メモリ25には、10秒前の画像データ(画像フレーム)から最新の画像データ(画像フレーム)までが格納される。   The photojournal recorder 20 receives image data output from the cameras 1 and 2 by the image input unit 21. The received image data is compressed in the image processing unit 22 and stored in the memory 25. The memory 25 can store image data of a predetermined number of frames received from the image processing unit 22. For example, the memory 25 stores from the image data (image frame) 10 seconds ago to the latest image data (image frame).

そして、記録部24により画像記録処理が行われると、メモリ25に格納されている画像データが順次、記憶装置5に画像データVDとして蓄積されるのである。記録部24は、POSターミナル10より受信した画像記録の開始情報および終了情報に基づいて画像記録の開始および停止制御を行う。   When the image recording process is performed by the recording unit 24, the image data stored in the memory 25 is sequentially stored as image data VD in the storage device 5. The recording unit 24 performs image recording start and stop control based on the image recording start information and end information received from the POS terminal 10.

第1の方法としては、記録部24は、開始情報を受け取った時点から画像データVDの記録を開始し、終了情報を受け取った時点で画像データVDの記録を終了する。第2の方法としては、記録部24は、開始情報を受け取った時点から所定時間遡った時点から画像データVDの記録を開始し、終了情報を受け取った時点で画像データVDの記録を終了する。記録部24は、メモリ25に格納されている画像データの分だけ過去に遡って画像を記録することが可能である。たとえば、メモリ25に10秒間の画像データがバッファリングされている場合には、10秒前に遡って画像データの記録を開始することが可能である。このように、第1の方法によれば、レジ操作を行っている間だけ画像の記録を行うので、不要な画像データVDの記録を行うことなく、記憶領域を節約することが可能である。第2の方法によれば、記憶領域の節約を行いながら、過去に遡って記録を開始するので、レジ操作直前の状態を確認することが可能である。   As a first method, the recording unit 24 starts recording the image data VD from the time when the start information is received, and ends the recording of the image data VD when the end information is received. As a second method, the recording unit 24 starts recording the image data VD from a time point that is a predetermined time after receiving the start information, and ends recording the image data VD when the end information is received. The recording unit 24 can record images retroactively by the amount of image data stored in the memory 25. For example, when image data for 10 seconds is buffered in the memory 25, recording of image data can be started retroactively 10 seconds ago. As described above, according to the first method, since the image is recorded only during the registration operation, it is possible to save the storage area without recording the unnecessary image data VD. According to the second method, recording is started retroactively while saving the storage area, so it is possible to check the state immediately before the registration operation.

また、前述したように、画像記録の終了情報は、所定の入力操作が行われた後、所定時間経過後に送信される。したがって、レジ操作が終了した後、店員41と客42との間で現金の受け渡しを行っている場合にも画像データVDが記録されるので、一連の会計動作の一部始終を画像として蓄積することが可能である。   Further, as described above, the image recording end information is transmitted after a predetermined time has elapsed after a predetermined input operation has been performed. Therefore, after the cash register operation is completed, the image data VD is recorded even when cash is being transferred between the store clerk 41 and the customer 42. Therefore, a part of the entire accounting operation is accumulated as an image. It is possible.

ここで、記憶装置5に格納される画像データVDのうち、カメラ1より受信した画像データVDをレジ画像データVD1、カメラ2より受信した画像データVDをカウンタ画像データVD2とする。   Here, among the image data VD stored in the storage device 5, the image data VD received from the camera 1 is referred to as registration image data VD1, and the image data VD received from the camera 2 is referred to as counter image data VD2.

本実施の形態において、記憶装置5は、フォトジャーナルレコーダー20に着脱可能なリムーバブルメディアである。記憶装置5としては、たとえば、コンパクトフラッシュ(R)が利用可能である。   In the present embodiment, the storage device 5 is a removable medium that can be attached to and detached from the photojournal recorder 20. As the storage device 5, for example, a compact flash (R) can be used.

前述したように、POSターミナル10からはジャーナルデータJDと操作履歴データPDが送信される。記録部24は、通信部23を介して受信したジャーナルデータJDと操作履歴データPDを順次記憶装置5に記録する。   As described above, the journal data JD and the operation history data PD are transmitted from the POS terminal 10. The recording unit 24 sequentially records the journal data JD and the operation history data PD received via the communication unit 23 in the storage device 5.

このようにして、フォトジャーナルレコーダー20の記憶装置5には、カメラ1が撮影したレジ画像データVD1と、カメラ2が撮影したカウンタ画像データVD2と、POSターミナル10において処理された取引履歴を記録したジャーナルデータJDと、POSターミナル10において行われた全ての操作履歴を記録した操作履歴データPDが蓄積されるのである。   In this manner, the registration device image data VD1 photographed by the camera 1, the counter image data VD2 photographed by the camera 2, and the transaction history processed in the POS terminal 10 are recorded in the storage device 5 of the photo journal recorder 20. Journal data JD and operation history data PD in which all operation histories performed at the POS terminal 10 are recorded are accumulated.

次に、各データの内容について説明する。図3は、画像データVDの内容を模式的に示す図である。この図で示す画像データVDのフォーマットは、レジ画像データVD1およびカウンタ画像データVD2に共通である。画像データVDは、各時間において取得された画像フレームであり、各画像データVDは、ヘッダ部HPとデータ部DPとを含んでいる。そして、ヘッダ部HPには、この画像データVDが撮影された時刻情報が含まれている。   Next, the contents of each data will be described. FIG. 3 is a diagram schematically showing the contents of the image data VD. The format of the image data VD shown in this figure is common to the registration image data VD1 and the counter image data VD2. The image data VD is an image frame acquired at each time, and each image data VD includes a header part HP and a data part DP. The header portion HP includes time information when the image data VD is captured.

図4は、ジャーナルデータJDの内容を示す図である。ジャーナルデータJDは、図に示すように、複数の項目についての情報を含んでいる。「取引No情報」とは、1つの取引単位ごとに採番される番号である。この取引単位とはレシートが発行される単位である。「取引日時情報」とは、取引が行われた年月、時間を示す情報である。「商品別取引情報」は、さらに複数の情報を含んでいる。「商品別取引情報」は、販売した商品の商品No、販売した商品の個数、販売した商品別の合計金額を示す情報などが含まれる。「清算情報」とは、全ての販売商品の合計金額、受け取った現金を示す情報、釣銭の額を含んでいる。「レジ情報」とは、複数台のレジが設置されている場合にレジを特定する情報や、レジ操作を行った店員41の識別番号、レジ操作を行った店員41の氏名などを含んでいる。「顧客情報」とは、買い物を行った客42の年齢範囲、性別などを含む情報である。   FIG. 4 is a diagram showing the contents of the journal data JD. As shown in the figure, the journal data JD includes information on a plurality of items. "Transaction No information" is a number assigned for each transaction unit. This transaction unit is a unit in which a receipt is issued. “Transaction date / time information” is information indicating the date and time when the transaction was performed. The “product-specific transaction information” further includes a plurality of pieces of information. “Product-specific transaction information” includes information indicating the product number of the sold product, the number of products sold, the total price for each product sold, and the like. The “clearing information” includes the total amount of all sales items, information indicating the received cash, and the amount of change. “Registration information” includes information for identifying a cash register when a plurality of cash registers are installed, an identification number of the clerk 41 who performed the cash register operation, a name of the clerk 41 who performed the cash register operation, and the like. . “Customer information” is information including the age range, sex, and the like of the customer 42 who made the purchase.

図5は、操作履歴データPDの内容を示す図である。操作履歴データPDは、操作が行われた年月、時間を示す「操作日時情報」、操作が行われたキーの種別を示す「操作キー情報」が含まれている。また、バーコード読取機による操作も「操作キー情報」として記録される。   FIG. 5 is a diagram showing the contents of the operation history data PD. The operation history data PD includes “operation date / time information” indicating the year and month when the operation was performed, and “operation key information” indicating the type of the key on which the operation was performed. Further, the operation by the bar code reader is also recorded as “operation key information”.

フォトジャーナルレコーダー20の記憶装置5には、以上説明したような画像データVDとジャーナルデータJDと操作履歴データPDとが記録される。そして、これら各データは時間情報に基づいて関連付けられる。すなわち、画像データVDには、ヘッダ部HPに「撮影時刻情報」が記録されており、ジャーナルデータJDには「取引日時情報」が記録されており、操作履歴データPDには「操作日時情報」が記録されているからである。したがって、記憶装置5をデータベースとして利用することにより、画像データVDとジャーナルデータJDと操作履歴データPDを相互に検索することが可能である。たとえば、操作履歴データPDに基づいて同じ時間帯に撮影された画像データVDを検索することや、ジャーナルデータJD(取引履歴情報)に基づいて同じ時間帯に撮影された画像データVDを検索することなどが可能である。   In the storage device 5 of the photo journal recorder 20, the image data VD, the journal data JD, and the operation history data PD as described above are recorded. These data are associated with each other based on time information. That is, in the image data VD, “shooting time information” is recorded in the header part HP, “transaction date information” is recorded in the journal data JD, and “operation date information” is stored in the operation history data PD. It is because is recorded. Therefore, by using the storage device 5 as a database, the image data VD, journal data JD, and operation history data PD can be mutually searched. For example, searching image data VD photographed in the same time zone based on operation history data PD, or retrieving image data VD photographed in the same time zone based on journal data JD (transaction history information). Etc. are possible.

そして、上述したように、記憶装置5に蓄積される各データVD,JD,PDは、カメラ1,2からリアルタイムにフォトジャーナルレコーダー20に転送され、あるいは、POSターミナル10からリアルタイムにフォトジャーナルレコーダー20に転送される。そして、画像の圧縮処理などもフォトジャーナルレコーダー20において実行されるので、POSターミナル10に対する処理負荷を小さくしている。したがって、店舗の営業時間中においてPOSターミナル10が会計処理を行い際に、データベース作成処理等のためPOSターミナル10の処理負荷が大きくなることはない。   As described above, the data VD, JD, and PD stored in the storage device 5 are transferred from the cameras 1 and 2 to the photo journal recorder 20 in real time, or from the POS terminal 10 in real time. Forwarded to And since the image compression processing and the like are also executed in the photojournal recorder 20, the processing load on the POS terminal 10 is reduced. Therefore, when the POS terminal 10 performs the accounting process during the business hours of the store, the processing load on the POS terminal 10 does not increase due to the database creation process or the like.

次に、記憶装置5に格納されたデータを利用した検索処理について説明する。図6は、検索処理を行う検索端末30の機能ブロック図である。ここで、POSターミナル10あるいは図2で示したコンピュータ7またはコンピュータ9が検索端末30として動作することが可能である。したがって、POSターミナル10あるいはコンピュータ7,8が検索端末として動作するために必要な共通の機能部を図3に示している。なお、コンピュータ7は、LAN6を介してフォトジャーナルレコーダー20に接続されており、コンピュータ9は、LAN6および別のネットワーク8(インターネットなどの広域ネットワークを含む)を介してフォトジャーナルレコーダー20に接続されている。   Next, a search process using data stored in the storage device 5 will be described. FIG. 6 is a functional block diagram of the search terminal 30 that performs search processing. Here, the POS terminal 10 or the computer 7 or the computer 9 shown in FIG. 2 can operate as the search terminal 30. Therefore, FIG. 3 shows common functional units necessary for the POS terminal 10 or the computers 7 and 8 to operate as search terminals. The computer 7 is connected to the photo journal recorder 20 via the LAN 6, and the computer 9 is connected to the photo journal recorder 20 via the LAN 6 and another network 8 (including a wide area network such as the Internet). Yes.

POSターミナル10が検索端末30を兼ねている場合には、別個の検索端末を用意する必要はなく、営業時間終了後などに、POSターミナル10を検索端末30として利用することができる。また、店舗とは離れた遠隔地にある本部監視センタなどにおいては、コンピュータ9を検索端末として利用することが可能である。   When the POS terminal 10 also serves as the search terminal 30, it is not necessary to prepare a separate search terminal, and the POS terminal 10 can be used as the search terminal 30 after business hours have ended. In addition, the computer 9 can be used as a search terminal in a headquarters monitoring center located at a remote place away from the store.

検索端末30は、ディスプレイ31、入力部32、検索処理部33、カードI/F34、通信部35を備えている。入力部32は、各種キーやマウスなどから構成される。入力部32を操作して各種の検索処理指示が行われると、検索処理部33は、カードI/F34を介してカードスロットに挿入された記憶装置5にアクセスし、検索処理を実行する。あるいは、検索処理部33は、通信部35を介してフォトジャーナルレコーダー20に挿入されている記憶装置5にアクセスし、検索処理を実行する。また、検索処理部33は、検索結果をディスプレイ31に出力する機能や、各種の検索用画面をディスプレイ31に出力する機能を備える。   The search terminal 30 includes a display 31, an input unit 32, a search processing unit 33, a card I / F 34, and a communication unit 35. The input unit 32 includes various keys and a mouse. When various search processing instructions are performed by operating the input unit 32, the search processing unit 33 accesses the storage device 5 inserted into the card slot via the card I / F 34 and executes the search processing. Alternatively, the search processing unit 33 accesses the storage device 5 inserted in the photo journal recorder 20 via the communication unit 35 and executes the search process. In addition, the search processing unit 33 has a function of outputting search results to the display 31 and a function of outputting various search screens to the display 31.

したがって、POSターミナル10が検索端末30を兼ねている場合には、オペレータは、POSターミナル10の入力部12を操作して検索処理を実行することができる。そして、検索用画面や検索結果はPOSターミナル10のディスプレイ11に表示される。   Therefore, when the POS terminal 10 also serves as the search terminal 30, the operator can execute the search process by operating the input unit 12 of the POS terminal 10. The search screen and search results are displayed on the display 11 of the POS terminal 10.

図7は、検索端末30のディスプレイ31に表示される検索画面50の一例を示す図である。図で示すように、オペレータは、"取引No"、"取引日時"、"店員No"、"商品名"、"現金種別"、"レジNo"・・・などを指定することにより、検索処理を実行することが可能である。ここで、"取引No"には、取引ごとに付与されたNoが指定される。"取引日時"には、取引が行われた年月や時間が指定される。"店員No"には、レジを担当する店員にあらかじめ付与された番号、記号等が指定される。"商品名"としては、実際の商品名が指定される形態でもよいし、商品番号が指定される形態でもよい。"現金種別"とは、客が支払った現金の種別(千円札、5千円札、1万円札・・・など)が指定される。"レジNo"には、店舗に複数設置されたPOSターミナルの中で各POSターミナルを識別する番号、記号等が指定される。   FIG. 7 is a diagram illustrating an example of the search screen 50 displayed on the display 31 of the search terminal 30. As shown in the figure, the operator can search by specifying “transaction No.”, “transaction date / time”, “store clerk No”, “product name”, “cash type”, “cash register No”, etc. Can be performed. Here, “transaction No” is designated with No given for each transaction. In the “transaction date and time”, the date and time when the transaction was performed are specified. In “Clerk No”, a number, a symbol, or the like given in advance to the clerk in charge of the cash register is designated. The “product name” may be a form in which an actual product name is designated or a form in which a product number is designated. “Cash type” designates the type of cash paid by the customer (thousand-yen bill, 5,000-yen bill, 10,000-yen bill, etc.). In “Register No.”, a number, a symbol, and the like for identifying each POS terminal among the plurality of POS terminals installed in the store are designated.

ここで、検索条件である"取引No"、"取引日時"、"店員No"、"商品名"、"レジNo"は、ジャーナルデータJDに対応する情報が入力されているので、ジャーナルデータJDを検索することによって、該当情報を探すことができる。一方、検索条件である"現金種別"は、操作履歴データPDに対応する情報が入力されている。つまり、各現金種別に対応したキー操作(千円札キーなど)が行われることによって、現金種別が操作履歴データPDに記録されている。   Here, the search conditions “transaction No.”, “transaction date / time”, “store clerk No”, “product name”, and “registration No” are input with information corresponding to the journal data JD. The corresponding information can be searched by searching for. On the other hand, information corresponding to the operation history data PD is input to the “cash type” that is the search condition. That is, the cash type is recorded in the operation history data PD by performing a key operation (such as a thousand yen bill key) corresponding to each cash type.

検索画面50に検索条件が入力され、検索指示が行われると、図8で示すような検索結果画面60が表示される。図に示すように、検索結果画面60の上部には、取引Noが表示され、現在の表示内容が明確となるようにしている。画像表示領域61,62には、それぞれカメラ1,2の撮影した画像が表示されている。つまり、画像表示領域61にはレジ画像データVD1が表示され、画像表示領域62にはカウンタ画像データVD2が表示されている。   When a search condition is input to the search screen 50 and a search instruction is issued, a search result screen 60 as shown in FIG. 8 is displayed. As shown in the figure, a transaction number is displayed at the top of the search result screen 60 so that the current display content is clear. Images captured by the cameras 1 and 2 are displayed in the image display areas 61 and 62, respectively. That is, the registration image data VD1 is displayed in the image display area 61, and the counter image data VD2 is displayed in the image display area 62.

レシート表示領域63には、ジャーナルデータJDに基づいて作成されたレシートイメージが表示されている。レシート表示領域63には、ジャーナルデータJDをそのまま加工せずに表示させてもよいが、図で示したように、ジャーナルデータJDの表示レイアウトをレシートのレイアウトにあわせることで、確認作業を行い易いようにしている。図に表したレシートイメージの中で、「取引No.123456789」は、ジャーナルデータJDの「取引No情報」に対応し、「03年6月4日(水)09:18」は、「取引日時情報」に対応し、「りんご 012 ×1 250 牛乳 ・・・」は、「商品別取引情報」に対応し、「小計 ・・・ お釣 ¥215」は「清算情報」に対応し、「レジNo13 係員:376 田中」は「レジ情報」に対応している。なお、この図では顧客情報は表示されていないが、客の人数、性別等が表示される場合もある。   In the receipt display area 63, a receipt image created based on the journal data JD is displayed. In the receipt display area 63, the journal data JD may be displayed without being processed as it is, but as shown in the figure, the confirmation operation can be easily performed by matching the display layout of the journal data JD with the layout of the receipt. I am doing so. In the receipt image shown in the figure, “Transaction No. 123456789” corresponds to “Transaction No. Information” in the journal data JD, and “June 4, 2003 (Wednesday) 09:18” "Apple 012 × 1 250 Milk ..." corresponds to "Transaction information by product", "Subtotal ... Fishing ¥ 215" corresponds to "Clearing information", and "Register No13 Person in charge: 376 Tanaka "corresponds to" Register information ". In this figure, customer information is not displayed, but the number of customers, gender, and the like may be displayed.

操作履歴表示領域64には、操作履歴データPDが表示されている。操作履歴表示領域64は、表示領域641,642からなり、表示領域641には、操作履歴データPDの「操作日時情報」が表示され、表示領域642には、操作履歴データPDの「操作キー情報」が表示されている。   In the operation history display area 64, operation history data PD is displayed. The operation history display area 64 includes display areas 641 and 642. The display area 641 displays “operation date / time information” of the operation history data PD, and the display area 642 displays “operation key information” of the operation history data PD. Is displayed.

そして、この検索結果画面60に表示されている画像データVD1と画像データVD2とジャーナルデータJDと操作履歴データPDとは、それぞれ撮影時刻情報と取引日時情報と操作日時情報で関連付けられたものである。したがって、表示されているレシートイメージが発行された際の、カメラ画像が表示されるとともに、その際行われたキー操作内容が表示されているのである。   The image data VD1, image data VD2, journal data JD, and operation history data PD displayed on the search result screen 60 are associated with each other by shooting time information, transaction date information, and operation date information, respectively. . Therefore, the camera image when the displayed receipt image is issued is displayed and the contents of the key operation performed at that time are displayed.

また、検索結果画面60には、画像操作メニュー65が配置されている。この操作メニューを利用して、画像表示領域61,62に表示されている画像の再生、早送り、逆再生、巻き戻し、停止、一時停止などの操作を行うことができる。たとえば、取引単位で画像の頭出しを可能としておけば、取引の開始時点からの画像を参照する際に便利である。   Further, an image operation menu 65 is arranged on the search result screen 60. Using this operation menu, operations such as playback, fast forward, reverse playback, rewind, stop, pause, etc., of the images displayed in the image display areas 61 and 62 can be performed. For example, if it is possible to cue an image on a transaction basis, it is convenient when referring to an image from the start of the transaction.

さらに、この検索結果画面60は、検索画面としての機能も有する。第1に、操作履歴表示領域64に表示されている操作履歴の中で、オペレータはいずれかの操作履歴を選択することが可能である。この操作はキーボードやマウスを利用して行われる。図8において、網掛けされた部分は操作履歴の1つが選択された状態を示している。この操作に応答して、検索処理部33は検索処理を実行し、同じ時間帯の画像データVD1,VD2およびジャーナルデータJDを取得し、その結果を検索結果画面60に反映させるのである。このようにして、操作履歴データPDから画像データVD1,VD2やジャーナルデータJDを検索することが可能である。   Further, the search result screen 60 also has a function as a search screen. First, the operator can select any one of the operation histories displayed in the operation history display area 64. This operation is performed using a keyboard and a mouse. In FIG. 8, the shaded portion indicates a state in which one of the operation histories is selected. In response to this operation, the search processing unit 33 executes search processing, acquires image data VD1, VD2 and journal data JD in the same time zone, and reflects the results on the search result screen 60. In this way, the image data VD1, VD2 and journal data JD can be searched from the operation history data PD.

また、レシート表示領域63には、ジャーナルデータJDが取引No順に上下スクロール可能に表示されている。したがって、オペレータは、上下スクロール操作を行うことで、表示しているジャーナルデータJDを前後の取引Noのものに変更することが可能である。この操作に応答して、検索処理部33は検索処理を実行し、同じ時間帯の画像データVD1,VD2および操作履歴データPDを取得し、その結果を検索結果画面60に反映させるのである。このようにして、ジャーナルデータJDから画像データVD1,VD2や操作履歴データPDを検索することが可能である。   In the receipt display area 63, the journal data JD is displayed so as to be scrollable up and down in the order of transaction numbers. Therefore, the operator can change the displayed journal data JD to the previous and subsequent transaction Nos by performing an up / down scroll operation. In response to this operation, the search processing unit 33 executes search processing, acquires image data VD1, VD2 and operation history data PD in the same time zone, and reflects the results on the search result screen 60. In this way, the image data VD1, VD2 and operation history data PD can be searched from the journal data JD.

以上説明したように、本実施の形態によれば、画像データVDとジャーナルデータJDと操作履歴データPDを時間情報で関連付けて検索を行うので、同一時間帯における画像や取引情報を一覧することが可能であり、利便性がよい。   As described above, according to the present embodiment, the image data VD, the journal data JD, and the operation history data PD are associated with each other by the time information and the search is performed, so that images and transaction information in the same time zone can be listed. It is possible and convenient.

また、操作履歴データPDは、操作が行われた際にのみ記録されるが、画像データVDは、レジにおける取引単位の最初から最後まで継続的に記録されているので、キー操作とキー操作の間や、現金の受け渡しを行っている間など、キー操作が行われていない間の画像も参照することが可能である。   The operation history data PD is recorded only when the operation is performed, but the image data VD is continuously recorded from the beginning to the end of the transaction unit in the cash register. It is also possible to refer to an image while no key operation is being performed, such as during a cash exchange or during cash delivery.

{第2の実施の形態}
次に、本発明の第2の実施の形態について、図9ないし図11を参照しながら説明する。なお、第1の実施の形態と同様の機能、処理についての説明は省略し、第2の実施の形態の特徴部を中心に説明する。
{Second Embodiment}
Next, a second embodiment of the present invention will be described with reference to FIGS. Note that description of functions and processes similar to those of the first embodiment will be omitted, and description will be made with a focus on the features of the second embodiment.

第2の実施の形態は、たとえば、飲食店などの店舗で利用されるシステムである。飲食店では、第1の実施の形態のように、客42が商品を持ってレジカウンター40に来るということはない。飲食店では、食事を済ませた客42は、手書きや印字された伝票45を持ってレジカウンター40に来る。   The second embodiment is a system used in a store such as a restaurant. In the restaurant, unlike the first embodiment, the customer 42 does not come to the cashier counter 40 with a product. At the restaurant, the customer 42 who has finished the meal comes to the cashier 40 with a handwritten or printed slip 45.

そして、この実施の形態では、伝票45を撮影するカメラ3が設置されている。カメラ3もカメラ1と同様に、ケーブルを介してフォトジャーナルレコーダー20に接続されており、カメラ3で撮影した画像がフォトジャーナルレコーダー20にリアルタイムで転送されるようにしている。   In this embodiment, a camera 3 for photographing the slip 45 is installed. Similarly to the camera 1, the camera 3 is connected to the photo journal recorder 20 via a cable so that images taken by the camera 3 are transferred to the photo journal recorder 20 in real time.

図10に示すように、POSターミナル10の機能構成およびフォトジャーナルレコーダー20の機能構成も第1の実施の形態と同様である。ただし、記憶装置5には、カメラ3が撮影した画像データVDとして伝票画像データVD3が蓄積されている。したがって、カメラ3が撮影した画像も、第1の実施の形態と同様の処理が行われることによって、伝票画像データVD3として蓄積されるのである。また、伝票画像データVD3のフォーマットも、図3で示したものと同様である。   As shown in FIG. 10, the functional configuration of the POS terminal 10 and the functional configuration of the photojournal recorder 20 are the same as those in the first embodiment. However, the slip image data VD3 is stored in the storage device 5 as the image data VD captured by the camera 3. Therefore, the image captured by the camera 3 is also stored as the slip image data VD3 by performing the same processing as in the first embodiment. The format of the slip image data VD3 is the same as that shown in FIG.

このようにして、レジ画像データVD1と伝票画像データVD3とジャーナルデータJDと操作履歴データPDとが、時間情報によって関連付け可能な状態で蓄積されるのである。そして、このデータベースを利用して様々な検索処理を実行することが可能である。   In this way, the registration image data VD1, the slip image data VD3, the journal data JD, and the operation history data PD are accumulated in a state where they can be associated with each other by time information. Various search processes can be executed using this database.

図11は、検索結果画面70を示す図である。画像表示領域71には、カメラ1の撮影画像が表示されている。画像表示領域72には、カメラ3が撮影した伝票45の画像が表示されている。レシート表示領域73には、ジャーナルデータJDに基づいて生成されたレシートイメージが表示されている。操作履歴表示領域74は表示領域741,742からなり、表示領域741には、操作履歴データPDの「操作日時情報」が表示され、表示領域742には、「操作キー情報」が表示されている。画像操作メニュー75の内容は、図8で示した画像操作メニュー65と同様である。そして、画像データVD1,VD3とジャーナルデータJDと操作履歴データPDとの時間が関連付けられて、すなわち、同じ時間帯の画像とレシートイメージと操作履歴が表示されているので、同じ時間帯のこれらの情報を一覧して比較することが可能である。そして、第1の実施の形態と同様に各種の検索処理を実行して、所望の画像やジャーナルデータJD、操作履歴データPDを参照することが可能である。   FIG. 11 is a diagram showing the search result screen 70. In the image display area 71, a captured image of the camera 1 is displayed. In the image display area 72, an image of the slip 45 taken by the camera 3 is displayed. In the receipt display area 73, a receipt image generated based on the journal data JD is displayed. The operation history display area 74 is composed of display areas 741 and 742, the “operation date / time information” of the operation history data PD is displayed in the display area 741, and “operation key information” is displayed in the display area 742. . The contents of the image operation menu 75 are the same as those of the image operation menu 65 shown in FIG. The times of the image data VD1, VD3, the journal data JD, and the operation history data PD are associated with each other, that is, the images, receipt images, and operation histories of the same time zone are displayed. It is possible to list and compare information. In the same manner as in the first embodiment, various search processes can be executed to refer to a desired image, journal data JD, and operation history data PD.

特に、この実施の形態においては、伝票45をカメラ3で撮影するようにしているので、伝票45の内容と、ジャーナルデータJDや操作履歴データPDとの照合を容易に行うことが可能である。たとえば、伝票45の画像とジャーナルデータJDを比較することで、入力誤りなどを容易に見つけることが可能である。   In particular, in this embodiment, since the slip 45 is photographed by the camera 3, it is possible to easily collate the contents of the slip 45 with the journal data JD and the operation history data PD. For example, an input error or the like can be easily found by comparing the image of the slip 45 with the journal data JD.

{変形例}
上記第1または第2の実施の形態では、それぞれ2台のカメラを設置し、2台のカメラが撮影した画像を蓄積することとしたが、他の領域を撮影するカメラを増設し、増設したカメラが撮影した画像も蓄積するようにしてもよい。この場合にも、同様に、撮影時刻情報によってジャーナルデータJDや操作履歴データPDと関連付けることが可能である。あるいは、カメラを1台だけ設置する形態でもよい。たとえば、POSターミナル10を撮影するカメラのみを設置し、レジ画像データVD1のみをデータベースとして蓄積するようにしてもよい。
{Modifications}
In the first or second embodiment, two cameras are installed and images taken by the two cameras are stored. However, cameras that shoot other areas are added and added. Images taken by the camera may also be accumulated. Also in this case, similarly, it is possible to associate with the journal data JD and the operation history data PD by the photographing time information. Or the form which installs only one camera may be sufficient. For example, only a camera for photographing the POS terminal 10 may be installed, and only the registration image data VD1 may be stored as a database.

また、上記各実施の形態においては、レジカウンター40が1つの場合を例に説明したが、レジカウンター40が複数設置され、POSターミナル10が複数台稼動しているような場合でも、本発明を適用させることが可能である。この場合、全てのレジに関するジャーナルデータJDおよび操作履歴データPDや、全てのレジに関する画像データVDを1つのフォトジャーナルレコーダー20に蓄積するようにしてもよいが、複数台のフォトジャーナルレコーダー20を準備して、分散して蓄積するようにしてもよい。   Further, in each of the above embodiments, the case where there is one register counter 40 has been described as an example. However, the present invention can be applied even when a plurality of register counters 40 are installed and a plurality of POS terminals 10 are operating. It is possible to apply. In this case, journal data JD and operation history data PD regarding all the registries and image data VD regarding all the registries may be stored in one photo journal recorder 20, but a plurality of photo journal recorders 20 are prepared. Then, it may be distributed and accumulated.

また、上記各実施の形態においては、POSターミナル10において、キー操作が行われることをトリガとしてフォトジャーナルレコーダー20における記録処理を開始することとしているが、POSターミナル10周辺に人体検知センサを設け、店員41がPOSターミナル10周辺に近づいて、人体検知センサが人体を検知した際に、画像記録の開始情報を送出するようにしてもよい。そして、店員41がPOSターミナル10周辺から遠ざかり人体検知センサが人体を検知しなくなった際に、画像記録の終了情報を送出するようにすればよい。   In each of the above embodiments, the POS terminal 10 starts the recording process in the photojournal recorder 20 triggered by the key operation, but a human body detection sensor is provided around the POS terminal 10, When the clerk 41 approaches the vicinity of the POS terminal 10 and the human body detection sensor detects the human body, the start information of the image recording may be transmitted. Then, when the store clerk 41 moves away from the POS terminal 10 and the human body detection sensor no longer detects the human body, the image recording end information may be transmitted.

この場合にも、フォトジャーナルレコーダー20が開始情報を受信した時点より過去に遡って画像データVDを蓄積することにより、店員41がPOSターミナル10に近づく少し前の時間帯についても画像を参照することが可能である。また、終了情報を受信した後所定時間経過するまでは画像データVDを蓄積することにより、店員41がPOSターミナル10を離れた後の状況も把握することが可能である。   Also in this case, the image data VD is accumulated retroactively from the time when the photojournal recorder 20 receives the start information, so that the image can be referred to for a time zone just before the clerk 41 approaches the POS terminal 10. Is possible. Further, by accumulating the image data VD until a predetermined time elapses after receiving the end information, it is possible to grasp the situation after the clerk 41 leaves the POS terminal 10.

第1の実施の形態における画像撮影、記録、検索システムの全体図である。1 is an overall view of an image capturing, recording, and retrieval system according to a first embodiment. 第1の実施の形態におけるシステムの機能ブロック図である。It is a functional block diagram of the system in a 1st embodiment. 画像データのフォーマットを示す図である。It is a figure which shows the format of image data. ジャーナルデータの内容を示す図である。It is a figure which shows the content of journal data. 操作履歴データの内容を示す図である。It is a figure which shows the content of the operation history data. 検索端末の機能ブロック図である。It is a functional block diagram of a search terminal. 検索画面を示す図である。It is a figure which shows a search screen. 検索結果画面を示す図である。It is a figure which shows a search result screen. 第2の実施の形態における画像撮影、記録、検索システムの全体図である。It is a general view of the image photographing, recording, and retrieval system in the second embodiment. 第2の実施の形態におけるシステムの機能ブロック図である。It is a functional block diagram of a system in a 2nd embodiment. 検索結果画面を示す図である。It is a figure which shows a search result screen.

符号の説明Explanation of symbols

1,2,3 カメラ
5 記憶装置(リムーバブルメディア)
10 POSターミナル
20 フォトジャーナルレコーダー
40 レジカウンター
41 店員
42 客
JD ジャーナルデータ
PD 操作履歴データ
VD 画像データ

1, 2, 3 Camera 5 Storage device (removable media)
10 POS terminal 20 Photo journal recorder 40 Cash register counter 41 Clerk 42 Customer JD Journal data PD Operation history data VD Image data

Claims (11)

店舗の所定の領域を撮影する撮影手段と、
前記撮影手段から出力された撮影時刻情報を含む画像データと、前記店舗に設置されたPOSターミナルが出力した操作時刻情報及びその操作内容を示す操作情報を含む操作履歴データとを蓄積するデータ記憶手段と、
検索手段と、
を備え、
前記検索手段は、
前記操作情報のいずれかを指定させる指定手段と、
前記操作履歴データに含まれ前記指定手段によって指定された前記操作情報に対応する前記操作時刻情報と前記画像データに含まれる前記撮影時刻情報とを参照することにより、指定された前記操作情報が記録された時間帯の前記画像データを特定し、特定された前記画像データをディスプレイに表示する手段と、
を含むことを特徴とする画像検索システム。
Photographing means for photographing a predetermined area of the store;
Data storage means for storing image data including photographing time information output from the photographing means and operation history data including operation time information output from a POS terminal installed in the store and operation information indicating the operation content. When,
Search means;
With
The search means includes
Specifying means for specifying any of the operation information ;
The specified operation information is recorded by referring to the operation time information corresponding to the operation information specified by the specifying means included in the operation history data and the shooting time information included in the image data. It has been to identify the image data of the time zone, and means for displaying the image data that is specific to the display,
An image search system comprising:
請求項1に記載の画像検索システムにおいて、
前記データ記憶手段は、
前記POSターミナルが出力した取引時刻情報を含む取引履歴データを蓄積する手段、
を含み、
前記検索手段は、
前記データ記憶手段に蓄積されている前記操作時刻情報と前記取引時刻情報とを参照することにより、前記指定手段によって指定された操作情報が記録された時間帯の前記取引履歴データを特定し、特定された前記取引履歴データを前記ディスプレイに表示する手段、
を含むことを特徴とする画像検索システム。
The image search system according to claim 1,
The data storage means is
It means for storing transaction history data including transaction time information which the POS terminal is outputted,
Including
The search means includes
Wherein by referring to the operation time information which is stored and said transaction time information in the data storage means to identify the transaction history data of the time the operation information specified is recorded zone by said designating means, especially Means for displaying the determined transaction history data on the display;
An image search system comprising:
請求項1ないし請求項2のいずれかに記載の画像検索システムにおいて、
前記POSターミナルは、
前記画像データの記録が行われていない状態で任意の入力操作が行われた際に開始情報を出力するとともに、所定の入力操作が行われた後所定時間経過後に終了情報を出力する手段、
を含み、
前記データ記憶手段は、前記開始情報を受信してから前記終了情報を受信するまで前記画像データを蓄積することを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 2,
The POS terminal is
Means for outputting start information when an arbitrary input operation is performed in a state where recording of the image data is not performed, and outputting end information after elapse of a predetermined time after the predetermined input operation is performed;
Including
The image storage system, wherein the data storage means accumulates the image data from when the start information is received until the end information is received .
請求項1ないし請求項2のいずれかに記載の画像検索システムにおいて、
前記POSターミナルは、
前記画像データの記録が行われていない状態で任意の入力操作が行われた際に開始情報を出力するとともに、所定の入力操作が行われた後所定時間経過後に終了情報を出力する手段、
を含み、
前記データ記憶手段は、前記開始情報を受信した時刻より所定時間前の時刻から前記終了情報を受信するまで前記画像データを蓄積することを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 2,
The POS terminal is
Means for outputting start information when an arbitrary input operation is performed in a state where recording of the image data is not performed, and outputting end information after elapse of a predetermined time after the predetermined input operation is performed;
Including
The image storage system, wherein the data storage means accumulates the image data from a time before a predetermined time before the start information is received until the end information is received .
請求項1ないし請求項4のいずれかに記載の画像検索システムにおいて、
前記撮影手段は、
店舗に設置されたPOSターミナルを含む領域を撮影する手段、
を含むことを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 4,
The photographing means includes
Means for photographing an area including a POS terminal installed in a store;
Image retrieval system, which comprises a.
請求項1ないし請求項4のいずれかに記載の画像検索システムにおいて、
前記撮影手段は、
店舗に設置されたカウンターにおいて購入商品が載置される領域を撮影する手段、
を含むことを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 4,
The photographing means includes
Means for photographing an area where purchased products are placed at a counter installed in a store;
Image retrieval system, which comprises a.
請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、
前記撮影手段は、
会計対象である伝票が載置される領域を撮影する手段、
を含むことを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 4 ,
The photographing means includes
Means for photographing an area where a slip to be accounted is placed ;
An image search system comprising:
請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、
前記撮影手段は、複数の撮影手段を含み、前記データ記憶手段は、これら複数の撮影手段から出力された前記画像データをそれぞれ蓄積するものであり、前記検索手段は、検索結果としてそれぞれの前記画像データを前記ディスプレイに表示させることを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 4 ,
The photographing means includes a plurality of photographing means, the data storage means accumulates the image data output from the plurality of photographing means, respectively, and the search means includes each of the images as a search result. An image search system , wherein data is displayed on the display .
請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、
前記データ記憶手段は、前記POSターミナルとはネットワークを介して接続されたデータ記憶装置に収容され、前記検索手段は、前記データ記憶装置とはネットワークを介して接続された検索端末に収容されており、前記検索手段は、ネットワーク経由で前記データ記憶手段にアクセスして検索処理を実行することを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 8 ,
The data storage means is accommodated in a data storage device connected to the POS terminal via a network, and the search means is accommodated in a search terminal connected to the data storage device via a network. The image search system is characterized in that the search means accesses the data storage means via a network and executes search processing .
請求項1ないし請求項のいずれかに記載の画像検索システムにおいて、
前記データ記憶手段は、前記POSターミナルとはネットワークを介して接続されたデータ記憶装置が備えるリムーバブル記憶媒体であり、前記検索手段は、前記リムーバブル記憶媒体を挿入して前記リムーバブル記憶媒体に格納されたデータにアクセス可能な検索端末に収容され、前記検索端末に挿入された前記リムーバブル記憶媒体にアクセスして検索処理を実行することを特徴とする画像検索システム。
The image search system according to any one of claims 1 to 8 ,
The data storage means is a removable storage medium provided in a data storage device connected to the POS terminal via a network, and the search means is inserted into the removable storage medium and stored in the removable storage medium An image search system , wherein a search process is executed by accessing the removable storage medium contained in a search terminal accessible to data and inserted in the search terminal .
請求項9または請求項10に記載の画像検索システムにおいて、
前記検索端末は、
POSターミナル、
を含むことを特徴とする画像検索システム。
The image search system according to claim 9 or 10 ,
The search terminal
POS terminal,
Image retrieval system, which comprises a.
JP2003346597A 2003-10-06 2003-10-06 Image search system Expired - Fee Related JP4283080B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003346597A JP4283080B2 (en) 2003-10-06 2003-10-06 Image search system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003346597A JP4283080B2 (en) 2003-10-06 2003-10-06 Image search system

Publications (2)

Publication Number Publication Date
JP2005115504A JP2005115504A (en) 2005-04-28
JP4283080B2 true JP4283080B2 (en) 2009-06-24

Family

ID=34539473

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003346597A Expired - Fee Related JP4283080B2 (en) 2003-10-06 2003-10-06 Image search system

Country Status (1)

Country Link
JP (1) JP4283080B2 (en)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8174579B2 (en) 2008-08-22 2012-05-08 Panasonic Corporation Related scene addition apparatus and related scene addition method
US20110063108A1 (en) 2009-09-16 2011-03-17 Seiko Epson Corporation Store Surveillance System, Alarm Device, Control Method for a Store Surveillance System, and a Program
JP5540620B2 (en) * 2009-09-16 2014-07-02 セイコーエプソン株式会社 Receipt printer, receipt printer control method and program
US20110087535A1 (en) 2009-10-14 2011-04-14 Seiko Epson Corporation Information processing device, information processing system, control method for an information processing device, and a program
JP5540645B2 (en) * 2009-10-15 2014-07-02 セイコーエプソン株式会社 Information processing apparatus, information processing apparatus control method, and program
JP2011118583A (en) 2009-12-02 2011-06-16 Seiko Epson Corp Injustice degree calculation device, method for controlling injustice degree calculation device and program
JP5754218B2 (en) * 2011-04-11 2015-07-29 カシオ計算機株式会社 SEARCH DEVICE, SEARCH METHOD, AND PROGRAM
JP5311239B2 (en) 2011-06-17 2013-10-09 カシオ計算機株式会社 Sales data processing apparatus and program
JP5316971B2 (en) 2011-06-28 2013-10-16 カシオ計算機株式会社 Transaction processing apparatus and program
JP5757183B2 (en) * 2011-07-22 2015-07-29 カシオ計算機株式会社 Sales data processing apparatus and program
JP5772360B2 (en) * 2011-08-03 2015-09-02 カシオ計算機株式会社 Terminal monitoring apparatus, terminal monitoring system, and program
JP2013054653A (en) * 2011-09-06 2013-03-21 Toshiba Tec Corp Sales data processor and program
JP5673743B2 (en) * 2013-06-28 2015-02-18 カシオ計算機株式会社 Data processing apparatus and program
JP5733346B2 (en) * 2013-07-09 2015-06-10 カシオ計算機株式会社 Data processing apparatus and program
JP6210811B2 (en) * 2013-09-24 2017-10-11 株式会社ブレイン Store system and complaint processing method in store system
JP2014157630A (en) * 2014-05-23 2014-08-28 Toshiba Tec Corp Sales data processor and program
JP6417752B2 (en) * 2014-06-30 2018-11-07 キヤノンマーケティングジャパン株式会社 Network camera system, information processing method, program
JP6266548B2 (en) * 2015-02-09 2018-01-24 東芝テック株式会社 Checkout system and control program
JP6164243B2 (en) * 2015-04-06 2017-07-19 カシオ計算機株式会社 Transaction management apparatus and program
JP2015215928A (en) * 2015-09-02 2015-12-03 東芝テック株式会社 Sales data processor and program
JP6314185B2 (en) * 2016-08-19 2018-04-18 東芝テック株式会社 Sales data processing apparatus and program
JP6764737B2 (en) * 2016-09-16 2020-10-07 東芝テック株式会社 Information processing equipment and programs
JP6382389B2 (en) * 2017-04-25 2018-08-29 東芝テック株式会社 Information processing apparatus and information processing program
JP6498333B1 (en) * 2017-11-16 2019-04-10 有限会社起福 Visitor recording system, computer program, human detection unit, and visitor recording system construction kit
JP6442035B2 (en) * 2017-12-20 2018-12-19 東芝テック株式会社 Checkout system, information processing apparatus, and control program
JP6568271B2 (en) * 2018-08-01 2019-08-28 東芝テック株式会社 Information processing apparatus and information processing program
JP6725853B2 (en) * 2018-10-11 2020-07-22 キヤノンマーケティングジャパン株式会社 Network camera system, information processing method, program
JP7271022B2 (en) * 2020-11-25 2023-05-11 株式会社寺岡精工 Registration device, system and program
JP7429336B1 (en) 2023-05-11 2024-02-08 株式会社Retail AI In-store management system

Also Published As

Publication number Publication date
JP2005115504A (en) 2005-04-28

Similar Documents

Publication Publication Date Title
JP4283080B2 (en) Image search system
JP4509655B2 (en) Image recording system
JP5915851B2 (en) Accounting management system and cash register system
US10192208B1 (en) Systems and methods for an improved self-checkout with loss prevention options
US20040111324A1 (en) Integrated point-of-sale and surveillance system
US8744984B2 (en) Information terminal and control method that stores image time series data related to sales of commodities along with sales totals
JP5499616B2 (en) Information processing apparatus, information processing apparatus control method, and program
US20160300247A1 (en) Sales data processing apparatus, server and method for acquiring attribute information
JP5540645B2 (en) Information processing apparatus, information processing apparatus control method, and program
JP6967886B2 (en) Checkout device and checkout system
JP2016038771A (en) Accounting system, information processing method and processing device
JP6557702B2 (en) Customer analysis system
JP2002032553A (en) System and method for management of customer information and computer readable recording medium with customer information management program recorded therein
JP6387821B2 (en) Product registration device, product registration method, and product image providing system
JP5802712B2 (en) Information processing apparatus and program
US20090192905A1 (en) Self service order processing system and method with a remote receipt printer
JP5482079B2 (en) Receipt printer, receipt printer control method and program
TWI760521B (en) Smart store shopping system and purchasing method using thereof
US20110315764A1 (en) Code reading apparatus and code reading method
JP7366099B2 (en) Monitoring equipment and programs
JP2000172952A (en) Cash register and its transaction information recording method
JP2022127013A (en) Self-checkout system and program
JP2022110707A (en) Monitoring device, monitoring system, and monitoring method
JP2006126926A (en) Customer data generation system, program and method
JP2000113322A (en) Cash register, pos system and control method therefor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060925

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20061010

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20061102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070109

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070313

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090318

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120327

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130327

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130327

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160327

Year of fee payment: 7

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees