JP2016012869A - Network camera system, information processing method and program - Google Patents

Network camera system, information processing method and program Download PDF

Info

Publication number
JP2016012869A
JP2016012869A JP2014134428A JP2014134428A JP2016012869A JP 2016012869 A JP2016012869 A JP 2016012869A JP 2014134428 A JP2014134428 A JP 2014134428A JP 2014134428 A JP2014134428 A JP 2014134428A JP 2016012869 A JP2016012869 A JP 2016012869A
Authority
JP
Japan
Prior art keywords
network camera
camera system
moving image
still image
receipt
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014134428A
Other languages
Japanese (ja)
Other versions
JP2016012869A5 (en
JP6417752B2 (en
Inventor
佳之 若山
Yoshiyuki Wakayama
佳之 若山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Marketing Japan Inc
Canon IT Solutions Inc
Original Assignee
Canon Marketing Japan Inc
Canon IT Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Marketing Japan Inc, Canon IT Solutions Inc filed Critical Canon Marketing Japan Inc
Priority to JP2014134428A priority Critical patent/JP6417752B2/en
Publication of JP2016012869A publication Critical patent/JP2016012869A/en
Publication of JP2016012869A5 publication Critical patent/JP2016012869A5/ja
Application granted granted Critical
Publication of JP6417752B2 publication Critical patent/JP6417752B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a network camera system, an information processing method and a program, recording a state of money transfer at a register, capable of reducing a data amount of the record.SOLUTION: The communication network camera system images a moving image, acquires a notification that a receipt is issued by a register terminal, to generate moving image data by segmenting the imaged moving image on the basis of the acquired notification. Accounting processing related to the issue of the receipt is stored in association with the generated moving image data. A data capacity is reduced by setting the start timing of the accounting processing to be the start timing of the preservation of the moving image.

Description

本発明は、ネットワークカメラシステム、情報処理方法、プログラムに関する。   The present invention relates to a network camera system, an information processing method, and a program.

近年、防犯上の目的や、トラブル回避等を目的として、店内に監視カメラを設置し、店内の様子を撮影することが行われている。   In recent years, for the purpose of crime prevention and trouble avoidance, a surveillance camera is installed in a store and a state of the store is photographed.

特に、防犯上の目的の場合、お店の入口や、レジ周りを重点的に撮影できるよう、設定されている。   In particular, for security purposes, it is set so that it can focus on the entrance of the store and around the cash register.

特許文献1には、レジの金額表示部にカメラを備え、合計金額が表示されたタイミングで取引客を撮影する技術について記載がされている。   Japanese Patent Application Laid-Open No. 2004-133867 describes a technique for photographing a customer at a timing when a total amount is displayed, provided with a camera in the amount display portion of the cash register.

特開2000−99826号公報JP 2000-99826 A

上述の通り、小売店においてはレジ周りにおけるトラブルが多く、例えば客が支払った金額を誤って認識しお釣り金額を間違えたといったトラブルもある。   As described above, there are many troubles around the cash register in the retail store, for example, there is a trouble that the amount paid by the customer is mistakenly recognized and the change amount is wrong.

このようなトラブルを解決するためには、店と客との間でどのようなやり取り(金銭の授受)があったのかを確認する必要がある。   In order to solve such a trouble, it is necessary to confirm what kind of exchange (money exchange) has occurred between the store and the customer.

他方で、監視カメラで撮影した映像を全て記録し保存しておくのは、データ容量も膨大となり、現実的ではない。そのため、トラブル解決にとって不要なデータは残さず、必要なデータのみを残しておくことが望まれる。   On the other hand, it is not practical to record and store all the images taken by the surveillance camera because the data capacity becomes enormous. For this reason, it is desirable to leave only necessary data without leaving unnecessary data for troubleshooting.

そこで、本発明では、レジにおける金銭授受の様子を記録し、かつ当該記録のデータ量を低減させることができる仕組みを提供することを目的とする。   Therefore, an object of the present invention is to provide a mechanism that can record the state of money transfer at a cash register and reduce the data amount of the recording.

本発明のネットワークカメラシステムは、動画を撮影する撮影手段と、レジ端末によりレシート発行がされた通知を取得する取得手段と、前記撮影手段により撮影された動画を、前記取得手段により取得した通知に基づき区切ることで動画データを作成する作成手段と、前記レシート発行にかかる会計処理と、前記作成手段により作成された動画データとを対応付けて記憶する記憶手段と、を備えることを特徴とする。   The network camera system of the present invention includes a photographing unit that captures a moving image, an acquisition unit that acquires a notification that a receipt is issued by a cash register terminal, and a notification that the moving unit has captured the moving image captured by the photographing unit. It is characterized by comprising creation means for creating moving image data by dividing based on, accounting processing relating to the receipt issuance, and storage means for storing the moving image data created by the creation means in association with each other.

また、本発明は、ネットワークカメラシステムにおける情報処理方法であって、前記ネットワークカメラシステムの撮影手段が、動画を撮影する撮影工程と、前記ネットワークカメラシステムの取得手段が、レジ端末によりレシート発行がされた通知を取得する取得工程と、前記ネットワークカメラシステムの作成手段が、前記撮影工程により撮影された動画を、前記取得工程により取得した通知に基づき区切ることで動画データを作成する作成工程と、前記ネットワークカメラシステムの記憶手段が、前記レシート発行にかかる会計処理と、前記作成行程により作成された動画データとを対応付けて記憶する記憶工程と、を備えることを特徴とする。   The present invention is also an information processing method in a network camera system, in which a photographing step in which the photographing means of the network camera system photographs a moving image and an acquisition means of the network camera system are issued by a cashier terminal. The acquisition step of acquiring the notification, the creation unit of the network camera system creates the moving image data by dividing the moving image shot by the shooting step based on the notification acquired by the acquisition step, and The storage means of the network camera system includes a storage step of storing the accounting process related to the receipt issuance and the moving image data created by the creation process in association with each other.

また、本発明は、ネットワークカメラシステムにおいて実行可能なプログラムであって、前記ネットワークカメラシステムを、動画を撮影する撮影手段と、レジ端末によりレシート発行がされた通知を取得する取得手段と、前記撮影手段により撮影された動画を、前記取得手段により取得した通知に基づき区切ることで動画データを作成する作成手段と、前記レシート発行にかかる会計処理と、前記作成手段により作成された動画データとを対応付けて記憶する記憶手段として機能させることを特徴とする。   The present invention is also a program executable in a network camera system, wherein the network camera system includes a photographing unit that captures a moving image, an acquisition unit that acquires a notification that a receipt has been issued by a cash register terminal, and the photographing The creation means for creating the moving image data by dividing the moving image shot by the means based on the notification obtained by the obtaining means, the accounting process for issuing the receipt, and the moving picture data created by the creating means It is characterized by functioning as storage means for adding and storing.

本発明によれば、レジにおける金銭授受の様子を記録し、かつ当該記録のデータ量を低減させることが可能となる。   According to the present invention, it is possible to record the state of money transfer at the cash register and reduce the amount of data recorded.

本発明の情報処理システムの構成の一例を示す図The figure which shows an example of a structure of the information processing system of this invention レジ端末101、表示端末103のハードウエア構成の一例を示す図The figure which shows an example of the hardware constitutions of the cash register terminal 101 and the display terminal 103 ネットワークカメラ102のハードウエア構成の一例を示す図The figure which shows an example of the hardware constitutions of the network camera 102 動画抽出、保存処理の一例を示すフローチャートFlow chart showing an example of video extraction and storage processing 静止画取得処理の一例を示すフローチャートFlow chart showing an example of still image acquisition processing 動画・静止画表示処理の一例を示すフローチャートFlow chart showing an example of video / still image display processing 第2の実施形態における動画、静止画の保存処理を示すフローチャートThe flowchart which shows the preservation | save process of the moving image and still image in 2nd Embodiment 表示端末に動画・静止画が表示されたイメージを示す図The figure which shows the image where the animated picture and the still picture are displayed on the display terminal 店舗における代金支払いの様子を表す図A figure showing the state of payment at a store 静止画取得条件の一例を説明する図The figure explaining an example of still picture acquisition conditions レジ端末におけるイベントが登録されたテーブルの一例An example of a table in which events at cash register terminals are registered 動画ファイル、静止画ファイルと識別情報が対応付けて登録されたテーブルの一例An example of a table in which moving image files, still image files and identification information are registered in association with each other

図1を用いて、本発明の情報処理システムの概要を説明する。   The outline of the information processing system of the present invention will be described with reference to FIG.

本発明の情報処理システムは、レジ端末101とネットワークカメラ102(撮像装置)と、表示端末103とを含む構成であり、レジ端末101とネットワークカメラ102とが通信可能に接続され、ネットワークカメラ102と表示端末103とが通信可能に接続されている。   The information processing system of the present invention includes a cash register terminal 101, a network camera 102 (imaging device), and a display terminal 103. The cash register terminal 101 and the network camera 102 are communicably connected to each other. A display terminal 103 is communicably connected.

ネットワークカメラ102において撮影された動画や静止画については、ネットワークカメラ102が備える記憶領域に記憶されても良いし、外部の記憶装置に記憶するよう制御してもよい。外部の記憶装置に記憶する場合は、ネットワークカメラ102と当該記憶装置とが通信可能に接続され、当該記憶装置に記憶された動画や静止画が表示端末103に表示される。   A moving image or a still image captured by the network camera 102 may be stored in a storage area included in the network camera 102 or may be controlled to be stored in an external storage device. When storing in an external storage device, the network camera 102 and the storage device are communicably connected, and a moving image or a still image stored in the storage device is displayed on the display terminal 103.

このように、動画撮影機能を備えるネットワークカメラ102と、記憶手段や動画の編集・分析等を行う機能を備える情報処理装置(不図示)を含むシステムを、ネットワークカメラシステムと呼ぶものとする。   In this way, a system including the network camera 102 having a moving image shooting function and an information processing apparatus (not shown) having a storage unit and a function of editing / analyzing a moving image is referred to as a network camera system.

次に、図2を用いて、図1に示したレジ端末101、表示端末103のハードウエア構成の一例について説明する。   Next, an example of a hardware configuration of the cash register terminal 101 and the display terminal 103 illustrated in FIG. 1 will be described with reference to FIG.

図2において、201はCPUで、システムバス204に接続される各デバイスやコントローラを統括的に制御する。また、ROM203あるいは外部メモリ211には、CPU201の制御プログラムであるBIOS(Basic Input / Output System)やオペレーティングシステムプログラム(以下、OS)や、各サーバ或いは各PCの実行する機能を実現するために必要な各種プログラム等が記憶されている。   In FIG. 2, reference numeral 201 denotes a CPU that comprehensively controls each device and controller connected to the system bus 204. Further, the ROM 203 or the external memory 211 is necessary to realize a BIOS (Basic Input / Output System) or an operating system program (hereinafter referred to as an OS) that is a control program of the CPU 201 and a function executed by each server or each PC. Various programs are stored.

202はRAMで、CPU201の主メモリ、ワークエリア等として機能する。CPU201は、処理の実行に際して必要なプログラム等をROM203あるいは外部メモリ211からRAM202にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。   A RAM 202 functions as a main memory, work area, and the like for the CPU 201. The CPU 201 implements various operations by loading a program necessary for execution of processing from the ROM 203 or the external memory 211 into the RAM 202 and executing the loaded program.

また、205は入力コントローラで、入力装置209等からの入力を制御する。206はビデオコントローラで、液晶ディスプレイ等のディスプレイ装置210への表示を制御する。なお、ディスプレイ装置は、液晶ディスプレイに限られず、CRTディスプレイなどであっても良い。これらは必要に応じてクライアントが使用するものである。   An input controller 205 controls input from the input device 209 or the like. A video controller 206 controls display on a display device 210 such as a liquid crystal display. The display device is not limited to a liquid crystal display, and may be a CRT display or the like. These are used by clients as needed.

207はメモリコントローラで、ブートプログラム,各種のアプリケーション,フォントデータ,ユーザファイル,編集ファイル,各種データ等を記憶するハードディスク(HD)や、フレキシブルディスク(FD)、或いはPCMCIAカードスロットにアダプタを介して接続されるコンパクトフラッシュ(登録商標)メモリ等の外部メモリ211へのアクセスを制御する。   A memory controller 207 is connected to the hard disk (HD), flexible disk (FD), or PCMCIA card slot for storing a boot program, various applications, font data, user files, editing files, various data, etc. via an adapter. The access to the external memory 211 such as a compact flash (registered trademark) memory is controlled.

208は通信I/Fコントローラで、ネットワーク(例えば、図1に示したLAN400)を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いた通信等が可能である。   A communication I / F controller 208 connects and communicates with an external device via a network (for example, the LAN 400 shown in FIG. 1), and executes communication control processing in the network. For example, communication using TCP / IP is possible.

なお、CPU201は、例えばRAM202内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、ディスプレイ装置210上での表示を可能としている。また、CPU201は、ディスプレイ装置210上の不図示のマウスカーソル等でのユーザ指示を可能とする。   Note that the CPU 201 enables display on the display device 210 by executing outline font rasterization processing on a display information area in the RAM 202, for example. Further, the CPU 201 enables a user instruction with a mouse cursor (not shown) on the display device 210.

ハードウエア上で動作する各種プログラムは、外部メモリ211に記録されており、必要に応じてRAM202にロードされることによりCPU201によって実行されるものである。   Various programs that operate on the hardware are recorded in the external memory 211 and are executed by the CPU 201 by being loaded into the RAM 202 as necessary.

プリンタコントローラ212は、サーマルドットライン方式プリンタ213等の印刷機を制御する。   The printer controller 212 controls a printing machine such as a thermal dot line type printer 213.

スキャナコントローラ214は、スキャナ215等の識別器を制御する。   The scanner controller 214 controls a discriminator such as the scanner 215.

なお、全ての装置がこれらの構成を備えているわけではなく、必要なものを備えていればよい。   It should be noted that not all apparatuses have these configurations, and it is only necessary to have necessary ones.

次に、図3を用いて、図1に示したネットワークカメラ102のハードウエア構成の一例について説明する。   Next, an example of the hardware configuration of the network camera 102 shown in FIG. 1 will be described with reference to FIG.

図3において、ネットワークカメラ102は、いわゆるデジタルビデオカメラ等から成り、撮影用のレンズ301、撮像素子(以下、「CCD」と称する)302、アナログ−デジタルコンバータ(以下、「ADC」と称する)303、画像処理部304、コントローラ310、バッファメモリ311、フラッシュROM312(記憶手段)、インターフェース回路(以下、「I/F回路」と称する)313、カードホルダ314、メモリーカード315(記憶手段)、ディスプレイドライバ316、USBドライバ318、および操作部320を備える。   In FIG. 3, the network camera 102 includes a so-called digital video camera or the like, and includes a photographing lens 301, an image sensor (hereinafter referred to as “CCD”) 302, and an analog-digital converter (hereinafter referred to as “ADC”) 303. , Image processor 304, controller 310, buffer memory 311, flash ROM 312 (storage means), interface circuit (hereinafter referred to as "I / F circuit") 313, card holder 314, memory card 315 (storage means), display driver 316, a USB driver 318, and an operation unit 320.

ネットワークカメラ102は、撮影ボタン323(シャッターボタン)の押下に応じて、画像を生成するものである。なお、本実施形態では、撮影ボタン323(シャッターボタン)の押下に従って撮影するように構成するが、撮影ボタン323(シャッターボタン)がなく、タッチパネル上で、ユーザから撮影指示がされた場合に撮影するようにすることも可能である。   The network camera 102 generates an image in response to pressing of the shooting button 323 (shutter button). In the present embodiment, the camera is configured to shoot when the shooting button 323 (shutter button) is pressed. However, there is no shooting button 323 (shutter button), and shooting is performed when a user gives a shooting instruction on the touch panel. It is also possible to do so.

レンズ301は、対物レンズ、ズームレンズ、およびフォーカスレンズなどで構成される。ズームレンズおよびフォーカスレンズについては、不図示の駆動機構により光軸方向へ駆動される。CCD302は、レンズ301を介して入射される光学画像を結像し、電気信号(アナログ信号)に変換して出力するCCDイメージセンサで構成される。ADC303は、CCD302から出力される電気信号(アナログ信号)をデジタル信号に変換する機能を有する。   The lens 301 includes an objective lens, a zoom lens, a focus lens, and the like. The zoom lens and the focus lens are driven in the optical axis direction by a driving mechanism (not shown). The CCD 302 is composed of a CCD image sensor that forms an optical image incident through the lens 301, converts it into an electrical signal (analog signal), and outputs the electrical signal. The ADC 303 has a function of converting an electrical signal (analog signal) output from the CCD 302 into a digital signal.

画像処理部304は、前処理部305、YC処理部306、電子ズーム処理部307、圧縮部308、および伸長部309を備え、ADC303から出力されるデジタル信号から画像データを生成し、各種画像処理を行う機能を有する。   The image processing unit 304 includes a preprocessing unit 305, a YC processing unit 306, an electronic zoom processing unit 307, a compression unit 308, and an expansion unit 309. The image processing unit 304 generates image data from the digital signal output from the ADC 303, and performs various image processing. It has a function to perform.

前処理部305は、入力される画像データに基づく画像のホワイトバランスを調整するホワイトバランス処理や画像のガンマ補正処理を行う機能を有する。ホワイトバランス処理は、画像の色合いを、実物の色合いに近くなるように調整したり、光源(蛍光灯や太陽光など)に合った適正な色に調整したりする処理である。ガンマ補正処理は、画像のコントラストを調整する処理である。なお、前処理部305は、ホワイトバランス処理およびガンマ補正処理以外の画像処理を実行することも可能である。   The pre-processing unit 305 has a function of performing white balance processing for adjusting the white balance of an image based on input image data and image gamma correction processing. The white balance process is a process of adjusting the color of an image so as to be close to the actual color, or adjusting the color to an appropriate color that matches a light source (such as a fluorescent lamp or sunlight). The gamma correction process is a process for adjusting the contrast of an image. Note that the pre-processing unit 305 can also perform image processing other than white balance processing and gamma correction processing.

YC処理部306は、入力される画像データに基づく画像を、輝度情報「Y」と、輝度信号と青色の色差情報「Cb」と、輝度信号と赤色の色差情報「Cr」とに分離する機能を有する。電子ズーム処理部307は、画像の一部(例えば中央部)を所定の大きさでトリミングし、トリミングした画像を信号処理で元画像の大きさに拡大する機能を有する。電子ズーム処理部307は、例えば、撮影された1600×1200ドットの画像から中央の1024×768ドットの画像を切り出し、データ補間を行いながら1600×1200ドットのサイズに拡大することができる。   The YC processing unit 306 has a function of separating an image based on input image data into luminance information “Y”, luminance signal and blue color difference information “Cb”, and luminance signal and red color difference information “Cr”. Have The electronic zoom processing unit 307 has a function of trimming a part of an image (for example, a central part) with a predetermined size and enlarging the trimmed image to the size of the original image by signal processing. For example, the electronic zoom processing unit 307 can extract a center image of 1024 × 768 dots from a captured image of 1600 × 1200 dots and enlarge the image to a size of 1600 × 1200 dots while performing data interpolation.

圧縮部308は、画像データをJPEG(Joint Photographic Expert Group)方式などの圧縮形式によって圧縮する機能を有する。伸長部309は、圧縮されている画像データを伸長する機能を有する。例えば、画像データをJPEG方式で圧縮する場合、まず、画像データの高周波成分と低周波成分の割合を数値化する離散コサイン変換処理が行われる(DCT処理)。次に、画像の階調やグラデーションを表現する段階を数値(量子化ビット数)で表現する量子化処理が行われる。最後に、ハフマン符号化処理で画像データが圧縮される。具体的には、画像データの信号文字列が一定のビット毎に区切られ、出現頻度が高い文字列に対してより短い符号が与えてられてゆく。なお、圧縮処理を行わないで画像データを記録する方式の場合は、圧縮部308および伸長部309を省略することができる。また、画像データの圧縮形式は、JPEG方式に限らず、GIF(Graphical Interchange Format)形式などであっても、同様に処理を行うことができる。   The compression unit 308 has a function of compressing image data by a compression format such as JPEG (Joint Photographic Expert Group). The decompression unit 309 has a function of decompressing compressed image data. For example, when compressing image data using the JPEG method, first, a discrete cosine transform process is performed (DCT process) that digitizes the ratio of high-frequency components and low-frequency components of image data. Next, a quantization process is performed for expressing the gradation or gradation of the image by a numerical value (quantization bit number). Finally, the image data is compressed by the Huffman encoding process. Specifically, the signal character string of the image data is segmented every certain bit, and a shorter code is given to a character string having a high appearance frequency. Note that the compression unit 308 and the decompression unit 309 can be omitted in the case of a method of recording image data without performing compression processing. Further, the image data compression format is not limited to the JPEG format, and the same processing can be performed even in a GIF (Graphical Interchange Format) format.

コントローラ310は、画像処理部304、バッファメモリ311、フラッシュROM312、I/F回路313、ディスプレイドライバ316、USBドライバ318、および操作部320に接続されている。また、コントローラ310は、機能的な構成として、操作部320からの入力信号に応じて各部を動作制御するための制御信号を出力する制御部(不図示)と、ユーザに関する認証を行う認証部(不図示)とを備える。   The controller 310 is connected to the image processing unit 304, the buffer memory 311, the flash ROM 312, the I / F circuit 313, the display driver 316, the USB driver 318, and the operation unit 320. In addition, the controller 310 has, as a functional configuration, a control unit (not shown) that outputs a control signal for controlling the operation of each unit in accordance with an input signal from the operation unit 320, and an authentication unit that performs authentication related to a user ( (Not shown).

バッファメモリ311には、画像処理部304において画像処理が行われる際に、一時的に画像データが保存される。フラッシュROM312には、ネットワークカメラ102の各種設定情報が保存される。I/F回路313は、コントローラ310から出力される画像データを、メモリーカード315に記録可能なデータ形式に変換する。また、I/F回路313は、メモリーカード315から読み出された画像データ等を、コントローラ310で処理可能なデータ形式に変換する。   The buffer memory 311 temporarily stores image data when the image processing unit 304 performs image processing. Various setting information of the network camera 102 is stored in the flash ROM 312. The I / F circuit 313 converts the image data output from the controller 310 into a data format that can be recorded on the memory card 315. The I / F circuit 313 converts image data read from the memory card 315 into a data format that can be processed by the controller 310.

カードホルダ314は、記憶媒体であるメモリーカード315をネットワークカメラ102に着脱可能にする機構を備えると共に、メモリーカード315との間でデータ通信が可能な電気接点を備える。また、カードホルダ314は、ネットワークカメラ102で利用される記憶媒体の種類に応じた構造を有する。メモリーカード315は、フラッシュメモリなどの半導体記憶素子を内蔵し、カードホルダ314に着脱可能なカード型の記憶媒体である。メモリーカード315には、ネットワークカメラ102で撮影された画像データを記録することができる。尚、本実施例ではネットワークカメラ102のみの構成として説明をするが、ネットワークカメラ102と通信可能な情報処理装置等に備えられた記憶手段をメモリーカード315の代わりとしてもよい。ネットワークカメラ102と情報処理装置との通信方法は特に問わない。有線でも無線でもよい。この場合、ネットワークカメラ102が通信インターフェースコントローラを備え、通信インターフェースコントローラを通じて情報処理装置と通信する。   The card holder 314 includes a mechanism that allows the memory card 315 that is a storage medium to be attached to and detached from the network camera 102, and includes an electrical contact that enables data communication with the memory card 315. The card holder 314 has a structure corresponding to the type of storage medium used in the network camera 102. The memory card 315 is a card-type storage medium that incorporates a semiconductor storage element such as a flash memory and is detachable from the card holder 314. The memory card 315 can record image data taken by the network camera 102. In the present embodiment, the description will be made assuming that only the network camera 102 is configured. However, a storage means provided in an information processing apparatus or the like that can communicate with the network camera 102 may be used instead of the memory card 315. A communication method between the network camera 102 and the information processing apparatus is not particularly limited. It may be wired or wireless. In this case, the network camera 102 includes a communication interface controller and communicates with the information processing apparatus through the communication interface controller.

ディスプレイドライバ316は、コントローラ310から出力される画像データを液晶ディスプレイ317で表示可能な信号に変換する。具体的には、ディスプレイドライバ316は、コントローラ310から出力されるデジタルの画像データをアナログ画像信号に変換する処理を行い、次に画像サイズを液晶ディスプレイ317の表示可能エリアのサイズに適したサイズに変換する処理を行う。   The display driver 316 converts the image data output from the controller 310 into a signal that can be displayed on the liquid crystal display 317. Specifically, the display driver 316 performs processing for converting digital image data output from the controller 310 into an analog image signal, and then sets the image size to a size suitable for the size of the displayable area of the liquid crystal display 317. Perform the conversion process.

操作部320は、電源スイッチ321、モードダイヤル322、撮影ボタン323(シャッターボタン)、カーソルキー324、ズームボタン325、および閲覧(再生)ボタン326を備え、ユーザからの操作入力を受け付けて、操作内容に応じた信号をコントローラ310に出力する。なお、操作部320には、図示の操作ボタン以外の操作ボタン類も含まれるが、それらの説明は省略する。   The operation unit 320 includes a power switch 321, a mode dial 322, a shooting button 323 (shutter button), a cursor key 324, a zoom button 325, and a browse (playback) button 326. A signal corresponding to is output to the controller 310. Note that the operation unit 320 includes operation buttons other than the illustrated operation buttons, but a description thereof will be omitted.

モードダイヤル322は、撮影動作のモードを切り替えるための回転可能なダイヤルである。ユーザはモードダイヤル322を回転操作することで、メモリーカード315に保存された画像データに対してアクセス制限を行うことが可能な管理者モードや管理者モード以外の撮影動作モードを含む複数の撮影動作モードを選択することが可能である。   The mode dial 322 is a rotatable dial for switching the mode of the photographing operation. The user can rotate the mode dial 322 to perform a plurality of shooting operations including an administrator mode and a shooting operation mode other than the administrator mode that can restrict access to image data stored in the memory card 315. It is possible to select a mode.

管理者モード以外の撮影動作モードとは、例えば、予めネットワークカメラ102が保持している撮影設定(ホワイトバランスやシャッタースピード等)をユーザに選択しやすく表したAutoモードや夜景モード、或いはユーザが任意に撮影設定を設定することができるマニュアルモードなどである。   The shooting operation mode other than the administrator mode is, for example, an Auto mode or a night scene mode in which shooting settings (white balance, shutter speed, etc.) held in advance by the network camera 102 are easily displayed to the user, or the user arbitrarily selects There is a manual mode in which shooting settings can be set.

閲覧ボタン326は、撮影した画像データを閲覧する閲覧モード(画像再生モード)に切り替えるためのボタンである。閲覧ボタン326が押下されると、撮影モードから閲覧モードに移行する。なお、閲覧モードへの切替方法については、閲覧ボタン326の押下に限定されず、液晶ディスプレイ317上のタッチパネル(不図示)などによる移行方法であってもよい。   The browse button 326 is a button for switching to a browse mode (image reproduction mode) for browsing captured image data. When the browse button 326 is pressed, the shooting mode is changed to the browsing mode. Note that the method for switching to the viewing mode is not limited to pressing the viewing button 326, and may be a transition method using a touch panel (not shown) on the liquid crystal display 317.

閲覧モードでは、コントローラ310が、I/F回路313を介して、カードホルダ314に装着されているメモリーカード315から設定情報と画像データを読み出す。設定情報は、現在装着されているメモリーカード315に記録されている画像の枚数および記録されている画像データの容量などである。読み出される画像データは、例えば、画像1枚分の画像データまたはサムネイルデータである。なお、メモリーカード315から読み出される画像データは、上述したように所定の圧縮形式で圧縮されている。   In the browsing mode, the controller 310 reads setting information and image data from the memory card 315 mounted on the card holder 314 via the I / F circuit 313. The setting information includes the number of images recorded on the currently installed memory card 315 and the capacity of the recorded image data. The read image data is, for example, image data or thumbnail data for one image. Note that the image data read from the memory card 315 is compressed in a predetermined compression format as described above.

メモリーカード315から読み出された画像データは、I/F回路313およびコントローラ310を介して、ディスプレイドライバ316へ入力される。ディスプレイドライバ316は、入力された画像データを液晶ディスプレイ317に表示させる。   The image data read from the memory card 315 is input to the display driver 316 via the I / F circuit 313 and the controller 310. The display driver 316 displays the input image data on the liquid crystal display 317.

カーソルキー324は、ユーザが撮影装置に対する所定の指示や機能選択を行うためのキーである。ユーザは、カーソルキー324により、ネットワークカメラ102に対する各種設定情報やユーザ認証情報などの操作入力を行うことができる。また、カーソルキー324により、液晶ディスプレイ317にメニュー画面を表示させたり、ネットワークカメラ102が有する所定の機能を選択させたりすることができる。
次に図4を用いて、動画抽出処理について説明する。
The cursor key 324 is a key for the user to perform a predetermined instruction or function selection to the photographing apparatus. The user can perform operation inputs such as various setting information and user authentication information for the network camera 102 with the cursor key 324. The cursor key 324 can display a menu screen on the liquid crystal display 317 and can select a predetermined function of the network camera 102.
Next, the moving image extraction process will be described with reference to FIG.

なお、図4のフローチャートに示す処理のうちステップS401〜S403は、レジ端末101のCPU201が所定の制御プログラムを読み出して実行する処理であり、ステップS404からS406は、ネットワークカメラ102のコントローラ310が所定の制御プログラムを読み出して実行する処理である。   Of the processes shown in the flowchart of FIG. 4, steps S401 to S403 are processes in which the CPU 201 of the cash register terminal 101 reads and executes a predetermined control program, and steps S404 to S406 are performed by the controller 310 of the network camera 102. The control program is read and executed.

ステップS401では、レジ端末101のCPU201は、会計処理を行う。具体的には、商品に付されたバーコードなどを読み取り商品の金額を取得する処理などである。   In step S401, the CPU 201 of the cashier terminal 101 performs an accounting process. Specifically, it is a process of reading the barcode attached to the product and acquiring the price of the product.

ステップS402では、レジ端末101のCPU201は、最後の商品の会計処理が終了し、支払い方法が確定すると、レシート発行の指示を受け付け、レシートの発行をする。   In step S <b> 402, the CPU 201 of the cash register terminal 101 receives a receipt issuance instruction and issues a receipt when the accounting process for the last product is completed and the payment method is determined.

この際、レシートには、当該レシートにかかる会計処理を識別するための情報が印字されるものとする。具体的には、識別番号や、バーコード、二次元コード等により識別情報を記載する。   At this time, information for identifying the accounting process relating to the receipt is printed on the receipt. Specifically, the identification information is described by an identification number, a barcode, a two-dimensional code, or the like.

ステップS403では、レジ端末101のCPU201は、レシートを発行した旨の通知をネットワークカメラ102に対して送信する。   In step S <b> 403, the CPU 201 of the cash register terminal 101 transmits a notification that a receipt has been issued to the network camera 102.

ここで送信される通知には、上記レシートに記載される識別情報、ステップS401における会計処理の終了時刻、ステップS402におけるレシート発行の時刻などの情報が含まれる。会計処理の終了時刻は、最後の商品の会計処理(レシート発行時から遡って直近の会計処理)を行った時刻により特定することが可能である。   The notification transmitted here includes information such as the identification information described in the receipt, the accounting process end time in step S401, and the receipt issue time in step S402. The end time of the accounting process can be specified by the time when the accounting process of the last product (the latest accounting process retroactive from the time of receipt is issued) is performed.

ステップS404では、ネットワークカメラ102は、ステップS403でレジ端末101から送信された通知を受信する。   In step S404, the network camera 102 receives the notification transmitted from the cashier terminal 101 in step S403.

ステップS405では、ネットワークカメラ102は、ネットワークカメラ102により撮影された動画のうち、ステップS404で受信した会計処理の終了時刻からレシート発行の時刻までを1つの動画ファイルとして抽出する。なお、ネットワークカメラ102は、常に動画を撮影いるものとし、ステップS405においては、当該撮影された動画のうち、記録として残すべき動画を抽出する処理である。   In step S405, the network camera 102 extracts, from the moving images taken by the network camera 102, one moving image file from the end time of the accounting process received in step S404 to the time when the receipt is issued. Note that the network camera 102 always shoots moving images, and in step S405, the moving image to be recorded is extracted from the captured moving images.

本実施形態では、会計処理の終了時刻からレシート発行の時刻までを1つの動画ファイルとして抽出したが、会計処理の開始時刻からレシート発行の時刻までを1つの動画ファイルとして抽出してもよい。   In the present embodiment, one movie file is extracted from the end time of the accounting process to the time when the receipt is issued, but it may be extracted as one movie file from the start time of the accounting process to the time when the receipt is issued.

ステップS406では、ステップS405で抽出した動画ファイルと、ステップS404で受信した識別情報とを対応付けて保存する。対応付けて保存されたデータの一例を図12に示す。   In step S406, the moving image file extracted in step S405 and the identification information received in step S404 are stored in association with each other. An example of data stored in association with each other is shown in FIG.

なお、本実施形態においては、動画ファイルと識別情報とをネットワークカメラ102に保存するよう説明したが、ネットワークカメラ102と通信可能に接続された外部記憶装置に保存しても良い。
そして、本フローチャートの処理を終了する。
In the present embodiment, the video file and the identification information have been described as being stored in the network camera 102. However, the moving image file and the identification information may be stored in an external storage device that is communicably connected to the network camera 102.
And the process of this flowchart is complete | finished.

なお、本実施形態においては、ネットワークカメラ102が動画抽出、保存処理を実行するよう説明したが、ネットワークカメラ102により撮影された動画に対する編集や分析をする機能を備える情報処理装置(不図示)により処理してもよい。   In the present embodiment, the network camera 102 has been described to execute the moving image extraction and storage processing. However, the information processing apparatus (not shown) having a function of editing and analyzing the moving image shot by the network camera 102 has been described. It may be processed.

次に、図5を用いて、ネットワークカメラ102が実行する静止画取得処理について説明する。   Next, still image acquisition processing executed by the network camera 102 will be described with reference to FIG.

ステップS501では、ネットワークカメラ102は、ステップS406で保存された動画データを取得する。   In step S501, the network camera 102 acquires the moving image data stored in step S406.

ステップS502では、ネットワークカメラ102は、ステップS501で取得した動画に含まれるシーンについて、所定の静止画取得条件を満たすかを判断する。   In step S502, the network camera 102 determines whether a predetermined still image acquisition condition is satisfied for the scene included in the moving image acquired in step S501.

所定の条件を満たすシーンである場合(ステップS502:YES)は、処理をステップS503に移行する。   If the scene satisfies the predetermined condition (step S502: YES), the process proceeds to step S503.

所定の条件を満たさないシーンである場合(ステップS502:NO)は、処理をステップS504に移行する。   If the scene does not satisfy the predetermined condition (step S502: NO), the process proceeds to step S504.

ステップS503では、ネットワークカメラ102は、ステップS502で所定の条件を満たすシーンであると判定されたシーンについて、静止画として取得し、保存する。この際、動画データに対応付けられた識別番号を当該シーンにも対応付けて保存する。対応付けて保存したデータの一例を図12に示す。   In step S503, the network camera 102 acquires and stores as a still image the scene determined to be a scene that satisfies the predetermined condition in step S502. At this time, the identification number associated with the moving image data is also stored in association with the scene. An example of data stored in association with each other is shown in FIG.

ステップS504では、ネットワークカメラ102は、ステップS501で取得した動画の全てのシーンについて、ステップS502の判定処理を実行したかを判断する。   In step S504, the network camera 102 determines whether the determination process in step S502 has been executed for all scenes of the moving image acquired in step S501.

すべてのシーンについて処理を実行した場合(ステップS504:YES)は、本フローチャートに示す処理を終了する。   If the process has been executed for all scenes (step S504: YES), the process shown in this flowchart is terminated.

処理を実行していないシーンが残っている場合(ステップS504:NO)は、処理をステップS502に移行する。   If a scene that has not been processed remains (step S504: NO), the process proceeds to step S502.

なお、本実施形態においては、ネットワークカメラ102が静止画取得処理を実行するよう説明したが、ネットワークカメラ102により撮影された動画に対する編集や分析をする機能を備える情報処理装置(不図示)により処理してもよい。   In the present embodiment, the network camera 102 has been described to execute the still image acquisition process. However, the processing is performed by an information processing apparatus (not shown) having a function of editing and analyzing a moving image shot by the network camera 102. May be.

また、条件を満たしたシーンの前後所定の時間について、静止画として残しても良い。例えば、条件を満たしたシーンの5秒前から5秒後までを1秒間隔で静止画の取得をする処理を行っても良い。このように静止画として複数枚の画像を残すことで、トラブル等が発生した場合に静止画によって前後関係を把握することができ、トラブル解決等に役立てることができる。   Further, a predetermined time before and after a scene that satisfies the condition may be left as a still image. For example, a process of acquiring still images at intervals of 1 second from 5 seconds before to 5 seconds after a scene that satisfies the conditions may be performed. By leaving a plurality of images as still images in this way, when a trouble or the like occurs, the context can be grasped by the still image, which can be used for troubleshooting.

ここで、ステップS502における静止画取得条件について、図9、図10を用いて説明する。   Here, the still image acquisition conditions in step S502 will be described with reference to FIGS.

図9は、会計時における金銭支払いの様子を表した図である。図9に示すように、ネットワークカメラ102は、金銭が置かれる(通過する)領域(例えば金銭授受用のトレーなど)を撮影しているものとする。   FIG. 9 is a diagram showing a state of money payment at the time of accounting. As shown in FIG. 9, it is assumed that the network camera 102 is photographing a region where money is placed (passed through) (for example, a tray for money exchange).

図10は、静止画取得条件を説明するための図であり、図9における金銭が置かれる領域を拡大した図である。   FIG. 10 is a diagram for explaining still image acquisition conditions, and is an enlarged view of an area where money is placed in FIG. 9.

静止画取得条件としては、例えば撮影された画像にお金が映っているかを条件とする。この場合、予めお金の画像データを登録しておき、撮影された画像に映ったオブジェクトと登録されたお金の画像データとの類似度を算出し、予め定められた類似度を満たせば当該オブジェクトをお金であると判断し、静止画を撮影する。   As a still image acquisition condition, for example, it is a condition that money is reflected in a photographed image. In this case, money image data is registered in advance, the degree of similarity between the object shown in the photographed image and the registered money image data is calculated, and if the predetermined degree of similarity is satisfied, the object is selected. Judge that it is money and shoot a still image.

また、撮影された画像に映るオブジェクトの形により、判断することも可能である。例えば、長方形の物体であるか否かにより判断すること紙幣であるかを判断することが可能である。また、エッジ(辺)と角がある物体であるか否かといった条件により紙幣を判断することも可能である。   It is also possible to make a determination based on the shape of the object shown in the photographed image. For example, it is possible to determine whether it is a banknote by determining whether it is a rectangular object. It is also possible to determine a banknote based on a condition such as whether or not the object has an edge (side) and a corner.

また、所定の方向に動く物体を検知したか否かにより、静止画を取得するか否かを決定しても良い。例えば、図10の例では、予め定められた検知ラインを所定の方向にオブジェクトが通過したかにより判断する場合のイメージを表している。より具体的には、図10の図において、下から上(客側から店員側)に向かって、動体オブジェクト(例えば客の手やお金など)が通過したか否かにより判断する。   Further, whether to acquire a still image may be determined based on whether an object moving in a predetermined direction is detected. For example, the example of FIG. 10 represents an image in a case where it is determined based on whether an object has passed through a predetermined detection line in a predetermined direction. More specifically, in FIG. 10, the determination is made based on whether or not a moving object (for example, a customer's hand or money) has passed from the bottom to the top (from the customer side to the clerk side).

このように、予め定められた検知ラインをオブジェクトが通過したか否かにより、客による支払い行為があったと検知することで、例えばクレジットカードによる支払いなども検知することが可能となる。また、所定の方向にオブジェクトが通過したかを判断することで、店員の手が通過したのか、それとも客の手であるのか等を、判断することも可能となる。すなわち、店員側から何かしらのオブジェクトが出てきたのか、それとも客側からなのかを判断することが可能とあなる。   In this way, by detecting that the customer has made a payment based on whether or not the object has passed through a predetermined detection line, for example, payment by a credit card can be detected. Further, by determining whether the object has passed in a predetermined direction, it is possible to determine whether the store clerk's hand has passed, or the customer's hand, etc. That is, it is possible to determine whether an object has come out from the store clerk side or from the customer side.

次に図6を用いて、表示端末103とネットワークカメラ102による動画、静止画の表示処理について説明する。   Next, the display processing of moving images and still images by the display terminal 103 and the network camera 102 will be described with reference to FIG.

なお、図6のフローチャートに示す処理のうち、ステップS601、S602、S606、S607は、表示端末103のCPU201が所定の制御プログラムを読み出して実行する処理であり、ステップS603〜S605については、ネットワークカメラ102が実行する処理である。   Of the processes shown in the flowchart of FIG. 6, steps S601, S602, S606, and S607 are processes in which the CPU 201 of the display terminal 103 reads out and executes a predetermined control program, and steps S603 to S605 are network cameras. 102 is a process to be executed.

ステップS601では、表示端末103のCPU201は、ステップS402で発行されたレシートに記載された識別情報を取得する。例えばバーコードや二次元コードを読み取ることで識別情報を取得する。   In step S601, the CPU 201 of the display terminal 103 acquires the identification information described in the receipt issued in step S402. For example, identification information is acquired by reading a barcode or a two-dimensional code.

ステップS602では、表示端末103のCPU201は、ステップS601で取得した識別情報を含む動画・静止画取得依頼をネットワークカメラ102に送信する。   In step S <b> 602, the CPU 201 of the display terminal 103 transmits a moving image / still image acquisition request including the identification information acquired in step S <b> 601 to the network camera 102.

ステップS603では、ネットワークカメラ102は、ステップS602で表示端末103から送信された識別情報を含む取得依頼を受信する。   In step S603, the network camera 102 receives the acquisition request including the identification information transmitted from the display terminal 103 in step S602.

ステップS604では、ネットワークカメラ102は、ステップS603で受信した動画・静止画取得依頼に含まれる識別情報に基づき、当該識別情報に対応付けて記憶された動画・静止画を検索する。   In step S604, the network camera 102 searches for the moving image / still image stored in association with the identification information based on the identification information included in the moving image / still image acquisition request received in step S603.

ステップS605では、ネットワークカメラ102は、ステップS604で検索された動画・静止画を表示端末103に対して送信する。   In step S605, the network camera 102 transmits the moving image / still image searched in step S604 to the display terminal 103.

ステップS606では、表示端末103のCPU201は、ステップS605でネットワークカメラ102から送信された動画・静止画を受信する。   In step S606, the CPU 201 of the display terminal 103 receives the moving image / still image transmitted from the network camera 102 in step S605.

ステップS607では、表示端末103のCPU201は、ステップS606で受信した動画・静止画を表示部に表示する。そして本フローチャートに示す処理を終了する。   In step S607, the CPU 201 of the display terminal 103 displays the moving image / still image received in step S606 on the display unit. Then, the process shown in this flowchart is terminated.

なお、本実施形態においては、ネットワークカメラ102に動画や静止画のデータが記憶されていることを前提に、ネットワークカメラ102から動画や静止画を取得して表示端末で表示するよう説明した。上述の通り、動画や静止画データを外部装置に記憶している場合は、ステップS603〜S605の処理主体はネットワークカメラ102ではなく、当該データを記憶している装置や、当該装置を操作可能な装置となる。   In the present embodiment, it has been described that moving images and still images are acquired from the network camera 102 and displayed on the display terminal on the assumption that moving images and still images are stored in the network camera 102. As described above, when moving image or still image data is stored in an external device, the processing subject in steps S603 to S605 is not the network camera 102, and the device storing the data or the device can be operated. It becomes a device.

図8は、表示端末103に動画および静止画を表示した様子を示す図である。   FIG. 8 is a diagram illustrating a state in which a moving image and a still image are displayed on the display terminal 103.

図8では、表示端末103としていわゆるスマートフォンやタブレット端末を想定した図である。表示端末103としては、図8のようにスマートフォンやタブレット端末でもよいし、パーソナルコンピュータ(PC)や、テレビであっても、動画や静止画が表示できる端末であればいずれであっても良い。   In FIG. 8, a so-called smartphone or tablet terminal is assumed as the display terminal 103. The display terminal 103 may be a smartphone or a tablet terminal as shown in FIG. 8, or may be a personal computer (PC), a television, or any terminal that can display moving images and still images.

また、図8では動画と静止画とを1画面に同時に表示しているが、別々に表示してもよい。すなわち、動画を再生する画面と静止画が表示される画面を別の画面とし、表示の切り替えをすることで、動画と静止画とを確認できる構成であってもよい。   In FIG. 8, a moving image and a still image are simultaneously displayed on one screen, but may be displayed separately. That is, a configuration may be used in which a moving image and a still image can be confirmed by switching a display for switching a display between a screen for reproducing a moving image and a screen for displaying a still image.

図8に示すように、動画再生領域801と静止画表示領域802とから構成される。   As shown in FIG. 8, it is composed of a moving image playback area 801 and a still image display area 802.

動画再生領域801では、ネットワークカメラにより撮影され、図12のデータテーブルに記憶された動画が再生される。静止画表示領域802においては、静止画取得条件を満たしたシーンとして取得された画像が表示される。なお、静止画表示領域802に示すように、複数枚の静止画を時系列で表示している。このように表示することで、例えばトラブルが発生した場合にもその前後関係を静止画により把握することが可能となる。   In the moving image reproduction area 801, the moving image shot by the network camera and stored in the data table of FIG. 12 is reproduced. In the still image display area 802, an image acquired as a scene satisfying the still image acquisition condition is displayed. As shown in the still image display area 802, a plurality of still images are displayed in time series. By displaying in this way, for example, when a trouble occurs, it is possible to grasp the front-rear relationship with a still image.

また、コントロールバー803を備え、コントロールバー803を左右に操作することで、動画の再生位置を調整できる。
<第2の実施形態>
Also, the control bar 803 is provided, and the moving position of the moving image can be adjusted by operating the control bar 803 left and right.
<Second Embodiment>

第1の実施形態においては、すでにネットワークカメラ102により撮影され、保存された動画データについて、ファイル作成や静止画取得をする処理について説明した。   In the first embodiment, the process of creating a file and acquiring a still image of moving image data that has already been captured and saved by the network camera 102 has been described.

第2の実施形態においては、レジ端末101における処理に応答してネットワークカメラ102が動画撮影やデータ保存処理を行う構成について説明する。   In the second embodiment, a configuration in which the network camera 102 performs moving image shooting and data storage processing in response to processing in the cashier terminal 101 will be described.

図7は、第2の実施形態におけるネットワークカメラ102が実行する処理を示すフローチャートである。   FIG. 7 is a flowchart illustrating processing executed by the network camera 102 according to the second embodiment.

図7に示す処理のうち、ステップS701〜S703は、レジ端末101のCPU201が所定の制御プログラムを読み出して実行する処理であり、ステップS704〜S711は、ネットワークカメラ102のコントローラ310が所定の制御プログラムを読み出して実行する処理である。   Of the processes shown in FIG. 7, steps S701 to S703 are processes in which the CPU 201 of the cashier terminal 101 reads and executes a predetermined control program, and steps S704 to S711 are performed by the controller 310 of the network camera 102. Is read and executed.

まず、レジ端末101における処理の流れについて説明する。   First, the flow of processing in the cash register terminal 101 will be described.

ステップS701では、レジ端末101は、会計処理を行う。会計処理は、商品に付されたバーコード等を読み取り、商品の会計を行う一連の処理を指す。   In step S701, the cashier terminal 101 performs an accounting process. The accounting process refers to a series of processes for reading a barcode attached to a product and accounting for the product.

ステップS702では、レジ端末101は、ステップS701における会計処理のレシートを発行する。   In step S702, the cashier terminal 101 issues a receipt for the accounting process in step S701.

ステップS703では、レジ端末101は、ステップS701における会計処理を識別するための情報をネットワークカメラ102に送信する。
そして、本フローチャートの処理を終了する。
次に、ネットワークカメラ102における処理を説明する。
In step S703, the cashier terminal 101 transmits information for identifying the accounting process in step S701 to the network camera 102.
And the process of this flowchart is complete | finished.
Next, processing in the network camera 102 will be described.

ステップS704では、レジ端末101における会計処理が開始されたか否かを判定する。   In step S704, it is determined whether or not the accounting process at the cashier terminal 101 has been started.

レジ端末101における会計処理の開始を検知した場合(ステップS704:YES)は、処理をステップS705に移行する。   When the start of the accounting process at the cash register terminal 101 is detected (step S704: YES), the process proceeds to step S705.

ステップS705では、ネットワークカメラ102は、動画の撮影を開始する。   In step S705, the network camera 102 starts shooting a moving image.

ステップS706では、ネットワークカメラ102は、撮影中の画像内において、所定の静止画取得条件を満たす事象が発生したか否かを判定する。静止画取得条件の具体例については、第1の実施形態におけるステップS502と同様であるため、ここでの説明は省略する。   In step S706, the network camera 102 determines whether an event that satisfies a predetermined still image acquisition condition has occurred in the image being shot. A specific example of the still image acquisition condition is the same as that in step S502 in the first embodiment, and a description thereof will be omitted here.

静止画取得条件を満たす事象が発生した場合(ステップS706:YES)は、処理をステップS707に移行する。   If an event that satisfies the still image acquisition condition occurs (step S706: YES), the process proceeds to step S707.

静止画取得条件を満たす事象が発生していない場合(ステップS706:NO)は、処理をステップS708に移行する。   If no event that satisfies the still image acquisition condition has occurred (step S706: NO), the process proceeds to step S708.

ステップS707では、ネットワークカメラ102は、ステップS706で条件を満たすと判定された事象の静止画を撮影する。ステップS707の静止画取得についても、ステップS503と同様に、前後所定の範囲で複数枚の静止画を取得してもよい。   In step S707, the network camera 102 captures a still image of the event determined to satisfy the condition in step S706. As for the still image acquisition in step S707, a plurality of still images may be acquired in a predetermined range before and after, similarly to step S503.

ステップS708では、ネットワークカメラ102は、レジ端末101でレシート発行処理がなされたかを判定する。   In step S708, the network camera 102 determines whether a receipt issuance process has been performed at the cash register terminal 101.

レジ端末101によるレシート発行を検知した場合(ステップS708:YES)は、処理をステップS709に移行する。   If receipt issuance by the cashier terminal 101 is detected (step S708: YES), the process proceeds to step S709.

レジ端末101によるレシート発行を検知していない場合(ステップS708:NO)は、処理をステップS706に移行する。   If receipt issuance by the cashier terminal 101 has not been detected (step S708: NO), the process proceeds to step S706.

ステップS709では、ネットワークカメラ102は、動画撮影処理を終了する。   In step S709, the network camera 102 ends the moving image shooting process.

すなわち、レジ端末101によるレシート発行が行われるまで、動画撮影を継続し、動画撮影中に静止画取得条件を満たす事象が発生した場合には、当該事象を静止画として撮影する処理を行う。そして、レジ端末101によるレシート発行を検知すると、動画撮影を終了する。   That is, moving image shooting is continued until a receipt is issued by the cash register terminal 101. When an event that satisfies the still image acquisition condition occurs during moving image shooting, processing for shooting the event as a still image is performed. Then, when the receipt issuance by the cashier terminal 101 is detected, the moving image shooting is ended.

ステップS710では、ネットワークカメラ102は、レジ端末101から送信された会計処理を識別するための情報を取得する。   In step S <b> 710, the network camera 102 acquires information for identifying the accounting process transmitted from the cashier terminal 101.

ステップS711では、ネットワークカメラ102は、ネットワークカメラ102の記憶領域または外部装置の記憶領域に、撮影された動画データおよびステップS707で撮影された静止画像を、ステップS710で取得した識別情報と対応付けて記憶する。対応付けて記憶したデータの一例を図12に示す。   In step S711, the network camera 102 associates the captured moving image data and the still image captured in step S707 with the identification information acquired in step S710 in the storage area of the network camera 102 or the storage area of the external device. Remember. An example of the data stored in association with each other is shown in FIG.

なお、本実施形態においては、ステップS704において会計処理が開始されたかを判定しているが、会計処理の終了(最後の商品の会計処理を行ったこと)を判定し、動画撮影を開始(ステップS705)しても良い。   In the present embodiment, it is determined whether or not the accounting process has been started in step S704. However, it is determined that the accounting process has ended (the accounting process for the last product has been performed), and video shooting is started (step S704). S705).

動画再生処理については、第2の実施形態においても、図6のフローチャートで示す処理、図8の表示画面と同様であるため、説明は省略する。
以上が本発明の第2の実施形態における処理内容である。
The moving image reproduction process is the same as that shown in the flowchart of FIG. 6 and the display screen of FIG.
The above is the processing content in the second embodiment of the present invention.

図11は、レジ端末101において発生したイベントとイベント発生日時とが対応付けられたデータである。   FIG. 11 shows data in which an event that has occurred in the cash register terminal 101 is associated with an event occurrence date and time.

ステップS401、S402、S701、S702等において発生したイベントと発生日時が対応付けて登録される。例えば、図11に示す例では、会計処理が開始された時刻(前回のレシート発行後、最初の会計処理)と、会計処理の終了時刻(最後の商品の会計処理(レシート発行直前の会計処理))と、レシート発行の時刻とが登録されている。   Events that occurred in steps S401, S402, S701, S702, etc., and the occurrence date are registered in association with each other. For example, in the example shown in FIG. 11, the time when the accounting process is started (the first accounting process after the previous receipt issuance) and the end time of the accounting process (the accounting process for the last product (the accounting process immediately before the receipt issuance)) ) And the receipt issuance time are registered.

ステップS403では、図11に示すイベントとイベント発生日時のデータおよび識別情報がレジ端末101からネットワークカメラ102に対して送信される。   In step S403, the event shown in FIG.

図12は、ネットワークカメラ102により撮影された動画ファイルと静止画ファイルが識別情報と対応付けて登録されたデータテーブルの一例である。   FIG. 12 is an example of a data table in which a moving image file and a still image file captured by the network camera 102 are registered in association with identification information.

例えば、図11における会計処理(2014年6月25日10時15分に開始され、同日10時17分30秒にレシート発行された処理)を示す識別情報が「0001」である場合、当該処理にかかる動画および静止画は、「0001.mp4」と「0001.jpg」となる。   For example, if the identification information indicating the accounting process in FIG. 11 (a process started at 10:15 on June 25, 2014 and issued at 10:17:30 on the same day) is “0001”, the process The moving image and still image according to are “0001.mp4” and “0001.jpg”.

すなわち、会計処理の開始からレシート発行までの動画を保存する構成の場合、動画ファイル「0001.mp4」は、2014年6月25日10時15分00秒から同日10時17分30秒までの2分30秒間の動画のデータとなる。   In other words, in the case of a configuration in which a moving image from the start of accounting processing to receipt issuance is stored, the moving image file “0001.mp4” is from June 25, 2014, 10:15:00 to 10:17:30. The video data is 2 minutes and 30 seconds.

また、「0001.jpg」は、当該動画データにおける静止画取得条件を満たしたシーンの静止画のデータである。   “0001.jpg” is still image data of a scene that satisfies the still image acquisition condition in the moving image data.

以上のように、レジ端末によるレシート発行のタイミングに基づき、ネットワークカメラ102で撮影された動画を区切り、動画データを作成し、当該動画データとレジ端末による会計処理をと対応付けて記憶することで、いずれの動画がどの会計処理の動画であるかを検索しやすくすることが可能となる。すなわち、レシート発行は、会計処理が終了し、支払いも行われたあとに行われる処理であるため、このタイミングで区切ることで、一連の会計処理を1つの動画として記憶することが可能となる。   As described above, on the basis of the receipt issuance timing at the cash register terminal, the video shot by the network camera 102 is divided, video data is created, and the video data and the accounting process by the cash register terminal are stored in association with each other. It becomes possible to make it easy to search which moving image is the moving image of which accounting process. In other words, the receipt issuance is a process that is performed after the accounting process is completed and the payment is made. Therefore, by separating at this timing, a series of accounting processes can be stored as one moving image.

また、レジ端末による会計処理が開始されたタイミングまたは終了したタイミングからレシート発行までを1つの動画ファイルとして記憶することで、無駄な動画を記憶することがなくなり、容量削減をすることが可能となる。   In addition, by storing the timing from the start or end of the accounting process at the cash register terminal to the receipt issuance as a single moving image file, it is possible to avoid storing unnecessary moving images and to reduce the capacity. .

例えば、図11の例においては、6月25日10時22分40秒にレシートが発行され、次の会計処理の開始が10時50分20秒となっている。この場合、10時22分40秒から10時50分20秒までの間は、何も処理が行われなかった時間であり、この時間の動画を残しておいても意味のないものである。そこで、本発明の処理を実行することで、この無駄な時間帯の動画を残さず、必要な時間帯の動画だけを残すことが可能となり、容量削減に貢献できる。   For example, in the example of FIG. 11, a receipt is issued at 10:22:40 on June 25, and the start of the next accounting process is 10:50:20. In this case, the time from 10:22:40 to 10:50:20 is a time when no processing is performed, and it is meaningless to leave a moving image of this time. Therefore, by executing the processing of the present invention, it is possible to leave only a moving image of a necessary time period without leaving a moving image of the useless time period, which can contribute to capacity reduction.

また、撮影された動画のうち、所定の条件を満たしたシーンを静止画として取得することで、トラブル等が発生した場合に静止画によって前後関係を把握することができ、トラブル解決等に役立てることができる。この際、所定の条件を満たしたシーンの前後のシーンについても静止画として残すことで、一連の流れを静止画で把握することが可能となり、トラブル解決等により役立てることが可能となる。   In addition, by acquiring scenes that satisfy certain conditions from the captured videos as still images, the context can be grasped by the still images when trouble occurs, which can be useful for troubleshooting. Can do. At this time, by leaving the scenes before and after the scene satisfying the predetermined condition as still images, a series of flows can be grasped by the still images, which can be used for troubleshooting.

また、レジ端末から発行されるレシートに識別情報を印刷し、当該識別情報と動画・静止画とを対応付けて記憶することで、レシートに記載された識別情報に基づき、当該レシートに係る会計処理の動画や静止画を効率的に検索することが可能となる。   In addition, the identification information is printed on a receipt issued from the cash register terminal, and the identification information and the moving image / still image are stored in association with each other, so that the accounting process related to the receipt is based on the identification information described in the receipt. It is possible to efficiently search for moving images and still images.

なお、上述した各種データの構成及びその内容はこれに限定されるものではなく、用途や目的に応じて、様々な構成や内容で構成されることは言うまでもない。   It should be noted that the configuration and contents of the various data described above are not limited to this, and it goes without saying that the various data and configurations are configured according to the application and purpose.

また、本発明におけるプログラムは、図4〜図7の処理をコンピュータに実行させるプログラムである。なお、本発明におけるプログラムは、図4〜図7の各処理ごとのプログラムであってもよい。   Moreover, the program in this invention is a program which makes a computer perform the process of FIGS. The program according to the present invention may be a program for each process in FIGS.

以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。   As described above, a recording medium that records a program that implements the functions of the above-described embodiments is supplied to a system or apparatus, and a computer (or CPU or MPU) of the system or apparatus stores the program stored in the recording medium. It goes without saying that the object of the present invention can also be achieved by reading and executing.

この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。   In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium recording the program constitutes the present invention.

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、DVD−ROM、磁気テープ、不揮発性のメモリカード、ROM、EEPROM、シリコンディスク等を用いることが出来る。   As a recording medium for supplying the program, for example, flexible disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, DVD-ROM, magnetic tape, nonvolatile memory card, ROM, EEPROM, silicon A disk or the like can be used.

また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。   Further, by executing the program read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on an instruction of the program is actually It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the processing and the processing is included.

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。   Furthermore, after the program read from the recording medium is written to the memory provided in the function expansion board inserted into the computer or the function expansion unit connected to the computer, the function expansion board is based on the instructions of the program code. It goes without saying that the case where the CPU or the like provided in the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.

また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。   The present invention may be applied to a system constituted by a plurality of devices or an apparatus constituted by a single device. Needless to say, the present invention can be applied to a case where the present invention is achieved by supplying a program to a system or apparatus. In this case, by reading a recording medium storing a program for achieving the present invention into the system or apparatus, the system or apparatus can enjoy the effects of the present invention.

さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。   Furthermore, by downloading and reading a program for achieving the present invention from a server, database, etc. on a network using a communication program, the system or apparatus can enjoy the effects of the present invention. In addition, all the structures which combined each embodiment mentioned above and its modification are also included in this invention.

101 レジ端末
102 ネットワークカメラ
103 表示端末
101 cash register terminal 102 network camera 103 display terminal

Claims (10)

動画を撮影する撮影手段と、
レジ端末によりレシート発行がされた通知を取得する取得手段と、
前記撮影手段により撮影された動画を、前記取得手段により取得した通知に基づき区切ることで動画データを作成する作成手段と、
前記レシート発行にかかる会計処理と、前記作成手段により作成された動画データとを対応付けて記憶する記憶手段と、
を備えることを特徴とするネットワークカメラシステム。
Shooting means for shooting videos,
An acquisition means for acquiring a receipt issued by a cash register terminal;
Creating means for creating moving picture data by dividing the moving picture taken by the photographing means based on the notification obtained by the obtaining means;
Storage means for storing the accounting process related to the receipt issuance and the moving image data created by the creation means;
A network camera system comprising:
前記取得手段は、さらに、前記レジ端末により会計処理が開始または終了された通知を取得し、
前記作成手段は、さらに、当該取得した会計処理の開始または終了から前記レシート発行までを1ファイルとして動画データを作成することを特徴とする請求項1に記載のネットワークカメラシステム。
The acquisition means further acquires a notification that the accounting process has been started or ended by the cashier terminal,
The network camera system according to claim 1, wherein the creation unit further creates moving image data using one file from the start or end of the acquired accounting process to the receipt issuance.
前記撮影手段により撮影された動画に含まれるシーンのうち、所定の条件を満たしたシーンを静止画として取得する静止画取得手段をさらに備えることを特徴とする請求項1または2に記載のネットワークカメラシステム。   3. The network camera according to claim 1, further comprising a still image acquisition unit that acquires, as a still image, a scene that satisfies a predetermined condition among scenes included in the moving image captured by the imaging unit. 4. system. 前記記憶手段は、さらに、前記静止画取得手段により取得された静止画を、前記レジ端末における会計処理と対応付けて記憶することを特徴とする請求項3に記載のネットワークカメラシステム。   The network camera system according to claim 3, wherein the storage unit further stores the still image acquired by the still image acquisition unit in association with an accounting process in the cash register terminal. 前記静止画取得手段は、前記撮影手段により撮影された撮影領域の所定のラインを動体オブジェクトが通過した場合に、当該シーンを静止画として取得することを特徴とする請求項3または4に記載のネットワークカメラシステム。   The said still image acquisition means acquires the said scene as a still image, when a moving body object passes the predetermined line of the imaging | photography area | region image | photographed by the said imaging | photography means, The said scene is acquired. Network camera system. 前記静止画取得手段は、さらに、予め登録された画像データと類似する画像が撮影されたシーンを、静止画として取得することを特徴とする請求項3乃至5のいずれか1項に記載のネットワークカメラシステム。   6. The network according to claim 3, wherein the still image acquisition unit further acquires, as a still image, a scene in which an image similar to image data registered in advance is captured. Camera system. 前記静止画取得手段は、さらに、前記静止画取得手段により静止画として取得されたシーンの前後のシーンについても静止画として取得することを特徴とする請求項3乃至6のいずれか1項に記載のネットワークカメラシステム。   The said still image acquisition means acquires the scene before and behind the scene acquired as a still image by the said still image acquisition means further as a still image, The any one of Claim 3 thru | or 6 characterized by the above-mentioned. Network camera system. 前記レジ端末は、会計処理にかかるレシートに、当該会計処理を識別する識別情報を記載することを特徴とし、
前記記憶手段は、当該識別情報を用いて、会計処理と動画とを対応付けて記憶することを特徴とする請求項1乃至7のいずれか1項に記載のネットワークカメラシステム。
The cash register terminal records identification information for identifying the accounting process on a receipt relating to the accounting process,
The network camera system according to claim 1, wherein the storage unit stores the accounting process and the moving image in association with each other using the identification information.
ネットワークカメラシステムにおける情報処理方法であって、
前記ネットワークカメラシステムの撮影手段が、動画を撮影する撮影工程と、
前記ネットワークカメラシステムの取得手段が、レジ端末によりレシート発行がされた通知を取得する取得工程と、
前記ネットワークカメラシステムの作成手段が、前記撮影工程により撮影された動画を、前記取得工程により取得した通知に基づき区切ることで動画データを作成する作成工程と、
前記ネットワークカメラシステムの記憶手段が、前記レシート発行にかかる会計処理と、前記作成行程により作成された動画データとを対応付けて記憶する記憶工程と、
を備えることを特徴とする情報処理方法。
An information processing method in a network camera system,
A photographing step of photographing the moving image of the network camera system;
An acquisition step in which the acquisition means of the network camera system acquires a notification that a receipt has been issued by a cash register terminal;
The creation step of creating the moving image data by dividing the moving image shot by the shooting step based on the notification acquired by the acquisition step, the creation means of the network camera system;
A storage step in which the storage unit of the network camera system stores the accounting process for issuing the receipt in association with the moving image data created in the creation process,
An information processing method comprising:
ネットワークカメラシステムにおいて実行可能なプログラムであって、
前記ネットワークカメラシステムを、
動画を撮影する撮影手段と、
レジ端末によりレシート発行がされた通知を取得する取得手段と、
前記撮影手段により撮影された動画を、前記取得手段により取得した通知に基づき区切ることで動画データを作成する作成手段と、
前記レシート発行にかかる会計処理と、前記作成手段により作成された動画データとを対応付けて記憶する記憶手段として機能させることを特徴とするプログラム。


A program executable in a network camera system,
The network camera system;
Shooting means for shooting videos,
An acquisition means for acquiring a receipt issued by a cash register terminal;
Creating means for creating moving picture data by dividing the moving picture taken by the photographing means based on the notification obtained by the obtaining means;
A program that causes an accounting process related to the receipt issuance to function as a storage unit that stores the moving image data created by the creation unit in association with each other.


JP2014134428A 2014-06-30 2014-06-30 Network camera system, information processing method, program Active JP6417752B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014134428A JP6417752B2 (en) 2014-06-30 2014-06-30 Network camera system, information processing method, program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014134428A JP6417752B2 (en) 2014-06-30 2014-06-30 Network camera system, information processing method, program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018192223A Division JP6725853B2 (en) 2018-10-11 2018-10-11 Network camera system, information processing method, program

Publications (3)

Publication Number Publication Date
JP2016012869A true JP2016012869A (en) 2016-01-21
JP2016012869A5 JP2016012869A5 (en) 2017-08-17
JP6417752B2 JP6417752B2 (en) 2018-11-07

Family

ID=55229312

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014134428A Active JP6417752B2 (en) 2014-06-30 2014-06-30 Network camera system, information processing method, program

Country Status (1)

Country Link
JP (1) JP6417752B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019054518A (en) * 2018-10-11 2019-04-04 キヤノンマーケティングジャパン株式会社 Network camera system, information processing method, and program
CN111757067A (en) * 2020-07-08 2020-10-09 福建省高速公路信息科技有限公司 Expressway service area cash register inspection system and method based on video AI
JP7409637B2 (en) 2019-12-12 2024-01-09 Necソリューションイノベータ株式会社 Calculation method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005115504A (en) * 2003-10-06 2005-04-28 Mega Chips Corp Image retrieval system and image database
JP2009093289A (en) * 2007-10-04 2009-04-30 Toshiba Tec Corp Checkout system
JP2011108169A (en) * 2009-11-20 2011-06-02 Ishida Co Ltd Store management system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005115504A (en) * 2003-10-06 2005-04-28 Mega Chips Corp Image retrieval system and image database
JP2009093289A (en) * 2007-10-04 2009-04-30 Toshiba Tec Corp Checkout system
JP2011108169A (en) * 2009-11-20 2011-06-02 Ishida Co Ltd Store management system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019054518A (en) * 2018-10-11 2019-04-04 キヤノンマーケティングジャパン株式会社 Network camera system, information processing method, and program
JP7409637B2 (en) 2019-12-12 2024-01-09 Necソリューションイノベータ株式会社 Calculation method
CN111757067A (en) * 2020-07-08 2020-10-09 福建省高速公路信息科技有限公司 Expressway service area cash register inspection system and method based on video AI

Also Published As

Publication number Publication date
JP6417752B2 (en) 2018-11-07

Similar Documents

Publication Publication Date Title
US20060066913A1 (en) Printing method and printing system
US20070053571A1 (en) Image searching apparatus, image printing apparatus, print ordering system, over-the-counter printing terminal apparatus, image capturing apparatus, image searching program and method
CN101754033B (en) Image sensing device and control method thereof
US20130162672A1 (en) Image processing device, image processing method, and program
JP6373056B2 (en) IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND IMAGE PROCESSING METHOD
JP2004295231A (en) Method for displaying image and device and system for accepting print order
KR20070086615A (en) Apparatus, method and program for information processing
US10070175B2 (en) Method and system for synchronizing usage information between device and server
JP2010021921A (en) Electronic camera and image processing program
CN100534134C (en) Apparatus, method and program for information processing
JP6417752B2 (en) Network camera system, information processing method, program
JP2009027647A (en) Captured image recording system, photographic device, captured image recording method
JP5402026B2 (en) Electronic camera and image processing program
JP6725853B2 (en) Network camera system, information processing method, program
JP2002084440A (en) Digital camera, image processing method and recording medium
JP6366268B2 (en) Imaging apparatus and control method thereof
JP5195317B2 (en) Camera device, photographing method, and photographing control program
JP2009071480A (en) Imaging device, imaging method, and program
KR20050086824A (en) Digital camera device and printing method of digital camera device
JP2015106843A (en) Imaging device, imaging control method and program
JP2014168207A (en) Imaging apparatus, control method of the same, and program
JP2012235273A (en) Imaging device, control method, and program
JP2014115772A (en) Image processing apparatus, image processing system, control method, and program
US8934738B2 (en) Image processing apparatus and method for controlling the same
JP2015115741A (en) Image management device, image management method, and program

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20161101

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161101

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170630

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170630

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180312

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180410

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180518

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20180703

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180911

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180924

R151 Written notification of patent or utility model registration

Ref document number: 6417752

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20181031

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250