JP6905173B2 - Information processing system, information processing method - Google Patents

Information processing system, information processing method Download PDF

Info

Publication number
JP6905173B2
JP6905173B2 JP2016213319A JP2016213319A JP6905173B2 JP 6905173 B2 JP6905173 B2 JP 6905173B2 JP 2016213319 A JP2016213319 A JP 2016213319A JP 2016213319 A JP2016213319 A JP 2016213319A JP 6905173 B2 JP6905173 B2 JP 6905173B2
Authority
JP
Japan
Prior art keywords
information processing
dimensional code
network camera
processing device
receiving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016213319A
Other languages
Japanese (ja)
Other versions
JP2018074431A (en
Inventor
齊藤 洋
洋 齊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Marketing Japan Inc
Canon IT Solutions Inc
Original Assignee
Canon Marketing Japan Inc
Canon IT Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Marketing Japan Inc, Canon IT Solutions Inc filed Critical Canon Marketing Japan Inc
Priority to JP2016213319A priority Critical patent/JP6905173B2/en
Publication of JP2018074431A publication Critical patent/JP2018074431A/en
Priority to JP2021104757A priority patent/JP2021158687A/en
Application granted granted Critical
Publication of JP6905173B2 publication Critical patent/JP6905173B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、情報処理装置、情報処理方法、プログラムに関する。 The present invention relates to an information processing device, an information processing method, and a program.

従来から、ビルや工場などにはネットワークカメラ(監視カメラ)が設置され、不審者の監視などに活用されている。 Conventionally, network cameras (surveillance cameras) have been installed in buildings and factories and are used for monitoring suspicious persons.

また、工場内においては、ネットワークカメラにより作業者の作業内容を撮影し、不良発生時における作業内容の検証等に活用されている。 Further, in the factory, the work contents of the worker are photographed by a network camera and used for verification of the work contents when a defect occurs.

作業者による作業内容を記録するためには、作業者の手元をズームアップした映像を記録する必要がある。しかし、工場内には多数の作業者が作業をしており、作業場所も多数に渡る。そのため、1つの作業場所を1台のカメラで撮影すると、膨大な数のネットワークカメラが必要になる。 In order to record the work contents by the worker, it is necessary to record a zoomed-in image of the worker's hand. However, many workers are working in the factory, and there are many work places. Therefore, if one work place is photographed by one camera, a huge number of network cameras are required.

そこで、特許文献1には、少ない数のネットワークカメラにより作業者による具体的な作業内容を撮影し詳細な映像記録を残すために、あらかじめ設定された一連の作業手順の進捗に連動してカメラのパン・チルトを自動で制御する仕組みについて記載されている。 Therefore, in Patent Document 1, in order to capture a specific work content by a worker with a small number of network cameras and leave a detailed video record, the camera is linked to the progress of a series of preset work procedures. The mechanism for automatically controlling pan / tilt is described.

特開2015−204506号公報Japanese Unexamined Patent Publication No. 2015-204506

しかし、不良発生時等の作業内容を確認するためには、不良が発生した品物に係る作業を確認する必要がある。また、当該作業を確認するためには、撮影された膨大な映像の中から当該作業が撮影された映像を探し出す必要があり、非常に煩雑な作業である。 However, in order to confirm the work contents when a defect occurs, it is necessary to confirm the work related to the item in which the defect has occurred. Further, in order to confirm the work, it is necessary to search for the video in which the work was shot from the enormous amount of shot video, which is a very complicated work.

そこで、本発明は、ネットワークカメラにより撮影された映像を効率的に探し出すことが可能な仕組みを提供することを目的とする。 Therefore, an object of the present invention is to provide a mechanism capable of efficiently searching for an image captured by a network camera.

本発明の情報処理装置は、携帯端末により撮影された二次元コードを受信する受信手段と、前記受信手段により受信した二次元コードを、ネットワークカメラにより撮影された映像中から検出する検出手段と、前記検出手段により検出された二次元コードが撮影される画角になるよう、前記ネットワークカメラのPTZを調整する制御手段と、前記ネットワークカメラにより撮影された映像を、前記二次元コードにより特定される識別情報と対応付けて管理する管理手段と、を備えることを特徴とする。 The information processing device of the present invention includes a receiving means for receiving a two-dimensional code taken by a mobile terminal, a detecting means for detecting the two-dimensional code received by the receiving means from an image taken by a network camera, and a detection means. The control means for adjusting the PTZ of the network camera and the image captured by the network camera are specified by the two-dimensional code so that the two-dimensional code detected by the detection means has a shooting angle. It is characterized by including a management means for managing the identification information in association with the identification information.

また、本発明の情報処理方法は、情報処理装置における情報処理方法であって、前記情報処理装置の受信手段が、携帯端末により撮影された二次元コードを受信する受信工程と、前記情報処理装置の検出手段が、前記受信工程により受信した二次元コードを、ネットワークカメラにより撮影された映像中から検出する検出工程と、前記情報処理装置の制御手段が、前記検出工程により検出された二次元コードが撮影される画角になるよう、前記ネットワークカメラのPTZを調整する制御工程と、前記情報処理装置の管理手段が、前記ネットワークカメラにより撮影された映像を、前記二次元コードにより特定される識別情報と対応付けて管理する管理工程と、を備えることを特徴とする。 Further, the information processing method of the present invention is an information processing method in an information processing device, and is a receiving step in which the receiving means of the information processing device receives a two-dimensional code photographed by a mobile terminal, and the information processing device. The detection step of detecting the two-dimensional code received by the receiving step from the image captured by the network camera, and the two-dimensional code detected by the control means of the information processing apparatus in the detection step. The control step of adjusting the PTZ of the network camera and the management means of the information processing device identify the image captured by the network camera by the two-dimensional code. It is characterized by including a management process for managing information in association with information.

また、本発明のプログラムは、情報処理装置において実行可能なプログラムであって、前記情報処理装置を、携帯端末により撮影された二次元コードを受信する受信手段と、前記受信手段により受信した二次元コードを、ネットワークカメラにより撮影された映像中から検出する検出手段と、前記検出手段により検出された二次元コードが撮影される画角になるよう、前記ネットワークカメラのPTZを調整する制御手段と、前記ネットワークカメラにより撮影された映像を、前記二次元コードにより特定される識別情報と対応付けて管理する管理手段として機能させるためのプログラム。 Further, the program of the present invention is a program that can be executed in the information processing device, and the information processing device is received by a receiving means for receiving a two-dimensional code photographed by a mobile terminal and a two-dimensional received by the receiving means. A detection means that detects the code from the image captured by the network camera, a control means that adjusts the PTZ of the network camera so that the two-dimensional code detected by the detection means has a shooting angle, and the like. A program for functioning as a management means for managing an image captured by the network camera in association with the identification information specified by the two-dimensional code.

本発明によれば、ネットワークカメラにより撮影された映像を効率的に探し出すことが可能となる。 According to the present invention, it is possible to efficiently search for an image captured by a network camera.

本発明の情報処理システムの構成の一例を示す図The figure which shows an example of the structure of the information processing system of this invention 情報処理装置101、録画サーバ102のハードウェア構成の一例を示すブロック図Block diagram showing an example of the hardware configuration of the information processing device 101 and the recording server 102 映像記録処理を示すフローチャートFlowchart showing video recording processing 二次元コードと伝票番号(商品等を識別する識別情報)が対応付けて記憶されたデータテーブルの一例を示す図A diagram showing an example of a data table in which a two-dimensional code and a slip number (identification information for identifying a product, etc.) are stored in association with each other. 伝票番号と動画データとが対応付けて記録されたテーブルの一例を示す図The figure which shows an example of the table which recorded the slip number and the moving image data in association with each other. ステップS310の処理により携帯端末104に表示される通知画面の一例を示す図The figure which shows an example of the notification screen displayed on the mobile terminal 104 by the process of step S310. ステップS318の処理により携帯端末104に表示される通知画面の一例を示す図The figure which shows an example of the notification screen displayed on the mobile terminal 104 by the process of step S318. 二次元コードの一例を示す図Diagram showing an example of a two-dimensional code

以下、図面を参照して、本発明の実施形態を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明の情報処理システムの構成の一例を示す図である。図1に示すように、本実施形態における情報処理システムは、情報処理装置101と録画サーバ102とネットワークカメラ103と携帯端末104がそれぞれネットワーク110を介して通信可能に接続されている。 FIG. 1 is a diagram showing an example of the configuration of the information processing system of the present invention. As shown in FIG. 1, in the information processing system of the present embodiment, the information processing device 101, the recording server 102, the network camera 103, and the mobile terminal 104 are connected to each other so as to be able to communicate with each other via the network 110.

図2は、本発明の実施形態に係わる情報処理装置101、録画サーバ102、携帯端末104のハードウェア構成の一例を示すブロック図である。 FIG. 2 is a block diagram showing an example of the hardware configuration of the information processing device 101, the recording server 102, and the mobile terminal 104 according to the embodiment of the present invention.

図2に示すように、情報処理装置101では、システムバス200を介してCPU(Central Processing Unit)201、ROM(Read Only Memory)202、RAM(Random Access Memory)203、記憶装置204、入力コントローラ205、音声入力コントローラ206、ビデオコントローラ207、メモリコントローラ208、よび通信I/Fコントローラ209が接続される。 As shown in FIG. 2, in the information processing apparatus 101, the CPU (Central Processing Unit) 201, the ROM (Read Only Memory) 202, the RAM (Random Access Memory) 203, the storage device 204, and the input controller 205 are provided via the system bus 200. , Voice input controller 206, video controller 207, memory controller 208, and communication I / F controller 209 are connected.

CPU201は、システムバス200に接続される各デバイスやコントローラを統括的に制御する。 The CPU 201 comprehensively controls each device and controller connected to the system bus 200.

ROM202あるいは記憶装置204は、CPU201が実行する制御プログラムであるBIOS(Basic Input/Output System)やOS(Operating System)や、本情報処理方法を実現するためのコンピュータ読み取り実行可能なプログラムおよび必要な各種データ(データテーブルを含む)を保持している。 The ROM 202 or the storage device 204 is a control program executed by the CPU 201, such as a BIOS (Basic Input / Output System) or an OS (Operating System), a computer-readable and executable program for realizing the information processing method, and various necessary programs. Holds data (including data table).

RAM203は、CPU201の主メモリ、ワークエリア等として機能する。CPU201は、処理の実行に際して必要なプログラム等をROM202あるいは記憶装置204からRAM203にロードし、ロードしたプログラムを実行することで各種動作を実現する。 The RAM 203 functions as a main memory, a work area, and the like of the CPU 201. The CPU 201 realizes various operations by loading a program or the like necessary for executing the process from the ROM 202 or the storage device 204 into the RAM 203 and executing the loaded program.

入力コントローラ205は、キーボード/タッチパネル210などの入力装置からの入力を制御する。入力装置はこれに限ったものでなく、マウスやマルチタッチスクリーンなどの、複数の指でタッチされた位置を検出することが可能なタッチパネルであってもよい。 The input controller 205 controls input from an input device such as a keyboard / touch panel 210. The input device is not limited to this, and may be a touch panel such as a mouse or a multi-touch screen that can detect the position touched by a plurality of fingers.

ユーザがタッチパネルに表示されたアイコンやカーソルやボタンに合わせて押下(指等でタッチ)することにより、各種の指示を行うことができる。 Various instructions can be given by the user pressing (touching with a finger or the like) according to the icon, cursor, or button displayed on the touch panel.

この入力装置を用いて各種通信装置で利用可能な通信宛先に対する宛先を入力するようになっている。 This input device is used to input a destination for a communication destination that can be used by various communication devices.

音声入力コントローラ206は、マイク211からの入力を制御する。マイク211から入力された音声を音声認識することが可能となっている。 The voice input controller 206 controls the input from the microphone 211. It is possible to recognize the voice input from the microphone 211.

ビデオコントローラ207は、ディスプレイ212などの外部出力装置への表示を制御する。ディスプレイは本体と一体になったノート型パソコンのディスプレイも含まれるものとする。なお、外部出力装置はディスプレイに限ったものははく、例えばプロジェクタであってもよい。また、前述のタッチ操作により受け付け可能な装置については、キーボード/タッチパネル210からの入力を受け付けることも可能となる。 The video controller 207 controls the display on an external output device such as the display 212. The display shall include the display of a notebook computer integrated with the main body. The external output device is not limited to the display, and may be, for example, a projector. Further, for the device that can be accepted by the above-mentioned touch operation, it is also possible to accept the input from the keyboard / touch panel 210.

なおビデオコントローラ207は、表示制御を行うためのビデオメモリ(VRAM)を制御することが可能で、ビデオメモリ領域としてRAM203の一部を利用することもできるし、別途専用のビデオメモリを設けることも可能である。 The video controller 207 can control a video memory (VRAM) for performing display control, can use a part of the RAM 203 as a video memory area, or can provide a dedicated video memory separately. It is possible.

本発明では、ユーザが情報処理装置を通常の表示に用いられる第1のビデオメモリ領域と、所定の画面が表示される場合に、第1のビデオメモリ領域の表示内容に重ねての表示に用いられる第2のビデオメモリ領域を有している。ビデオメモリ領域は2つに限ったものではなく、情報処理装置の資源が許す限り複数有することが可能なものとする。 In the present invention, when the first video memory area to which the user is used to display normal information processing apparatus, the predetermined screen is displayed, the display of the superimposed display contents of the first video memory area It has a second video memory area used. The video memory area is not limited to two, and it is possible to have a plurality of video memory areas as long as the resources of the information processing device allow.

メモリコントローラ208は、外部メモリ213へのアクセスを制御する。外部メモリとしては、ブートプログラム、各種アプリケーション、フォントデータ、ユーザファイル、編集ファイル、および各種データ等を記憶する外部記憶装置(ハードディスク)、フレキシブルディスク(FD)、或いはPCMCIAカードスロットにアダプタを介して接続されるコンパクトフラッシュ(登録商標)メモリ等を利用可能である。 The memory controller 208 controls access to the external memory 213. The external memory is connected to an external storage device (hard disk), flexible disk (FD), or PCMCIA card slot that stores boot programs, various applications, font data, user files, edit files, various data, etc. via an adapter. Compact flash (registered trademark) memory and the like can be used.

通信I/Fコントローラ209、ネットワーク214を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いた通信やISDNなどの電話回線、および携帯電話の3G回線を用いた通信が可能である。 It connects and communicates with an external device via the communication I / F controller 209 and the network 214, and executes communication control processing on the network. For example, communication using TCP / IP, a telephone line such as ISDN, and communication using a 3G line of a mobile phone are possible.

なお、記憶装置204は情報を永続的に記憶するための媒体であって、その形態をハードディスク等の記憶装置に限定するものではない。例えば、SSD(Solid State Drive)などの媒体であってもよい。 The storage device 204 is a medium for permanently storing information, and its form is not limited to a storage device such as a hard disk. For example, it may be a medium such as SSD (Solid State Drive).

また本実施形態における通信端末で行われる各種処理時の一時的なメモリエリアとしても利用可能である。 It can also be used as a temporary memory area during various processes performed by the communication terminal in the present embodiment.

次に図3に示すフローチャートを用いて、本実施形態における映像記録処理について説明する。 Next, the video recording process in the present embodiment will be described with reference to the flowchart shown in FIG.

ステップS301では、情報処理装置101のCPU201は、携帯端末において撮影された二次元コードを取得する。 In step S301, the CPU 201 of the information processing device 101 acquires the two-dimensional code captured by the mobile terminal.

ここで、二次元コードとは、例えば特開2009−78973号公報にあるように、複数種類のセルが配列されて構成されるコード等のことをいう。特開2009−78973号公報に記載された二次元コードは、静止画中に当該二次元コードが含まれている場合、当該二次元コードのID(識別情報)と、当該二次元コードの静止画中の位置(座標)とが取得されるという特徴を有するものである。
二次元コードの一例を図8に示す。
Here, the two-dimensional code refers to a code or the like in which a plurality of types of cells are arranged, as described in, for example, Japanese Patent Application Laid-Open No. 2009-78973. When the two-dimensional code is included in the still image, the two-dimensional code described in JP-A-2009-78973 includes the ID (identification information) of the two-dimensional code and the still image of the two-dimensional code. It has the feature that the position (coordinates) inside is acquired.
An example of the two-dimensional code is shown in FIG.

ここで取得するのは、二次元コードそのものの画像であっても良いし、当該二次元コードを識別する情報(二次元コードから得られる識別情報)であっても良い。 What is acquired here may be an image of the two-dimensional code itself, or information for identifying the two-dimensional code (identification information obtained from the two-dimensional code).

ステップS302では、情報処理装置101のCPU201は、ステップS301で取得した二次元コードの検出指示をネットワークカメラ103に対して指示する。 In step S302, the CPU 201 of the information processing device 101 instructs the network camera 103 to instruct the network camera 103 to detect the two-dimensional code acquired in step S301.

ステップS303では、情報処理装置101のCPU201は、ステップS301で取得した二次元コードを検出できたか否かを判定する。 In step S303, the CPU 201 of the information processing device 101 determines whether or not the two-dimensional code acquired in step S301 could be detected.

検出できた場合(ステップS303:YES)は、処理をステップS304に移行する。 If it can be detected (step S303: YES), the process proceeds to step S304.

ステップS304では、情報処理装置101のCPU201は、ステップS303で検出した二次元コードが画像の略中心になるようネットワークカメラのPTZを調整する。 In step S304, the CPU 201 of the information processing apparatus 101 adjusts the PTZ of the network camera so that the two-dimensional code detected in step S303 is substantially the center of the image.

具体的には、二次元コードが画像の中心になるようパン・チルトを調整し、ズームに関しては二次元コードが所定の大きさで撮影できるように調整する。 Specifically, the pan / tilt is adjusted so that the two-dimensional code is at the center of the image, and the zoom is adjusted so that the two-dimensional code can be photographed at a predetermined size.

ステップS305では、情報処理装置101のCPU201は、ネットワークカメラ103で撮影された映像の記録を開始する。 In step S305, the CPU 201 of the information processing device 101 starts recording the video captured by the network camera 103.

ステップS306では、情報処理装置101のCPU201は、ステップS301で取得した二次元コードとは別の二次元コードを受信したか否かを判定する。 In step S306, the CPU 201 of the information processing apparatus 101 determines whether or not a two-dimensional code different from the two-dimensional code acquired in step S301 has been received.

すなわち、別の作業者が新たな商品に対応する二次元コードを携帯端末104で読み取ったか否か(当該商品に係る作業を開始したか否か)を判定する。 That is, it is determined whether or not another worker has read the two-dimensional code corresponding to the new product with the mobile terminal 104 (whether or not the work related to the product has been started).

新たな二次元コードを受信した場合(ステップS306:YES)は、処理をステップS310に移行する。 When a new two-dimensional code is received (step S306: YES), the process proceeds to step S310.

新たな二次元コードを受信していない場合(ステップS306:NO)は、処理をステップS307に移行する。 If the new two-dimensional code has not been received (step S306: NO), the process proceeds to step S307.

ステップS307では、情報処理装置101のCPU201は、記録を終了する指示を受け付けたか否かを判定する。 In step S307, the CPU 201 of the information processing device 101 determines whether or not the instruction to end the recording has been received.

なお、記録終了の指示は、携帯端末104に対する操作により受け付けても良いし、記録終了用の二次元コードを検出することで受け付けても良い。また、ユーザが所定の動作をし、当該動作を検出することで終了指示を受け付けても良い。 The instruction to end recording may be accepted by operating the mobile terminal 104, or may be accepted by detecting a two-dimensional code for ending recording. Further, the user may perform a predetermined operation and receive the end instruction by detecting the operation.

記録終了指示を受け付けた場合(ステップS307:YES)は、処理をステップS308に移行する。 When the recording end instruction is received (step S307: YES), the process proceeds to step S308.

記録終了指示を受け付けていない場合(ステップS307:NO)は、処理をステップS306に戻す。 If the recording end instruction is not accepted (step S307: NO), the process returns to step S306.

ステップS308では、情報処理装置101のCPU201は、映像の記録を終了する。 In step S308, the CPU 201 of the information processing device 101 ends the recording of the video.

ステップS309では、情報処理装置101のCPU201は、記録された映像と、ステップS301で取得した二次元コードにより特定される識別情報とを対応付けて保存する。 In step S309, the CPU 201 of the information processing device 101 stores the recorded video in association with the identification information specified by the two-dimensional code acquired in step S301.

以上の処理により、伝票番号と当該伝票番号により特定される商品に関する作業を撮影した映像とが対応付けて記録される。これにより、例えば伝票番号1234の商品において不良が発生した場合、当該伝票番号に対応付けられた映像を確認することで、当該商品に係る作業内容を確認することが可能となる。そのため、映像を探し出す手間を低減させることが可能となる。 By the above processing, the slip number and the video of the work related to the product specified by the slip number are recorded in association with each other. As a result, for example, when a defect occurs in the product of slip number 1234, it is possible to confirm the work content related to the product by checking the video associated with the slip number. Therefore, it is possible to reduce the time and effort required to find the image.

ステップS310では、情報処理装置101のCPU201は、ステップS306で受信した二次元コードを読み取った携帯端末104に対して、作業を待機する旨の通知を出す。 In step S310, the CPU 201 of the information processing device 101 issues a notification to the mobile terminal 104 that has read the two-dimensional code received in step S306 to wait for work.

ステップS311では、情報処理装置101のCPU201は、記録を終了する指示を受け付けたか否かを判定する。 In step S311 the CPU 201 of the information processing apparatus 101 determines whether or not the instruction to end the recording has been received.

なお、記録終了の指示は、携帯端末104に対する操作により受け付けても良いし、記録終了用の二次元コードを検出することで受け付けても良い。また、ユーザが所定の動作をし、当該動作を検出することで終了指示を受け付けても良い。 The instruction to end recording may be accepted by operating the mobile terminal 104, or may be accepted by detecting a two-dimensional code for ending recording. Further, the user may perform a predetermined operation and receive the end instruction by detecting the operation.

ステップS312では、情報処理装置101のCPU201は、映像の記録を終了する。 In step S312, the CPU 201 of the information processing device 101 ends the recording of the video.

ステップS313では、情報処理装置101のCPU201は、記録された映像と、ステップS301で取得した二次元コードにより特定される識別情報とを対応付けて保存する。 In step S313, the CPU 201 of the information processing device 101 stores the recorded video in association with the identification information specified by the two-dimensional code acquired in step S301.

以上の処理により、伝票番号と当該伝票番号により特定される商品に関する作業を撮影した映像とが対応付けて記録される。これにより、例えば伝票番号1234の商品において不良が発生した場合、当該伝票番号に対応付けられた映像を確認することで、当該商品に係る作業内容を確認することが可能となる。そのため、映像を探し出す手間を低減させることが可能となる。 By the above processing, the slip number and the video of the work related to the product specified by the slip number are recorded in association with each other. As a result, for example, when a defect occurs in the product of slip number 1234, it is possible to confirm the work content related to the product by checking the video associated with the slip number. Therefore, it is possible to reduce the time and effort required to find the image.

ステップS314では、情報処理装置101のCPU201は、ステップS306で取得した二次元コードの検出指示をネットワークカメラ103に対して指示する。 In step S314, the CPU 201 of the information processing device 101 instructs the network camera 103 to instruct the network camera 103 to detect the two-dimensional code acquired in step S306.

ステップS315では、情報処理装置101のCPU201は、ステップS306で取得した二次元コードを検出できたか否かを判定する。 In step S315, the CPU 201 of the information processing device 101 determines whether or not the two-dimensional code acquired in step S306 could be detected.

検出できた場合(ステップS315:YES)は、処理をステップS316に移行する。 If it can be detected (step S315: YES), the process proceeds to step S316.

ステップS316では、情報処理装置101のCPU201は、ステップS315で検出した二次元コードが画像の略中心になるようネットワークカメラのPTZを調整する。 In step S316, the CPU 201 of the information processing apparatus 101 adjusts the PTZ of the network camera so that the two-dimensional code detected in step S315 is substantially the center of the image.

具体的には、二次元コードが画像の中心になるようパン・チルトを調整し、ズームに関しては二次元コードが所定の大きさで撮影できるように調整する。 Specifically, the pan / tilt is adjusted so that the two-dimensional code is at the center of the image, and the zoom is adjusted so that the two-dimensional code can be photographed at a predetermined size.

ステップS317では、情報処理装置101のCPU201は、ネットワークカメラ103で撮影された映像の記録を開始する。 In step S317, the CPU 201 of the information processing device 101 starts recording the video captured by the network camera 103.

ステップS318では、情報処理装置101のCPU201は、ステップS310で待機通知をした携帯端末104に対して作業開始を許可する。
そして、処理をステップS306に戻す。
In step S318, the CPU 201 of the information processing device 101 permits the mobile terminal 104 that has given the standby notification in step S310 to start work.
Then, the process returns to step S306.

図4は、二次元コードと伝票番号(商品等を識別する識別情報)が対応付けて記憶されたデータテーブルの一例を示す図である。本実施例においては、予め二次元コードと伝票番号とを対応付けて記憶しているものとする。 FIG. 4 is a diagram showing an example of a data table in which a two-dimensional code and a slip number (identification information for identifying a product or the like) are stored in association with each other. In this embodiment, it is assumed that the two-dimensional code and the slip number are stored in association with each other in advance.

図5は、ステップS309やS313の処理により、伝票番号と動画データとが対応付けて記録されたテーブルの一例を示す図である。 FIG. 5 is a diagram showing an example of a table in which slip numbers and moving image data are recorded in association with each other by the processing of steps S309 and S313.

図6は、ステップS310の処理により携帯端末104に表示される通知画面の一例を示す図である。図6に示す通り、作業を一時的に待機する旨が通知されている。 FIG. 6 is a diagram showing an example of a notification screen displayed on the mobile terminal 104 by the process of step S310. As shown in FIG. 6, it is notified that the work is temporarily put on standby.

図7は、ステップS318の処理により携帯端末104に表示される通知画面の一例を示す図である。図7に示す通り、作業の開始を許可する旨が通知されている。 FIG. 7 is a diagram showing an example of a notification screen displayed on the mobile terminal 104 by the process of step S318. As shown in FIG. 7, it is notified that the start of the work is permitted.

以上、実施形態について示したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。 Although the embodiments have been described above, the present invention can be implemented as, for example, a system, an apparatus, a method, a program, a recording medium, or the like. Specifically, it may be applied to a system composed of a plurality of devices, or may be applied to a device composed of one device.

また、本発明におけるプログラムは、図3の処理をコンピュータに実行させるプログラムである。なお、本発明におけるプログラムは、図3の各処理ごとのプログラムであってもよい。 Further, the program in the present invention is a program that causes a computer to execute the process shown in FIG. The program in the present invention may be a program for each process shown in FIG.

以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。 As described above, a recording medium on which a program that realizes the functions of the above-described embodiment is recorded is supplied to the system or device, and the computer (or CPU or MPU) of the system or device stores the program in the recording medium. Needless to say, the object of the present invention can be achieved by reading and executing.

この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium on which the program is recorded constitutes the present invention.

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、DVD−ROM、磁気テープ、不揮発性のメモリカード、ROM、EEPROM、シリコンディスク等を用いることが出来る。 Recording media for supplying programs include, for example, flexible disks, hard disks, optical disks, magneto-optical disks, CD-ROMs, CD-Rs, DVD-ROMs, magnetic tapes, non-volatile memory cards, ROMs, EEPROMs, and silicon. A disk or the like can be used.

また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, by executing the program read by the computer, not only the function of the above-described embodiment is realized, but also the OS (operating system) or the like running on the computer is actually operated based on the instruction of the program. Needless to say, there are cases where a part or all of the processing is performed and the processing realizes the functions of the above-described embodiment.

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, after the program read from the recording medium is written in the memory provided in the function expansion board inserted in the computer or the function expansion unit connected to the computer, the function expansion board is based on the instruction of the program code. It goes without saying that there is a case where the CPU or the like provided in the function expansion unit performs a part or all of the actual processing, and the function of the above-described embodiment is realized by the processing.

また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 Further, the present invention may be applied to a system composed of a plurality of devices or a device composed of one device. It goes without saying that the present invention can also be applied when it is achieved by supplying a program to a system or an apparatus. In this case, by reading the recording medium in which the program for achieving the present invention is stored into the system or the device, the system or the device can enjoy the effect of the present invention.

さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。 Further, by downloading and reading a program for achieving the present invention from a server, database, or the like on the network by a communication program, the system or device can enjoy the effect of the present invention. It should be noted that all the configurations in which each of the above-described embodiments and modifications thereof are combined are also included in the present invention.

101 情報処理装置
102 録画サーバ
103 ネットワークカメラ
104 携帯端末
101 Information processing device 102 Recording server 103 Network camera 104 Mobile terminal

Claims (5)

情報処理装置と携帯端末およびネットワークカメラとが通信可能に接続された情報処理システムであって、
前記情報処理装置が、前記携帯端末により撮影された二次元コードを受信する受信手段を備え、
前記ネットワークカメラが、前記情報処理装置の受信手段が受信した二次元コードを検出する検出手段を備え、
前記情報処理装置が、
前記受信手段により受信した二次元コードが撮影される画角になるよう、前記ネットワークカメラのパン・チルト・ズームを調整する制御手段と、
前記ネットワークカメラにより撮影された映像を、前記二次元コードにより特定される識別情報と対応付けて管理する管理手段と、
を備えることを特徴とする情報処理システム
An information processing system and information processing apparatus and the portable terminal and the network camera is communicably connected,
The information processing device includes a receiving means for receiving a two-dimensional code photographed by the mobile terminal.
The network camera includes a detecting means for detecting a two-dimensional code received by the receiving means of the information processing apparatus.
The information processing device
A control means for adjusting the pan / tilt / zoom of the network camera so that the two-dimensional code received by the receiving means has an angle of view to be captured.
A management means for managing an image taken by the network camera in association with the identification information specified by the two-dimensional code.
An information processing system characterized by being equipped with.
前記情報処理装置は、
前記ネットワークカメラによる映像記録の終了指示を受け付ける終了指示受付手段をさらに備え、
前記制御手段は、前記終了指示受付手段により終了指示を受け付けた場合、映像記録を終了し、前記受信手段により新たに受信した二次元コードが撮影される画角になるよう、前記ネットワークカメラのパン・チルト・ズームを調整することを特徴とする請求項1に記載の情報処理システム
The information processing device
Further provided with an end instruction receiving means for receiving an end instruction of video recording by the network camera.
When the control means receives the end instruction by the end instruction receiving means, the control means ends the video recording and pans the network camera so that the angle of view is such that the two-dimensional code newly received by the receiving means is captured. The information processing system according to claim 1, wherein the tilt / zoom is adjusted.
前記情報処理装置は、
前記受信手段が、前記ネットワークカメラによる撮影中に別の二次元コードを受信した場合、当該二次元コードを撮影した携帯端末に対して、待機する旨を通知する通知手段と、
をさらに備えることを特徴とする請求項1または2に記載の情報処理システム
The information processing device
When the receiving means receives another two-dimensional code during shooting by the network camera, the notification means for notifying the mobile terminal that has shot the two-dimensional code to wait.
The information processing system according to claim 1 or 2, further comprising.
前記通知手段は、さらに、
前記携帯端末に対して、作業開始を許可する旨を通知することを特徴とする請求項3に記載の情報処理システム
The notification means further
The information processing system according to claim 3, wherein the mobile terminal is notified that the start of work is permitted.
情報処理装置と携帯端末およびネットワークカメラとが通信可能に接続された情報処理システムにおける情報処理方法であって、
前記情報処理装置の受信手段が、前記携帯端末により撮影された二次元コードを受信する受信工程を備え、
前記ネットワークカメラの検出手段が、前記情報処理装置の受信工程において受信した二次元コードを検出する検出工程を備え、
前記情報処理装置の制御手段が、前記受信工程において受信した二次元コードが撮影される画角になるよう、前記ネットワークカメラのパン・チルト・ズームを調整する制御工程と、
前記情報処理装置の管理手段が、前記ネットワークカメラにより撮影された映像を、前記二次元コードにより特定される識別情報と対応付けて管理する管理工程と、
を備えることを特徴とする情報処理方法。
An information processing method in an information processing system in which an information processing device is communicably connected to a mobile terminal and a network camera.
The receiving means of the information processing device includes a receiving step of receiving the two-dimensional code photographed by the mobile terminal.
The detection means of the network camera includes a detection step of detecting a two-dimensional code received in the reception step of the information processing apparatus.
A control step of adjusting the pan / tilt / zoom of the network camera so that the control means of the information processing device has an angle of view at which the two-dimensional code received in the reception step is captured.
A management step in which the management means of the information processing device manages the image captured by the network camera in association with the identification information specified by the two-dimensional code.
An information processing method characterized by being provided with.
JP2016213319A 2016-10-31 2016-10-31 Information processing system, information processing method Active JP6905173B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016213319A JP6905173B2 (en) 2016-10-31 2016-10-31 Information processing system, information processing method
JP2021104757A JP2021158687A (en) 2016-10-31 2021-06-24 Information processing device, information processing method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016213319A JP6905173B2 (en) 2016-10-31 2016-10-31 Information processing system, information processing method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021104757A Division JP2021158687A (en) 2016-10-31 2021-06-24 Information processing device, information processing method and program

Publications (2)

Publication Number Publication Date
JP2018074431A JP2018074431A (en) 2018-05-10
JP6905173B2 true JP6905173B2 (en) 2021-07-21

Family

ID=62115641

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016213319A Active JP6905173B2 (en) 2016-10-31 2016-10-31 Information processing system, information processing method
JP2021104757A Pending JP2021158687A (en) 2016-10-31 2021-06-24 Information processing device, information processing method and program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021104757A Pending JP2021158687A (en) 2016-10-31 2021-06-24 Information processing device, information processing method and program

Country Status (1)

Country Link
JP (2) JP6905173B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115390704A (en) * 2021-05-21 2022-11-25 北京字跳网络技术有限公司 Video generation method and device, electronic equipment and storage medium

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2514779B2 (en) * 1993-09-08 1996-07-10 住友電気工業株式会社 Camera posture parameter calculation method
JP3468255B2 (en) * 1995-09-21 2003-11-17 株式会社エフ・エフ・シー Surveillance camera positioning control device and indicator reading device
JP3047895B2 (en) * 1998-10-14 2000-06-05 日本電気株式会社 White line detection method and apparatus with correction based on vanishing point
JP2005151019A (en) * 2003-11-13 2005-06-09 Canon Inc Portable terminal, its control method, and program
JP2006238103A (en) * 2005-02-25 2006-09-07 Matsushita Electric Ind Co Ltd Network camera and photographic subject image distributing method thereof
JP2007241966A (en) * 2006-03-06 2007-09-20 Ara Software:Kk Video monitoring system
JP2009200973A (en) * 2008-02-22 2009-09-03 Canon Inc Camera control system, camera control method and program
JP4588098B2 (en) * 2009-04-24 2010-11-24 善郎 水野 Image / sound monitoring system
JP2012114886A (en) * 2010-11-22 2012-06-14 Yoshiro Mizuno Image monitoring system by bar code recognition
KR101149820B1 (en) * 2011-09-09 2013-03-11 (주) 대호아이앤티 System and method of managing a landscape remotely using the cctv
JP2014011687A (en) * 2012-06-29 2014-01-20 Sharp Corp Self-propelled imaging apparatus, control program, and computer-readable recording medium containing control program
EP2704096A1 (en) * 2012-08-29 2014-03-05 Delphi Technologies, Inc. Method for calibrating an image capturing device
JP2014053821A (en) * 2012-09-07 2014-03-20 Sogo Keibi Hosho Co Ltd Security system and security method
JP6015276B2 (en) * 2012-09-19 2016-10-26 日産自動車株式会社 Camera mounting error correction apparatus and camera mounting error correction method
JP2016148512A (en) * 2013-06-11 2016-08-18 ヤマハ発動機株式会社 Monocular motion stereo distance estimation method and monocular motion stereo distance estimation device
JP6201148B2 (en) * 2013-12-20 2017-09-27 パナソニックIpマネジメント株式会社 CALIBRATION APPARATUS, CALIBRATION METHOD, MOBILE BODY CAMERA HAVING CALIBRATION FUNCTION, AND PROGRAM
JP6497546B2 (en) * 2015-02-06 2019-04-10 国立研究開発法人農業・食品産業技術総合研究機構 Travel control device
JP6459059B2 (en) * 2015-03-30 2019-01-30 パナソニックIpマネジメント株式会社 Camera control method and camera control system

Also Published As

Publication number Publication date
JP2021158687A (en) 2021-10-07
JP2018074431A (en) 2018-05-10

Similar Documents

Publication Publication Date Title
EP3249568B1 (en) Method and apparatus for displaying application and picture, and electronic device
US10574882B2 (en) Image capturing apparatus, storage space adjusting method thereof and non-transitory computer-readable recording medium
JP2021158687A (en) Information processing device, information processing method and program
JP6070142B2 (en) Mobile terminal, information processing method, program
WO2024046203A1 (en) Content display method and apparatus
TW201308064A (en) Information processing apparatus, information processing method, and program
JP2019117483A (en) Information processing device, control method, and program
CN112437231A (en) Image shooting method and device, electronic equipment and storage medium
JP6691309B2 (en) Information processing apparatus, control method thereof, and program
US20220374087A1 (en) Gesture-based device activation system
JP2018093357A (en) Information processing apparatus, information processing method, program
JP7104291B2 (en) Information processing system, information processing method, program
JP2018074429A (en) Information processing device, information processing method, and program
JP2018124714A (en) Information processing system, information processing method, and program
JP6826281B2 (en) Information processing equipment, information processing methods, programs
JP6544343B2 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND PROGRAM
JP6646226B2 (en) Information processing apparatus, information processing method, and program
JP6493099B2 (en) Display system, control method, and program
JP6128097B2 (en) Information processing apparatus, control method, and program
JP7319521B2 (en) Information processing device, information processing method, program
US10489571B2 (en) Information processing apparatus determining propriety of use based on authentication result of fingerprint authentication process, control method therefor, and storage medium storing control program therefor
KR20140106226A (en) Method for managing for image an electronic device thereof
KR101300052B1 (en) Method for searching image and recording-medium recorded program thereof
JP6718114B2 (en) Information processing device, information processing method, and program
JP2022133407A (en) Information processing system, information processing method, and program

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20161101

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161101

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20180703

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20181031

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190111

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191030

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200623

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201013

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201210

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210525

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210607

R151 Written notification of patent or utility model registration

Ref document number: 6905173

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250