JP5887564B2 - Surveillance camera system and surveillance method in surveillance camera system - Google Patents

Surveillance camera system and surveillance method in surveillance camera system Download PDF

Info

Publication number
JP5887564B2
JP5887564B2 JP2014233930A JP2014233930A JP5887564B2 JP 5887564 B2 JP5887564 B2 JP 5887564B2 JP 2014233930 A JP2014233930 A JP 2014233930A JP 2014233930 A JP2014233930 A JP 2014233930A JP 5887564 B2 JP5887564 B2 JP 5887564B2
Authority
JP
Japan
Prior art keywords
recording
unit
camera
icon
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014233930A
Other languages
Japanese (ja)
Other versions
JP2015201832A (en
Inventor
展幸 和田
展幸 和田
充 河村
充 河村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2014233930A priority Critical patent/JP5887564B2/en
Publication of JP2015201832A publication Critical patent/JP2015201832A/en
Application granted granted Critical
Publication of JP5887564B2 publication Critical patent/JP5887564B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、カメラとの間でデータの入出力を行う監視カメラシステム及び監視カメラシステムにおける監視方法に関する。 The present invention relates to a monitoring camera system that inputs / outputs data to / from a camera and a monitoring method in the monitoring camera system.

従来、カメラとの間でデータの入出力を行う通信システムの一例として、宅内の敷地に入ってきた侵入者を監視する監視カメラシステムが知られている(特許文献1参照)。特許文献1に示す監視カメラシステムは、録画・録音可能なホームサーバと、赤外線センサと、ビデオカメラと、マイクロホンとを備える。赤外線センサが侵入者を検出した場合、ホームサーバは、ビデオカメラ及びマイクロホンを用いて、侵入者に関する映像を録画するとともに、侵入者に関する音声を録音する。   2. Description of the Related Art Conventionally, as an example of a communication system that inputs and outputs data with a camera, a monitoring camera system that monitors an intruder who has entered a site in a home is known (see Patent Document 1). The surveillance camera system shown in Patent Literature 1 includes a home server capable of recording and recording, an infrared sensor, a video camera, and a microphone. When the infrared sensor detects an intruder, the home server uses the video camera and the microphone to record the video about the intruder and also record the sound about the intruder.

特開2000−99862号公報JP 2000-99862 A

しかしながら、上述した特許文献1では、センサが侵入者を検出した場合、ビデオカメラで撮像された映像を示す画像データ、マイクロホンにより収音された音声の音声データは、ホームサーバにより単に記録されるだけであった。   However, in Patent Document 1 described above, when the sensor detects an intruder, the image data indicating the image captured by the video camera and the sound data of the sound collected by the microphone are simply recorded by the home server. Met.

また、センサが対象(侵入者)を検出してから検出されなくなるまでの画像データを、全て記録媒体に記録しておくと、そのデータ量は膨大であった。   Further, if all the image data from when the sensor detects the target (intruder) until it is no longer detected is recorded on the recording medium, the amount of data is enormous.

また、必要でないシーンの画像データも時系列に記録されてしまうので、記録後、使用者が記録媒体に記録された画像データを再生して内容を確認する作業に長時間を要した。記録された画像データを編集する場合には、その作業にも多くの手間を要することになる。なお、長時間の画像データを録画するためには、大容量の記録媒体を必要とした。   Further, since unnecessary scene image data is also recorded in time series, it takes a long time for the user to reproduce the image data recorded on the recording medium and confirm the contents after recording. When editing the recorded image data, the work also requires a lot of work. In order to record long-time image data, a large-capacity recording medium is required.

本発明は、従来の問題を解決するために、カメラから転送される画像データを記憶する際、簡易な操作により、使用者が必要としない画像データの記憶を抑制する監視カメラシステム及び監視カメラシステムにおける監視方法を提供することを目的とする。 In order to solve the conventional problems, the present invention provides a monitoring camera system and a monitoring camera system that suppress storage of image data not required by a user by a simple operation when storing image data transferred from a camera. The purpose is to provide a monitoring method.

本発明は、撮像部を有する監視カメラと、前記監視カメラとDECTの通信方式を用いて無線接続し、固定電話網に接続されて他固定電話機と接続し、かつ前記DECTの通信方式を用いてコードレス子機と接続する親機と、を備えた監視カメラシステムであって、前記親機は、前記監視カメラに対して画像の転送を要求し、前記監視カメラは、前記親機から画像データの転送要求を受けると、前記親機に前記撮像部で得た画像データを前記親機に転送し、前記親機は、無線ルータを介して前記親機と接続するとともに携帯電話網を介して他携帯電話機と接続する携帯電話端末から、前記無線ルータを介して受信される画像転送要求により、前記監視カメラから転送された前記画像データを前記無線ルータを介して前記携帯電話端末に転送し、前記監視カメラで得た前記画像データを前記携帯電話端末に表示させる、監視カメラシステムである。 The present invention wirelessly connects a surveillance camera having an imaging unit to the surveillance camera using a DECT communication system, is connected to a fixed telephone network and connected to another fixed telephone, and uses the DECT communication system a base unit to connect cordless handset, a surveillance camera system wherein the base unit, the image transfer request to the surveillance cameras, the monitoring camera, the image data from said master unit Upon receiving the transfer request, transfers the image data obtained by the imaging unit to the master unit to the master unit, the master unit a mobile telephone network together when connected to the master unit via a wireless router The image data transferred from the surveillance camera is transferred to the mobile phone terminal via the wireless router in response to an image transfer request received via the wireless router from a mobile phone terminal connected to another mobile phone via the wireless router. tooth And displays the image data obtained in the previous SL surveillance camera to the mobile phone terminal, a surveillance camera system.

また、本発明は、撮像部を有する監視カメラと、前記監視カメラとDECTの通信方式を用いて無線接続し、固定電話網に接続されて他固定電話機と接続し、かつ前記DECTの通信方式を用いてコードレス子機と接続する親機と、を備えた監視カメラシステムにおける監視方法であって、前記親機は、前記監視カメラに対して画像の転送を要求し、前記監視カメラは、前記親機から画像データの転送要求を受けると、前記親機に前記撮像部で得た画像データを前記親機に転送し、前記親機は、無線ルータを介して前記親機と接続するとともに携帯電話網を介して他携帯電話機と接続する携帯電話端末から、前記無線ルータを介して受信される画像転送要求により、前記監視カメラから転送された前記画像データを前記無線ルータを介して前記携帯電話端末に転送し、前記監視カメラで得た前記画像データを前記携帯電話端末に表示させる、監視カメラシステムにおける監視方法である。 Further, the present invention provides a surveillance camera having an imaging unit, wirelessly connected to the surveillance camera using a communication system of DECT, connected to a fixed telephone network and connected to another fixed telephone, and has a communication system of DECT. a monitoring method in a monitoring camera system having a base unit to connect the cordless handset, the use, the master unit, the requests transfer of the image to the monitoring cameras, the monitoring camera, the When receiving a transfer request for image data from the master unit, and transfers the image data obtained by the imaging unit to the master unit to the master unit, the master unit in together when connected to the master unit via a wireless router via the mobile telephone network from the mobile phone terminal to be connected with another mobile phone, the the image transfer request received via the wireless router, before via the wireless router the image data transferred from the monitoring camera It was transferred to the portable telephone terminal, and displays the image data obtained by the monitoring camera in the portable telephone terminal, a monitoring method in a surveillance camera system.

本発明によれば、カメラから転送される画像データを記憶する際、使用者が必要としない画像データの画像記憶部への記憶を抑制することができる。   ADVANTAGE OF THE INVENTION According to this invention, when memorize | storing the image data transferred from a camera, the memory | storage to the image storage part of the image data which a user does not need can be suppressed.

実施の形態における監視カメラシステムのシステム構成を示す図The figure which shows the system configuration | structure of the surveillance camera system in embodiment 親機の内部構成を示すブロック図Block diagram showing the internal configuration of the main unit 子機の内部構成を示すブロック図Block diagram showing the internal configuration of the handset カメラの内部構成を示すブロック図Block diagram showing the internal structure of the camera センサの内部構成を示すブロック図Block diagram showing the internal configuration of the sensor スマートフォンの内部構成を示すブロック図Block diagram showing the internal configuration of the smartphone ホームセキュリティ用のアプリケーションとして起動され、監視カメラの録画中でない時に表示されるスマートフォンのライブモニタ画面の例を示す図The figure which shows the example of the live monitor screen of the smart phone which is started as the application for home security and is displayed when the surveillance camera is not recording (A)〜(C)監視カメラのアプリケーションを起動する際のスマートフォン50の画面の遷移を示す図(A)-(C) The figure which shows the transition of the screen of the smart phone 50 at the time of starting the application of a surveillance camera 監視カメラの録画中の時に表示されるスマートフォンのライブモニタ画面を示す図The figure which shows the live monitor screen of the smart phone which is displayed when the surveillance camera is recording (A)〜(C)待ち受け画面の表示中に人感センサが対象を検出した際のスマートフォンの画面の遷移を示す図(A)-(C) The figure which shows the transition of the screen of a smart phone when a human sensitive sensor detects object during the display of a standby screen. (A)〜(C)ホームセキュリティのアプリケーションのホーム画面を表示中に人感センサが対象を検出した際のスマートフォンの画面の遷移を示す図(A)-(C) The figure which shows the transition of the screen of a smart phone when a human sensor detects a target while displaying the home screen of a home security application. 監視カメラシステムの動作の流れを説明するシーケンス図Sequence diagram explaining the flow of operation of the surveillance camera system 監視カメラシステムの動作の流れを説明するシーケンス図Sequence diagram explaining the flow of operation of the surveillance camera system 親機の動作手順を説明するフローチャートFlowchart explaining operation procedure of base unit

以下、本発明に係る携帯端末及び通信システムの実施形態(以下、「本実施形態」という)について、図面を参照しながら説明する。以下の本実施形態では、本発明に係る通信システムの一例として、ホームセキュリティ等に用いられる監視カメラシステムを例示して説明する。なお、なお、本発明は、通信システムに限定されず、通信システムを構成する各装置又は各装置における方法として表現することも可能である。   Hereinafter, embodiments of a mobile terminal and a communication system according to the present invention (hereinafter referred to as “this embodiment”) will be described with reference to the drawings. In the following embodiment, a surveillance camera system used for home security or the like will be described as an example of a communication system according to the present invention. In addition, this invention is not limited to a communication system, It can also be expressed as each apparatus which comprises a communication system, or the method in each apparatus.

図1は、本実施形態の監視カメラシステム5のシステム構成を示す図である。監視カメラシステム5は、主に宅内8に設置されており、親機10と、2台の子機20A,20Bと、2台のカメラ(屋内カメラ30A,監視カメラ30B)と、各種センサ(具体的には、人感センサ40A,40B,煙センサ40C,開閉センサ40D)と、スマートフォン50と、無線ルータ60とを含む構成である。なお、この監視カメラシステム5の構成は一例であり、種々の態様に変更可能である。   FIG. 1 is a diagram illustrating a system configuration of a monitoring camera system 5 according to the present embodiment. The surveillance camera system 5 is mainly installed in the house 8, and includes a master unit 10, two slave units 20A and 20B, two cameras (indoor camera 30A and surveillance camera 30B), and various sensors (specifically). Specifically, it includes a human sensor 40A, 40B, a smoke sensor 40C, an open / close sensor 40D), a smartphone 50, and a wireless router 60. The configuration of the monitoring camera system 5 is an example, and can be changed to various modes.

親機(ゲートウェイ)10は、監視カメラシステム5の全体の動作を制御する制御装置であり、DECT(Digital Enhanced Cordless Telecommunications)の通信方式を用いて、子機、カメラ、センサ等と通信可能に接続される。また、親機10は、無線LANを用いた無線ルータ60を介してインターネット65(ネットワーク)に接続される。また、親機10は、有線で固定電話網85に接続され、固定電話機80と通話可能である。また、親機10は、差込口10aに挿入された子機20Aを充電する機能を有する。   The base unit (gateway) 10 is a control device that controls the overall operation of the surveillance camera system 5, and is connected to a slave unit, a camera, a sensor, and the like using a DECT (Digital Enhanced Cordless Telecommunications) communication method. Is done. The base unit 10 is connected to the Internet 65 (network) via a wireless router 60 using a wireless LAN. Base unit 10 is connected to fixed telephone network 85 by wire and can communicate with fixed telephone 80. Moreover, the main | base station 10 has a function which charges 20 A of subunit | mobile_units inserted in the insertion port 10a.

子機20A,20Bは、DECTの通信方式で親機10と接続され、親機10と通話可能である。特に、2台の子機20A,20Bを区別する必要が無い場合、子機20と総称する。   The slave units 20A and 20B are connected to the master unit 10 by the DECT communication method and can communicate with the master unit 10. In particular, when there is no need to distinguish between the two slave units 20A and 20B, they are collectively referred to as the slave unit 20.

各種センサ40(具体的には、人感センサ40A,40B,煙センサ40C,開閉センサ40D)は、DECTの通信方式で親機10と接続される。ここでは、センサとして、窓の開閉を検出する開閉センサ40D、煙を感知する煙センサ40C、及び赤外線によって人を感知する人感センサ40A,40Bが用いられる。特に、これらのセンサの種類を区別する必要が無い場合、センサ40と総称する。また、後述するように、カメラ30に内蔵された赤外線センサ313(図4参照)も、人感センサとして用いられる。   Various sensors 40 (specifically, the human sensors 40A and 40B, the smoke sensor 40C, and the open / close sensor 40D) are connected to the parent device 10 by the DECT communication method. Here, an open / close sensor 40D that detects opening / closing of a window, a smoke sensor 40C that detects smoke, and human sensors 40A and 40B that detect people by infrared rays are used as sensors. In particular, when it is not necessary to distinguish between these types of sensors, they are collectively referred to as sensors 40. As will be described later, an infrared sensor 313 (see FIG. 4) built in the camera 30 is also used as a human sensor.

2台のカメラ(屋内カメラ30A,監視カメラ)30Bは、通話機能を有し、DECTの通信方式で親機10と接続される。ここでは、カメラとして、屋外を撮像する監視カメラ30B、及び宅内8を撮像する屋内カメラ30Aが用いられる。特に、カメラの種類を区別する必要が無い場合、カメラ30と総称する。   The two cameras (indoor camera 30A, surveillance camera) 30B have a call function and are connected to the parent device 10 by the DECT communication method. Here, as the camera, a surveillance camera 30B that images the outdoors and an indoor camera 30A that images the house 8 are used. In particular, when it is not necessary to distinguish between the types of cameras, the cameras 30 are collectively referred to.

スマートフォン50は、無線LANを用いた無線ルータ60を介して親機10と接続され、また、3G(第3世代)等の通信方式を用いた携帯電話網75を介して携帯電話機70や他のスマートフォン等と接続される。   The smartphone 50 is connected to the parent device 10 via a wireless router 60 using a wireless LAN, and is also connected to the mobile phone 70 and other devices via a mobile phone network 75 using a communication method such as 3G (third generation). Connected with smartphones.

図2は、親機10の内部構成を示すブロック図である。親機10は、制御部109と、記憶部103と、操作部105と、表示部106とを含む構成である。親機10は、各種の入力操作を受け付け、また、親機10は、表示部106に画像等の情報を表示する。制御部109は、呼制御部110及び音声ストリーム処理部112を内蔵し、通話の呼制御や音声データの処理等を行う。   FIG. 2 is a block diagram showing an internal configuration of base unit 10. The base unit 10 includes a control unit 109, a storage unit 103, an operation unit 105, and a display unit 106. The base unit 10 accepts various input operations, and the base unit 10 displays information such as images on the display unit 106. The control unit 109 includes a call control unit 110 and an audio stream processing unit 112, and performs call control of a call, processing of audio data, and the like.

また、親機10は、画像メモリ制御部115と、画像メモリ116とを有し、カメラ30で撮像された画像データ等を画像メモリ116に記憶する。   Master device 10 also includes image memory control unit 115 and image memory 116, and stores image data captured by camera 30 in image memory 116.

また、親機10は、無線LAN制御部121と、無線LAN通信I/F部122とを有し、無線LANで接続された無線ルータ60を介してスマートフォン50、カメラ30等と画像データ及び音声データを送受信する。   In addition, the base unit 10 includes a wireless LAN control unit 121 and a wireless LAN communication I / F unit 122. The smartphone 50, the camera 30, and the like are connected to the smartphone 50, the camera 30, and the like via the wireless router 60 connected by the wireless LAN. Send and receive data.

また、親機10は、DECTプロトコル制御部108と、DECT無線I/F部107とを有し、DECT(Digital Enhanced Cordless Telecommunications)の無線方式を用いて、子機20、センサ40及びカメラ30と無線接続を行う。   The base unit 10 includes a DECT protocol control unit 108 and a DECT wireless I / F unit 107, and uses a DECT (Digital Enhanced Cordless Telecommunications) wireless system to connect the handset 20, the sensor 40, and the camera 30. Make a wireless connection.

また、親機10は、音声バス117と、音声入出力制御部104と、スピーカ129と、マイク128とを有し、外部に対して音声の入出力を行う。   Master device 10 also includes an audio bus 117, an audio input / output control unit 104, a speaker 129, and a microphone 128, and inputs / outputs audio to / from the outside.

また、親機10は、固定電話回線I/F部101を有し、固定電話網85に接続された外部の固定電話機80と通話可能である。   Master device 10 has a fixed telephone line I / F unit 101 and can communicate with an external fixed telephone 80 connected to a fixed telephone network 85.

また、親機10は、子機/携帯端末充電部126を有し、差込口10aに挿入された子機20あるいはスマートフォン50を充電する。   Moreover, the main | base station 10 has the subunit | mobile_unit / portable terminal charging part 126, and charges the subunit | mobile_unit 20 or the smart phone 50 inserted in the insertion port 10a.

また、親機10は、USB通信I/F部127を有し、USB(Universal Serial Bus)規格のインタフェースを有する機器やメモリ等とデータを送受信する。   The base unit 10 also has a USB communication I / F unit 127, and transmits / receives data to / from a device or memory having a USB (Universal Serial Bus) standard interface.

また、親機10は、各種センサ40と複数のカメラ30をそれぞれ関連付けて記憶部103に登録する。例えば、人感センサ40Bと監視カメラ30Bは、屋外の近接した場所に設置されているので、関連付けて登録される。また、監視カメラ30Bは、後述するように、人感センサである赤外線センサ313(図4参照)を一体として内蔵するので、この赤外線センサ313とも関連付けて登録される。また、人感センサ40Aと、煙センサ40Cと、開閉センサ40Dとは、いずれも宅内8に設置されているので、屋内カメラ30Aとそれぞれ関連付けて登録される。   Master device 10 registers various sensors 40 and a plurality of cameras 30 in storage unit 103 in association with each other. For example, the human sensor 40B and the monitoring camera 30B are installed in close proximity to each other and are registered in association with each other. As will be described later, the surveillance camera 30B incorporates an infrared sensor 313 (see FIG. 4), which is a human sensor, and is registered in association with the infrared sensor 313. In addition, since human sensor 40A, smoke sensor 40C, and open / close sensor 40D are all installed in house 8, they are registered in association with indoor camera 30A.

図3は、子機20の内部構成を示すブロック図である。子機20は、制御部247と、記憶部242と、操作部244と、表示部245とを含む構成である。子機20は、各種の入力操作を受け付け、表示部245に画像等の情報を表示する。   FIG. 3 is a block diagram showing an internal configuration of the slave unit 20. The subunit | mobile_unit 20 is the structure containing the control part 247, the memory | storage part 242, the operation part 244, and the display part 245. FIG. The subunit | mobile_unit 20 receives various input operation, and displays information, such as an image, on the display part 245. FIG.

また、子機20は、DECTプロトコル制御部249と、DECT無線I/F部248とを有し、DECTの無線方式を用いて親機10、センサ40及びカメラ30と無線接続を行う。   Moreover, the subunit | mobile_unit 20 has the DECT protocol control part 249 and the DECT radio | wireless I / F part 248, and performs radio | wireless connection with the main | base station 10, the sensor 40, and the camera 30 using the radio | wireless system of DECT.

また、子機20は、音声バス255と、音声入出力制御部243と、スピーカ252と、マイク251とを有し、外部に対して音声の入出力を行う。   Moreover, the subunit | mobile_unit 20 has the audio | voice bus | bath 255, the audio | voice input / output control part 243, the speaker 252, and the microphone 251, and inputs / outputs an audio | voice with respect to the exterior.

図4は、カメラ30の内部構成を示すブロック図である。カメラ30の一例としての屋内カメラ30A及び監視カメラ30Bは、いずれもほぼ同じ仕様を有する。カメラ30は、制御部309と、記憶部303と、操作部305とを含む構成である。カメラ30は、撮像に関する動作を行うとともに、入力操作を受け付ける。   FIG. 4 is a block diagram showing the internal configuration of the camera 30. An indoor camera 30A and a surveillance camera 30B as an example of the camera 30 both have substantially the same specifications. The camera 30 includes a control unit 309, a storage unit 303, and an operation unit 305. The camera 30 performs an operation related to imaging and accepts an input operation.

また、カメラ30は、DECTプロトコル制御部317と、DECT無線I/F部318とを有し、DECTの無線方式を用いて親機10と無線接続を行う。   The camera 30 includes a DECT protocol control unit 317 and a DECT wireless I / F unit 318, and performs wireless connection with the parent device 10 using a DECT wireless system.

また、カメラ30は、無線LAN制御部321と、無線LAN通信I/F部322とを有し、無線LANで接続された無線ルータ60を介して親機10、スマートフォン50等と画像データ及び音声データを送受信する。   In addition, the camera 30 includes a wireless LAN control unit 321 and a wireless LAN communication I / F unit 322, and image data and audio are transmitted to the parent device 10, the smartphone 50, and the like via a wireless router 60 connected by a wireless LAN. Send and receive data.

また、カメラ30は、音声バス307と、音声入出力制御部304と、スピーカ329と、マイク328とを有し、外部に対して音声の入出力を行う。   The camera 30 includes an audio bus 307, an audio input / output control unit 304, a speaker 329, and a microphone 328, and inputs / outputs audio to / from the outside.

また、カメラ30は、撮像部312と、画像メモリ制御部316と、画像メモリ315とを有し、撮像部312で撮像された画像データを画像メモリ315に記憶する。撮像部312は、レンズ及び撮像素子(例えば、CCD(Charged Coupled Device)、又はCMOS(Complementary Metal Oxide Semiconductor)等のイメージセンサ)を有する。   In addition, the camera 30 includes an imaging unit 312, an image memory control unit 316, and an image memory 315, and stores image data captured by the imaging unit 312 in the image memory 315. The imaging unit 312 includes a lens and an imaging device (for example, an image sensor such as a CCD (Charged Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor)).

また、カメラ30は、人感センサとして、PIR(Passive Infra Red)センサである赤外線センサ313を一体に内蔵する。赤外線センサ313は、人が発する熱(赤外線)の変化を検出して人の存在を感知する。カメラ30は、商用交流を電源とする電源部314を有する。   Further, the camera 30 integrally incorporates an infrared sensor 313 that is a PIR (Passive Infra Red) sensor as a human sensor. The infrared sensor 313 detects the presence of a person by detecting a change in heat (infrared ray) generated by the person. The camera 30 includes a power supply unit 314 that uses commercial AC as a power source.

図5は、センサ40の内部構成を示すブロック図である。センサ40は、制御部447と、記憶部442と、表示ランプ445とを含む構成である。センサ40は、対象(例えば侵入者。以下同様。)を検出した場合に、表示ランプ445を点灯する等、所定の検出動作を行う。   FIG. 5 is a block diagram showing an internal configuration of the sensor 40. The sensor 40 includes a control unit 447, a storage unit 442, and a display lamp 445. The sensor 40 performs a predetermined detection operation such as turning on the display lamp 445 when an object (for example, an intruder, the same applies hereinafter) is detected.

また、センサ40は、DECTプロトコル制御部449と、DECT無線I/F部448とを有し、DECTの無線方式で親機10と無線接続を行い、対象を検出すると、センサ検出情報を親機10に送る。   The sensor 40 includes a DECT protocol control unit 449 and a DECT wireless I / F unit 448. When the sensor 40 is wirelessly connected to the base unit 10 using the DECT wireless method and detects a target, the sensor detection information is transmitted to the base unit. Send to 10.

センサ部453は、センサ40の種類によって異なる。例えば、人感センサ40A
,40Bの場合、センサ部453は、赤外線の変化によって人を感知するPIRセンサである。窓等の開閉を検出する開閉センサ40Dの場合、センサ部453は、開閉によってオン/オフに切り替わるリードスイッチである。煙センサ40Cの場合、センサ部453は、発光した光が煙によって遮光されることで煙を感知する発光・受光部である。
The sensor unit 453 differs depending on the type of the sensor 40. For example, human sensor 40A
, 40B, the sensor unit 453 is a PIR sensor that senses a person by a change in infrared rays. In the case of the opening / closing sensor 40D that detects opening / closing of a window or the like, the sensor unit 453 is a reed switch that is turned on / off by opening / closing. In the case of the smoke sensor 40C, the sensor unit 453 is a light emitting / receiving unit that senses smoke when the emitted light is blocked by the smoke.

充電池450は、充電可能な電池であり、各部に電力を供給する。   The rechargeable battery 450 is a rechargeable battery and supplies power to each unit.

図6は、スマートフォン50の内部構成を示すブロック図である。スマートフォン50は、制御部506と、記憶部504と、表示/操作部(タッチパネル)503とを含む構成である。スマートフォン50は、各種の入力操作を受け付け、タッチパネル503に画像等の情報を表示する。制御部506は、後述するように、カメラ30の機能を設定可能な監視機能制御部514を内蔵する。タッチパネル503は、表示部及び操作部が一体化された表示入力部であり、画面に画像やアイコン等の情報を表示するとともに、使用者による画面へタップ操作(又はタッチ操作)を受け付ける。   FIG. 6 is a block diagram showing an internal configuration of the smartphone 50. The smartphone 50 includes a control unit 506, a storage unit 504, and a display / operation unit (touch panel) 503. The smartphone 50 accepts various input operations and displays information such as images on the touch panel 503. As will be described later, the control unit 506 includes a monitoring function control unit 514 that can set the function of the camera 30. The touch panel 503 is a display input unit in which a display unit and an operation unit are integrated, displays information such as images and icons on the screen, and accepts a tap operation (or touch operation) on the screen by the user.

また、スマートフォン50は、3Gプロトコル制御部502と、3G無線I/F部501とを有し、3G(第3世代)の無線通信方式を用いて、携帯電話網75に接続された携帯電話機70や他のスマートフォンと無線接続を行う。   In addition, the smartphone 50 includes a 3G protocol control unit 502 and a 3G wireless I / F unit 501, and a mobile phone 70 connected to the mobile phone network 75 using a 3G (third generation) wireless communication method. Wireless connection with other smartphones.

また、スマートフォン50は、音声バス515と、音声入出力制御部505と、スピーカ513と、マイク512とを有し、外部に対して音声の入出力を行う。   The smartphone 50 includes an audio bus 515, an audio input / output control unit 505, a speaker 513, and a microphone 512, and inputs / outputs audio to / from the outside.

また、スマートフォン50は、無線LAN制御部507と、無線LAN通信I/F部508とを有し、無線LANで接続された無線ルータ60を介して親機10、カメラ30等と画像データ及び音声データを送受信する。   In addition, the smartphone 50 includes a wireless LAN control unit 507 and a wireless LAN communication I / F unit 508. The smartphone 50, the camera 30, and the like via the wireless router 60 connected by the wireless LAN, and image data and audio. Send and receive data.

また、スマートフォン50は、USB通信I/F部511を有し、USB(Universal Serial Bus)規格のインタフェースを有する機器やメモリ等とデータを送受信する。   In addition, the smartphone 50 includes a USB communication I / F unit 511, and transmits and receives data to and from devices, memories, and the like that have a USB (Universal Serial Bus) standard interface.

上述した構成を有する監視カメラシステム5の動作を説明する。   The operation of the surveillance camera system 5 having the above-described configuration will be described.

始めに、スマートフォン50の動作について説明する。使用者によって、スマートフォン50にインストールされているホームセキュリティ用のアプリケーションとして登録されている監視カメラのアプリケーションが起動された場合を示す。   First, the operation of the smartphone 50 will be described. The case where the application of the surveillance camera registered as the application for home security installed in the smart phone 50 by the user is started is shown.

図7は、ホームセキュリティ用のアプリケーションとして起動され、監視カメラ30Bの録画中でない時に表示されるライブモニタ画面の例を示す。このアプリケーションの起動によって表示されるタッチパネル503の中央部には、カメラ30で撮像された画像(動画像)55が表示される。また、タッチパネル503の画面には、カメラアイコン51、スピーカアイコン52、ミュートアイコン53及び切断アイコン54がタップ操作可能に表示される。   FIG. 7 shows an example of a live monitor screen that is started as an application for home security and is displayed when the surveillance camera 30B is not recording. An image (moving image) 55 captured by the camera 30 is displayed at the center of the touch panel 503 displayed when the application is activated. On the screen of the touch panel 503, a camera icon 51, a speaker icon 52, a mute icon 53, and a disconnect icon 54 are displayed so as to be tapped.

カメラアイコン51は、カメラ30の録画開始を指示し、カメラ30の機能を設定する際に使用されるアイコンである。   The camera icon 51 is an icon used when instructing the camera 30 to start recording and setting the function of the camera 30.

スピーカアイコン52は、スマートフォン50に搭載されたスピーカ513の音量を切り替えるためのアイコンであり、起動時にオン状態にある。スピーカアイコン52に対するタップ操作が行われる度、スピーカアイコン52はオン状態/オフ状態に切り替えられる。ここでは、スピーカアイコン52は、例えばオン状態で緑色に表示され、オフ状態で白色に表示される。   The speaker icon 52 is an icon for switching the volume of the speaker 513 mounted on the smartphone 50, and is in an on state at the time of activation. Each time a tap operation is performed on the speaker icon 52, the speaker icon 52 is switched between an on state and an off state. Here, the speaker icon 52 is displayed in green in the on state, for example, and is displayed in white in the off state.

スピーカアイコン52のオン状態とは、スピーカ513の音量が大きく設定された状態であり、通常のモニタやハンドフリー通話(スピーカホン通話)に適する。   The on state of the speaker icon 52 is a state in which the volume of the speaker 513 is set high, and is suitable for a normal monitor or a hands-free call (speaker phone call).

一方、スピーカアイコン52のオフ状態とは、スピーカ513の音量が耳元で聴くような小さく設定された状態であり、音声モニタやハンズセット通話に適する。   On the other hand, the off state of the speaker icon 52 is a state in which the volume of the speaker 513 is set to a low level so that it can be heard at the ear, and is suitable for a voice monitor or a handsets call.

ミュートアイコン53は、スマートフォン50に搭載されたマイク512のオン/オフを切り替えるためのアイコンであり、起動時にオン状態、つまりマイク512の無効(消音)状態にある。ミュートアイコン53に対するタップ操作が行われる度、ミュートアイコン53はオン状態/オフ状態に交互に切り替えられる。ここでは、ミュートアイコン53は、スピーカアイコン52と同様、オン状態で緑色に表示され、オフ状態で白色に表示される。   The mute icon 53 is an icon for switching on / off of the microphone 512 mounted on the smartphone 50, and is in an on state at startup, that is, in an invalid (silenced) state of the microphone 512. Each time a tap operation is performed on the mute icon 53, the mute icon 53 is alternately switched between an on state and an off state. Here, like the speaker icon 52, the mute icon 53 is displayed in green in the on state and displayed in white in the off state.

切断アイコン54は、「Disconnect」の文字が記された、カメラ30との接続を遮断するためのアイコンであり、起動時にオフ状態、つまり接続状態にある。   The disconnection icon 54 is an icon for cutting off the connection with the camera 30 with the characters “Disconnect” written therein, and is in an off state, that is, in a connected state at the time of activation.

図8(A)〜(C)は、アプリケーションを起動する際のスマートフォン50の画面の遷移を示す図である。図9は監視カメラ30Bの録画中の時に表示されるスマートフォン50のライブモニタ画面を示す図である。   FIGS. 8A to 8C are diagrams illustrating transition of the screen of the smartphone 50 when starting an application. FIG. 9 is a diagram illustrating a live monitor screen of the smartphone 50 displayed when the monitoring camera 30B is recording.

図8(A)は、タッチパネル503に表示される待ち受け画面を示す。この待ち受け画面では、ホームセキュリティのアプリケーションを起動するホームセキュリティアイコン56の他、各種のアイコン57がタップ操作可能に表示されている。また、タッチパネル503の左上隅には、録画中を表す録画アイコン58が表示されている。   FIG. 8A shows a standby screen displayed on the touch panel 503. In this standby screen, various icons 57 are displayed in a tapable manner in addition to a home security icon 56 for starting a home security application. A recording icon 58 indicating that recording is in progress is displayed in the upper left corner of the touch panel 503.

なお、本実施形態では、親機10が監視カメラ30Bから転送される画像データ及び音声データを画像メモリ116に記憶する動作を録画動作と称し、この録画動作には、録音も含まれる。   In the present embodiment, the operation in which the parent device 10 stores the image data and audio data transferred from the monitoring camera 30B in the image memory 116 is referred to as a recording operation, and the recording operation includes recording.

ホームセキュリティアイコン56がタップ操作されると、図8(B)に示すように、タッチパネル503には、ログイン画面59が表示される。ここでは、ログイン画面59に表示されたボックスにID及びパスワードが入力されると、ホームセキュリティのアプリケーションが起動する。ホームセキュリティのアプリケーションが起動すると、タッチパネル503には、図8(C)に示すように、このアプリケーションのホーム画面が表示される。ホーム画面には、監視カメラアイコン61を含む各種アイコン群63及び各種キー群64が表示される。このホーム画面においても、タッチパネル503の左上隅には、録画中を表す録画アイコン58が表示されたままである。   When the home security icon 56 is tapped, a login screen 59 is displayed on the touch panel 503 as shown in FIG. Here, when an ID and a password are entered in a box displayed on the login screen 59, a home security application is activated. When the home security application is activated, the home screen of this application is displayed on the touch panel 503 as shown in FIG. On the home screen, various icon groups 63 including a monitoring camera icon 61 and various key groups 64 are displayed. Also on this home screen, a recording icon 58 indicating that recording is in progress is still displayed in the upper left corner of the touch panel 503.

使用者が監視カメラアイコン61をタップ操作すると、監視カメラのアプリケーションが起動され、図9に示すように、タッチパネル503の画面中央部には、監視カメラ30Bによって撮像される画像(ライブ画像)55が表示される。また、タッチパネル503の画面下方には、前述したスピーカアイコン52、ミュートアイコン53及び切断アイコン54の他、ライブモニタ画面(図7参照)と異なり、録画の中止を指示する録画中止アイコン68が表示される。この録画中止アイコン68がタップ操作されると、後述するように、親機10は録画を中止する。そして、録画が中止されると、タッチパネル503の左上隅に表示されていた録画アイコン58は消え、さらに、録画中止アイコン68の代わりにカメラアイコン51が表示された画面(図7参照)に切り替わる。   When the user taps the surveillance camera icon 61, the surveillance camera application is activated. As shown in FIG. 9, an image (live image) 55 captured by the surveillance camera 30B is displayed at the center of the screen of the touch panel 503. Is displayed. In addition to the above-described speaker icon 52, mute icon 53 and disconnection icon 54, a recording stop icon 68 for instructing to stop recording is displayed below the touch panel 503, unlike the live monitor screen (see FIG. 7). The When the recording stop icon 68 is tapped, the master unit 10 stops recording as will be described later. When the recording is stopped, the recording icon 58 displayed in the upper left corner of the touch panel 503 disappears, and the screen is switched to a screen (see FIG. 7) on which the camera icon 51 is displayed instead of the recording stop icon 68.

図10(A)〜(C)は、待ち受け画面の表示中に人感センサ40Bが対象を検出した際のスマートフォン50の画面の遷移を示す図である。図10(A)は、タッチパネル503に表示される待ち受け画面を示す。この待ち受け画面では、前述したように、ホームセキュリティのアプリケーションを起動するホームセキュリティアイコン56の他、各種のアイコン57がタップ操作可能に表示されている。なお、人感センサ40Bが対象を検出する前であるので、タッチパネル503の左上隅には、録画中を表す録画アイコン58は表示されていない。   FIGS. 10A to 10C are diagrams illustrating transition of the screen of the smartphone 50 when the human sensor 40B detects the target while the standby screen is displayed. FIG. 10A shows a standby screen displayed on the touch panel 503. In this standby screen, as described above, various icons 57 are displayed in a tapable manner in addition to the home security icon 56 for starting the home security application. Note that the recording icon 58 indicating that recording is in progress is not displayed in the upper left corner of the touch panel 503 since it is before the human sensor 40B detects the target.

待ち受け画面の表示中、人感センサ40Bによって対象が検出されると、タッチパネル503は、図10(B)又は図10(C)に示す録画中止制御画面を表示する。いずれの録画中止制御画面を選択するかは、予め使用者によって任意に設定可能である。なお、親機10が録画中止制御画面を選択する信号を送信し、この信号に従って、録画中止制御画面が選択されてもよい。   When an object is detected by the human sensor 40B while the standby screen is displayed, the touch panel 503 displays a recording stop control screen shown in FIG. 10B or FIG. Which recording stop control screen is selected can be arbitrarily set in advance by the user. Note that the base unit 10 may transmit a signal for selecting the recording stop control screen, and the recording stop control screen may be selected according to this signal.

また、録画中止制御画面に切り替わると、スマートフォン50は、スピーカ513を鳴動させ、所定時間(例えば3分間)報知音で使用者に録画を開始したことを知らせる。さらに、タッチパネル503の左上隅には、録画中を表す録画アイコン58が表示される。   When the screen is switched to the recording stop control screen, the smartphone 50 rings the speaker 513 to notify the user that recording has started with a notification sound for a predetermined time (for example, 3 minutes). Furthermore, a recording icon 58 indicating that recording is in progress is displayed in the upper left corner of the touch panel 503.

図10(B)及び図10(C)に示すいずれの録画中止制御画面においても、画像確認アイコン71及び鳴動停止アイコン72が表示される。図10(C)に示す録画中止制御画面では、屋外の監視カメラ30Bで撮像される画像データを録画中であることを表す「Outdoor camera is recording」のメッセージが表示される。   The image confirmation icon 71 and the ringing stop icon 72 are displayed on any of the recording stop control screens shown in FIGS. 10 (B) and 10 (C). On the recording stop control screen shown in FIG. 10C, an “Outdoor camera is recording” message is displayed indicating that image data captured by the outdoor monitoring camera 30B is being recorded.

画像確認アイコン71は、録画中の画像を確認するために使用される。使用者によって画像確認アイコン71がタップ操作されると、タッチパネル503は、前述した図8(B)に示すログイン画面59に遷移する。ログイン画面59でユーザID及びパスワードが入力され、さらに、図8(C)に示すホーム画面で監視カメラアイコン61がタップ操作されると、図9に示すように、録画中の画像55が表示される。使用者は、ライブの画像55を確認し、不要と判断すると、録画中止アイコン68をタップ操作することで、録画を中止できる。   The image confirmation icon 71 is used to confirm the image being recorded. When the image confirmation icon 71 is tapped by the user, the touch panel 503 transitions to the login screen 59 shown in FIG. When the user ID and password are input on the login screen 59 and the surveillance camera icon 61 is tapped on the home screen shown in FIG. 8C, an image 55 being recorded is displayed as shown in FIG. The When the user confirms the live image 55 and determines that it is unnecessary, the user can stop the recording by tapping the recording stop icon 68.

鳴動停止アイコン72は、「Stop」の文字が記されたアイコンであり、スマートフォン50及び親機10による報知音の鳴動を停止させるために使用される。人感センサ40Bの検出により親機10が鳴動するように動作させた場合、例えば使用者が画像を確認したことによって問題無しと判断すると、この鳴動停止アイコン72をタップ操作することで、スマートフォン50及び親機10の鳴動を停止できる。   The ringing stop icon 72 is an icon in which the characters “Stop” are written, and is used to stop ringing of the notification sound by the smartphone 50 and the parent device 10. When the base unit 10 is operated so as to ring by the detection of the human sensor 40B, for example, when it is determined that there is no problem by confirming the image by the user, the smartphone 50 can be operated by tapping the ringing stop icon 72. And the ringing of the main unit 10 can be stopped.

また、前述したように、使用者によって録画中止アイコン68がタップ操作されると、録画が中止され、図10(A)に示す元の待ち受け画面に戻る。また、録画の中止が完了すると、タッチパネル503の左上隅に表示されていた録画アイコン58は消える。このように、録画中止制御画面を表示することで、使用者は録画中止あるいは録画中の画像の確認を素早く行うことができる。   As described above, when the recording stop icon 68 is tapped by the user, the recording is stopped, and the original standby screen shown in FIG. When the recording is stopped, the recording icon 58 displayed at the upper left corner of the touch panel 503 disappears. Thus, by displaying the recording stop control screen, the user can quickly stop recording or check the image being recorded.

図11(A)〜(C)は、ホームセキュリティのアプリケーションのホーム画面を表示中に人感センサ40Bが対象を検出した際のスマートフォン50の画面の遷移を示す図である。図11(A)は、タッチパネル503に表示されるホーム画面を示す。   FIGS. 11A to 11C are diagrams illustrating transition of the screen of the smartphone 50 when the human sensor 40B detects the target while displaying the home screen of the home security application. FIG. 11A shows a home screen displayed on the touch panel 503.

このホーム画面では、前述したように、監視カメラアイコン61を含む各種アイコン群63及び各種キー群64がタップ操作可能に表示されている。なお、人感センサ40Bが対象を検出する前であるので、タッチパネル503の左上隅には、録画中を表す録画アイコン58は表示されていない。   On the home screen, as described above, the various icon groups 63 and the various key groups 64 including the monitoring camera icon 61 are displayed so as to be tapped. Note that the recording icon 58 indicating that recording is in progress is not displayed in the upper left corner of the touch panel 503 since it is before the human sensor 40B detects the target.

ホーム画面の表示中、人感センサ40Bによって対象が検出されると、タッチパネル503は、図10(B)及び図10(C)と同様、図11(B)又は図11(C)に示す録画中止制御画面を表示する。   When the target is detected by the human sensor 40B during the display of the home screen, the touch panel 503 displays the recording shown in FIG. 11B or FIG. 11C, as in FIGS. 10B and 10C. Display the stop control screen.

また、録画中止制御画面に切り替わると、スマートフォン50は、スピーカ513を鳴動させ、所定時間(例えば3分間)報知音で使用者に録画が開始されたことを知らせる。さらに、タッチパネル503の左上隅には、録画中を表す録画アイコン58が表示される。   When the screen is switched to the recording stop control screen, the smartphone 50 rings the speaker 513 and notifies the user that recording has started with a notification sound for a predetermined time (for example, 3 minutes). Furthermore, a recording icon 58 indicating that recording is in progress is displayed in the upper left corner of the touch panel 503.

図11(B)及び図11(C)に示すいずれの録画中止制御画面においても、画像確認アイコン71及び鳴動停止アイコン72が表示される。図11(C)に示す録画中止制御画面では、屋外の監視カメラ30Bで撮像される画像データを録画中であることを表す「Outdoor camera is recording」のメッセージが表示される。   The image confirmation icon 71 and the ringing stop icon 72 are displayed on any of the recording stop control screens shown in FIGS. 11 (B) and 11 (C). In the recording stop control screen shown in FIG. 11C, an “Outdoor camera is recording” message indicating that image data captured by the outdoor monitoring camera 30B is being recorded is displayed.

画像確認アイコン71は、録画中の画像を確認するために使用される。使用者によって画像確認アイコン71がタップ操作されると、既にホームセキュリティのアプリケーションにログイン済みであるので、図9に示す録画中の画像55が表示される。使用者は、ライブの画像55を確認し、不要と判断すると、録画中止アイコン68をタップ操作することで、録画を中止できる。   The image confirmation icon 71 is used to confirm the image being recorded. When the user performs a tap operation on the image confirmation icon 71, since the user has already logged in to the home security application, the image 55 being recorded shown in FIG. 9 is displayed. When the user confirms the live image 55 and determines that it is unnecessary, the user can stop the recording by tapping the recording stop icon 68.

録画中止アイコン68は、すぐに録画を中止するために使用される。使用者によって録画中止アイコン68がタップ操作されると、録画が中止され、図11(A)に示す元のホーム画面に戻る。録画の中止が完了すると、タッチパネル503の左上隅に表示されていた録画アイコン58は消える。   The recording stop icon 68 is used to stop recording immediately. When the recording stop icon 68 is tapped by the user, the recording is stopped and the original home screen shown in FIG. When the recording is stopped, the recording icon 58 displayed at the upper left corner of the touch panel 503 disappears.

このように、録画中止制御画面を表示することで、使用者は録画中止あるいは録画中の画像の確認を素早く行うことができる。   Thus, by displaying the recording stop control screen, the user can quickly stop recording or check the image being recorded.

次に、監視カメラシステム5の動作の流れについて、図12及び図13を参照して説明する。   Next, the operation flow of the surveillance camera system 5 will be described with reference to FIGS. 12 and 13.

図12及び図13は、監視カメラシステム5の動作の流れを説明するシーケンス図である。ここでは、屋外に設置された人感センサ40B及び監視カメラ30Bを用いて、侵入者等(対象)を監視する動作について説明する。ここで、人感センサ40Bによって対象が検出された場合、親機10が自動で録画を開始する自動録画モードは、使用者によって任意に設定可能である。   12 and 13 are sequence diagrams for explaining the flow of operation of the surveillance camera system 5. Here, an operation for monitoring an intruder or the like (target) using the human sensor 40B and the monitoring camera 30B installed outdoors will be described. Here, when the target is detected by the human sensor 40B, an automatic recording mode in which the parent device 10 automatically starts recording can be arbitrarily set by the user.

始めに、自動録画モードが設定されていない場合の動作の流れを示す。自動録画モードが設定されていない場合とは、センサとの連携が設定されていない場合であり、人感センサ40Bが人物を検出しても、自動で録画は開始されない。   First, an operation flow when the automatic recording mode is not set is shown. The case where the automatic recording mode is not set is a case where the cooperation with the sensor is not set. Even when the human sensor 40B detects a person, the recording is not automatically started.

図12に示すように、人感センサ40Bが、屋外に存在する人物を検出すると、その検出信号及びセンサ検出情報を親機10に送信する(S101)。親機10は、人感センサ40Bからセンサ検出情報を受信すると、無線LANを用いてスマートフォン50と無線接続し(S102)、接続が完了すると、スマートフォン50にセンサ検出情報を送信する(S103A)。   As shown in FIG. 12, when the human sensor 40B detects a person present outdoors, the detection signal and sensor detection information are transmitted to the parent device 10 (S101). When receiving the sensor detection information from the human sensor 40B, the base unit 10 wirelessly connects to the smartphone 50 using the wireless LAN (S102), and when the connection is completed, transmits the sensor detection information to the smartphone 50 (S103A).

また、親機10は、監視カメラ30Bに対し、画像/音声データの転送を要求する(S103B)。監視カメラ30Bは、画像/音声データの転送要求を受けると、無線LANを用いて親機10と接続し、撮像部312で撮像した画像データ及びマイク328で収音した音声データを親機10に転送する(S104)。   In addition, base unit 10 requests monitoring camera 30B to transfer image / audio data (S103B). When the monitoring camera 30B receives the image / audio data transfer request, the monitoring camera 30B is connected to the parent device 10 using a wireless LAN, and the image data captured by the imaging unit 312 and the voice data collected by the microphone 328 are transmitted to the parent device 10. Transfer (S104).

スマートフォン50は、使用者から、監視カメラのアプリケーションを起動させる等のモニタ指示を受け付けると(S105−1)、親機10に対し、画像/音声データの転送を要求する(S105−2)。親機10は、スマートフォン50から画像/音声データの転送要求に応じ、監視カメラ30Bから転送された画像データ及び音声データをスマートフォン50に転送する(S106)。これにより、スマートフォン50は、ライブモニタ画面(図7参照)を表示する。   When the smartphone 50 receives a monitor instruction from the user such as starting an application of the monitoring camera (S105-1), the smartphone 50 requests the parent device 10 to transfer image / audio data (S105-2). In response to the image / audio data transfer request from the smartphone 50, the parent device 10 transfers the image data and audio data transferred from the monitoring camera 30B to the smartphone 50 (S106). Thereby, the smart phone 50 displays a live monitor screen (refer FIG. 7).

次に、自動録画モードが設定されている場合の動作の流れを説明する。自動録画モードが設定されている場合とは、センサとの連携が設定されている場合であり、人感センサ40Bが人物を検出すると、自動で録画は開始される。   Next, the flow of operation when the automatic recording mode is set will be described. The case where the automatic recording mode is set is a case where the cooperation with the sensor is set. When the human sensor 40B detects a person, the recording is automatically started.

図13に示すように、人感センサ40Bが、屋外に存在する人物を検出すると、その検出信号及びセンサ検出情報を親機10に送信する(S107)。親機10は、人感センサ40Bからセンサ検出情報を受信すると、無線LANを用いてスマートフォン50と無線接続し、接続が完了すると、スマートフォン50にセンサ検出情報を送信する(S108A)。   As shown in FIG. 13, when the human sensor 40B detects a person present outdoors, the detection signal and sensor detection information are transmitted to the parent device 10 (S107). When receiving the sensor detection information from human sensor 40B, base unit 10 wirelessly connects to smartphone 50 using the wireless LAN, and transmits the sensor detection information to smartphone 50 when the connection is completed (S108A).

また、親機10は、監視カメラ30Bに対し、画像/音声データの転送を要求する(S108B)。監視カメラ30Bは、画像/音声データの転送要求を受けると、撮像部312で撮像した画像データ及びマイク328で収音した音声データを親機10に転送する(S109)。 Further, base unit 10 requests monitoring camera 30B to transfer image / audio data (S108B). Surveillance camera 30B transfers receives a transfer request of the image / audio data, the audio data picked up by the image data and a microphone 328 captured by the imaging section 312 to base unit 10 (S109).

親機10は、監視カメラ30Bから転送された画像データ及び音声データを画像メモリ116(画像記憶部)に記憶する動作を開始する(S110)。この時、報知音を鳴動するように親機10の動作が設定されている場合、親機10は鳴動する。そして、親機10は、スマートフォン50に対し、録画開始を示す情報を送信する(S108C)。さらに、親機10は、スマートフォン50に対し、録画中止制御画面(録画アイコン58を含む)を表示するように指示する(S111)。   The base unit 10 starts an operation of storing the image data and audio data transferred from the monitoring camera 30B in the image memory 116 (image storage unit) (S110). At this time, if the operation of the parent device 10 is set to sound the notification sound, the parent device 10 sounds. And the main | base station 10 transmits the information which shows a video recording start with respect to the smart phone 50 (S108C). Furthermore, base unit 10 instructs smartphone 50 to display a recording stop control screen (including recording icon 58) (S111).

スマートフォン50は、この指示を受けると、タッチパネル503に、図10(B)、(C)、図11(B)、(C)に示す録画中止制御画面を表示する(S112)。この時、スマートフォン50は、スピーカ513を鳴動させ、所定時間(例えば3分間)報知音で使用者に録画を開始したことを知らせる。   Upon receiving this instruction, the smartphone 50 displays the recording stop control screen shown in FIGS. 10B, 10C, 11B, and 11C on the touch panel 503 (S112). At this time, the smartphone 50 rings the speaker 513 and informs the user that recording has started with a notification sound for a predetermined time (for example, 3 minutes).

スマートフォン50は、この録画中止制御画面が表示されている状態において、使用者によって鳴動停止アイコン72がタップ操作されると(S113)、親機10に対し、鳴動停止要求を送信する(S114)。親機10は、この鳴動停止要求を受けると、スピーカ129の鳴動を停止する(S115)。また、スマートフォン50はスピーカ513の鳴動を停止する(S115A)。   When the sounding stop icon 72 is tapped by the user while the recording stop control screen is displayed (S113), the smartphone 50 transmits a sounding stop request to the parent device 10 (S114). When receiving the ringing stop request, base unit 10 stops ringing of speaker 129 (S115). Further, the smartphone 50 stops the ringing of the speaker 513 (S115A).

一方、スマートフォン50は、録画中止制御画面が表示されている状態において、使用者によって画像表示を指示するための「Camera」で表記された画像確認アイコン71がタップ操作されると(S116)、親機10に対し、画像/音声データの転送を要求する(S117)。親機10は、スマートフォン50から画像/音声データの転送要求に応じ、録画中の画像データ及び音声データをスマートフォン50に転送する(S118)。   On the other hand, in the state in which the recording stop control screen is displayed, the smartphone 50 performs a tap operation on the image confirmation icon 71 represented by “Camera” for instructing image display by the user (S116). The device 10 is requested to transfer image / audio data (S117). In response to the image / audio data transfer request from the smartphone 50, the parent device 10 transfers the image data and audio data being recorded to the smartphone 50 (S118).

スマートフォン50は、親機10から録画中の画像データ及び音声データを受けると、図9に示すように、録画中の画像を表示する(S119)。スマートフォン50は、この録画中の画像が表示されている状態において、使用者によって録画中止アイコン68がタップ操作されると(S120)、親機10に対し、録画動作中止要求を送る(S121)。   When the smartphone 50 receives the image data and audio data being recorded from the master device 10, the smartphone 50 displays the image being recorded as shown in FIG. 9 (S119). When the recording stop icon 68 is tapped by the user while the image being recorded is displayed (S120), the smartphone 50 sends a recording operation stop request to the parent device 10 (S121).

親機10は、この録画動作中止要求に従って、監視カメラ30Bから転送された画像データ及び音声データを画像メモリ116に記憶する動作(記憶動作)を中止する(S122)。   In accordance with this recording operation stop request, base unit 10 stops the operation (storage operation) of storing the image data and audio data transferred from monitoring camera 30B in image memory 116 (S122).

図14は、親機10の動作手順を説明するフローチャートである。親機10は、人感センサ40Bからの検出信号をトリガとして、本動作を開始する。   FIG. 14 is a flowchart for explaining the operation procedure of base unit 10. Master device 10 starts this operation using a detection signal from human sensor 40B as a trigger.

図14において、まず、親機10は、人感センサ40Bからセンサ検出情報を取得する(S1)。親機10は、監視カメラ30Bから転送される画像データ及び音声データを画像メモリ116に記憶する録画動作を開始する(S2)。   In FIG. 14, first, base unit 10 acquires sensor detection information from human sensor 40B (S1). The base unit 10 starts a recording operation for storing the image data and audio data transferred from the monitoring camera 30B in the image memory 116 (S2).

親機10は、スマートフォン50から画像データ及び音声データの転送要求があったか否かを判別する(S3)。この転送要求があった場合、親機10は、監視カメラ30Bから転送された画像データ及び音声データをスマートフォン50に転送し、また、録画開始を示す情報を送信し、かつ、録画中止アイコン(録画操作停止ボタン)68を含む録画中止制御画面を表示するように指示する(S4)。   Master device 10 determines whether or not there is a transfer request for image data and audio data from smartphone 50 (S3). When there is this transfer request, the base unit 10 transfers the image data and audio data transferred from the monitoring camera 30B to the smartphone 50, transmits information indicating the start of recording, and records the recording stop icon (recording The recording stop control screen including the operation stop button 68 is instructed to be displayed (S4).

親機10は、録画中止アイコン68が押下(タップ操作)されるまで待つ(S5)。録画中止アイコン68が押下されると、親機10は、録画動作を中止する(S7)。この後、親機10は本動作を終了する。   Master device 10 waits until recording stop icon 68 is pressed (tap operation) (S5). When the recording stop icon 68 is pressed, the master unit 10 stops the recording operation (S7). Thereafter, the base unit 10 ends this operation.

一方、ステップS3でスマートフォン50から画像データ及び音声データの転送要求が無かった場合、親機10は、一定時間が経過するまで待つ(S6)。一定時間が経過すると、親機10は、ステップS7で録画動作を中止する。なお、ここでは、一定時間が経過すると、自動的に録画を中止にしていたが、一定時間経過前であっても、人感センサ40Bが対象を検出しなくなった時点で自動的に録画を中止するようにしてもよい。   On the other hand, when there is no transfer request for image data and audio data from the smartphone 50 in step S3, the parent device 10 waits until a predetermined time elapses (S6). When the predetermined time has elapsed, base unit 10 stops the recording operation in step S7. Here, the recording is automatically stopped when a certain time elapses, but the recording is automatically stopped when the human sensor 40B stops detecting the target even before the certain time elapses. You may make it do.

この後、親機10は本動作を終了する。そして、再び、人感センサ40Bからの検出信号をトリガとして起動するまで、親機10はスタンバイ状態となる。   Thereafter, the base unit 10 ends this operation. The master unit 10 is in a standby state again until it is activated with the detection signal from the human sensor 40B as a trigger.

このように、本実施形態の監視カメラシステム5では、人感センサ40Bが侵入者(対象)を検出すると、親機10にセンサ検出情報を送る。親機10は、人感センサ40Bから送られたセンサ検出情報をスマートフォン50に転送するとともに、人感センサ40Bと関連付けて登録された監視カメラ30Bに対し、画像データを転送するように指示する信号を送る。親機10は、人感センサ40Bから送られたセンサ検出情報に従って、監視カメラ30Bから転送される画像データ及び音声データを画像メモリ116に記憶する録画動作を開始する。スマートフォン50は、画像確認アイコン71がタップ操作されると、この操作の情報を親機10に送る。親機10は、この操作の情報に従って、監視カメラ30Bから転送される画像データ及び音声データをスマートフォン50に送る。スマートフォン50は、監視カメラ30Bから送られた画像データをタッチパネル503に表示した状態において、タッチパネル503に表示された録画中止アイコン68に対するタップ操作を受け付けると、親機10に対し、録画動作を中止する要求信号を送る。   As described above, in the surveillance camera system 5 of the present embodiment, when the human sensor 40B detects an intruder (target), sensor detection information is sent to the parent device 10. Master device 10 transmits the sensor detection information sent from human sensor 40B to smartphone 50, and also instructs surveillance camera 30B registered in association with human sensor 40B to transfer image data. Send. Master device 10 starts a recording operation of storing image data and audio data transferred from monitoring camera 30B in image memory 116 in accordance with the sensor detection information sent from human sensor 40B. When the image confirmation icon 71 is tapped, the smartphone 50 sends information on this operation to the parent device 10. Master device 10 sends image data and audio data transferred from monitoring camera 30 </ b> B to smartphone 50 in accordance with this operation information. When the smartphone 50 receives a tap operation on the recording stop icon 68 displayed on the touch panel 503 in a state where the image data sent from the monitoring camera 30B is displayed on the touch panel 503, the smartphone 50 stops the recording operation on the base unit 10. Send a request signal.

従って、本実施形態の監視カメラシステム5によれば、親機10がカメラから転送される画像データ及び音声データを画像メモリ116に記憶する録画動作を行う際、使用者は、親機10に対し、録画を中止するように指示することができる。これにより、監視カメラシステム5は、使用者が必要としない画像データの録画を抑制することができる。   Therefore, according to the surveillance camera system 5 of the present embodiment, when the base unit 10 performs a recording operation in which image data and audio data transferred from the camera are stored in the image memory 116, the user Instruct to stop recording. Thereby, the surveillance camera system 5 can suppress the recording of the image data which the user does not need.

また、監視カメラシステム5は、使用者が必要としない画像データ及び音声データを記憶しないので、使用者が画像データを再生して内容を確認する時間を短くすることができる。また、監視カメラシステム5は、使用者が必要としない画像データのシーンをカットする等の編集作業を容易に行わせることができる。さらには、監視カメラシステム5は、記憶部103への画像メモリ116の記憶容量を抑えることもできる。   In addition, since the surveillance camera system 5 does not store image data and audio data that the user does not need, it is possible to shorten the time for the user to reproduce the image data and confirm the contents. In addition, the surveillance camera system 5 can easily perform an editing operation such as cutting a scene of image data not required by the user. Furthermore, the surveillance camera system 5 can also reduce the storage capacity of the image memory 116 in the storage unit 103.

また、親機10は、スマートフォン50から録画を中止する要求信号があると、録画動作を中止するので、録画の中止が確実に行われる。   In addition, when there is a request signal for stopping recording from the smartphone 50, the base unit 10 stops the recording operation, so that the recording is reliably stopped.

また、センサ40として、1つの筺体に、監視カメラ30Bと一体に人感センサ40Bを内蔵してもよい。また、人感センサとして、監視カメラ30Bに一体に内蔵された赤外線センサ313を用いてもよい。これにより、監視カメラシステム5は、カメラとセンサの関連付けを容易に行わせることができる。   Further, as the sensor 40, the human sensor 40B may be incorporated in one housing integrally with the monitoring camera 30B. Moreover, you may use the infrared sensor 313 integrally incorporated in the surveillance camera 30B as a human sensitive sensor. Thereby, the surveillance camera system 5 can easily associate the camera and the sensor.

また、スマートフォン50のタッチパネル503の画面に、録画アイコン58が表示されるので、使用者は録画中であることに気付くことができる。   Further, since the recording icon 58 is displayed on the screen of the touch panel 503 of the smartphone 50, the user can notice that recording is in progress.

また、録画の開始時期に録画アイコン58が表示されるので、使用者は素早く対応することができる。   In addition, since the recording icon 58 is displayed at the recording start time, the user can respond quickly.

また、センサ40が対象を検出した場合に録画が開始されるので、記憶される画像データの量を抑制できる。   In addition, since recording starts when the sensor 40 detects a target, the amount of stored image data can be suppressed.

また、スマートフォン50は、センサ40の検出に応じて親機10から送られる通知に従って、スピーカ513によって報知音を鳴動させるので、使用者は、音によってセンサ40の検出と録画の開始を知ることができる。   Moreover, since the smart phone 50 sounds a notification sound by the speaker 513 according to the notification sent from the parent device 10 in response to the detection of the sensor 40, the user can know the detection of the sensor 40 and the start of recording by the sound. it can.

また、カメラ30とセンサ40が別体である場合、カメラとセンサの配置の自由度が高まる。   Moreover, when the camera 30 and the sensor 40 are separate bodies, the freedom degree of arrangement | positioning of a camera and a sensor increases.

また、使用者は、遠方の場所に居ても、スマートフォン50で画像の確認と録画中止の操作を行うことができ、利便性が高まる。   Further, even when the user is at a distant place, the user can perform the operation of confirming the image and stopping the recording with the smartphone 50, and the convenience is improved.

以上、図面を参照しながら各種の実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。   While various embodiments have been described above with reference to the drawings, it goes without saying that the present invention is not limited to such examples. It will be apparent to those skilled in the art that various changes and modifications can be made within the scope of the claims, and these are naturally within the technical scope of the present invention. Understood.

例えば、上記実施形態では、監視カメラシステムに適用された場合を示したが、これに限らず、例えば、カメラを所持する旅行者が旅先等で撮影した画像を見ながら、携帯端末を所持する友達等と会話するといったコミュニケーションシステムにも、本発明は適用可能である。   For example, in the above-described embodiment, the case where the present invention is applied to the surveillance camera system is shown. However, the present invention is not limited to this. The present invention can also be applied to a communication system such as a conversation with a user.

本発明は、携帯端末がカメラから転送された画像データを表示する監視カメラシステム及び監視カメラシステムにおける監視方法として有用である。 The present invention is useful as a monitoring camera system in which a mobile terminal displays image data transferred from a camera and a monitoring method in the monitoring camera system .

5 監視カメラシステム
8 宅内
10 親機
10a 差込口
20、20A、20B 子機
30、30A、30B カメラ
40、40A、40B、40C、40D センサ
50 スマートフォン
51 カメラアイコン
52 スピーカアイコン
53 ミュートアイコン
54 切断アイコン
55 画像
56 ホームセキュリティアイコン
57 各種のアイコン
58 録画アイコン
59 ログイン画面
60 無線ルータ
61 監視カメラアイコン
63 アイコン群
64 各種キー群
65 インターネット
68 録画中止アイコン
70 携帯電話機
71 画像確認アイコン
72 鳴動停止アイコン
75 携帯電話網
80 固定電話機
85 固定電話網
101 固定電話回線I/F部
103、242、303、442、504 記憶部
104、243、304、505 音声入出力制御部
105、244、305 操作部
106、245 表示部
107、248、448 DECT無線I/F部
108、249、449 DECTプロトコル制御部
109、247、309、447、506 制御部
110 呼制御部
112 音声ストリーム処理部
115 画像メモリ制御部
116 画像メモリ
117、255、307、515 音声バス
121、321、507 無線LAN制御部
122、322、508 無線LAN通信I/F部
126 子機/携帯端末充電部
127 USB通信I/F部
128、251、328、512 マイク
129、252、329、513 スピーカ
250、550 2次電池
312 撮像部
313 赤外線センサ
315 画像メモリ
316 画像メモリ制御部
445 表示ランプ
450 充電池
453 センサ部
501 3G無線I/F部
502 3Gプロトコル制御部
503 表示/操作部(タッチパネル)
511 USB通信I/F部
514 監視機能制御部
5 Surveillance camera system 8 Home 10 Master unit 10a Plug 20, 20, A, 20B Slave unit 30, 30A, 30B Camera 40, 40A, 40B, 40C, 40D Sensor 50 Smartphone 51 Camera icon 52 Speaker icon 53 Mute icon 54 Disconnect icon 55 Image 56 Home security icon 57 Various icons 58 Recording icon 59 Login screen 60 Wireless router 61 Surveillance camera icon 63 Icon group 64 Various keys 65 Internet 68 Recording stop icon 70 Mobile phone 71 Image confirmation icon 72 Ring stop icon 75 Mobile phone Network 80 Fixed telephone 85 Fixed telephone network 101 Fixed telephone line I / F section 103, 242, 303, 442, 504 Storage section 104, 243, 304, 505 Voice input / output Control unit 105, 244, 305 Operation unit 106, 245 Display unit 107, 248, 448 DECT wireless I / F unit 108, 249, 449 DECT protocol control unit 109, 247, 309, 447, 506 Control unit 110 Call control unit 112 Audio stream processing unit 115 Image memory control unit 116 Image memory 117, 255, 307, 515 Audio bus 121, 321, 507 Wireless LAN control unit 122, 322, 508 Wireless LAN communication I / F unit 126 Slave unit / mobile terminal charging unit 127 USB communication I / F unit 128, 251, 328, 512 Microphone 129, 252, 329, 513 Speaker 250, 550 Secondary battery 312 Imaging unit 313 Infrared sensor 315 Image memory 316 Image memory control unit 445 Display lamp 450 Rechargeable battery 453 Capacitors section 501 3G wireless I / F section 502 3G protocol control unit 503 display / operation section (touch panel)
511 USB communication I / F unit 514 Monitoring function control unit

Claims (2)

撮像部を有する監視カメラと、
前記監視カメラとDECTの通信方式を用いて無線接続し、固定電話網に接続されて他固定電話機と接続し、かつ前記DECTの通信方式を用いてコードレス子機と接続する親機と、を備えた監視カメラシステムであって、
前記親機は、前記監視カメラに対して画像の転送を要求し、
前記監視カメラは、前記親機から画像データの転送要求を受けると、前記親機に前記撮像部で得た画像データを前記親機に転送し、
前記親機は、無線ルータを介して前記親機と接続するとともに携帯電話網を介して他携帯電話機と接続する携帯電話端末から、前記無線ルータを介して受信される画像転送要求により、前記監視カメラから転送された前記画像データを前記無線ルータを介して前記携帯電話端末に転送し、前記監視カメラで得た前記画像データを前記携帯電話端末に表示させる、
監視カメラシステム。
A surveillance camera having an imaging unit;
A wireless connection with the communication scheme of the monitoring camera and DECT, connected to the fixed telephone network connected to another fixed telephone, and a and a base unit to connect the cordless handset using the communication method of the DECT A surveillance camera system comprising:
The master unit requests the surveillance camera to transfer an image,
When the monitoring camera receives a transfer request of image data from the parent device, the image data obtained by the imaging unit is transferred to the parent device to the parent device,
The master unit via a mobile telephone network together when connected to the parent device via the wireless router from the mobile phone terminal to be connected with another mobile phone, the image transfer request by received via the wireless router, Transferring the image data transferred from the monitoring camera to the mobile phone terminal via the wireless router, and causing the mobile phone terminal to display the image data obtained by the monitoring camera;
Surveillance camera system.
撮像部を有する監視カメラと、
前記監視カメラとDECTの通信方式を用いて無線接続し、固定電話網に接続されて他固定電話機と接続し、かつ前記DECTの通信方式を用いてコードレス子機と接続する親機と、を備えた監視カメラシステムにおける監視方法であって、
前記親機は、前記監視カメラに対して画像の転送を要求し、
前記監視カメラは、前記親機から画像データの転送要求を受けると、前記親機に前記撮像部で得た画像データを前記親機に転送し、
前記親機は、無線ルータを介して前記親機と接続するとともに携帯電話網を介して他携帯電話機と接続する携帯電話端末から、前記無線ルータを介して受信される画像転送要求により、前記監視カメラから転送された前記画像データを前記無線ルータを介して前記携帯電話端末に転送し、前記監視カメラで得た前記画像データを前記携帯電話端末に表示させる、
監視カメラシステムにおける監視方法。
A surveillance camera having an imaging unit;
A wireless connection with the communication scheme of the monitoring camera and DECT, connected to the fixed telephone network connected to another fixed telephone, and a and a base unit to connect the cordless handset using the communication method of the DECT A surveillance method in a surveillance camera system provided, comprising:
The master unit requests the surveillance camera to transfer an image,
When the monitoring camera receives a transfer request of image data from the parent device, the image data obtained by the imaging unit is transferred to the parent device to the parent device,
The master unit via a mobile telephone network together when connected to the parent device via the wireless router from the mobile phone terminal to be connected with another mobile phone, the image transfer request by received via the wireless router, Transferring the image data transferred from the monitoring camera to the mobile phone terminal via the wireless router, and causing the mobile phone terminal to display the image data obtained by the monitoring camera;
Surveillance method in surveillance camera system.
JP2014233930A 2014-11-18 2014-11-18 Surveillance camera system and surveillance method in surveillance camera system Active JP5887564B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014233930A JP5887564B2 (en) 2014-11-18 2014-11-18 Surveillance camera system and surveillance method in surveillance camera system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014233930A JP5887564B2 (en) 2014-11-18 2014-11-18 Surveillance camera system and surveillance method in surveillance camera system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014080333A Division JP5656304B1 (en) 2014-04-09 2014-04-09 Surveillance camera system used for home security

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015212297A Division JP2016042716A (en) 2015-10-28 2015-10-28 Monitoring camera system and monitoring method using the same

Publications (2)

Publication Number Publication Date
JP2015201832A JP2015201832A (en) 2015-11-12
JP5887564B2 true JP5887564B2 (en) 2016-03-16

Family

ID=54552731

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014233930A Active JP5887564B2 (en) 2014-11-18 2014-11-18 Surveillance camera system and surveillance method in surveillance camera system

Country Status (1)

Country Link
JP (1) JP5887564B2 (en)

Also Published As

Publication number Publication date
JP2015201832A (en) 2015-11-12

Similar Documents

Publication Publication Date Title
JP5656304B1 (en) Surveillance camera system used for home security
JP5660746B1 (en) Surveillance camera system
JP5845453B1 (en) Surveillance camera system
JP5703454B1 (en) Surveillance camera system
JP5853180B1 (en) Home monitoring system
JP5866550B1 (en) Monitoring system and monitoring method in monitoring system
JP5866549B1 (en) Monitoring system and monitoring method in monitoring system
EP3023951A1 (en) Monitoring system
JP5845454B1 (en) Monitoring system
JP2015204102A (en) monitoring system and setting method
JP2016042716A (en) Monitoring camera system and monitoring method using the same
JP5887543B2 (en) Surveillance camera system and surveillance method in surveillance camera system
JP5887564B2 (en) Surveillance camera system and surveillance method in surveillance camera system
JP2016027500A (en) Monitoring camera system and monitoring method using monitoring camera system
JP2016100888A (en) Communication system and wireless router registration method in communication system
JP5887542B2 (en) COMMUNICATION SYSTEM, TELEPHONE DEVICE, AND COMMUNICATION METHOD
JP2016100000A (en) Master unit of cordless telephone set, monitoring system, and communication method in the monitoring system
JP2016100889A (en) Home monitoring system and monitoring method in home monitoring system

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150818

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150929

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151029

R151 Written notification of patent or utility model registration

Ref document number: 5887564

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151