JP2019126042A - Camera apparatus, indoor imaging system, and indoor information acquisition apparatus - Google Patents

Camera apparatus, indoor imaging system, and indoor information acquisition apparatus Download PDF

Info

Publication number
JP2019126042A
JP2019126042A JP2019027406A JP2019027406A JP2019126042A JP 2019126042 A JP2019126042 A JP 2019126042A JP 2019027406 A JP2019027406 A JP 2019027406A JP 2019027406 A JP2019027406 A JP 2019027406A JP 2019126042 A JP2019126042 A JP 2019126042A
Authority
JP
Japan
Prior art keywords
imaging
room
refrigerator
indoor
camera device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019027406A
Other languages
Japanese (ja)
Other versions
JP6708766B2 (en
Inventor
浩太 渡邊
Kota Watanabe
浩太 渡邊
井澤 浩一
Koichi Izawa
浩一 井澤
古田 和浩
Kazuhiro Furuta
和浩 古田
裕樹 丸谷
Hiroki Marutani
裕樹 丸谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Lifestyle Products and Services Corp
Original Assignee
Toshiba Lifestyle Products and Services Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Lifestyle Products and Services Corp filed Critical Toshiba Lifestyle Products and Services Corp
Priority to JP2019027406A priority Critical patent/JP6708766B2/en
Publication of JP2019126042A publication Critical patent/JP2019126042A/en
Application granted granted Critical
Publication of JP6708766B2 publication Critical patent/JP6708766B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To provide a camera apparatus, an indoor imaging system, and an indoor information acquisition apparatus which can acquire information in a room arbitrarily while suppressing power consumption.SOLUTION: A camera apparatus according to an embodiment includes an imaging means for imaging a room, a receiving means for receiving an imaging instruction for imaging the room, which is given from an external operation terminal, via a refrigerator that can communicate with the operation terminal, and a control means for always standing by in a low power mode in which less power than the normal operation mode is consumed, and returning to the normal operation mode when the receiving means receives the imaging instruction to image the room by the imaging means, and the camera apparatus includes the imaging means, the receiving means, and the control means is installed in the room of the refrigerator, and returns to the normal operation mode when the imaging instruction is detected by the receiving means.SELECTED DRAWING: Figure 4

Description

本発明の実施形態は、カメラ装置、室内撮像システム、室内情報取得装置に関する。   Embodiments of the present invention relate to a camera device, an indoor imaging system, and an indoor information acquisition apparatus.

従来、例えば冷蔵庫にカメラを設けること等により、遠隔地からでも例えば冷蔵庫内の食材等の情報を取得可能なものが知られている(例えば、特許文献1参照)。   Conventionally, for example, there is known one that can acquire information such as food in a refrigerator even from a remote place, for example, by providing a camera in a refrigerator or the like (see, for example, Patent Document 1).

特開2012−226748号公報JP 2012-226748 A

しかしながら、いつ遠隔地のユーザから室内の情報を取得するための指示が与えられるかを把握することができないことから、常にその指示を受信可能な状態で作動する必要があり、電力消費が増加する問題があった。   However, since it is not possible to know when an instruction for acquiring information in a room is given from a remote user, it is necessary to always operate in a state where the instruction can be received, and power consumption increases. There was a problem.

本発明が解決しようとする課題は、電力消費を抑制しつつ、室内の情報を任意に取得することができるカメラ装置、室内撮像システム、室内情報取得装置を提供することにある。   The problem to be solved by the present invention is to provide a camera device, an indoor imaging system, and an indoor information acquisition device capable of acquiring information in the room arbitrarily while suppressing power consumption.

実施形態によるカメラ装置は、室内を撮像する撮像手段と、外部の操作端末から与えられた室内を撮像するための撮像指示を、操作端末と通信可能な冷蔵庫を介して受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、受信手段で撮像指示が受信されると通常動作モードに復帰して撮像手段により室内を撮像する制御手段と、を備え、撮像手段、受信手段および制御手段を含むカメラ装置は、冷蔵庫の室内に設置されており、撮像指示が受信手段により検出されると、通常動作モードに復帰することを特徴とする。   The camera device according to the embodiment includes an imaging unit for imaging a room, a reception unit for receiving an imaging instruction for imaging a room given from an external operation terminal, via a refrigerator that can communicate with the operation terminal, The control means stands by in the low power mode, which consumes less power than the normal operation mode, and returns to the normal operation mode when the image receiving instruction is received by the receiving means, and controls the image of the room by the imaging means And a camera device including an imaging means, a receiving means, and a control means is installed in a room of the refrigerator, and returns to the normal operation mode when an imaging instruction is detected by the receiving means.

一実施形態の室内撮像システムを模式的に示す図A diagram schematically illustrating an indoor imaging system according to an embodiment 一実施形態のカメラ装置の外観を模式的に示す図The figure which shows typically the external appearance of the camera apparatus of one Embodiment 一実施形態のカメラ装置の内部を模式的に示す図The figure which shows typically the inside of the camera apparatus of one Embodiment 一実施形態のカメラ装置および室内撮像システムの電気的構成を模式的に示す図The figure which shows typically the electric constitution of the camera apparatus of one Embodiment, and an indoor imaging system 一実施形態における冷蔵庫の処理の流れを示す図The figure which shows the flow of processing of the refrigerator in one embodiment 一実施形態におけるカメラ装置の処理の流れを示す図A diagram showing the flow of processing of the camera device in one embodiment 一実施形態において光エネルギーにより撮像指示を伝達する際の点滅パターンの一例を示す図A diagram showing an example of a blinking pattern when transmitting an imaging instruction by light energy in one embodiment 一実施形態において音エネルギーにより撮像指示を伝達する際の鳴動パターンの一例を示す図The figure which shows an example of the ringing pattern at the time of transmitting an imaging instruction | indication by sound energy in one Embodiment 一実施形態において振動エネルギーにより撮像指示を伝達する際の冷蔵庫の処理の流れを示す図A diagram showing a flow of processing of a refrigerator when transmitting an imaging instruction by vibration energy in one embodiment 一実施形態において振動エネルギーにより撮像指示を伝達する際のカメラ装置の処理の流れを示す図A diagram showing the flow of processing of the camera device when transmitting an imaging instruction by vibration energy in one embodiment 一実施形態において光エネルギーと振動エネルギーとにより撮像指示を伝達する際のカメラ装置の処理の流れを示す図A diagram showing the flow of processing of the camera apparatus when transmitting an imaging instruction by light energy and vibration energy in one embodiment

以下、一実施形態について図1から図11を参照しながら説明する。   Hereinafter, one embodiment will be described with reference to FIGS. 1 to 11.

図1に示すように、本実施形態の室内撮像システム100は、家電製品としての冷蔵庫1、室内を撮像するためのカメラ装置2、冷蔵庫1側との間で通信を行うためのアクセスポイント3、操作端末としての携帯端末4等により構成されている。このうち、アクセスポイント3は、外部ネットワーク5に接続しており、外部ネットワーク5を介して遠隔地の携帯端末4やサーバ6等と冷蔵庫1側との間を通信可能に接続している。本実施形態では、冷蔵庫1とアクセスポイント3との間、アクセスポイント3と携帯端末4との間、およびカメラ装置2とアクセスポイント3との間は、Bluetooth(登録商標)による無線通信にて通信が行われる。   As shown in FIG. 1, the indoor imaging system 100 according to the present embodiment includes a refrigerator 1 as a home appliance, a camera device 2 for imaging an indoor room, and an access point 3 for communicating with the refrigerator 1 side. It comprises the portable terminal 4 etc. as an operation terminal. Among these, the access point 3 is connected to the external network 5 and is communicably connected via the external network 5 between the portable terminal 4 or the server 6 at a remote place and the refrigerator 1 side. In this embodiment, communication between the refrigerator 1 and the access point 3, communication between the access point 3 and the portable terminal 4, and communication between the camera device 2 and the access point 3 by wireless communication by Bluetooth (registered trademark) Is done.

携帯端末4は、カメラ装置2に室内を撮像させるための撮像指示を入力する操作端末であり、いわゆるスマートフォン(高機能携帯電話)を想定している。ただし、操作端末としては、携帯端末4に限らず、例えばタブレット型のパソコン等であってもよい。この携帯端末4は、住宅7内に位置している場合には、アクセスポイント3との間で近距離無線方式により通信可能に接続される。また、携帯端末4は、住宅7外に位置している場合には、広域通信により外部ネットワーク5を介してアクセスポイント3との間で通信可能に接続される。また、携帯端末4は、住宅7内からであっても広域通信により外部ネットワーク5を介してアクセスポイント3に接続することが可能であるとともに、住宅7内においては、アクセスポイント3を介さずに冷蔵庫1側と直接的に通信可能でもある。   The portable terminal 4 is an operation terminal for inputting an imaging instruction for causing the camera device 2 to image a room, and assumes a so-called smart phone (high-performance mobile phone). However, the operation terminal is not limited to the portable terminal 4 and may be, for example, a tablet-type personal computer. When the portable terminal 4 is located in the house 7, the portable terminal 4 is communicably connected to the access point 3 by the short distance wireless method. When the portable terminal 4 is located outside the house 7, the portable terminal 4 is communicably connected to the access point 3 via the external network 5 by wide area communication. Moreover, the portable terminal 4 can be connected to the access point 3 via the external network 5 by wide area communication even from within the house 7, and in the house 7 without passing through the access point 3. It can also communicate directly with the refrigerator 1 side.

サーバ6は、周知のコンピュータシステムにより構成されており、冷蔵庫1にアクセスするための情報(例えばIPアドレス等)等を記憶しているとともに、本実施形態では、カメラ装置2により撮像された撮像データを記憶する。なお、図1では冷蔵庫1のみを図示しているが、図示しないエアコン等、他の家電製品もネットワーク化されている。   The server 6 is configured by a well-known computer system, and stores information (for example, an IP address and the like) for accessing the refrigerator 1 and the like, and in the present embodiment, imaging data captured by the camera device 2 Remember. In addition, although only the refrigerator 1 is shown in figure in FIG. 1, other household appliances, such as an air-conditioner not shown, are also networked.

このように家電製品をネットワーク化することにより、各家電製品の消費電力をユーザに目に見える形で提供する見える化、夏場の昼間等の電力需要が大きくなる時間帯における電力消費を低減するピークシフト、一般家庭の定格を超えるような電力の瞬間的な使用を回避するピークカット等の電力コントロールや、家電製品の故障診断等、使い勝手や快適性あるいは利便性を提供するためのシステムを提供することが可能となる。また、カメラ装置2を例えば冷蔵室内に設置することにより、冷蔵庫1の室内の様子(物品の貯蔵状態等)を確認すること等も可能となる。そして、これら各種の情報や撮像データ等をサーバ6に記憶することで、遠隔地であっても外部ネットワーク5等を介して携帯端末4等によりそれらの情報を参照することが可能となる。
次に、カメラ装置2について説明する。
By networking home appliances in this way, the power consumption of each home appliance can be visually provided to the user in a visible manner, and the peak of reducing power consumption in a time zone where the power demand for summer daytime etc. increases We provide systems for providing ease of use, comfort, or convenience, such as shift control, peak-cut power control to avoid momentary use of power that exceeds general household ratings, fault diagnosis for home appliances, etc. It becomes possible. In addition, by installing the camera device 2 in, for example, a cold storage room, it is also possible to check the indoor situation (the storage state of articles, etc.) of the refrigerator 1 or the like. Then, by storing the various information, the imaging data, and the like in the server 6, even at a remote place, it is possible to refer to the information by the portable terminal 4 or the like via the external network 5 or the like.
Next, the camera device 2 will be described.

カメラ装置2は、図2および図3に示すように、概ね直方体の形状に形成された筐体10の表面に、撮像部11(図4参照)のレンズ12、本実施形態では2個の撮像ライト13、および光センサ14が露出するように設けられている。ただし、レンズ12や撮像ライト13および光センサ14は、筐体10外に露出するのではなく、その表面がカバー等で覆われた態様であってもよい。以下、レンズ12等が露出している側を(図3の図示右方側)をカメラ装置2の正面とし、反対側(図3の図示左方側)を背面として説明する。   As shown in FIG. 2 and FIG. 3, the camera device 2 has a lens 12 of the imaging unit 11 (see FIG. 4), two in the present embodiment, on the surface of the housing 10 formed in a substantially rectangular shape. The light 13 and the light sensor 14 are provided to be exposed. However, the lens 12, the imaging light 13, and the light sensor 14 may not be exposed to the outside of the housing 10 but may be in a mode in which the surface is covered with a cover or the like. Hereinafter, the side where the lens 12 and the like are exposed (right side in FIG. 3) will be described as the front of the camera device 2, and the opposite side (left side in FIG. 3) as the rear.

このカメラ装置2は、図3に示すように、筐体10内に、制御基板15、電池16、通信モジュール17、音センサ19および振動センサ20等が収容されている。制御基板15には、レンズ12や図示しない撮像素子を有する撮像部11、撮像ライト13、およびそれらを制御するためのカメラ側制御部18(図4参照)等が設けられている。撮像素子は、CCDやCMOS等の周知の撮像素子が用いられている。撮像ライト13は、LEDを採用している。なお、図示は省略するが、カメラ装置2には電源スイッチも設けられている。   As shown in FIG. 3, in the camera device 2, a control board 15, a battery 16, a communication module 17, a sound sensor 19, a vibration sensor 20 and the like are accommodated in a housing 10. The control board 15 is provided with an imaging unit 11 having a lens 12 and an imaging device (not shown), an imaging light 13, a camera side control unit 18 (see FIG. 4) for controlling them, and the like. As an imaging device, a known imaging device such as a CCD or a CMOS is used. The imaging light 13 employs an LED. Although not shown, the camera device 2 is also provided with a power switch.

電池16は、制御部や通信モジュール17、および光センサ14、音センサ19、振動センサ20等に電力を供給する。つまり、カメラ装置2は、内蔵する電池16により駆動される。このため、カメラ装置2は、電源ケーブル等が不要となり、任意の場所に設置することが可能となる。本実施形態では、上記したようにカメラ装置2は冷蔵室内に設置されている。   The battery 16 supplies power to the control unit, the communication module 17, the light sensor 14, the sound sensor 19, the vibration sensor 20, and the like. That is, the camera device 2 is driven by the built-in battery 16. For this reason, the camera device 2 does not require a power cable or the like, and can be installed in any place. In the present embodiment, as described above, the camera device 2 is installed in the refrigerator compartment.

通信モジュール17は、撮像部11で撮像した庫内の撮像データを、アクセスポイント3を介して携帯端末4やサーバ6等に送信する。なお、サーバ6に送信するのは、撮像データをサーバ6に記憶させるためである。ここで、撮像データとは、室内の画像を含むデータであり、例えばビットマップ形式やJPEG形式或いはMPEG形式などの周知のフォーマットのデータ(静止画、動画)、そのデータを圧縮や暗号化あるいは画像処理することにより変換したデータ等、室内の様子を携帯端末4等で確認できるデータであれば、どのような形式のものであってもよい。   The communication module 17 transmits the imaging data in the storage imaged by the imaging unit 11 to the portable terminal 4 or the server 6 via the access point 3. The reason for transmitting to the server 6 is to make the server 6 store the imaging data. Here, the imaging data is data including an image in the room, for example, data of a well-known format such as bitmap format, JPEG format or MPEG format (still image, moving image), compression or encryption of the data or image The data may be in any form as long as the data can be confirmed by the portable terminal 4 or the like, such as data converted by processing.

図4に示すように、カメラ側制御部18は、CPU18a、ROM18b、RAM18cおよびRTC18d等を有するマイクロコンピュータで構成されており、カメラ装置2全体を制御する。具体的には、カメラ側制御部18は、撮像部11による撮像タイミングの制御、撮像する際の撮像環境を整える制御(撮像ライト13の点灯制御)、通信モジュール17による撮像データの送信、各センサによる後述する撮像指示の受信(受け付け)等のための制御等を行っている。また、カメラ側制御部18は、本実施形態では、撮像した画像の補正等を行う画像処理も行っている。カメラ側制御部18は、制御手段を構成している。   As shown in FIG. 4, the camera side control unit 18 is constituted by a microcomputer having a CPU 18a, a ROM 18b, a RAM 18c, an RTC 18d and the like, and controls the entire camera device 2. Specifically, the camera-side control unit 18 controls the imaging timing by the imaging unit 11, controls the imaging environment at the time of imaging (lighting control of the imaging light 13), transmits imaging data by the communication module 17, and each sensor The control for receiving (accepting) an imaging instruction to be described later, etc. is performed. Further, in the present embodiment, the camera side control unit 18 also performs image processing for correcting the captured image. The camera side control unit 18 constitutes a control means.

カメラ側制御部18に接続されている光センサ14は、いわゆる照度センサであり、カメラ装置2の周辺の照度を検出する。より詳細には、光センサ14は、所定の波長帯域の光エネルギー(本実施形態では、後述する室内LEDから発せられる光エネルギー)を検出する。光センサ14で検出された光エネルギーは、電気信号に変換されてカメラ側制御部18に出力される。   The light sensor 14 connected to the camera side control unit 18 is a so-called illuminance sensor, and detects the illuminance around the camera device 2. More specifically, the light sensor 14 detects light energy of a predetermined wavelength band (in the present embodiment, light energy emitted from an indoor LED described later). The light energy detected by the light sensor 14 is converted into an electric signal and output to the camera control unit 18.

音センサ19は、カメラ装置2の周囲で発生した音を検出する。より詳細には、音センサ19は、予め設定されている周波数帯域で発せられる音エネルギー(本実施形態では、後述するパネルブザー29や室内ブザー33から発せられる音エネルギー)を検出する。音センサ19で検出された音エネルギーは、電気信号に変換されてカメラ側制御部18に出力される。   The sound sensor 19 detects a sound generated around the camera device 2. More specifically, the sound sensor 19 detects sound energy (in the present embodiment, sound energy emitted from a panel buzzer 29 or an indoor buzzer 33 described later) emitted in a preset frequency band. Sound energy detected by the sound sensor 19 is converted into an electrical signal and output to the camera control unit 18.

振動センサ20は、カメラ装置2に加わった振動を検出する。この振動センサ20は、例えば3軸加速度センサ等により構成されており、検出した振動エネルギーを電気信号に変換してカメラ側制御部18に出力する。そして、カメラ側制御部18は、加速度に基づいて、カメラ装置2に加わった振動を検出する。   The vibration sensor 20 detects the vibration applied to the camera device 2. The vibration sensor 20 is formed of, for example, a three-axis acceleration sensor, converts the detected vibration energy into an electric signal, and outputs the electric signal to the camera control unit 18. And the camera side control part 18 detects the vibration added to the camera apparatus 2 based on acceleration.

これら光センサ14、音センサ19、および振動センサ20は、詳細は後述するが、物理的なエネルギーを検出するセンサであり、撮像指示を受信する受信手段を構成している。なお、光センサ14、音センサ19および振動センサ20の全てを必ずしも設ける必要は無く、撮像指示を例えば光エネルギーでのみ受信するのであれば、光センサ14のみを設ける構成としてもよい。   The light sensor 14, the sound sensor 19, and the vibration sensor 20, which will be described in detail later, are sensors that detect physical energy, and constitute receiving means for receiving an imaging instruction. Note that it is not necessary to provide all of the light sensor 14, the sound sensor 19 and the vibration sensor 20, and only the light sensor 14 may be provided as long as the imaging instruction is received by only light energy, for example.

カメラ側制御部18は、検出された各エネルギーの強度やパターンに基づいて、後述するように撮像指示であるかを判定する。つまり、本実施形態の場合、ユーザからの撮像指示は、所定のパターンで発せられたエネルギーにより示される構成となっており、カメラ側制御部18は、各センサにより検出されたエネルギーのパターンと撮像指示を示すパターンとが一致するかを判定する判定手段としても機能する。   The camera-side control unit 18 determines whether it is an imaging instruction as described later, based on the detected intensity or pattern of each energy. That is, in the case of the present embodiment, the imaging instruction from the user is configured to be indicated by the energy emitted in a predetermined pattern, and the camera side control unit 18 detects the energy pattern detected by each sensor and imaging It also functions as a determination unit that determines whether a pattern indicating an instruction matches.

このような構成のカメラ装置2は、常には通常動作モードよりも相対的に消費電力が少ない低電力モードにて待機しており、撮像指示を受信すると、通常動作モードに復帰して室内を撮像する。本実施形態の場合、カメラ装置2は冷蔵室内に設けられていることから、冷蔵室の室内が撮像される。   The camera device 2 having such a configuration always stands by in the low power mode, which consumes relatively less power than the normal operation mode, and when receiving an imaging instruction, returns to the normal operation mode and images the room Do. In the case of this embodiment, since the camera device 2 is provided in the cold storage room, the inside of the cold storage room is imaged.

カメラ装置2が設置される冷蔵庫1は、庫側制御部21を有している。この庫側制御部21は、CPU21a、ROM21b、RAM21c、タイマ21d等を有するマイクロコンピュータで構成されており、冷蔵庫1全体を制御する。具体的には、庫側制御部21は、例えば操作パネル22から設定された運転状態となるように、温度センサ23で検出した庫内の温度や扉センサ24で検出した扉の開閉状態等に基づいて、周知の冷凍サイクルを構成する冷蔵用冷却機構25や冷凍用冷却機構26の運転状態を制御する。   The refrigerator 1 in which the camera device 2 is installed has a storage side control unit 21. The storage-side control unit 21 is configured by a microcomputer having a CPU 21 a, a ROM 21 b, a RAM 21 c, a timer 21 d and the like, and controls the entire refrigerator 1. Specifically, the storage-side control unit 21 uses, for example, the temperature in the storage detected by the temperature sensor 23 or the open / close state of the door detected by the door sensor 24 so that the operation state set from the operation panel 22 is obtained. Based on this, the operating states of the refrigeration mechanism 25 for refrigeration and the refrigeration mechanism 26 for refrigeration that constitute a known refrigeration cycle are controlled.

操作パネル22には、パネル表示器27、パネルLED28、パネルブザー29が設けられている。パネル表示器27は、設定値等を表示する。パネルLED28は、操作スイッチやや運転状態等を点灯させるために設けられている。パネルブザー29は、圧電ブザー等で構成され、操作に応じて音声(音エネルギー)を発することで、操作内容を報知する。本実施形態の場合、パネルブザー29は、6kHzの音を出力可能となっており、後述するように、カメラ装置2に対して撮像指示を伝達するために音エネルギーを発する伝達手段としても機能する。   The operation panel 22 is provided with a panel display 27, a panel LED 28, and a panel buzzer 29. The panel display 27 displays setting values and the like. The panel LED 28 is provided to light the operation switch and the operating state. The panel buzzer 29 is configured of a piezoelectric buzzer or the like, and notifies the content of the operation by emitting a sound (sound energy) according to the operation. In the case of the present embodiment, the panel buzzer 29 can output a 6 kHz sound, and also functions as a transmission means for emitting sound energy to transmit an imaging instruction to the camera device 2 as described later. .

室内照明30は、冷蔵室等に設けられており、扉が開放された際に点灯する。つまり、室内照明30は、光エネルギーを発生させる。この室内照明30は、庫側制御部21からの制御により点滅可能となっている。送風機31は、通常の動作においては冷蔵庫1内の冷気を循環させるために設けられている。この送風機31は、例えば回転数を通常の動作よりも高くすることにより、風切り音やモータ音等の音エネルギーを発生させることが可能となっている。   The indoor light 30 is provided in a cold storage room or the like, and lights up when the door is opened. That is, the indoor light 30 generates light energy. The indoor light 30 can be blinked under the control of the storage control unit 21. The blower 31 is provided to circulate cold air in the refrigerator 1 in normal operation. The blower 31 can generate sound energy such as wind noise and motor noise by, for example, setting the number of rotations higher than that of the normal operation.

室内LED32は、カメラ装置2に対して撮像指示を伝達するために光エネルギーを発生するものであり、本実施形態では、上記した光センサ14で検出可能な所定の周波数帯域の光を発する構成となっている。また、室内LED32は、所定のパターンにて点滅可能であり、撮像指示に対応するパターンで点滅することで撮像指示をカメラ装置2側に伝達する伝達手段を構成している。なお、上記した室内照明30も、光エネルギーを発するものであることから、室内LED32の代わりに伝達手段として用いることが可能である。また、室内照明30を伝達手段として用いる場合には、室内LED32を設けなくてもよい。   The indoor LED 32 generates light energy to transmit an imaging instruction to the camera device 2. In the present embodiment, the indoor LED 32 emits light in a predetermined frequency band that can be detected by the light sensor 14 described above It has become. The indoor LED 32 is capable of blinking in a predetermined pattern, and constitutes transmitting means for transmitting an imaging instruction to the camera device 2 by blinking in a pattern corresponding to the imaging instruction. In addition, since the above-mentioned indoor illumination 30 also emits light energy, it can be used as a transmission means instead of the indoor LED 32. Moreover, when using the indoor lighting 30 as a transmission means, it is not necessary to provide indoor LED32.

室内ブザー33は、カメラ装置2に対して撮像指示を伝達するために音エネルギーを発生する例えば圧電ブザーで構成されている。室内ブザー33は、例えば20kHzの音声(つまり、可聴域から外れた音声)を出力可能であり、室内ブザー33から発せられた音声は、上記した音センサ19では検出可能である一方、人には聞こえない構成となっている。なお、パネルブザー29を伝達手段として用いる場合や送風機31を伝達手段として用いる場合には、室内ブザー33を設けなくてもよい。室内ブザーは、伝達手段を構成している。   The indoor buzzer 33 is configured of, for example, a piezoelectric buzzer that generates sound energy to transmit an imaging instruction to the camera device 2. The indoor buzzer 33 can output, for example, a voice of 20 kHz (that is, a voice out of the audible range), and the sound emitted from the indoor buzzer 33 can be detected by the above-described sound sensor 19. It can not be heard. When the panel buzzer 29 is used as a transmission means or when the blower 31 is used as a transmission means, the indoor buzzer 33 may not be provided. The indoor buzzer constitutes a transmission means.

通信アダプタ34は、アクセスポイント3や室内の携帯端末4等との間で通信を行うものであり、本実施形態では、冷蔵庫1に着脱可能に設けられている。なお、図1には冷蔵庫1だけを図示しているが、通信アダプタ34は、エアコン等の他の家電製品にも設けられ、家電製品をネットワーク化している。通信アダプタ34は、通信手段を構成している。また、通信アダプタ34は、アクセスポイント3を介すること無く、カメラ装置2との間で直接的に通信を行うことも可能な構成となっている。この通信アダプタ34は、上記したように見える化等にも用いられていることから、冷蔵庫1が動作している状態では基本的に常時作動している。
次に、上記した構成の作用について説明する。
The communication adapter 34 communicates with the access point 3 and the portable terminal 4 and the like in the room, and is detachably provided to the refrigerator 1 in the present embodiment. In addition, although only the refrigerator 1 is illustrated in FIG. 1, the communication adapter 34 is provided also in other household appliances, such as an air conditioner, and makes household appliances network. The communication adapter 34 constitutes a communication means. The communication adapter 34 is also configured to be able to communicate directly with the camera device 2 without the access point 3. Since this communication adapter 34 is also used for visualizing as described above, it basically operates at all times when the refrigerator 1 is in operation.
Next, the operation of the above configuration will be described.

上記したカメラ装置2を設けることにより、住宅7の室内や冷蔵室等の室内を撮像することができる。この場合、外部ネットワーク5を経由して携帯端末4からカメラ装置2に対して撮像指示を送信することで、遠隔地からであっても任意のタイミングで撮像データを取得することができる。ただし、いつ撮像指示が送られてくるかが不明なために通信モジュール17を常に動作させておく必要があり、その場合には電力消費が大きくなる。その結果、1日あるいは数日程度で電池16交換(あるいは充電)が必要となる。   By providing the camera device 2 described above, it is possible to image the room of the house 7 or the room such as the refrigerator compartment. In this case, by transmitting an imaging instruction from the portable terminal 4 to the camera device 2 via the external network 5, imaging data can be acquired at an arbitrary timing even from a remote place. However, since it is not clear when the imaging instruction is sent, it is necessary to keep the communication module 17 always operating, in which case power consumption increases. As a result, it is necessary to replace (or charge) the battery 16 in one day or several days.

そこで、カメラ装置2および室内撮像システム100では、冷蔵庫1等の家電製品から撮像指示を伝達させることにより(家電製品と連携させることにより)、電力消費を抑制しつつ、撮像データ等の室内の情報を任意に取得することを可能としている。以下、説明の簡略化のために、撮像指示の伝達に光エネルギーを用いる場合と、音エネルギーを用いる場合と、振動エネルギーを用いる場合と、それらを組み合わせた場合の一例(光エネルギーとエネルギーとを用いる例)について、それぞれ個別に説明する。
<光エネルギーを用いる場合>
光エネルギーを用いて撮像指示を伝達する場合、冷蔵庫1は図5に示す庫側処理を実行し、カメラ装置2は図6に示すカメラ側処理を実行する。
Therefore, in the camera device 2 and the indoor imaging system 100, by transmitting an imaging instruction from a home appliance such as the refrigerator 1 (by cooperating with the home appliance), information on the room such as imaging data is suppressed while suppressing power consumption. It is possible to obtain any. Hereinafter, in order to simplify the description, an example of using light energy for transmitting an imaging instruction, using sound energy, using vibration energy, and a combination of them (light energy and energy Each of the examples to be used will be described individually.
<When using light energy>
When the imaging instruction is transmitted using light energy, the refrigerator 1 executes the storage-side processing shown in FIG. 5, and the camera device 2 executes the camera-side processing shown in FIG.

冷蔵庫1は、図5に示す庫側処理において、撮像指示を受信したかを判定する(R1)。ユーザからの撮像支持は、アクセスポイント3を経由して通信アダプタ34により冷蔵庫1にて受信される(図4参照)。冷蔵庫1は、撮像指示を受信していない場合には(R1:NO)、そのまま待機する。一方、冷蔵庫1は、撮像指示を受信した場合には(R1:YES)、扉が閉鎖されているかを判定し(R2)、扉が開放されている場合には(R2:NO)、扉が閉鎖されるまで待機する。   The refrigerator 1 determines whether an imaging instruction has been received in the storage-side processing illustrated in FIG. 5 (R1). The imaging support from the user is received at the refrigerator 1 by the communication adapter 34 via the access point 3 (see FIG. 4). The refrigerator 1 waits as it is, when the imaging instruction | indication is not received (R1: NO). On the other hand, when the refrigerator 1 receives an imaging instruction (R1: YES), it determines whether the door is closed (R2), and when the door is opened (R2: NO), the door Wait until it is closed.

冷蔵庫1は、扉が閉鎖されている場合には(R2:YES)、操作パネル22等から撮像中であることを報知した後(R3)、エネルギー(ここでは光エネルギー)を発する。このステップR3では、冷蔵庫1は、室内LED32を撮像指示に対応する所定のパターンにて点滅させることで、光エネルギーを発している。具体的には、冷蔵庫1は、図7に示すように、撮像指示を受信すると予め設定されている点滅期間の間、室内LED32のON/OFFを繰り返す。つまり、本実施形態では、撮像指示を示すパターンとして、光エネルギーが5Hzで点滅するパターンが採用されている。この点滅パターンは、一般的な冷蔵庫1の使用状態では発生し得ないパターンである。すなわち、扉が開放されたときには室内照明30が点灯するものの、扉が5Hz(0.2s周期)で開閉されることは無いと考えられるため、扉の開閉と撮像指示とが誤判定されるおそれがない。   When the door is closed (R2: YES), the refrigerator 1 reports that imaging is in progress from the operation panel 22 or the like (R3), and then emits energy (here, light energy). In this step R3, the refrigerator 1 emits light energy by causing the indoor LED 32 to blink in a predetermined pattern corresponding to the imaging instruction. Specifically, as shown in FIG. 7, when the imaging instruction is received, the refrigerator 1 repeats ON / OFF of the indoor LED 32 during a blinking period set in advance. That is, in the present embodiment, a pattern in which light energy blinks at 5 Hz is adopted as a pattern indicating an imaging instruction. This blinking pattern is a pattern that can not occur in the general use condition of the refrigerator 1. That is, although it is considered that the door does not open and close at 5 Hz (0.2 s cycle) although the interior lighting 30 lights up when the door is opened, there is a possibility that the opening and closing of the door and an imaging instruction may be misjudged There is no

さて、カメラ装置2は、図6に示すカメラ側処理において、電源がONされると(S1)、スリープモードに移行する(S2)。このスリープモードは、通常動作モードよりも電力消費が少ない低電力モードに相当する。そして、カメラ装置2は、エネルギーを検出したかを判定する(S3)。このステップS3では、より詳細には、カメラ側制御部18はスリープモードで待機している状態であり、光センサ14により光エネルギーを検出した旨が通知されたかが判定されることになる。この通知は、マイクロコンピュータ等では周知の割り込み信号等により通知される。   Now, in the camera side process shown in FIG. 6, when the power is turned on (S1), the camera device 2 shifts to the sleep mode (S2). This sleep mode corresponds to a low power mode which consumes less power than the normal operation mode. Then, the camera device 2 determines whether energy has been detected (S3). In step S3, more specifically, the camera-side control unit 18 is in a standby state in the sleep mode, and it is determined whether the light sensor 14 has notified that light energy has been detected. This notification is notified by a microcomputer or the like by a known interrupt signal or the like.

カメラ装置2は、エネルギーを検出していない場合には(S3:NO)、そのまま待機する一方、エネルギーを検出した場合には(S3:YES)、通常動作モードに復帰する(S4)。そして、検出したエネルギーのパターンが、撮像指示のパターンと一致するかを判定する(S5)。具体的には、カメラ装置2は、光エネルギーのON/OFFのエッジを検出し、そのエッジが例えば5秒間で10回以上検出されると、撮像指示を示すものであると判定する。   The camera device 2 stands by as it is when energy is not detected (S3: NO), while returning to the normal operation mode when energy is detected (S3: YES) (S4). Then, it is determined whether the detected energy pattern matches the imaging instruction pattern (S5). Specifically, the camera device 2 detects an ON / OFF edge of light energy, and when the edge is detected 10 times or more in 5 seconds, for example, it is determined to indicate an imaging instruction.

カメラ装置2は、撮像指示のパターンと一致する場合には(S5:YES)、室内を撮像し(S6)、撮像データを携帯端末4等に送信したりサーバ6等に記憶させたりした後(S7)、ステップS2に移行してスリープモードに移行する。また、カメラ装置2は、撮像指示のパターンと一致しない場合にも(S5:NO)、スリープモードに移行する。
このように、スリープモード中のカメラ装置2に対して、光エネルギーにより撮像指示を伝達することができる。
<音エネルギーを用いる場合>
If the camera device 2 matches the pattern of the imaging instruction (S5: YES), the camera device 2 captures an image of the room (S6), transmits imaging data to the portable terminal 4 or the like, or stores it in the server 6 or the like ( S7), shift to step S2 and shift to the sleep mode. In addition, even when the camera device 2 does not match the pattern of the imaging instruction (S5: NO), the camera device 2 shifts to the sleep mode.
Thus, an imaging instruction can be transmitted to the camera device 2 in the sleep mode by the light energy.
<When using sound energy>

音エネルギーを用いて撮像指示を伝達する場合、光エネルギーの場合と同様に、冷蔵庫1は図5に示す庫側処理を実行し、カメラ装置2は図6に示すカメラ側処理を実行する。以下、処理内容が異なる点について詳細に説明する。   When transmitting an imaging instruction using sound energy, the refrigerator 1 executes storage-side processing shown in FIG. 5 and the camera device 2 executes camera-side processing shown in FIG. 6 as in the case of light energy. Hereinafter, differences in processing content will be described in detail.

冷蔵庫1は、撮像指示を受信すると(R1:YES)、扉が閉鎖されているかを確認し(R2:YES)、撮像中であることを報知した後(R3)、エネルギー(ここでは音エネルギー)を発する。この場合、冷蔵庫1は、パネルブザー29を所定のパターンにて鳴動させることで、音エネルギーを発している。具体的には、冷蔵庫1は、図8に示すように、撮像指示を受信すると予め設定されている鳴動期間の間、0.5秒ON(鳴動)、0.5秒間OFF(停止)するパターンで、パネルブザー29を鳴動させる。つまり、本実施形態では、撮像指示を示すパターンとして、予め設定された6kHz(室内ブザー33の場合には20kHzの非可聴域)の周波数帯域であって、予め定められた周期(0.5秒周期)で間欠的に鳴動するパターンが採用されている。この鳴動パターンは、通常の操作(ユーザの設定操作)とは異なるパターンであり、撮像指示以外では発生し得ないパターンである。   When the refrigerator 1 receives an imaging instruction (R1: YES), the refrigerator 1 confirms whether the door is closed (R2: YES), and after notifying that imaging is in progress (R3), energy (here, sound energy) Emits In this case, the refrigerator 1 emits sound energy by ringing the panel buzzer 29 in a predetermined pattern. Specifically, as shown in FIG. 8, when the imaging instruction is received, the refrigerator 1 turns on (ringing) for 0.5 seconds, and turns off (stopping) for 0.5 seconds, during a preset ringing period. Then, the panel buzzer 29 sounds. That is, in the present embodiment, as a pattern indicating an imaging instruction, it is a frequency band of 6 kHz (20 kHz inaudible area in the case of the indoor buzzer 33) set in advance, and a predetermined cycle (0.5 seconds) A pattern of ringing intermittently in a cycle) is adopted. This ringing pattern is a pattern different from the normal operation (setting operation by the user), and is a pattern that can not occur except for the imaging instruction.

さて、カメラ装置2は、図6に示すカメラ側処理において、電源がONされると(S1)、スリープモードに移行して待機する(S2)。そして、冷蔵庫1は、音センサ19から割り込み信号等により音エネルギーを検出した旨が通知されると、つまり、音エネルギーを検出すると(S3:YES)、通常動作モードに復帰して(S4)、音エネルギーのパターンが撮像指示のパターンと一致するかを判定する(S5)。この場合、カメラ装置2は、音エネルギーのON/OFFのエッジを検出し、そのエッジが例えば5秒間で10回以上検出されると、撮像指示を示すものであると判定する。   Now, in the camera side process shown in FIG. 6, when the power is turned on (S1), the camera device 2 shifts to the sleep mode and stands by (S2). When the refrigerator 1 is notified by the sound sensor 19 that sound energy has been detected by an interrupt signal or the like, that is, when sound energy is detected (S3: YES), the normal operation mode is restored (S4), It is determined whether the sound energy pattern matches the pattern of the imaging instruction (S5). In this case, the camera device 2 detects an ON / OFF edge of sound energy, and when the edge is detected 10 times or more in 5 seconds, for example, it is determined to indicate an imaging instruction.

そして、カメラ装置2は、撮像指示のパターンと一致する場合には(S5:YES)、室内を撮像し(S6)、撮像データを携帯端末4等に送信したりサーバ6等に記憶させたりした後(S7)、ステップS2に移行してスリープモードに移行する。
このように、スリープモード中のカメラ装置2に対して、音エネルギーにより撮像指示を伝達することができる。
<振動エネルギーを用いる場合>
Then, when the camera device 2 matches the pattern of the imaging instruction (S5: YES), the camera device 2 captures an image of the room (S6), transmits the imaging data to the portable terminal 4 or the like, or stores it in the server 6 or the like After that (S7), the process proceeds to step S2 to shift to the sleep mode.
As described above, the imaging instruction can be transmitted to the camera device 2 in the sleep mode by the sound energy.
<When using vibration energy>

上記した光エネルギーと音エネルギーの場合には、ユーザがリアルタイムに撮像指示を送信する状況を想定したが、今回は、冷蔵庫1の扉が開閉されたとき(つまり、冷蔵庫1の貯蔵状態が変化した可能性があるとき)に撮像するという撮像指示が予め設定されている状況を想定している。すなわち、撮像指示を受信する受信手段とは、リアルタイムの撮像指示だけで無く、予め設定されている条件に基づいた撮像指示を受信する(受け付ける)ことも可能な構成となっている。   In the case of the light energy and the sound energy described above, it was assumed that the user transmitted an imaging instruction in real time, but this time the door of the refrigerator 1 is opened and closed (that is, the storage state of the refrigerator 1 has changed It is assumed that an imaging instruction for imaging at a time (when there is a possibility) is set in advance. That is, the receiving means for receiving the imaging instruction is configured to be able to receive (accept) the imaging instruction based on the conditions set in advance as well as the imaging instruction in real time.

このとき、冷蔵庫1は図9に示す庫側処理を実行し、カメラ装置2は図10に示すカメラ側処理を実行する。なお、図10に示すカメラ側処理の流れは概ね図6に示したカメラ側処理と共通するので、異なる点について詳細に説明する。   At this time, the refrigerator 1 executes storage-side processing shown in FIG. 9, and the camera device 2 executes camera-side processing shown in FIG. Note that the flow of the camera-side process shown in FIG. 10 is generally the same as the camera-side process shown in FIG. 6, so different points will be described in detail.

冷蔵庫1は、図9に示す庫側処理において、扉が開閉されたかを判定しており(R10)、扉が開閉されていない場合には(R10:NO)、待機する。一方、冷蔵庫1は、扉が開閉された場合には(R10:YES)、撮像中であることを報知した後(R11)、通信アダプタ34からカメラ装置2に対して撮像指示を送信する(R11)。   The refrigerator 1 determines whether the door is opened and closed in the storage-side processing shown in FIG. 9 (R10), and stands by when the door is not opened and closed (R10: NO). On the other hand, when the door is opened and closed (R10: YES), the refrigerator 1 sends an imaging instruction to the camera device 2 from the communication adapter 34 after notifying that imaging is in progress (R11) (R11) ).

カメラ装置2は、図10に示すカメラ側処理において、電源がONされると(S10)、スリープモードに移行し(S11)、振動(振動エネルギー)を検出したかを判定する(S12)。上記したように冷蔵庫1の扉を開閉した場合、それに伴って振動が発生する。そのため、カメラ装置2は、振動を検出すると(S12:YES)、通常動作モードに復帰し(S13)、冷蔵庫1から撮像指示を受信したかを判定する(S14)。このステップS14では、通信モジュール17を介して撮像指示を受信することになる。   In the camera side process shown in FIG. 10, when the power is turned on (S10), the camera device 2 shifts to the sleep mode (S11), and determines whether vibration (vibration energy) is detected (S12). As described above, when the door of the refrigerator 1 is opened and closed, vibrations occur accordingly. Therefore, when the camera device 2 detects vibration (S12: YES), the camera device 2 returns to the normal operation mode (S13), and determines whether an imaging instruction has been received from the refrigerator 1 (S14). In this step S14, an imaging instruction is received via the communication module 17.

そして、カメラ装置2は、撮像指示を受信すると(S14:YES)、室内を撮像し(S15)、撮像データを送信、あるいはサーバ6等に記憶させた後(S16)、スリープモードに移行する。なお、ステップS16における送信先は、携帯端末4等である。つまり、カメラ装置2は、冷蔵庫1の扉が開閉された場合には、物品等の貯蔵状態が変化した可能性があるとして、その旨を撮像データとしてユーザに報知する。
このように、スリープモード中のカメラ装置2に対して、振動エネルギーにより撮像指示を伝達することができる。
<光エネルギーと振動エネルギーとを用いる場合>
When the camera device 2 receives an imaging instruction (S14: YES), the camera device 2 captures an image of the room (S15), transmits imaging data, or stores the imaging data in the server 6 or the like (S16), and shifts to the sleep mode. The transmission destination in step S16 is the portable terminal 4 or the like. That is, when the door of the refrigerator 1 is opened and closed, the camera device 2 notifies the user of this as imaging data, on the assumption that the storage state of an article or the like may have changed.
Thus, the imaging instruction can be transmitted to the camera device 2 in the sleep mode by the vibration energy.
<When using light energy and vibration energy>

今回は、光エネルギーと振動エネルギーとを用い、冷蔵庫1の扉が開閉されたときに撮像するという撮像指示が予め設定されている状況において、カメラ装置2単体で撮像する例を説明する。このとき、カメラ装置2は、図11に示すカメラ側処理を実行する。なお、図11に示すカメラ側処理の流れは概ね図10に示したカメラ側処理と共通するので、異なる点について詳細に説明する。   This time, an example will be described in which a single camera device 2 captures an image using a light energy and a vibration energy in a situation where an imaging instruction to capture an image when the door of the refrigerator 1 is opened and closed is set in advance. At this time, the camera device 2 executes the camera side process shown in FIG. Note that the flow of the camera-side process shown in FIG. 11 is generally the same as the camera-side process shown in FIG.

カメラ装置2は、図11に示すカメラ側処理において、電源がONされると(S20)、スリープモードに移行し(S21)、光エネルギーを検出したかを判定する(S22)。冷蔵庫1の扉が開放された場合、冷蔵庫1は、例えば室内照明30を点灯する。また、扉が開放された場合には、庫外の明かりにより、カメラ装置2が照らされる。つまり、光エネルギーを検出することにより、扉の開閉状態を検出することができる。そのため、カメラ装置2は、光エネルギーを検出すると(S22:YES)、冷蔵庫1の扉が開放されたとして、通常動作モードに復帰する(S23)。   In the camera side process shown in FIG. 11, when the power is turned on (S20), the camera apparatus 2 shifts to the sleep mode (S21), and determines whether light energy is detected (S22). When the door of the refrigerator 1 is opened, the refrigerator 1 turns on, for example, the indoor light 30. In addition, when the door is opened, the camera device 2 is illuminated by the outside light. That is, by detecting light energy, the open / close state of the door can be detected. Therefore, when light energy is detected (S22: YES), the camera device 2 returns to the normal operation mode (S23), assuming that the door of the refrigerator 1 is opened.

続いて、カメラ装置2は、扉閉鎖に相当する状態であったかを判定する(S24)。ここで、「扉閉鎖に相当する状態」とは、扉が開放された後に扉が閉鎖された状態を意味している。より具体的には、このステップS24では、次の2点が判定されている。
a)光エネルギーを検出している期間が、瞬間的なものでは無く、物品等を取り出すのに要する程度の期間であったか。
b)扉が閉鎖された際の振動エネルギーを検出したか。
Subsequently, the camera device 2 determines whether the door is closed (S24). Here, "a state corresponding to door closing" means a state in which the door is closed after the door is opened. More specifically, the following two points are determined in this step S24.
a) Whether the period during which light energy is detected is not instantaneous, but is a period necessary for taking out articles or the like.
b) Did you detect vibrational energy when the door was closed?

カメラ装置2は、これらを判定することにより、冷蔵庫1の扉が開閉されたことを判定する。そして、扉閉鎖に相当する状態であったと判定すると(S24:YES)、室内を撮像し(S25)、撮像データを送信、あるいはサーバ6等に記憶させた後(S26)、スリープモードに移行する。なお、ステップS26における送信先は、携帯端末4等である。
このように、スリープモード中のカメラ装置2に対して、光エネルギーと振動エネルギーとを組み合わせることによっても撮像指示を伝達することができる。
以上説明した実施形態によれば、次のような効果を得ることができる。
The camera device 2 determines that the door of the refrigerator 1 is opened or closed by determining these. Then, if it is determined that the door is closed (S24: YES), the room is imaged (S25), the imaging data is transmitted or stored in the server 6 or the like (S26), and then the sleep mode is entered. . The transmission destination in step S26 is the portable terminal 4 or the like.
As described above, an imaging instruction can also be transmitted to the camera device 2 in the sleep mode by combining light energy and vibration energy.
According to the embodiment described above, the following effects can be obtained.

カメラ装置2は、室内を撮像する撮像部11と、撮像指示を家電製品を介して受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、受信手段で撮像指示が受信されると通常動作モードに復帰して撮像手段により室内を撮像する制御を行うカメラ側制御部18と、を備えているので、撮像指示がいつ送信されるかが想定できない場合であっても、通常動作状態のまま待機する必要が無い。これにより、待機中の電力消費を削減することができる。また、受信手段を設けているので、いつ撮像指示が送信されても室内を撮像することができる。したがって、電力消費を抑制しつつ、室内の情報である撮像データを任意に取得することができる。   The camera device 2 stands by in the low power mode in which the power consumption is relatively less than that in the normal operation mode, and the image pickup unit 11 that images the room, the reception unit that receives the image pickup instruction via the home appliance, And the camera-side control unit 18 that returns to the normal operation mode when the receiving unit receives the imaging instruction and performs control to image the room by the imaging unit, so when the imaging instruction is transmitted Even if it can not be assumed, there is no need to wait in the normal operating state. This can reduce power consumption during standby. In addition, since the receiving means is provided, the room can be imaged even when the imaging instruction is transmitted. Therefore, imaging data which is information in a room can be arbitrarily acquired while suppressing power consumption.

撮像指示を家電製品から発せられる物理的なエネルギーで伝達するものとし、受信手段をそのエネルギーを検出する光センサ14、音センサ19、振動センサ20等で構成しているので、パネルブザー29や室内照明30等、家電製品に既存のものを撮像指示の伝達に利用することが可能となる。これにより、追加部品を設けなくても、カメラ装置2に撮像指示を伝達することができる。   Since the imaging instruction is transmitted by the physical energy emitted from the home appliance and the receiving means is constituted by the light sensor 14 for detecting the energy, the sound sensor 19, the vibration sensor 20 and the like, the panel buzzer 29 or the room It becomes possible to use the existing lighting appliance 30 such as the lighting 30 for transmitting an imaging instruction. Thereby, the imaging instruction can be transmitted to the camera device 2 without providing the additional component.

室内LED32や室内ブザー33等、伝達手段として専用の構成を設けてもよい。この場合、例えば室内LED32を可視光以外の波長帯域の光エネルギーを発するようにしたり、室内ブザー33を可聴域を超える20kHz程度以上の音エネルギーを発するようにすること等により、ユーザに影響を与えること無く、撮像指示を伝達することができる。   A dedicated configuration may be provided as a transmission means, such as the indoor LED 32 and the indoor buzzer 33. In this case, for example, the indoor LED 32 is caused to emit light energy of a wavelength band other than visible light, or the indoor buzzer 33 is caused to emit sound energy of about 20 kHz or more exceeding the audible range. The imaging instruction can be transmitted without any problem.

エネルギーを所定のパターンで発することで撮像指示を伝達し、パターンが一致するか否かを撮像条件に加えたので、外乱の影響を受けること無く、確実に撮像指示を伝達することができ、誤検出や誤撮像を防止することができる。   Since the imaging instruction is transmitted by emitting energy in a predetermined pattern, and whether or not the patterns match is added to the imaging condition, the imaging instruction can be transmitted reliably without being affected by the disturbance, which is an error. Detection and false imaging can be prevented.

撮像が終了したとき、および、検出されたエネルギーのパターンと撮像指示を示すパターンとが一致しなかったときにはスリープモード(低電力モード)に移行するので、電力消費を低減することができる。   When the imaging ends, and when the detected energy pattern and the pattern indicating the imaging instruction do not match, transition to the sleep mode (low power mode) is performed, and therefore power consumption can be reduced.

例えばパネルブザー29や室内照明30等の家電製品に予め設けられているものを利用する場合、当然のことながら、撮像指示以外の場合にそれらからエネルギーが発せられることがある。そこで、撮像指示のパターンを通常動作では発生し得ないパターン(図7に示した点滅パターンや図8に示した鳴動パターン等)とすることにより、誤撮像を防止することができる。   For example, when using what is previously provided in household appliances, such as the panel buzzer 29 and the indoor lighting 30, as a matter of course, energy may be emitted from them in cases other than the imaging instruction. Therefore, erroneous imaging can be prevented by setting the pattern of the imaging instruction to a pattern (such as the blinking pattern shown in FIG. 7 or the ringing pattern shown in FIG. 8) which can not be generated in the normal operation.

上記したカメラ装置2と、カメラ装置2に対する前記撮像指示を入力するための携帯端末4等の操作端末と、操作端末から撮像指示を受信する通信アダプタ34および受信した撮像指示をカメラ装置2に伝達する伝達手段(室内LED32やパネルブザー29等)を有する家電製品と、により室内撮像システム100を構成しているので、待機中の電力消費を削減することができるとともに、電力消費を抑制しつつ、室内の情報である撮像データを任意に取得することができる。
(その他の実施形態)
The camera device 2 described above, an operation terminal such as a portable terminal 4 for inputting the imaging instruction to the camera device 2, a communication adapter 34 for receiving the imaging instruction from the operation terminal, and the received imaging instruction to the camera device 2 Since the indoor imaging system 100 is configured by the home appliance having the transmitting means (indoor LED 32, panel buzzer 29 and the like), power consumption during standby can be reduced, and power consumption can be suppressed. The imaging data which is information in a room can be acquired arbitrarily.
(Other embodiments)

上記した実施形態にて例示した構成は、それに限定されることなく、例えば以下に示すような変形や組み合わせの変更等を行うことができる。そして、それらの構成によっても、一実施形態と同様の効果を得ることができる。   The configuration exemplified in the above-described embodiment is not limited thereto, and, for example, the following modifications, combination changes, and the like can be performed. And the effect similar to one Embodiment can be acquired also by those structures.

一実施形態で示した点滅周期や鳴動周期等の数値は一例であり、適宜設定することができる。また、光エネルギーを検出する際、ON/OFFのエッジを検出するのではなく、光エネルギーの強度(照度)が基準値を超えたか、ON/OFFの周期が一致するか、あるいは、ON/OFFのパルス幅が一致するか等、外乱光の影響を抑制することができれば、どのようなパターンや判定基準を採用してもよい。   The numerical values such as the blinking cycle and the ringing cycle described in the embodiment are merely examples, and can be set as appropriate. Also, when detecting light energy, instead of detecting the edge of ON / OFF, whether the intensity (illuminance) of light energy exceeds a reference value, whether the period of ON / OFF matches, or ON / OFF Any pattern or determination criterion may be adopted as long as the influence of disturbance light can be suppressed, such as whether the pulse widths of the two coincide.

その場合、例えば赤外線を用いる等、光エネルギーを可視光以外の波長帯域に設定してもよい。また、カメラ装置2を住宅7の室内に設けて照明機器(可視光)を伝達手段として用いる場合には、点滅周期を人の目では判断できない周期(例えば30Hz程度以上)にすることで、人の目では分からない状態で撮像指示を伝達することもできる。   In that case, light energy may be set to wavelength bands other than visible light, such as using infrared light. In addition, when the camera device 2 is provided in the room of the house 7 and the lighting device (visible light) is used as a transmission means, the flickering period can not be determined by human eyes (for example, 30 Hz or more). It is also possible to transmit the imaging instruction in a state where it can not be understood by the eye.

また、音エネルギーを検出する際、音エネルギーの強度(いわゆる音圧やdB値)が基準値を超えたか、ON/OFFの周期が一致するか、あるいは、ON/OFFのパルス幅が一致するか等、外乱音の影響を抑制することができれば、どのようなパターンや判定基準を採用してもよい。   In addition, when detecting sound energy, does the intensity of sound energy (so-called sound pressure or dB value) exceed a reference value, does the ON / OFF period coincide, or does the ON / OFF pulse width coincide? Any other pattern or determination criterion may be adopted as long as the influence of disturbance noise can be suppressed.

その場合、人の可聴域を超える波長域(例えば、20kHz程度以上)の超音波を用いれば、ユーザが在宅中でも音の発生を気にすることが無くなる。また、パネルブザー29や室内ブザー33を用いることなく、上記した送風機31を通常運転では使用しない回転数(例えば2500rpm)まで上げて音エネルギーを発生させてもよい。   In that case, if an ultrasonic wave in a wavelength range (for example, about 20 kHz or more) exceeding the audible range of a person is used, the user does not have to be concerned about the generation of sound even at home. Further, without using the panel buzzer 29 and the indoor buzzer 33, the above-described blower 31 may be raised to a rotational speed (for example, 2500 rpm) not used in the normal operation to generate sound energy.

一実施形態では家電製品として冷蔵庫1を例示したが、他の家電成否であってもよい。例えば、エアコンやテレビの音声を利用すれば、冷蔵庫1の室内だけでなく、カメラ装置2を住宅7の室内を同様の手法にて撮像することができる。さらには、撮像指示を家電製品と競合しない周波数帯域の音エネルギーにより伝達する等、撮像指示に対応する周波数を予め設定してもよい。また、光エネルギーについても、例えばエアコンにはリモコンとの間で赤外線による双方向通信が可能な赤外線送受信部が設けられていることから、その赤外線送受信部を伝達手段として用いることもできる。また、洗濯機であっても、運転終了のブザー等を利用して伝達手段として用いることができる。   Although the refrigerator 1 was illustrated as a household appliance in one embodiment, other household appliances success or failure may be sufficient. For example, if the sound of an air conditioner or a television is used, not only the room of the refrigerator 1 but also the room of the house 7 of the camera device 2 can be imaged in the same manner. Furthermore, the frequency corresponding to the imaging instruction may be set in advance, for example, by transmitting the imaging instruction by sound energy in a frequency band that does not compete with the home appliance. Further, with regard to light energy, for example, since the air conditioner is provided with an infrared transmitting and receiving unit capable of performing two-way communication with infrared light between the remote control and the remote controller, the infrared transmitting and receiving unit can be used as a transmitting means. Further, even a washing machine can be used as a transmission means by using a buzzer for ending operation.

一実施形態では光エネルギー、音エネルギーおよび振動エネルギーを検出するセンサをそれぞれ設けているが、いずれか1つ又は2つのセンサを設ける構成としてもよい。   In one embodiment, sensors for detecting light energy, sound energy and vibration energy are provided respectively, but any one or two sensors may be provided.

一実施形態では光エネルギーと振動エネルギーとを組み合わせた例を示したが、光エネルギーと音エネルギーとを組み合わせてもよいし、音エネルギーと振動エネルギーとを組み合わせてもよいし、それら全てを組み合わせてもよい。勿論、冷蔵庫1の扉が開閉されたときに撮像するという撮像指示が予め設定されている場合だけでなく、リアルタイムで送信された撮像指示を伝達する際にも各エネルギーを組み合わせて伝達するようにしてもよい。   Although the example which combined light energy and vibrational energy was shown in one embodiment, light energy and sound energy may be combined, sound energy and vibrational energy may be combined, or all of them are combined. It is also good. Of course, not only when the imaging instruction for imaging when the door of the refrigerator 1 is opened and closed is set in advance, but also when transmitting the imaging instruction transmitted in real time, each energy is combined and transmitted. May be

一実施形態では室内の情報としてカメラ装置2による撮像データを示したが、他の情報を取得するようにしてもよい。すなわち、一実施形態と同様の構成にて、撮像データや音声データ等の室内の情報を取得する情報取得装置を、室内の情報を取得する情報取得手段と、情報取得手段に対する取得指示を受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、受信手段により前記取得指示が受信されると通常動作モードに復帰し、室内の情報を取得するために情報取得手段を制御する制御手段と、により構成してもよい。このような構成によっても、電力消費を抑制しつつ、室内の情報を任意に取得することができる等、一実施形態と同様の効果を得ることができる。
また、本明細書には、以下の発明が記載されている。
In the embodiment, the imaging data by the camera device 2 is shown as the information in the room, but other information may be acquired. That is, the information acquisition device for acquiring indoor information such as imaging data and audio data, the information acquisition means for acquiring indoor information, and the acquisition instruction for the information acquisition means are received with the same configuration as that of the embodiment. It stands by in the receiving means and the low power mode, which consumes relatively less power than the normal operating mode, and returns to the normal operating mode when the receiving instruction is received by the receiving means, and the information in the room is displayed. It may comprise by the control means which controls an information acquisition means in order to acquire. Even with such a configuration, it is possible to obtain the same effect as that of the embodiment, such as being able to arbitrarily acquire indoor information while suppressing power consumption.
Also, the following inventions are described in the present specification.

前記制御手段は、前記受信手段により受信された前記光エネルギーのパターンと前記撮像指示を示すパターンとが一致すると、室内を撮像することを特徴とするカメラ装置。   A camera apparatus characterized in that the control means images the room when the pattern of the light energy received by the receiving means matches the pattern indicating the imaging instruction.

前記制御手段は、前記受信手段により受信された光エネルギーのパターンと前記撮像指示を示すパターンとが一致しなかったとき、および、前記撮像手段による撮像が終了したときには、低電力モードに移行することを特徴とするカメラ装置。
前記光エネルギーは、点滅する周期が30Hz以上に設定されていることを特徴とするカメラ装置。
前記光エネルギーは、可視光以外の波長帯域に設定されていることを特徴とするカメラ装置。
The control means shifts to a low power mode when the light energy pattern received by the receiving means does not match the pattern indicating the imaging instruction, and when the imaging by the imaging means is completed. Camera device characterized by
The light energy has a flashing cycle set to 30 Hz or more.
A camera apparatus characterized in that the light energy is set to a wavelength band other than visible light.

室内を撮像する撮像手段と、室内を撮像するための撮像指示を、冷蔵庫を介して受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、前記受信手段で前記撮像指示が受信されると通常動作モードに復帰して前記撮像手段により室内を撮像する制御手段と、を有するカメラ装置と、前記カメラ装置に対する前記撮像指示を入力するための操作端末と、前記操作端末から前記撮像指示を受信する通信手段と、前記通信手段により受信された前記撮像指示を前記カメラ装置に伝達する伝達手段と、を有する冷蔵庫と、を備え、前記撮像手段は、前記冷蔵庫の室内に設けられ、前記冷蔵庫の室内を撮像するものであり、撮像指示が受信手段により検出されると、通常動作モードに復帰することを特徴とする室内撮像システム。   Waiting in imaging mode for imaging the room, reception means for receiving the imaging instruction for imaging the room via the refrigerator, and low power mode, which consumes relatively less power than the normal operation mode. A camera device having control means for returning to the normal operation mode when the image pickup instruction is received by the reception means and imaging the room by the image pickup means; and for inputting the image pickup instruction to the camera device And a communication unit for receiving the imaging instruction from the operation terminal, and a refrigerator having a transmitting unit for transmitting the imaging instruction received by the communication unit to the camera device, The means is provided in the room of the refrigerator and picks up an image of the room of the refrigerator, and returns to the normal operation mode when an image pickup instruction is detected by the reception means. Indoor imaging system comprising.

前記撮像指示は、前記冷蔵庫の室内に設けられている室内照明から発せられた所定のパターンの光エネルギーによって伝達されるものであり、前記受信手段は、前記光エネルギーを検出する光センサで構成されており、前記制御手段は、前記室内照明から発せられた所定のパターンの光エネルギーが前記受信手段により検出されると通常動作モードに復帰することを特徴とする室内撮像システム。   The imaging instruction is transmitted by light energy of a predetermined pattern emitted from an indoor illumination provided in a room of the refrigerator, and the receiving means is constituted by an optical sensor for detecting the light energy. An indoor imaging system characterized in that the control means returns to the normal operation mode when the light energy of a predetermined pattern emitted from the indoor lighting is detected by the receiving means.

室内の情報を取得する情報取得手段と、前記情報取得手段に対する取得指示を受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、前記受信手段により前記取得指示が受信されると通常動作モードに復帰し、室内の情報を取得するために前記情報取得手段を制御する制御手段と、を備え、前記情報取得手段は、冷蔵庫の室内に設けられ、前記冷蔵庫の室内の情報を取得するものであり、撮像指示が受信手段により検出されると、通常動作モードに復帰することを特徴とする室内撮像システム。   An information acquisition means for acquiring information in the room, a reception means for receiving an acquisition instruction to the information acquisition means, and a standby mode in a low power mode that consumes relatively less power than the normal operation mode. The control unit returns to the normal operation mode when the acquisition instruction is received by the reception unit, and controls the information acquisition unit to acquire information in the room, and the information acquisition unit is installed in the refrigerator room An indoor imaging system, provided to acquire information in a room of the refrigerator, and returning to a normal operation mode when an imaging instruction is detected by the receiving means.

前記取得指示は、前記冷蔵庫の室内に設けられている室内照明から発せられた所定のパターンの光エネルギーによって伝達されるものであり、前記受信手段は、前記光エネルギーを検出する光センサで構成されており、前記制御手段は、前記室内照明から発せられた所定のパターンの光エネルギーが前記受信手段により検出されると通常動作モードに復帰することを特徴とする室内情報取得装置。   The acquisition instruction is transmitted by the light energy of a predetermined pattern emitted from the indoor lighting provided in the room of the refrigerator, and the receiving means is constituted by an optical sensor for detecting the light energy. The indoor information acquisition apparatus according to claim 1, wherein the control means returns to the normal operation mode when the light energy of the predetermined pattern emitted from the indoor lighting is detected by the receiving means.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   While certain embodiments of the present invention have been described, these embodiments have been presented by way of example only, and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, substitutions, and modifications can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and the gist of the invention, and are included in the invention described in the claims and the equivalent scope thereof.

図面中、1は冷蔵庫(家電製品)、2はカメラ装置、情報取得装置、4は携帯端末(操作端末)、6はサーバ(操作端末)、11は撮像部(撮像手段、情報取得手段)、14は光センサ(センサ、検出手段、受信手段)、18はカメラ側制御部(制御手段)、19は音センサ(センサ、検出手段、受信手段)、20は振動センサ(センサ、検出手段、受信手段)、28はパネルLED(伝達手段)、29はパネルブザー(伝達手段)、30は室内照明(伝達手段)、31は送風機(伝達手段)、32は室内LED(伝達手段)、33は室内ブザー(伝達手段)、34は通信アダプタ(通信手段)、100は室内撮像システムを示す。   In the drawings, 1 is a refrigerator (home appliance), 2 is a camera device, 4 is a portable terminal (operation terminal), 6 is a server (operation terminal), 11 is an imaging unit (imaging means, information acquisition means), 14 is an optical sensor (sensor, detection means, reception means), 18 is a camera side control unit (control means), 19 is a sound sensor (sensor, detection means, reception means), 20 is a vibration sensor (sensor, detection means, reception) Means, 28: panel LED (transmission means), 29: panel buzzer (transmission means), 30: indoor lighting (transmission means), 31: fan (transmission means) 32, 32: indoor LED (transmission means), 33: indoor A buzzer (transmission means), 34 indicates a communication adapter (communication means), and 100 indicates an indoor imaging system.

Claims (1)

室内を撮像する撮像手段と、
外部の操作端末から与えられた室内を撮像するための撮像指示を、前記操作端末と通信可能な冷蔵庫を介して受信する受信手段と、
常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、前記受信手段で前記撮像指示が受信されると通常動作モードに復帰して前記撮像手段により室内を撮像する制御手段と、を備え、
前記撮像手段、前記受信手段および前記制御手段を含むカメラ装置は、前記冷蔵庫の室内に設置されており、
前記撮像指示が前記受信手段により検出されると、通常動作モードに復帰することを特徴とするカメラ装置。
Imaging means for imaging the room;
A receiving unit that receives an imaging instruction for imaging a room given from an external operation terminal via a refrigerator that can communicate with the operation terminal;
It always stands by in the low power mode where power consumption is relatively less than that in the normal operation mode, and when the image capturing instruction is received by the receiving means, it returns to the normal operation mode and picks up the room by the imaging means Control means, and
A camera device including the imaging means, the receiving means, and the control means is installed in a room of the refrigerator,
A camera apparatus characterized by returning to a normal operation mode when the imaging instruction is detected by the receiving means.
JP2019027406A 2019-02-19 2019-02-19 Camera device, indoor imaging system, indoor information acquisition device Active JP6708766B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019027406A JP6708766B2 (en) 2019-02-19 2019-02-19 Camera device, indoor imaging system, indoor information acquisition device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019027406A JP6708766B2 (en) 2019-02-19 2019-02-19 Camera device, indoor imaging system, indoor information acquisition device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2013147563A Division JP6659204B2 (en) 2013-07-16 2013-07-16 Camera device, indoor imaging system, indoor information acquisition device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020088090A Division JP7185659B2 (en) 2020-05-20 2020-05-20 refrigerator

Publications (2)

Publication Number Publication Date
JP2019126042A true JP2019126042A (en) 2019-07-25
JP6708766B2 JP6708766B2 (en) 2020-06-10

Family

ID=67399330

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019027406A Active JP6708766B2 (en) 2019-02-19 2019-02-19 Camera device, indoor imaging system, indoor information acquisition device

Country Status (1)

Country Link
JP (1) JP6708766B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114857852A (en) * 2021-03-29 2022-08-05 青岛海尔电冰箱有限公司 Method and equipment for acquiring high-quality image and refrigerator

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002340471A (en) * 2001-05-18 2002-11-27 Fujitsu General Ltd Refrigerator interior display system
JP2005286766A (en) * 2004-03-30 2005-10-13 Victor Co Of Japan Ltd Remote photographing system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002340471A (en) * 2001-05-18 2002-11-27 Fujitsu General Ltd Refrigerator interior display system
JP2005286766A (en) * 2004-03-30 2005-10-13 Victor Co Of Japan Ltd Remote photographing system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114857852A (en) * 2021-03-29 2022-08-05 青岛海尔电冰箱有限公司 Method and equipment for acquiring high-quality image and refrigerator
CN114857852B (en) * 2021-03-29 2023-08-15 青岛海尔电冰箱有限公司 High-quality image acquisition method, equipment and refrigerator

Also Published As

Publication number Publication date
JP6708766B2 (en) 2020-06-10

Similar Documents

Publication Publication Date Title
JP6659204B2 (en) Camera device, indoor imaging system, indoor information acquisition device
JP6092049B2 (en) Imaging system and imaging apparatus
US20130016211A1 (en) Home Surveillance Device
US20130021473A1 (en) Home Surveillance Device
JP7185659B2 (en) refrigerator
JP2019126042A (en) Camera apparatus, indoor imaging system, and indoor information acquisition apparatus
JP6501836B2 (en) Indoor imaging system
JP6233737B2 (en) Motion detection device and control system
KR20150126106A (en) Robot cleaner and method for operating the same
JP6744444B2 (en) Operating terminal, operating terminal program, home appliances
JP7010995B2 (en) Operation terminal, operation terminal program
JP6184803B2 (en) Indoor imaging system
JP2012150591A (en) Equipment control device and security system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190319

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200428

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200521

R150 Certificate of patent or registration of utility model

Ref document number: 6708766

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150