WO2015008584A1 - カメラ装置、室内撮像システム、室内情報取得装置 - Google Patents

カメラ装置、室内撮像システム、室内情報取得装置 Download PDF

Info

Publication number
WO2015008584A1
WO2015008584A1 PCT/JP2014/066545 JP2014066545W WO2015008584A1 WO 2015008584 A1 WO2015008584 A1 WO 2015008584A1 JP 2014066545 W JP2014066545 W JP 2014066545W WO 2015008584 A1 WO2015008584 A1 WO 2015008584A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
energy
camera device
imaging instruction
camera
Prior art date
Application number
PCT/JP2014/066545
Other languages
English (en)
French (fr)
Inventor
浩太 渡邊
井澤　浩一
古田　和浩
裕樹 丸谷
Original Assignee
株式会社 東芝
東芝ライフスタイル株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社 東芝, 東芝ライフスタイル株式会社 filed Critical 株式会社 東芝
Priority to EP14825813.0A priority Critical patent/EP3024216A4/en
Priority to CN201480045807.5A priority patent/CN105474621B/zh
Priority to KR1020157037086A priority patent/KR102099746B1/ko
Publication of WO2015008584A1 publication Critical patent/WO2015008584A1/ja
Priority to US14/997,140 priority patent/US10194081B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/02—Illuminating scene
    • G03B15/03—Combinations of cameras with lighting apparatus; Flash units
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/38—Releasing-devices separate from shutter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Definitions

  • Embodiments described herein relate generally to a camera device, an indoor imaging system, and an indoor information acquisition device.
  • Patent Document 1 Conventionally, for example, by providing a camera in a refrigerator or the like, it is possible to acquire information such as ingredients in the refrigerator even from a remote place (see, for example, Patent Document 1).
  • An object of the present invention is to provide a camera device, an indoor imaging system, and an indoor information acquisition device that can arbitrarily acquire indoor information while suppressing power consumption.
  • the camera device consumes less power than the normal operation mode, and the imaging unit that images the room and the reception unit that receives the imaging instruction for imaging the room via the home appliance. And a control unit that stands by in the low power mode and returns to the normal operation mode when an imaging instruction is received by the receiving unit, and images the room by the imaging unit.
  • the figure which shows typically the indoor imaging system of one Embodiment The figure which shows the external appearance of the camera apparatus of one Embodiment typically The figure which shows the inside of the camera apparatus of one Embodiment typically The figure which shows typically the electric constitution of the camera apparatus of one Embodiment, and an indoor imaging system
  • an indoor imaging system 100 of the present embodiment includes a refrigerator 1 as a home appliance, a camera device 2 for imaging a room, an access point 3 for communicating with the refrigerator 1 side, It is comprised by the portable terminal 4 etc. as an operation terminal.
  • the access point 3 is connected to an external network 5, and the remote portable terminal 4, the server 6, and the like and the refrigerator 1 side are communicably connected via the external network 5.
  • communication between the refrigerator 1 and the access point 3, between the access point 3 and the portable terminal 4, and between the camera device 2 and the access point 3 is performed by wireless communication using Bluetooth (registered trademark). Is done.
  • the mobile terminal 4 is an operation terminal that inputs an imaging instruction for causing the camera device 2 to image a room, and is assumed to be a so-called smartphone (high-function mobile phone).
  • the operation terminal is not limited to the portable terminal 4 and may be, for example, a tablet personal computer.
  • the portable terminal 4 When the portable terminal 4 is located in the house 7, it is connected to the access point 3 so as to be able to communicate with the access point 3 by a short-range wireless method. Further, when the mobile terminal 4 is located outside the house 7, the mobile terminal 4 is communicably connected to the access point 3 via the external network 5 by wide area communication.
  • the mobile terminal 4 can be connected to the access point 3 via the external network 5 by wide area communication even from inside the house 7, and in the house 7 without using the access point 3. It is also possible to communicate directly with the refrigerator 1 side.
  • the server 6 is configured by a well-known computer system, stores information for accessing the refrigerator 1 (for example, an IP address) and the like, and in the present embodiment, image data captured by the camera device 2 Remember. Although only the refrigerator 1 is shown in FIG. 1, other home appliances such as an air conditioner (not shown) are also networked.
  • Networking home appliances in this way makes it possible to visualize the power consumption of each home appliance in a form that is visible to the user, and peaks that reduce power consumption during times of day when power demand increases during the daytime in summer Providing systems that provide convenience, comfort, or convenience, such as power control such as peak cuts to avoid momentary use of power that exceeds shifts and general household ratings, and fault diagnosis of home appliances It becomes possible. Further, by installing the camera device 2 in, for example, a refrigerated room, it is possible to check the state of the refrigerator 1 (such as the storage state of articles). Then, by storing these various types of information, imaging data, and the like in the server 6, it is possible to refer to the information by the portable terminal 4 or the like via the external network 5 or the like even in a remote place.
  • the camera device 2 has a lens 12 of the imaging unit 11 (see FIG. 4), two imagings in the present embodiment, on the surface of a housing 10 formed in a substantially rectangular parallelepiped shape.
  • the light 13 and the optical sensor 14 are provided so as to be exposed.
  • the lens 12, the imaging light 13, and the optical sensor 14 may not be exposed to the outside of the housing 10, but may have an aspect in which the surface is covered with a cover or the like.
  • the side on which the lens 12 or the like is exposed (the right side in the figure in FIG. 3) is the front face of the camera device 2, and the opposite side (the left side in the figure in FIG. 3) is the back face.
  • the camera device 2 contains a control board 15, a battery 16, a communication module 17, a sound sensor 19, a vibration sensor 20, and the like in a housing 10.
  • the control board 15 is provided with an imaging unit 11 having an imaging element (not shown), an imaging light 13 and a camera-side control unit 18 (see FIG. 4) for controlling them.
  • an imaging sensor a known image sensor such as a CCD or a CMOS is used.
  • the imaging light 13 employs an LED. Although illustration is omitted, the camera device 2 is also provided with a power switch.
  • the battery 16 supplies electric power to the control unit, the communication module 17, the optical sensor 14, the sound sensor 19, the vibration sensor 20, and the like. That is, the camera device 2 is driven by the built-in battery 16. For this reason, the camera device 2 does not require a power cable or the like, and can be installed at an arbitrary place. In the present embodiment, as described above, the camera device 2 is installed in the refrigerator compartment.
  • the communication module 17 transmits the image data in the warehouse imaged by the imaging unit 11 to the mobile terminal 4 or the server 6 via the access point 3.
  • the transmission to the server 6 is to store the imaging data in the server 6.
  • the imaging data is data including indoor images.
  • data in a known format such as bitmap format, JPEG format, or MPEG format
  • the data is compressed, encrypted, or imaged. Any data may be used as long as it can be confirmed by the portable terminal 4 or the like, such as data converted by processing.
  • the camera-side control unit 18 is composed of a microcomputer having a CPU 18a, a ROM 18b, a RAM 18c, an RTC 18d, and the like, and controls the entire camera device 2. Specifically, the camera-side control unit 18 controls imaging timing by the imaging unit 11, control for adjusting an imaging environment when imaging (lighting control of the imaging light 13), transmission of imaging data by the communication module 17, and each sensor Control for receiving (accepting) an imaging instruction, which will be described later, is performed. In the present embodiment, the camera-side control unit 18 also performs image processing for correcting a captured image.
  • the camera side control unit 18 constitutes a control means.
  • the optical sensor 14 connected to the camera-side controller 18 is a so-called illuminance sensor, and detects the illuminance around the camera device 2. More specifically, the optical sensor 14 detects light energy in a predetermined wavelength band (in this embodiment, light energy emitted from indoor LEDs described later). The light energy detected by the optical sensor 14 is converted into an electrical signal and output to the camera-side controller 18.
  • the sound sensor 19 detects sound generated around the camera device 2. More specifically, the sound sensor 19 detects sound energy emitted in a preset frequency band (in this embodiment, sound energy emitted from a panel buzzer 29 or an indoor buzzer 33 described later). The sound energy detected by the sound sensor 19 is converted into an electrical signal and output to the camera-side control unit 18.
  • a preset frequency band in this embodiment, sound energy emitted from a panel buzzer 29 or an indoor buzzer 33 described later.
  • the vibration sensor 20 detects vibration applied to the camera device 2.
  • the vibration sensor 20 is constituted by, for example, a three-axis acceleration sensor or the like, and converts the detected vibration energy into an electric signal and outputs it to the camera-side control unit 18.
  • the camera side control part 18 detects the vibration added to the camera apparatus 2 based on acceleration.
  • the optical sensor 14, the sound sensor 19, and the vibration sensor 20, which will be described in detail later, are sensors that detect physical energy and constitute receiving means for receiving an imaging instruction. Note that it is not always necessary to provide all of the optical sensor 14, the sound sensor 19, and the vibration sensor 20, and only the optical sensor 14 may be provided if an imaging instruction is received only by light energy, for example.
  • the camera-side control unit 18 determines whether or not it is an imaging instruction, as will be described later, based on the detected intensity and pattern of each energy. That is, in the case of the present embodiment, the imaging instruction from the user has a configuration indicated by the energy emitted in a predetermined pattern, and the camera-side control unit 18 captures the energy pattern detected by each sensor and the imaging. It also functions as a determination unit that determines whether a pattern indicating an instruction matches.
  • the camera device 2 having such a configuration always stands by in a low power mode that consumes relatively less power than the normal operation mode.
  • the camera device 2 returns to the normal operation mode and images the room. To do.
  • the inside of the refrigerator compartment is imaged.
  • the refrigerator 1 in which the camera device 2 is installed has a warehouse-side control unit 21.
  • the warehouse-side control unit 21 includes a microcomputer having a CPU 21a, a ROM 21b, a RAM 21c, a timer 21d, and the like, and controls the entire refrigerator 1. Specifically, the warehouse-side control unit 21 changes the temperature in the warehouse detected by the temperature sensor 23, the door open / closed state detected by the door sensor 24, etc. so that the operation state set from the operation panel 22 is obtained. Based on this, the operating states of the refrigeration cooling mechanism 25 and the refrigeration cooling mechanism 26 constituting a known refrigeration cycle are controlled.
  • the operation panel 22 is provided with a panel display 27, a panel LED 28, and a panel buzzer 29.
  • the panel display 27 displays set values and the like.
  • the panel LED 28 is provided to light an operation switch or a driving state.
  • the panel buzzer 29 is composed of a piezoelectric buzzer or the like, and notifies the operation content by emitting sound (sound energy) in response to the operation.
  • the panel buzzer 29 can output a sound of 6 kHz, and also functions as a transmission unit that emits sound energy in order to transmit an imaging instruction to the camera device 2 as described later. .
  • Indoor lighting 30 is provided in a refrigerator room or the like, and lights up when the door is opened. That is, the room lighting 30 generates light energy.
  • the indoor lighting 30 can be blinked by the control from the warehouse-side control unit 21.
  • the blower 31 is provided to circulate cool air in the refrigerator 1 in a normal operation.
  • the blower 31 can generate sound energy such as wind noise and motor sound by increasing the rotational speed, for example, higher than the normal operation.
  • the indoor LED 32 generates light energy to transmit an imaging instruction to the camera device 2.
  • the indoor LED 32 emits light in a predetermined frequency band that can be detected by the optical sensor 14. It has become.
  • the indoor LED 32 can be blinked in a predetermined pattern, and constitutes a transmission means for transmitting an imaging instruction to the camera device 2 side by blinking in a pattern corresponding to the imaging instruction.
  • the indoor illumination 30 since the above-mentioned indoor illumination 30 also emits light energy, it can be used as a transmission means instead of the indoor LED 32.
  • the indoor LED 32 may not be provided.
  • the indoor buzzer 33 is composed of, for example, a piezoelectric buzzer that generates sound energy in order to transmit an imaging instruction to the camera device 2.
  • the indoor buzzer 33 can output, for example, a 20 kHz sound (that is, a sound outside the audible range), and the sound emitted from the indoor buzzer 33 can be detected by the sound sensor 19 described above.
  • the structure is inaudible.
  • the indoor buzzer 33 does not need to be provided.
  • the indoor buzzer constitutes a transmission means.
  • the communication adapter 34 communicates with the access point 3 and the portable terminal 4 in the room.
  • the communication adapter 34 is detachably attached to the refrigerator 1.
  • the communication adapter 34 is also provided in other home appliances such as an air conditioner to network home appliances.
  • the communication adapter 34 constitutes a communication means.
  • the communication adapter 34 is configured to be able to directly communicate with the camera device 2 without going through the access point 3. Since the communication adapter 34 is also used for visualization as described above, the communication adapter 34 is basically always operating when the refrigerator 1 is operating.
  • the operation of the above configuration will be described.
  • the camera device 2 By providing the above-described camera device 2, it is possible to take an image of a room in the house 7 or a room such as a refrigerator room.
  • an imaging instruction from the mobile terminal 4 to the camera device 2 via the external network 5, it is possible to acquire imaging data at an arbitrary timing even from a remote location.
  • the communication module 17 since it is unclear when the imaging instruction is sent, it is necessary to keep the communication module 17 in operation, in which case power consumption increases. As a result, the battery 16 needs to be replaced (or charged) in about one day or several days.
  • the camera device 2 and the indoor imaging system 100 by transmitting an imaging instruction from a household electrical appliance such as the refrigerator 1 (by cooperating with the household electrical appliance), indoor information such as imaging data while suppressing power consumption. It is possible to get arbitrarily.
  • a household electrical appliance such as the refrigerator 1
  • indoor information such as imaging data while suppressing power consumption.
  • the refrigerator 1 executes a warehouse-side process shown in FIG. 5, and the camera device 2 executes a camera-side process shown in FIG.
  • the refrigerator 1 determines whether an imaging instruction has been received in the warehouse-side process shown in FIG. 5 (R1). Imaging support from the user is received by the refrigerator 1 by the communication adapter 34 via the access point 3 (see FIG. 4).
  • the refrigerator 1 waits as it is when the imaging instruction is not received (R1: NO).
  • the refrigerator 1 determines whether the door is closed (R2), and when the door is open (R2: NO), the door is opened. Wait until it is closed.
  • the refrigerator 1 When the door is closed (R2: YES), the refrigerator 1 notifies that it is being imaged from the operation panel 22 or the like (R3), and then emits energy (here, light energy).
  • the refrigerator 1 emits light energy by blinking the indoor LED 32 in a predetermined pattern corresponding to the imaging instruction.
  • the refrigerator 1 repeats ON / OFF of the indoor LED 32 during a preset blinking period. That is, in the present embodiment, a pattern in which light energy blinks at 5 Hz is employed as a pattern indicating an imaging instruction.
  • This blinking pattern is a pattern that cannot occur when the refrigerator 1 is in general use. That is, when the door is opened, the room lighting 30 is turned on, but it is considered that the door will not be opened and closed at 5 Hz (0.2 s cycle). There is no.
  • the camera device 2 shifts to the sleep mode (S2).
  • This sleep mode corresponds to a low power mode that consumes less power than the normal operation mode.
  • the camera device 2 determines whether energy is detected (S3). More specifically, in step S3, the camera-side control unit 18 is in a standby state in the sleep mode, and it is determined whether the light sensor 14 has notified that the light energy has been detected. This notification is notified by a known interrupt signal or the like in a microcomputer or the like.
  • the camera device 2 When the camera device 2 has not detected energy (S3: NO), it waits as it is, while when it detects energy (S3: YES), it returns to the normal operation mode (S4). Then, it is determined whether the detected energy pattern matches the imaging instruction pattern (S5). Specifically, the camera device 2 detects an ON / OFF edge of light energy, and determines that it indicates an imaging instruction when the edge is detected 10 times or more in 5 seconds, for example.
  • the camera device 2 matches the pattern of the imaging instruction (S5: YES)
  • the camera device 2 images the room (S6) and transmits the imaging data to the portable terminal 4 or the like or stores it in the server 6 or the like ( S7)
  • the process proceeds to step S2 to shift to the sleep mode.
  • the camera device 2 shifts to the sleep mode even when it does not match the pattern of the imaging instruction (S5: NO).
  • an imaging instruction can be transmitted to the camera device 2 in the sleep mode by light energy.
  • the refrigerator 1 executes a warehouse-side process shown in FIG. 5, and the camera device 2 executes a camera-side process shown in FIG.
  • the points of different processing contents will be described in detail.
  • the refrigerator 1 When the refrigerator 1 receives the imaging instruction (R1: YES), the refrigerator 1 confirms whether the door is closed (R2: YES), informs that the imaging is being performed (R3), and then energy (sound energy here) To emit. In this case, the refrigerator 1 emits sound energy by causing the panel buzzer 29 to ring in a predetermined pattern. Specifically, as shown in FIG. 8, when the refrigerator 1 receives an imaging instruction, the refrigerator 1 is turned on (sounds) for 0.5 seconds and turned off (stops) for 0.5 seconds during a preset sounding period. Then, the panel buzzer 29 is sounded.
  • the pattern indicating the imaging instruction is a preset frequency band of 6 kHz (20 kHz inaudible range in the case of the indoor buzzer 33), and a predetermined period (0.5 seconds).
  • a pattern that rings intermittently at a period) is employed. This ringing pattern is a pattern different from a normal operation (user setting operation), and cannot be generated except for an imaging instruction.
  • the camera device 2 shifts to the sleep mode and stands by (S2). And if the refrigerator 1 is notified that the sound energy has been detected by the interrupt signal or the like from the sound sensor 19, that is, if the sound energy is detected (S3: YES), the refrigerator 1 returns to the normal operation mode (S4), It is determined whether the pattern of sound energy matches the pattern of the imaging instruction (S5). In this case, the camera device 2 detects the ON / OFF edge of the sound energy, and determines that it indicates an imaging instruction when the edge is detected, for example, 10 times or more in 5 seconds.
  • the camera device 2 matches the pattern of the imaging instruction (S5: YES), the camera device 2 images the room (S6) and transmits the imaging data to the portable terminal 4 or the like or stores it in the server 6 or the like. Later (S7), the process proceeds to step S2 to enter the sleep mode.
  • an imaging instruction can be transmitted to the camera device 2 in the sleep mode by sound energy.
  • the receiving means for receiving the imaging instruction is configured to receive (accept) an imaging instruction based on a preset condition as well as a real-time imaging instruction.
  • the refrigerator 1 executes the warehouse-side process shown in FIG. 9, and the camera device 2 executes the camera-side process shown in FIG. Since the camera-side processing flow shown in FIG. 10 is generally the same as the camera-side processing shown in FIG. 6, different points will be described in detail.
  • the refrigerator 1 determines whether or not the door has been opened and closed in the warehouse processing shown in FIG. 9 (R10), and stands by when the door is not opened and closed (R10: NO). On the other hand, when the door is opened / closed (R10: YES), the refrigerator 1 notifies the camera device 2 that it is imaging (R11), and then transmits an imaging instruction to the camera device 2 (R11). ).
  • the camera device 2 shifts to the sleep mode (S11) and determines whether vibration (vibration energy) is detected (S12).
  • vibration vibration energy
  • the camera device 2 returns to the normal operation mode (S13), and determines whether an imaging instruction is received from the refrigerator 1 (S14).
  • an imaging instruction is received via the communication module 17.
  • the camera device 2 receives the imaging instruction (S14: YES), images the room (S15), transmits the imaging data or stores it in the server 6 or the like (S16), and then shifts to the sleep mode.
  • the transmission destination in step S16 is the portable terminal 4 or the like. That is, when the door of the refrigerator 1 is opened and closed, the camera device 2 notifies the user as imaging data that the storage state of the article or the like may have changed.
  • an imaging instruction can be transmitted to the camera device 2 in the sleep mode by vibration energy.
  • vibration energy ⁇ When using light energy and vibration energy> This time, an example will be described in which imaging is performed by the camera device 2 alone using light energy and vibration energy in a situation where an imaging instruction for imaging when the door of the refrigerator 1 is opened and closed is set in advance.
  • the camera apparatus 2 performs the camera side process shown in FIG. Since the camera-side processing flow shown in FIG. 11 is generally the same as the camera-side processing shown in FIG. 10, the differences will be described in detail.
  • the camera device 2 shifts to the sleep mode (S21) and determines whether light energy is detected (S22).
  • the refrigerator 1 turns on the room lighting 30, for example.
  • the camera device 2 is illuminated by the light outside the warehouse. That is, the open / closed state of the door can be detected by detecting light energy. Therefore, when detecting the light energy (S22: YES), the camera device 2 returns to the normal operation mode assuming that the door of the refrigerator 1 is opened (S23).
  • the camera device 2 determines whether the state corresponds to the door closing (S24).
  • the “state corresponding to the door being closed” means a state in which the door is closed after the door is opened. More specifically, in this step S24, the following two points are determined. a) Was the period during which the light energy was detected not a momentary period, but a period required to take out the article or the like? b) Did you detect vibration energy when the door is closed?
  • the camera device 2 determines that the door of the refrigerator 1 has been opened and closed. If it is determined that the door is closed (S24: YES), the room is imaged (S25), the image data is transmitted or stored in the server 6 or the like (S26), and then the mode is shifted to the sleep mode. . Note that the transmission destination in step S26 is the portable terminal 4 or the like. Thus, an imaging instruction can also be transmitted to the camera device 2 in the sleep mode by combining light energy and vibration energy.
  • the camera device 2 stands by in an imaging unit 11 that captures an image of a room, a receiving unit that receives an imaging instruction via a home appliance, and a low power mode that always consumes relatively less power than the normal operation mode. And when the imaging instruction is received by the receiving means, the camera-side control unit 18 that returns to the normal operation mode and controls the imaging of the room by the imaging means is provided. When the imaging instruction is transmitted Even if it cannot be assumed, there is no need to wait in the normal operation state. As a result, power consumption during standby can be reduced. Further, since the receiving means is provided, the room can be imaged whenever an imaging instruction is transmitted. Therefore, it is possible to arbitrarily acquire imaging data that is indoor information while suppressing power consumption.
  • the imaging instruction is transmitted by physical energy emitted from the home appliance, and the receiving means is constituted by the optical sensor 14, the sound sensor 19, the vibration sensor 20, and the like that detect the energy. It is possible to use an existing home appliance such as the illumination 30 for transmission of an imaging instruction. Thereby, an imaging instruction can be transmitted to the camera device 2 without providing additional parts.
  • a dedicated configuration may be provided as a transmission means such as the indoor LED 32 and the indoor buzzer 33.
  • the indoor LED 32 emits light energy in a wavelength band other than visible light
  • the indoor buzzer 33 emits sound energy of about 20 kHz or more exceeding the audible range.
  • the imaging instruction can be transmitted without any problem.
  • the imaging instruction is transmitted by emitting energy in a predetermined pattern, and whether or not the pattern matches is added to the imaging condition, so that the imaging instruction can be transmitted reliably without being affected by disturbances. Detection and erroneous imaging can be prevented.
  • the mode shifts to the sleep mode (low power mode), so that power consumption can be reduced.
  • the above-described camera device 2 an operation terminal such as the portable terminal 4 for inputting the imaging instruction to the camera device 2, a communication adapter 34 that receives the imaging instruction from the operation terminal, and the received imaging instruction to the camera device 2
  • the indoor imaging system 100 is configured with household electrical appliances having transmission means (such as the indoor LED 32 and the panel buzzer 29)
  • the power consumption during standby can be reduced and the power consumption can be suppressed
  • Imaging data that is indoor information can be arbitrarily acquired.
  • the numerical values such as the blinking cycle and ringing cycle shown in one embodiment are examples and can be set as appropriate.
  • the ON / OFF edge is not detected, but the intensity (illuminance) of the light energy exceeds the reference value, the ON / OFF cycle matches, or the ON / OFF
  • any pattern or criterion may be adopted.
  • the light energy may be set to a wavelength band other than visible light, for example, using infrared rays.
  • the blinking cycle is set to a cycle that cannot be determined by human eyes (for example, about 30 Hz or more). It is also possible to transmit an imaging instruction in a state that cannot be understood by the eyes.
  • the refrigerator 1 is exemplified as the home appliance, but other home appliances may be successful or not.
  • the camera apparatus 2 can be imaged not only in the refrigerator 1 but also in the house 7 by the same method.
  • the frequency corresponding to the imaging instruction may be set in advance, for example, the imaging instruction is transmitted by sound energy in a frequency band that does not compete with home appliances.
  • an air conditioner is provided with an infrared transmission / reception unit capable of two-way communication using infrared rays with a remote controller. Therefore, the infrared transmission / reception unit can also be used as a transmission means.
  • even if it is a washing machine it can be used as a transmission means using the buzzer of a driving
  • sensors for detecting light energy, sound energy, and vibration energy are provided, respectively, but any one or two sensors may be provided.
  • an example in which light energy and vibration energy are combined has been shown.
  • light energy and sound energy may be combined, sound energy and vibration energy may be combined, or all of them may be combined. Also good.
  • the energy is combined and transmitted. May be.
  • imaging data from the camera device 2 is shown as room information, but other information may be acquired. That is, with the same configuration as that of the embodiment, an information acquisition device that acquires indoor information such as imaging data and audio data, an information acquisition unit that acquires indoor information, and an acquisition instruction for the information acquisition unit
  • the reception unit always waits in a low power mode, which consumes relatively less power than the normal operation mode.When the acquisition unit receives the acquisition instruction, the normal operation mode is restored, and indoor information is displayed.
  • You may comprise by the control means which controls an information acquisition means in order to acquire. Even with such a configuration, it is possible to obtain the same effects as in the embodiment, such as being able to arbitrarily acquire indoor information while suppressing power consumption.
  • 1 is a refrigerator (home appliance), 2 is a camera device, an information acquisition device, 4 is a mobile terminal (operation terminal), 6 is a server (operation terminal), 11 is an imaging unit (imaging means, information acquisition means), 14 is an optical sensor (sensor, detection means, reception means), 18 is a camera side control unit (control means), 19 is a sound sensor (sensor, detection means, reception means), 20 is a vibration sensor (sensor, detection means, reception means).
  • Means) 28 is a panel LED (transmission means), 29 is a panel buzzer (transmission means), 30 is indoor lighting (transmission means), 31 is a blower (transmission means), 32 is an indoor LED (transmission means), and 33 is indoors.
  • a buzzer (transmitting means), 34 is a communication adapter (communication means), and 100 is an indoor imaging system.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Studio Devices (AREA)

Abstract

　実施形態によるカメラ装置２は、室内を撮像する撮像部１１と、室内を撮像するための撮像指示を、家電製品（冷蔵庫１）を介して受信する受信手段（光センサ１４、音センサ１９、振動センサ２０）と、常には通常動作モードよりも相対的に消費電力が少ない低電力モードにて待機しており、受信手段（光センサ１４、音センサ１９、振動センサ２０）により撮像指示が受信されると通常動作モードに復帰して撮像部１１により室内を撮像するカメラ側制御部１８と、を備える。

Description

カメラ装置、室内撮像システム、室内情報取得装置
　本発明の実施形態は、カメラ装置、室内撮像システム、室内情報取得装置に関する。
　従来、例えば冷蔵庫にカメラを設けること等により、遠隔地からでも例えば冷蔵庫内の食材等の情報を取得可能なものが知られている（例えば、特許文献１参照）。
特開２０１２－２２６７４８号公報
　しかしながら、いつ遠隔地のユーザから室内の情報を取得するための指示が与えられるかを把握することができないことから、常にその指示を受信可能な状態で作動する必要があり、電力消費が増加する問題があった。
　本発明が解決しようとする課題は、電力消費を抑制しつつ、室内の情報を任意に取得することができるカメラ装置、室内撮像システム、室内情報取得装置を提供することにある。
　実施形態によるカメラ装置は、室内を撮像する撮像手段と、室内を撮像するための撮像指示を、家電製品を介して受信する受信手段と、常には通常動作モードよりも相対的に消費電力が少ない低電力モードにて待機しており、受信手段により撮像指示が受信されると通常動作モードに復帰して撮像手段により室内を撮像する制御手段と、を備える。
一実施形態の室内撮像システムを模式的に示す図 一実施形態のカメラ装置の外観を模式的に示す図 一実施形態のカメラ装置の内部を模式的に示す図 一実施形態のカメラ装置および室内撮像システムの電気的構成を模式的に示す図 一実施形態における冷蔵庫の処理の流れを示す図 一実施形態におけるカメラ装置の処理の流れを示す図 一実施形態において光エネルギーにより撮像指示を伝達する際の点滅パターンの一例を示す図 一実施形態において音エネルギーにより撮像指示を伝達する際の鳴動パターンの一例を示す図 一実施形態において振動エネルギーにより撮像指示を伝達する際の冷蔵庫の処理の流れを示す図 一実施形態において振動エネルギーにより撮像指示を伝達する際のカメラ装置の処理の流れを示す図 一実施形態において光エネルギーと振動エネルギーとにより撮像指示を伝達する際のカメラ装置の処理の流れを示す図
　以下、一実施形態について図１から図１１を参照しながら説明する。
　図１に示すように、本実施形態の室内撮像システム１００は、家電製品としての冷蔵庫１、室内を撮像するためのカメラ装置２、冷蔵庫１側との間で通信を行うためのアクセスポイント３、操作端末としての携帯端末４等により構成されている。このうち、アクセスポイント３は、外部ネットワーク５に接続しており、外部ネットワーク５を介して遠隔地の携帯端末４やサーバ６等と冷蔵庫１側との間を通信可能に接続している。本実施形態では、冷蔵庫１とアクセスポイント３との間、アクセスポイント３と携帯端末４との間、およびカメラ装置２とアクセスポイント３との間は、Ｂｌｕｅｔｏｏｔｈ（登録商標）による無線通信にて通信が行われる。
　携帯端末４は、カメラ装置２に室内を撮像させるための撮像指示を入力する操作端末であり、いわゆるスマートフォン（高機能携帯電話）を想定している。ただし、操作端末としては、携帯端末４に限らず、例えばタブレット型のパソコン等であってもよい。この携帯端末４は、住宅７内に位置している場合には、アクセスポイント３との間で近距離無線方式により通信可能に接続される。また、携帯端末４は、住宅７外に位置している場合には、広域通信により外部ネットワーク５を介してアクセスポイント３との間で通信可能に接続される。また、携帯端末４は、住宅７内からであっても広域通信により外部ネットワーク５を介してアクセスポイント３に接続することが可能であるとともに、住宅７内においては、アクセスポイント３を介さずに冷蔵庫１側と直接的に通信可能でもある。
　サーバ６は、周知のコンピュータシステムにより構成されており、冷蔵庫１にアクセスするための情報（例えばＩＰアドレス等）等を記憶しているとともに、本実施形態では、カメラ装置２により撮像された撮像データを記憶する。なお、図１では冷蔵庫１のみを図示しているが、図示しないエアコン等、他の家電製品もネットワーク化されている。
　このように家電製品をネットワーク化することにより、各家電製品の消費電力をユーザに目に見える形で提供する見える化、夏場の昼間等の電力需要が大きくなる時間帯における電力消費を低減するピークシフト、一般家庭の定格を超えるような電力の瞬間的な使用を回避するピークカット等の電力コントロールや、家電製品の故障診断等、使い勝手や快適性あるいは利便性を提供するためのシステムを提供することが可能となる。また、カメラ装置２を例えば冷蔵室内に設置することにより、冷蔵庫１の室内の様子（物品の貯蔵状態等）を確認すること等も可能となる。そして、これら各種の情報や撮像データ等をサーバ６に記憶することで、遠隔地であっても外部ネットワーク５等を介して携帯端末４等によりそれらの情報を参照することが可能となる。
　次に、カメラ装置２について説明する。
　カメラ装置２は、図２および図３に示すように、概ね直方体の形状に形成された筐体１０の表面に、撮像部１１（図４参照）のレンズ１２、本実施形態では２個の撮像ライト１３、および光センサ１４が露出するように設けられている。ただし、レンズ１２や撮像ライト１３および光センサ１４は、筐体１０外に露出するのではなく、その表面がカバー等で覆われた態様であってもよい。以下、レンズ１２等が露出している側を（図３の図示右方側）をカメラ装置２の正面とし、反対側（図３の図示左方側）を背面として説明する。
　このカメラ装置２は、図３に示すように、筐体１０内に、制御基板１５、電池１６、通信モジュール１７、音センサ１９および振動センサ２０等が収容されている。制御基板１５には、レンズ１２や図示しない撮像素子を有する撮像部１１、撮像ライト１３、およびそれらを制御するためのカメラ側制御部１８（図４参照）等が設けられている。撮像素子は、ＣＣＤやＣＭＯＳ等の周知の撮像素子が用いられている。撮像ライト１３は、ＬＥＤを採用している。なお、図示は省略するが、カメラ装置２には電源スイッチも設けられている。
　電池１６は、制御部や通信モジュール１７、および光センサ１４、音センサ１９、振動センサ２０等に電力を供給する。つまり、カメラ装置２は、内蔵する電池１６により駆動される。このため、カメラ装置２は、電源ケーブル等が不要となり、任意の場所に設置することが可能となる。本実施形態では、上記したようにカメラ装置２は冷蔵室内に設置されている。
　通信モジュール１７は、撮像部１１で撮像した庫内の撮像データを、アクセスポイント３を介して携帯端末４やサーバ６等に送信する。なお、サーバ６に送信するのは、撮像データをサーバ６に記憶させるためである。ここで、撮像データとは、室内の画像を含むデータであり、例えばビットマップ形式やＪＰＥＧ形式或いはＭＰＥＧ形式などの周知のフォーマットのデータ（静止画、動画）、そのデータを圧縮や暗号化あるいは画像処理することにより変換したデータ等、室内の様子を携帯端末４等で確認できるデータであれば、どのような形式のものであってもよい。
　図４に示すように、カメラ側制御部１８は、ＣＰＵ１８ａ、ＲＯＭ１８ｂ、ＲＡＭ１８ｃおよびＲＴＣ１８ｄ等を有するマイクロコンピュータで構成されており、カメラ装置２全体を制御する。具体的には、カメラ側制御部１８は、撮像部１１による撮像タイミングの制御、撮像する際の撮像環境を整える制御（撮像ライト１３の点灯制御）、通信モジュール１７による撮像データの送信、各センサによる後述する撮像指示の受信（受け付け）等のための制御等を行っている。また、カメラ側制御部１８は、本実施形態では、撮像した画像の補正等を行う画像処理も行っている。カメラ側制御部１８は、制御手段を構成している。
　カメラ側制御部１８に接続されている光センサ１４は、いわゆる照度センサであり、カメラ装置２の周辺の照度を検出する。より詳細には、光センサ１４は、所定の波長帯域の光エネルギー（本実施形態では、後述する室内ＬＥＤから発せられる光エネルギー）を検出する。光センサ１４で検出された光エネルギーは、電気信号に変換されてカメラ側制御部１８に出力される。
　音センサ１９は、カメラ装置２の周囲で発生した音を検出する。より詳細には、音センサ１９は、予め設定されている周波数帯域で発せられる音エネルギー（本実施形態では、後述するパネルブザー２９や室内ブザー３３から発せられる音エネルギー）を検出する。音センサ１９で検出された音エネルギーは、電気信号に変換されてカメラ側制御部１８に出力される。
　振動センサ２０は、カメラ装置２に加わった振動を検出する。この振動センサ２０は、例えば３軸加速度センサ等により構成されており、検出した振動エネルギーを電気信号に変換してカメラ側制御部１８に出力する。そして、カメラ側制御部１８は、加速度に基づいて、カメラ装置２に加わった振動を検出する。
　これら光センサ１４、音センサ１９、および振動センサ２０は、詳細は後述するが、物理的なエネルギーを検出するセンサであり、撮像指示を受信する受信手段を構成している。なお、光センサ１４、音センサ１９および振動センサ２０の全てを必ずしも設ける必要は無く、撮像指示を例えば光エネルギーでのみ受信するのであれば、光センサ１４のみを設ける構成としてもよい。
　カメラ側制御部１８は、検出された各エネルギーの強度やパターンに基づいて、後述するように撮像指示であるかを判定する。つまり、本実施形態の場合、ユーザからの撮像指示は、所定のパターンで発せられたエネルギーにより示される構成となっており、カメラ側制御部１８は、各センサにより検出されたエネルギーのパターンと撮像指示を示すパターンとが一致するかを判定する判定手段としても機能する。
　このような構成のカメラ装置２は、常には通常動作モードよりも相対的に消費電力が少ない低電力モードにて待機しており、撮像指示を受信すると、通常動作モードに復帰して室内を撮像する。本実施形態の場合、カメラ装置２は冷蔵室内に設けられていることから、冷蔵室の室内が撮像される。
　カメラ装置２が設置される冷蔵庫１は、庫側制御部２１を有している。この庫側制御部２１は、ＣＰＵ２１ａ、ＲＯＭ２１ｂ、ＲＡＭ２１ｃ、タイマ２１ｄ等を有するマイクロコンピュータで構成されており、冷蔵庫１全体を制御する。具体的には、庫側制御部２１は、例えば操作パネル２２から設定された運転状態となるように、温度センサ２３で検出した庫内の温度や扉センサ２４で検出した扉の開閉状態等に基づいて、周知の冷凍サイクルを構成する冷蔵用冷却機構２５や冷凍用冷却機構２６の運転状態を制御する。
　操作パネル２２には、パネル表示器２７、パネルＬＥＤ２８、パネルブザー２９が設けられている。パネル表示器２７は、設定値等を表示する。パネルＬＥＤ２８は、操作スイッチやや運転状態等を点灯させるために設けられている。パネルブザー２９は、圧電ブザー等で構成され、操作に応じて音声（音エネルギー）を発することで、操作内容を報知する。本実施形態の場合、パネルブザー２９は、６ｋＨｚの音を出力可能となっており、後述するように、カメラ装置２に対して撮像指示を伝達するために音エネルギーを発する伝達手段としても機能する。
　室内照明３０は、冷蔵室等に設けられており、扉が開放された際に点灯する。つまり、室内照明３０は、光エネルギーを発生させる。この室内照明３０は、庫側制御部２１からの制御により点滅可能となっている。送風機３１は、通常の動作においては冷蔵庫１内の冷気を循環させるために設けられている。この送風機３１は、例えば回転数を通常の動作よりも高くすることにより、風切り音やモータ音等の音エネルギーを発生させることが可能となっている。
　室内ＬＥＤ３２は、カメラ装置２に対して撮像指示を伝達するために光エネルギーを発生するものであり、本実施形態では、上記した光センサ１４で検出可能な所定の周波数帯域の光を発する構成となっている。また、室内ＬＥＤ３２は、所定のパターンにて点滅可能であり、撮像指示に対応するパターンで点滅することで撮像指示をカメラ装置２側に伝達する伝達手段を構成している。なお、上記した室内照明３０も、光エネルギーを発するものであることから、室内ＬＥＤ３２の代わりに伝達手段として用いることが可能である。また、室内照明３０を伝達手段として用いる場合には、室内ＬＥＤ３２を設けなくてもよい。
　室内ブザー３３は、カメラ装置２に対して撮像指示を伝達するために音エネルギーを発生する例えば圧電ブザーで構成されている。室内ブザー３３は、例えば２０ｋＨｚの音声（つまり、可聴域から外れた音声）を出力可能であり、室内ブザー３３から発せられた音声は、上記した音センサ１９では検出可能である一方、人には聞こえない構成となっている。なお、パネルブザー２９を伝達手段として用いる場合や送風機３１を伝達手段として用いる場合には、室内ブザー３３を設けなくてもよい。室内ブザーは、伝達手段を構成している。
　通信アダプタ３４は、アクセスポイント３や室内の携帯端末４等との間で通信を行うものであり、本実施形態では、冷蔵庫１に着脱可能に設けられている。なお、図１には冷蔵庫１だけを図示しているが、通信アダプタ３４は、エアコン等の他の家電製品にも設けられ、家電製品をネットワーク化している。通信アダプタ３４は、通信手段を構成している。また、通信アダプタ３４は、アクセスポイント３を介すること無く、カメラ装置２との間で直接的に通信を行うことも可能な構成となっている。この通信アダプタ３４は、上記したように見える化等にも用いられていることから、冷蔵庫１が動作している状態では基本的に常時作動している。
　次に、上記した構成の作用について説明する。
　上記したカメラ装置２を設けることにより、住宅７の室内や冷蔵室等の室内を撮像することができる。この場合、外部ネットワーク５を経由して携帯端末４からカメラ装置２に対して撮像指示を送信することで、遠隔地からであっても任意のタイミングで撮像データを取得することができる。ただし、いつ撮像指示が送られてくるかが不明なために通信モジュール１７を常に動作させておく必要があり、その場合には電力消費が大きくなる。その結果、１日あるいは数日程度で電池１６交換（あるいは充電）が必要となる。
　そこで、カメラ装置２および室内撮像システム１００では、冷蔵庫１等の家電製品から撮像指示を伝達させることにより（家電製品と連携させることにより）、電力消費を抑制しつつ、撮像データ等の室内の情報を任意に取得することを可能としている。以下、説明の簡略化のために、撮像指示の伝達に光エネルギーを用いる場合と、音エネルギーを用いる場合と、振動エネルギーを用いる場合と、それらを組み合わせた場合の一例（光エネルギーとエネルギーとを用いる例）について、それぞれ個別に説明する。
　　＜光エネルギーを用いる場合＞
　光エネルギーを用いて撮像指示を伝達する場合、冷蔵庫１は図５に示す庫側処理を実行し、カメラ装置２は図６に示すカメラ側処理を実行する。
　冷蔵庫１は、図５に示す庫側処理において、撮像指示を受信したかを判定する（Ｒ１）。ユーザからの撮像支持は、アクセスポイント３を経由して通信アダプタ３４により冷蔵庫１にて受信される（図４参照）。冷蔵庫１は、撮像指示を受信していない場合には（Ｒ１：ＮＯ）、そのまま待機する。一方、冷蔵庫１は、撮像指示を受信した場合には（Ｒ１：ＹＥＳ）、扉が閉鎖されているかを判定し（Ｒ２）、扉が開放されている場合には（Ｒ２：ＮＯ）、扉が閉鎖されるまで待機する。
　冷蔵庫１は、扉が閉鎖されている場合には（Ｒ２：ＹＥＳ）、操作パネル２２等から撮像中であることを報知した後（Ｒ３）、エネルギー（ここでは光エネルギー）を発する。このステップＲ３では、冷蔵庫１は、室内ＬＥＤ３２を撮像指示に対応する所定のパターンにて点滅させることで、光エネルギーを発している。具体的には、冷蔵庫１は、図７に示すように、撮像指示を受信すると予め設定されている点滅期間の間、室内ＬＥＤ３２のＯＮ／ＯＦＦを繰り返す。つまり、本実施形態では、撮像指示を示すパターンとして、光エネルギーが５Ｈｚで点滅するパターンが採用されている。この点滅パターンは、一般的な冷蔵庫１の使用状態では発生し得ないパターンである。すなわち、扉が開放されたときには室内照明３０が点灯するものの、扉が５Ｈｚ（０．２ｓ周期）で開閉されることは無いと考えられるため、扉の開閉と撮像指示とが誤判定されるおそれがない。
　さて、カメラ装置２は、図６に示すカメラ側処理において、電源がＯＮされると（Ｓ１）、スリープモードに移行する（Ｓ２）。このスリープモードは、通常動作モードよりも電力消費が少ない低電力モードに相当する。そして、カメラ装置２は、エネルギーを検出したかを判定する（Ｓ３）。このステップＳ３では、より詳細には、カメラ側制御部１８はスリープモードで待機している状態であり、光センサ１４により光エネルギーを検出した旨が通知されたかが判定されることになる。この通知は、マイクロコンピュータ等では周知の割り込み信号等により通知される。
　カメラ装置２は、エネルギーを検出していない場合には（Ｓ３：ＮＯ）、そのまま待機する一方、エネルギーを検出した場合には（Ｓ３：ＹＥＳ）、通常動作モードに復帰する（Ｓ４）。そして、検出したエネルギーのパターンが、撮像指示のパターンと一致するかを判定する（Ｓ５）。具体的には、カメラ装置２は、光エネルギーのＯＮ／ＯＦＦのエッジを検出し、そのエッジが例えば５秒間で１０回以上検出されると、撮像指示を示すものであると判定する。
　カメラ装置２は、撮像指示のパターンと一致する場合には（Ｓ５：ＹＥＳ）、室内を撮像し（Ｓ６）、撮像データを携帯端末４等に送信したりサーバ６等に記憶させたりした後（Ｓ７）、ステップＳ２に移行してスリープモードに移行する。また、カメラ装置２は、撮像指示のパターンと一致しない場合にも（Ｓ５：ＮＯ）、スリープモードに移行する。
　このように、スリープモード中のカメラ装置２に対して、光エネルギーにより撮像指示を伝達することができる。
　　＜音エネルギーを用いる場合＞
　音エネルギーを用いて撮像指示を伝達する場合、光エネルギーの場合と同様に、冷蔵庫１は図５に示す庫側処理を実行し、カメラ装置２は図６に示すカメラ側処理を実行する。以下、処理内容が異なる点について詳細に説明する。
　冷蔵庫１は、撮像指示を受信すると（Ｒ１：ＹＥＳ）、扉が閉鎖されているかを確認し（Ｒ２：ＹＥＳ）、撮像中であることを報知した後（Ｒ３）、エネルギー（ここでは音エネルギー）を発する。この場合、冷蔵庫１は、パネルブザー２９を所定のパターンにて鳴動させることで、音エネルギーを発している。具体的には、冷蔵庫１は、図８に示すように、撮像指示を受信すると予め設定されている鳴動期間の間、０．５秒ＯＮ（鳴動）、０．５秒間ＯＦＦ（停止）するパターンで、パネルブザー２９を鳴動させる。つまり、本実施形態では、撮像指示を示すパターンとして、予め設定された６ｋＨｚ（室内ブザー３３の場合には２０ｋＨｚの非可聴域）の周波数帯域であって、予め定められた周期（０．５秒周期）で間欠的に鳴動するパターンが採用されている。この鳴動パターンは、通常の操作（ユーザの設定操作）とは異なるパターンであり、撮像指示以外では発生し得ないパターンである。
　さて、カメラ装置２は、図６に示すカメラ側処理において、電源がＯＮされると（Ｓ１）、スリープモードに移行して待機する（Ｓ２）。そして、冷蔵庫１は、音センサ１９から割り込み信号等により音エネルギーを検出した旨が通知されると、つまり、音エネルギーを検出すると（Ｓ３：ＹＥＳ）、通常動作モードに復帰して（Ｓ４）、音エネルギーのパターンが撮像指示のパターンと一致するかを判定する（Ｓ５）。この場合、カメラ装置２は、音エネルギーのＯＮ／ＯＦＦのエッジを検出し、そのエッジが例えば５秒間で１０回以上検出されると、撮像指示を示すものであると判定する。
　そして、カメラ装置２は、撮像指示のパターンと一致する場合には（Ｓ５：ＹＥＳ）、室内を撮像し（Ｓ６）、撮像データを携帯端末４等に送信したりサーバ６等に記憶させたりした後（Ｓ７）、ステップＳ２に移行してスリープモードに移行する。
　このように、スリープモード中のカメラ装置２に対して、音エネルギーにより撮像指示を伝達することができる。
　　＜振動エネルギーを用いる場合＞
　上記した光エネルギーと音エネルギーの場合には、ユーザがリアルタイムに撮像指示を送信する状況を想定したが、今回は、冷蔵庫１の扉が開閉されたとき（つまり、冷蔵庫１の貯蔵状態が変化した可能性があるとき）に撮像するという撮像指示が予め設定されている状況を想定している。すなわち、撮像指示を受信する受信手段とは、リアルタイムの撮像指示だけで無く、予め設定されている条件に基づいた撮像指示を受信する（受け付ける）ことも可能な構成となっている。
　このとき、冷蔵庫１は図９に示す庫側処理を実行し、カメラ装置２は図１０に示すカメラ側処理を実行する。なお、図１０に示すカメラ側処理の流れは概ね図６に示したカメラ側処理と共通するので、異なる点について詳細に説明する。
　冷蔵庫１は、図９に示す庫側処理において、扉が開閉されたかを判定しており（Ｒ１０）、扉が開閉されていない場合には（Ｒ１０：ＮＯ）、待機する。一方、冷蔵庫１は、扉が開閉された場合には（Ｒ１０：ＹＥＳ）、撮像中であることを報知した後（Ｒ１１）、通信アダプタ３４からカメラ装置２に対して撮像指示を送信する（Ｒ１１）。
　カメラ装置２は、図１０に示すカメラ側処理において、電源がＯＮされると（Ｓ１０）、スリープモードに移行し（Ｓ１１）、振動（振動エネルギー）を検出したかを判定する（Ｓ１２）。上記したように冷蔵庫１の扉を開閉した場合、それに伴って振動が発生する。そのため、カメラ装置２は、振動を検出すると（Ｓ１２：ＹＥＳ）、通常動作モードに復帰し（Ｓ１３）、冷蔵庫１から撮像指示を受信したかを判定する（Ｓ１４）。このステップＳ１４では、通信モジュール１７を介して撮像指示を受信することになる。
　そして、カメラ装置２は、撮像指示を受信すると（Ｓ１４：ＹＥＳ）、室内を撮像し（Ｓ１５）、撮像データを送信、あるいはサーバ６等に記憶させた後（Ｓ１６）、スリープモードに移行する。なお、ステップＳ１６における送信先は、携帯端末４等である。つまり、カメラ装置２は、冷蔵庫１の扉が開閉された場合には、物品等の貯蔵状態が変化した可能性があるとして、その旨を撮像データとしてユーザに報知する。
　このように、スリープモード中のカメラ装置２に対して、振動エネルギーにより撮像指示を伝達することができる。
　　＜光エネルギーと振動エネルギーとを用いる場合＞
　今回は、光エネルギーと振動エネルギーとを用い、冷蔵庫１の扉が開閉されたときに撮像するという撮像指示が予め設定されている状況において、カメラ装置２単体で撮像する例を説明する。このとき、カメラ装置２は、図１１に示すカメラ側処理を実行する。なお、図１１に示すカメラ側処理の流れは概ね図１０に示したカメラ側処理と共通するので、異なる点について詳細に説明する。
　カメラ装置２は、図１１に示すカメラ側処理において、電源がＯＮされると（Ｓ２０）、スリープモードに移行し（Ｓ２１）、光エネルギーを検出したかを判定する（Ｓ２２）。冷蔵庫１の扉が開放された場合、冷蔵庫１は、例えば室内照明３０を点灯する。また、扉が開放された場合には、庫外の明かりにより、カメラ装置２が照らされる。つまり、光エネルギーを検出することにより、扉の開閉状態を検出することができる。そのため、カメラ装置２は、光エネルギーを検出すると（Ｓ２２：ＹＥＳ）、冷蔵庫１の扉が開放されたとして、通常動作モードに復帰する（Ｓ２３）。
　続いて、カメラ装置２は、扉閉鎖に相当する状態であったかを判定する（Ｓ２４）。ここで、「扉閉鎖に相当する状態」とは、扉が開放された後に扉が閉鎖された状態を意味している。より具体的には、このステップＳ２４では、次の２点が判定されている。
　ａ）光エネルギーを検出している期間が、瞬間的なものでは無く、物品等を取り出すのに要する程度の期間であったか。
　ｂ）扉が閉鎖された際の振動エネルギーを検出したか。
　カメラ装置２は、これらを判定することにより、冷蔵庫１の扉が開閉されたことを判定する。そして、扉閉鎖に相当する状態であったと判定すると（Ｓ２４：ＹＥＳ）、室内を撮像し（Ｓ２５）、撮像データを送信、あるいはサーバ６等に記憶させた後（Ｓ２６）、スリープモードに移行する。なお、ステップＳ２６における送信先は、携帯端末４等である。
　このように、スリープモード中のカメラ装置２に対して、光エネルギーと振動エネルギーとを組み合わせることによっても撮像指示を伝達することができる。
　以上説明した実施形態によれば、次のような効果を得ることができる。
　カメラ装置２は、室内を撮像する撮像部１１と、撮像指示を家電製品を介して受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、受信手段で撮像指示が受信されると通常動作モードに復帰して撮像手段により室内を撮像する制御を行うカメラ側制御部１８と、を備えているので、撮像指示がいつ送信されるかが想定できない場合であっても、通常動作状態のまま待機する必要が無い。これにより、待機中の電力消費を削減することができる。また、受信手段を設けているので、いつ撮像指示が送信されても室内を撮像することができる。したがって、電力消費を抑制しつつ、室内の情報である撮像データを任意に取得することができる。
　撮像指示を家電製品から発せられる物理的なエネルギーで伝達するものとし、受信手段をそのエネルギーを検出する光センサ１４、音センサ１９、振動センサ２０等で構成しているので、パネルブザー２９や室内照明３０等、家電製品に既存のものを撮像指示の伝達に利用することが可能となる。これにより、追加部品を設けなくても、カメラ装置２に撮像指示を伝達することができる。
　室内ＬＥＤ３２や室内ブザー３３等、伝達手段として専用の構成を設けてもよい。この場合、例えば室内ＬＥＤ３２を可視光以外の波長帯域の光エネルギーを発するようにしたり、室内ブザー３３を可聴域を超える２０ｋＨｚ程度以上の音エネルギーを発するようにすること等により、ユーザに影響を与えること無く、撮像指示を伝達することができる。
　エネルギーを所定のパターンで発することで撮像指示を伝達し、パターンが一致するか否かを撮像条件に加えたので、外乱の影響を受けること無く、確実に撮像指示を伝達することができ、誤検出や誤撮像を防止することができる。
　撮像が終了したとき、および、検出されたエネルギーのパターンと撮像指示を示すパターンとが一致しなかったときにはスリープモード（低電力モード）に移行するので、電力消費を低減することができる。
　例えばパネルブザー２９や室内照明３０等の家電製品に予め設けられているものを利用する場合、当然のことながら、撮像指示以外の場合にそれらからエネルギーが発せられることがある。そこで、撮像指示のパターンを通常動作では発生し得ないパターン（図７に示した点滅パターンや図８に示した鳴動パターン等）とすることにより、誤撮像を防止することができる。
　上記したカメラ装置２と、カメラ装置２に対する前記撮像指示を入力するための携帯端末４等の操作端末と、操作端末から撮像指示を受信する通信アダプタ３４および受信した撮像指示をカメラ装置２に伝達する伝達手段（室内ＬＥＤ３２やパネルブザー２９等）を有する家電製品と、により室内撮像システム１００を構成しているので、待機中の電力消費を削減することができるとともに、電力消費を抑制しつつ、室内の情報である撮像データを任意に取得することができる。
　　　（その他の実施形態）
　上記した実施形態にて例示した構成は、それに限定されることなく、例えば以下に示すような変形や組み合わせの変更等を行うことができる。そして、それらの構成によっても、一実施形態と同様の効果を得ることができる。
　一実施形態で示した点滅周期や鳴動周期等の数値は一例であり、適宜設定することができる。また、光エネルギーを検出する際、ＯＮ／ＯＦＦのエッジを検出するのではなく、光エネルギーの強度（照度）が基準値を超えたか、ＯＮ／ＯＦＦの周期が一致するか、あるいは、ＯＮ／ＯＦＦのパルス幅が一致するか等、外乱光の影響を抑制することができれば、どのようなパターンや判定基準を採用してもよい。
　その場合、例えば赤外線を用いる等、光エネルギーを可視光以外の波長帯域に設定してもよい。また、カメラ装置２を住宅７の室内に設けて照明機器（可視光）を伝達手段として用いる場合には、点滅周期を人の目では判断できない周期（例えば３０Ｈｚ程度以上）にすることで、人の目では分からない状態で撮像指示を伝達することもできる。
　また、音エネルギーを検出する際、音エネルギーの強度（いわゆる音圧やｄＢ値）が基準値を超えたか、ＯＮ／ＯＦＦの周期が一致するか、あるいは、ＯＮ／ＯＦＦのパルス幅が一致するか等、外乱音の影響を抑制することができれば、どのようなパターンや判定基準を採用してもよい。
　その場合、人の可聴域を超える波長域（例えば、２０ｋＨｚ程度以上）の超音波を用いれば、ユーザが在宅中でも音の発生を気にすることが無くなる。また、パネルブザー２９や室内ブザー３３を用いることなく、上記した送風機３１を通常運転では使用しない回転数（例えば２５００ｒｐｍ）まで上げて音エネルギーを発生させてもよい。
　一実施形態では家電製品として冷蔵庫１を例示したが、他の家電成否であってもよい。例えば、エアコンやテレビの音声を利用すれば、冷蔵庫１の室内だけでなく、カメラ装置２を住宅７の室内を同様の手法にて撮像することができる。さらには、撮像指示を家電製品と競合しない周波数帯域の音エネルギーにより伝達する等、撮像指示に対応する周波数を予め設定してもよい。また、光エネルギーについても、例えばエアコンにはリモコンとの間で赤外線による双方向通信が可能な赤外線送受信部が設けられていることから、その赤外線送受信部を伝達手段として用いることもできる。また、洗濯機であっても、運転終了のブザー等を利用して伝達手段として用いることができる。
　一実施形態では光エネルギー、音エネルギーおよび振動エネルギーを検出するセンサをそれぞれ設けているが、いずれか１つ又は２つのセンサを設ける構成としてもよい。
　一実施形態では光エネルギーと振動エネルギーとを組み合わせた例を示したが、光エネルギーと音エネルギーとを組み合わせてもよいし、音エネルギーと振動エネルギーとを組み合わせてもよいし、それら全てを組み合わせてもよい。勿論、冷蔵庫１の扉が開閉されたときに撮像するという撮像指示が予め設定されている場合だけでなく、リアルタイムで送信された撮像指示を伝達する際にも各エネルギーを組み合わせて伝達するようにしてもよい。
　一実施形態では室内の情報としてカメラ装置２による撮像データを示したが、他の情報を取得するようにしてもよい。すなわち、一実施形態と同様の構成にて、撮像データや音声データ等の室内の情報を取得する情報取得装置を、室内の情報を取得する情報取得手段と、情報取得手段に対する取得指示を受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、受信手段により前記取得指示が受信されると通常動作モードに復帰し、室内の情報を取得するために情報取得手段を制御する制御手段と、により構成してもよい。このような構成によっても、電力消費を抑制しつつ、室内の情報を任意に取得することができる等、一実施形態と同様の効果を得ることができる。
　本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
　図面中、１は冷蔵庫（家電製品）、２はカメラ装置、情報取得装置、４は携帯端末（操作端末）、６はサーバ（操作端末）、１１は撮像部（撮像手段、情報取得手段）、１４は光センサ（センサ、検出手段、受信手段）、１８はカメラ側制御部（制御手段）、１９は音センサ（センサ、検出手段、受信手段）、２０は振動センサ（センサ、検出手段、受信手段）、２８はパネルＬＥＤ（伝達手段）、２９はパネルブザー（伝達手段）、３０は室内照明（伝達手段）、３１は送風機（伝達手段）、３２は室内ＬＥＤ（伝達手段）、３３は室内ブザー（伝達手段）、３４は通信アダプタ（通信手段）、１００は室内撮像システムを示す。

Claims (15)

  1. 　室内を撮像する撮像手段と、
    　室内を撮像するための撮像指示を、家電製品を介して受信する受信手段と、
    　常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、前記受信手段で前記撮像指示が受信されると通常動作モードに復帰して前記撮像手段により室内を撮像する制御手段と、
    　を備えることを特徴とするカメラ装置。
  2. 　前記撮像指示は、前記家電製品から物理的なエネルギーが発せられることにより該カメラ装置に伝達されるものであり、
    　前記受信手段は、エネルギーを検出するセンサを有しており、前記家電製品から発せられたエネルギーを検出することで前記撮像指示を受信することを特徴とする請求項１記載のカメラ装置。
  3. 　前記撮像指示は、所定のパターンで発せられたエネルギーにより示されるものであり、
    　前記制御手段は、前記検出手段により検出されたエネルギーのパターンと前記撮像指示を示すパターンとが一致すると、室内を撮像することを特徴とする請求項２記載のカメラ装置。
  4. 　前記制御手段は、前記検出手段により検出されたエネルギーのパターンと前記撮像指示を示すパターンとが一致しなかったとき、および、前記撮像手段による撮像が終了したときには、低電力モードに移行することを特徴とする請求項３記載のカメラ装置。
  5. 　前記エネルギーは、光エネルギーであり、
    　前記検出手段は、前記光エネルギーを検出する光センサで構成されていることを特徴とする請求項２から４のいずれか一項記載のカメラ装置。
  6. 　前記撮像指示は、予め定められている周期で点滅するパターンで前記光エネルギーを発することにより示されるものであることを特徴とする請求項５記載のカメラ装置。
  7. 　前記光エネルギーは、点滅する周期が３０Ｈｚ以上に設定されていることを特徴とする請求項６記載のカメラ装置。
  8. 　前記光エネルギーは、可視光以外の波長帯域に設定されていることを特徴とする請求項５から７のいずれか一項記載のカメラ装置。
  9. 　前記エネルギーは、音エネルギーであり、
    　前記検出手段は、前記音エネルギーを検出する音センサで構成されていることを特徴とする請求項２から８のいずれか一項記載のカメラ装置。
  10. 　前記音エネルギーは、前記撮像指示に対応する周波数として予め設定されている周波数帯域で発せられることを特徴とする請求項９記載のカメラ装置。
  11. 　前記音エネルギーは、その周波数帯域が２０ｋＨｚに設定されていることを特徴とする請求項９または１０記載のカメラ装置。
  12. 　前記撮像指示は、予め定められた周期で間欠的に鳴動するパターンで前記音エネルギーを発することにより示されるものであることを特徴とする請求項９から１１のいずれか一項記載のカメラ装置。
  13. 　前記エネルギーは、振動エネルギーであり、
    　前記検出手段は、前記振動エネルギーを検出する振動センサで構成されていることを特徴とする請求項２から１２のいずれか一項記載のカメラ装置。
  14. 　室内を撮像する撮像手段と、室内を撮像するための撮像指示を、家電製品を介して受信する受信手段と、常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、前記受信手段で前記撮像指示が受信されると通常動作モードに復帰して前記撮像手段により室内を撮像する制御手段と、を有するカメラ装置と、
    　前記カメラ装置に対する前記撮像指示を入力するための操作端末と、
    　前記操作端末から前記撮像指示を受信する通信手段と、前記通信手段により受信された前記撮像指示を前記カメラ装置に伝達する伝達手段と、を有する家電製品と、
    　を備えることを特徴とする室内撮像システム。
  15. 　室内の情報を取得する情報取得手段と、
    　前記情報取得手段に対する取得指示を受信する受信手段と、
    　常には通常動作モードよりも相対的に電力消費が少ない低電力モードにて待機しており、前記受信手段により前記取得指示が受信されると通常動作モードに復帰し、
    室内の情報を取得するために前記情報取得手段を制御する制御手段と、
    　を備えることを特徴とする室内情報取得装置。
PCT/JP2014/066545 2013-07-16 2014-06-23 カメラ装置、室内撮像システム、室内情報取得装置 WO2015008584A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP14825813.0A EP3024216A4 (en) 2013-07-16 2014-06-23 Camera device, compartment-interior imaging system, and compartment-interior-information acquisition device
CN201480045807.5A CN105474621B (zh) 2013-07-16 2014-06-23 摄像机装置、室内摄像系统及室内信息取得装置
KR1020157037086A KR102099746B1 (ko) 2013-07-16 2014-06-23 카메라 장치, 실내 촬상 시스템, 실내정보 취득장치
US14/997,140 US10194081B2 (en) 2013-07-16 2016-01-15 Camera device, compartment-interior imaging system, and compartment-interior-information acquisition device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013147563A JP6659204B2 (ja) 2013-07-16 2013-07-16 カメラ装置、室内撮像システム、室内情報取得装置
JP2013-147563 2013-07-16

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/997,140 Continuation US10194081B2 (en) 2013-07-16 2016-01-15 Camera device, compartment-interior imaging system, and compartment-interior-information acquisition device

Publications (1)

Publication Number Publication Date
WO2015008584A1 true WO2015008584A1 (ja) 2015-01-22

Family

ID=52346056

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/066545 WO2015008584A1 (ja) 2013-07-16 2014-06-23 カメラ装置、室内撮像システム、室内情報取得装置

Country Status (7)

Country Link
US (1) US10194081B2 (ja)
EP (1) EP3024216A4 (ja)
JP (1) JP6659204B2 (ja)
KR (1) KR102099746B1 (ja)
CN (4) CN110392209A (ja)
TW (1) TWI571124B (ja)
WO (1) WO2015008584A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018068691A1 (zh) 2016-10-10 2018-04-19 苏州盛迪亚生物医药有限公司 一种抗pd-1抗体和vegfr抑制剂联合在制备治疗癌症的药物中的用途
US10602071B2 (en) 2015-06-19 2020-03-24 Sony Semicondutor Solutions Corporation Imaging device and control method

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6184803B2 (ja) * 2013-08-27 2017-08-23 東芝ライフスタイル株式会社 室内撮像システム
CN108604400A (zh) 2015-12-15 2018-09-28 亚马逊技术股份有限公司 用于音频/视频记录和通信设备的视频点播
CN108605146B (zh) 2015-12-15 2021-08-17 亚马逊技术股份有限公司 用于音频/视频记录和通信设备的视频点播
JP6501836B2 (ja) * 2017-07-27 2019-04-17 東芝ライフスタイル株式会社 室内撮像システム
JP6970600B2 (ja) * 2017-12-05 2021-11-24 シャープ株式会社 制御装置、制御装置の制御方法およびプログラム
CN110933371B (zh) * 2019-12-02 2021-07-13 广州小鹏汽车科技有限公司 一种监测方法、装置和车辆
CN113819704B (zh) * 2020-01-19 2022-11-08 戴纳智慧医疗科技有限公司 一种冰箱结霜监控管理方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004180077A (ja) * 2002-11-28 2004-06-24 Fuji Photo Film Co Ltd 通信装置及び通信方法
JP2005217549A (ja) * 2004-01-27 2005-08-11 Nec Corp カメラ制御機能付携帯電話機
JP2005286766A (ja) * 2004-03-30 2005-10-13 Victor Co Of Japan Ltd 遠隔撮影システム
WO2006048987A1 (ja) * 2004-11-02 2006-05-11 Japan Science And Technology Agency 撮像装置及びその信号読み出し方法
JP2006279327A (ja) * 2005-03-28 2006-10-12 Nec Access Technica Ltd 遠隔監視システム，遠隔監視用ホルダーおよびカメラ付き携帯端末機器
JP2012226748A (ja) 2011-04-15 2012-11-15 Lg Electronics Inc ネットワークシステム及びその制御方法
JP2013102428A (ja) * 2011-10-27 2013-05-23 Polycom Inc 超音波式ビーコンを用いた、複数装置間での異なる音声クロックの補償

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001208463A (ja) * 2000-01-25 2001-08-03 Osami Tsutsui 料理メニューを教えてくれる冷蔵庫
US20030174154A1 (en) * 2000-04-04 2003-09-18 Satoru Yukie User interface for interfacing with plural real-time data sources
JP2002156181A (ja) * 2000-11-16 2002-05-31 Yozan Inc 冷蔵庫
JP2002243335A (ja) * 2001-02-21 2002-08-28 Toshiba Corp 食品保存庫、ホームネットワーク装置、携帯情報端末、食品情報提供サーバ、献立情報提供サーバ及び保存庫内収納情報提供サーバ
JP2002340471A (ja) * 2001-05-18 2002-11-27 Fujitsu General Ltd 冷蔵庫内部表示システム
US6812971B2 (en) * 2001-09-11 2004-11-02 Olympus Optical Co., Ltd. Electronic apparatus, stand and electronic apparatus stand system
US20040212678A1 (en) * 2003-04-25 2004-10-28 Cooper Peter David Low power motion detection system
US20060237427A1 (en) * 2005-04-07 2006-10-26 Logan James D Smart cabinets
JP5015058B2 (ja) * 2008-04-16 2012-08-29 オリンパスイメージング株式会社 撮影装置
JP5178621B2 (ja) * 2009-04-30 2013-04-10 三菱電機株式会社 冷蔵庫
CN202077050U (zh) * 2011-04-22 2011-12-14 李景魁 一种多功能家电远程控制系统
CN202907061U (zh) * 2011-05-25 2013-04-24 陈明荣 能用手机电脑遥控家电及其它电子产品的监控器
EP3292451A1 (en) * 2015-05-04 2018-03-14 Johnson Controls Technology Company User control device with housing containing angled circuit boards

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004180077A (ja) * 2002-11-28 2004-06-24 Fuji Photo Film Co Ltd 通信装置及び通信方法
JP2005217549A (ja) * 2004-01-27 2005-08-11 Nec Corp カメラ制御機能付携帯電話機
JP2005286766A (ja) * 2004-03-30 2005-10-13 Victor Co Of Japan Ltd 遠隔撮影システム
WO2006048987A1 (ja) * 2004-11-02 2006-05-11 Japan Science And Technology Agency 撮像装置及びその信号読み出し方法
JP2006279327A (ja) * 2005-03-28 2006-10-12 Nec Access Technica Ltd 遠隔監視システム，遠隔監視用ホルダーおよびカメラ付き携帯端末機器
JP2012226748A (ja) 2011-04-15 2012-11-15 Lg Electronics Inc ネットワークシステム及びその制御方法
JP2013102428A (ja) * 2011-10-27 2013-05-23 Polycom Inc 超音波式ビーコンを用いた、複数装置間での異なる音声クロックの補償

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3024216A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10602071B2 (en) 2015-06-19 2020-03-24 Sony Semicondutor Solutions Corporation Imaging device and control method
WO2018068691A1 (zh) 2016-10-10 2018-04-19 苏州盛迪亚生物医药有限公司 一种抗pd-1抗体和vegfr抑制剂联合在制备治疗癌症的药物中的用途

Also Published As

Publication number Publication date
CN105474621B (zh) 2019-08-16
US10194081B2 (en) 2019-01-29
US20160134811A1 (en) 2016-05-12
CN110392210A (zh) 2019-10-29
JP6659204B2 (ja) 2020-03-04
TWI571124B (zh) 2017-02-11
JP2015023306A (ja) 2015-02-02
TW201513663A (zh) 2015-04-01
KR20160016943A (ko) 2016-02-15
KR102099746B1 (ko) 2020-04-10
CN110392208A (zh) 2019-10-29
EP3024216A4 (en) 2017-01-25
CN110392209A (zh) 2019-10-29
CN105474621A (zh) 2016-04-06
EP3024216A1 (en) 2016-05-25

Similar Documents

Publication Publication Date Title
WO2015008584A1 (ja) カメラ装置、室内撮像システム、室内情報取得装置
WO2015029823A1 (ja) 撮像システム及び撮像装置
US10371439B2 (en) Refrigerator and refrigerator watching system
JP7185659B2 (ja) 冷蔵庫
JP6708766B2 (ja) カメラ装置、室内撮像システム、室内情報取得装置
JP6501836B2 (ja) 室内撮像システム
KR20150126106A (ko) 로봇 청소기 및 그 동작방법
JP7010995B2 (ja) 操作端末、操作端末のプログラム
JP6744444B2 (ja) 操作端末、操作端末のプログラム、家電製品
JP6184803B2 (ja) 室内撮像システム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201480045807.5

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14825813

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20157037086

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2014825813

Country of ref document: EP