WO2015182062A1 - 制御装置、通信システム、制御方法およびプログラム - Google Patents

制御装置、通信システム、制御方法およびプログラム Download PDF

Info

Publication number
WO2015182062A1
WO2015182062A1 PCT/JP2015/002505 JP2015002505W WO2015182062A1 WO 2015182062 A1 WO2015182062 A1 WO 2015182062A1 JP 2015002505 W JP2015002505 W JP 2015002505W WO 2015182062 A1 WO2015182062 A1 WO 2015182062A1
Authority
WO
WIPO (PCT)
Prior art keywords
control
unit
image
communication terminal
communication
Prior art date
Application number
PCT/JP2015/002505
Other languages
English (en)
French (fr)
Inventor
正哉 井川
Original Assignee
Necプラットフォームズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Necプラットフォームズ株式会社 filed Critical Necプラットフォームズ株式会社
Priority to CN201580027551.XA priority Critical patent/CN106416221A/zh
Priority to US15/311,343 priority patent/US20170085777A1/en
Priority to EP15799084.7A priority patent/EP3151537A4/en
Publication of WO2015182062A1 publication Critical patent/WO2015182062A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/20Binding and programming of remote control devices
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/40Remote control systems using repeaters, converters, gateways
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/40Remote control systems using repeaters, converters, gateways
    • G08C2201/42Transmitting or receiving remote control signals via a network
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/50Receiving or transmitting feedback, e.g. replies, status updates, acknowledgements, from the controlled devices
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/91Remote control based on location and proximity
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/93Remote control using other portable devices, e.g. mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/2818Controlling appliance services of a home automation network by calling their functionalities from a device located outside both the home and the home network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/284Home automation networks characterised by the type of medium used
    • H04L2012/2841Wireless
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances

Definitions

  • the present invention relates to a control device, a communication system, a control method, and a program for controlling a device.
  • Patent Document 1 a technique for transmitting a predetermined signal from an outside location to a device having an infrared remote control function via a public line and controlling infrared transmission from the device to an electrical device in a house.
  • a power source such as an air conditioner installed in a house from outside.
  • a user installs a network camera at home and connects the network camera to a communication network. Thereby, the image which the network camera imaged and acquired can be confirmed using communication apparatuses, such as a smart phone, from whereabouts.
  • HEMS Home Energy Management System
  • ECHONET Lite a method of controlling home electric devices such as HEMS (Home Energy Management System) and ECHONET Lite and confirming the result is considered.
  • Patent Document 2 relates to remote operation of an electric device, and proposes that a remote control device detects the state of the electric device with a sensor and notifies the user of the state of the electric device via a telephone.
  • Patent Document 3 relates to remote control of home appliances, and proposes to connect a personal computer connected to a communication line and an infrared transmission device by wire, and remotely control the home appliance using the infrared transmission device.
  • Patent Document 4 relates to remote control of home appliances.
  • the remote controller and the camera are mounted on the camera unit so that the transmission direction of the remote control and the shooting direction of the camera are parallel to each other. Has been proposed to be displayed on a remote control device.
  • the user can remotely operate the operation target by confirming that the transmission direction of the remote control is directed to the operation target such as home appliances by the display image of the remote control device.
  • An object of the present invention is to provide a control device, a communication system, a control method, and a program that solve the above-described problems.
  • the control device of the present invention An imaging unit that performs imaging and obtains an image; A network communication unit for transmitting an image acquired by the imaging unit to a communication terminal via a communication network and receiving a signal transmitted from the communication terminal via the communication network; A control signal transmission unit configured to transmit a control signal for controlling the electric device to the electric device based on a signal received by the network communication unit.
  • the communication system of the present invention When receiving a predetermined input, a communication terminal that transmits a signal based on the input; An image capturing function is provided, an image acquired using the image capturing function is transmitted to the communication terminal via a communication network, and a signal transmitted from the communication terminal via the communication network is received. A control device for transmitting a control signal for controlling the electric device to the electric device based on the received signal; The communication terminal displays an image transmitted from the control device.
  • control method of the present invention includes: Processing to capture and acquire an image; A process of transmitting the acquired image to a communication terminal via a communication network; A process of receiving a signal transmitted from the communication terminal via a communication network; Based on the received signal, a process of transmitting a control signal for controlling the electric device to the electric device is performed.
  • the program of the present invention is A program for causing a computer to execute, The procedure for taking an image and acquiring an image, A procedure of transmitting the acquired image to a communication terminal via a communication network; A procedure for receiving a signal transmitted from the communication terminal via a communication network; And a procedure for transmitting a control signal for controlling the electric device to the electric device based on the received signal.
  • FIG. 1 is a diagram showing a first embodiment of a control device of the present invention.
  • the control device 100 includes an imaging unit 110, a network communication unit 120, and a control signal transmission unit 130.
  • FIG. 1 shows an example of main components related to the present embodiment among the components provided in the control device 100 according to the present embodiment.
  • the imaging unit 110 is, for example, a camera or the like, and has a function of capturing an image and acquiring an image.
  • the network communication unit 120 has an interface function for performing communication with a communication network.
  • the network communication unit 120 transmits the image acquired by the imaging unit 110 to the communication terminal via the communication network.
  • the network communication unit 120 receives a signal transmitted from the communication terminal via the communication network and outputs the signal to the control signal transmission unit 130.
  • the control signal transmission unit 130 transmits a control signal for controlling an electric device installed in the home to the electric device based on the signal output from the network communication unit 120.
  • FIG. 2 is a flowchart for explaining an example of a control method in the control apparatus 100 shown in FIG.
  • the imaging unit 110 starts imaging (step S1).
  • the timing when the imaging unit 110 starts imaging may be when the network communication unit 120 receives a predetermined signal from the communication terminal.
  • the network communication unit 120 transmits the image captured and acquired by the imaging unit 110 to the communication terminal (step S2).
  • the control signal transmission unit 130 transmits a control signal for controlling the electric device to the electric device (step S4). Furthermore, the network communication unit 120 transmits the image acquired by the imaging unit 110 to the communication terminal (step S5). Here, when the imaging unit 110 acquires a moving image, the network communication unit 120 may continue to transmit the moving image acquired by the imaging unit 110 from step S2 to step S5.
  • control device 100 transmits a control signal to the electric device based on an instruction from the communication terminal, and transmits an image acquired by imaging to the communication terminal. Therefore, it is possible to control the electric device remotely and easily check the control result.
  • FIG. 3 is a diagram showing a second embodiment of the control device of the present invention.
  • a control device 101 and a communication terminal 200 are connected via a communication network 300, and the control device 101 and the electric device 400 are installed in a house 500. It has become.
  • the electric device 400 can receive a control signal transmitted from the control device 101.
  • the electrical device 400 is an electrical device such as an air conditioner, a television set, a lighting device, and a recorder that has an infrared receiving function and is controlled by an infrared signal transmitted from a general remote controller or the like. Further, the number of electrical devices 400 may be one, or a plurality (such as an air conditioner and a television). In addition, a dedicated remote controller is attached to each electric device 400, and a user who exists in the house 500 (hereinafter, referred to as a home) usually operates the remote controller to control each electric device 400. .
  • the control device 101 transmits a control signal to the electric device 400 using infrared rays based on the signal transmitted from the communication terminal 200.
  • the control device 101 has an imaging function and transmits an image acquired by imaging to the communication terminal 200.
  • FIG. 4 is a diagram illustrating an example of an internal configuration of the control device 101 illustrated in FIG.
  • the control apparatus 101 shown in FIG. 3 includes a camera 111, an image processing unit 112, a wireless LAN (Local Area Network) interface unit 121, a wireless LAN control unit 122, and a wired LAN interface unit 123. And have. Further, as shown in FIG. 4, the control device 101 includes an infrared transmission unit 131, an infrared reception unit 132, an infrared control unit 133, an information processing unit 140, and a storage unit 150. FIG. 4 shows an example of main components related to the present embodiment among the components provided in the control apparatus 101 according to the present embodiment.
  • the camera 111 is an imaging unit having an imaging function.
  • the image acquired by the camera 111 is preferably a moving image.
  • the image processing unit 112 performs predetermined image processing on the image acquired by the camera 111.
  • the wireless LAN interface unit 121 has an interface function with a wireless network.
  • the wireless may be a 5 GHz band wireless LAN conforming to the IEEE 802.11ac / n / a standard or a 2.4 GHz band wireless LAN conforming to the IEEE 802.11n / g / b standard. It is not limited to the radio frequency band. The same applies to the following description.
  • the wireless LAN control unit 122 controls the wireless LAN interface unit 121.
  • the wired LAN interface unit 123 is connected to a communication cable or the like, and has an interface function with a wired network.
  • the control device 101 is connected to the communication network 300 via the wireless LAN interface unit 121 or the wired LAN interface unit 123.
  • the wireless LAN interface unit 121, the wireless LAN control unit 122, and the wired LAN interface unit 123 constitute a network communication unit.
  • the infrared transmission unit 131 transmits a control signal to the electric device 400 using infrared rays in response to an instruction from the infrared control unit 133.
  • the control signal is a signal for performing control for turning on the electric device 400, control for turning off the power, and the like.
  • the infrared transmission unit 131 transmits an infrared pattern (hereinafter referred to as an infrared remote control code) stored in the storage unit 150 as a control signal using infrared rays.
  • the infrared receiving unit 132 receives infrared rays transmitted from a remote controller attached to the electric device 400.
  • the infrared control unit 133 controls infrared transmission from the infrared transmission unit 131. Further, the infrared control unit 133 analyzes the infrared remote control code based on the infrared rays received by the infrared receiving unit 132. Further, the infrared control unit 133 may have a function of learning an infrared remote control code.
  • the information processing unit 140 controls the image processing unit 112, the infrared control unit 133, the wireless LAN control unit 122, and the wired LAN interface unit 123.
  • the storage unit 150 stores an infrared remote control code. This infrared remote control code is set in advance, analyzed by the infrared control unit 133, or learned by the infrared control unit 133.
  • FIG. 5 is a diagram showing an example of the appearance of the control device 101 shown in FIG.
  • the camera 111 and the infrared transmission unit 131 transmit the control signal transmitted by the infrared transmission unit 131 in the direction of the camera 111, that is, in the imaging range of the camera 111. Arranged to include direction.
  • the infrared transmission unit 131 may employ a component that can transmit infrared rays over a wider range and can transmit infrared rays around the imaging range of the camera 111.
  • the infrared receiving unit 132 is arranged in the same direction as the infrared transmitting unit 131, but is not limited thereto.
  • the communication terminal 200 is a communication device owned by a user, and is a mobile communication terminal such as a PC (Personal Computer) or a smartphone.
  • PC Personal Computer
  • FIG. 6 is a diagram illustrating an example of an internal configuration of the communication terminal 200 illustrated in FIG.
  • FIG. 3 includes an input unit 210, a network communication unit 220, and a display unit 230, as shown in FIG.
  • FIG. 6 shows an example of main components related to the present embodiment among the components provided in communication terminal 200 in the present embodiment.
  • the input unit 210 receives input of information based on the user's operation.
  • the network communication unit 220 has an interface function for performing communication with the communication network 300.
  • the network communication unit 220 transmits a signal based on the input received by the input unit 210 to the control device 101 via the communication network 300.
  • the display unit 230 is a display for displaying information.
  • the display unit 230 displays the image transmitted from the control device 101.
  • the display unit 230 also functions as the input unit 210.
  • FIG. 7 is a diagram illustrating an example of in-home connection of the control apparatus 101 illustrated in FIG.
  • an HGW (Home Gate Way) 700 and a wireless router 600 serving as a parent device are installed in a house 500.
  • the communication network 300 and the HGW 700 are connected, and the wireless router 600 is connected under the HGW 700.
  • the control device 101 is connected to the wireless router 600 using the wireless LAN interface unit 121 or the wired LAN interface unit 123. As a result, the control apparatus 101 enters an Internet connection environment.
  • FIG. 8 is a sequence diagram for explaining an example of a control method in the communication system shown in FIG.
  • control device 101 is connected to the communication network 300 as shown in FIG. 3 (FIG. 7) and is placed in the Internet environment.
  • the information processing unit 140 of the control device 101 sets an infrared remote control code for controlling the electric device 400 in the storage unit 150 (step S11).
  • a method of learning an infrared remote control code will be described as an example.
  • the control device 101 learns an infrared remote control code for turning on an air conditioner that is the electric device 400 to be controlled.
  • the infrared transmitter of the remote controller dedicated to the air conditioner attached to the air conditioner is directed toward the infrared receiver 132 of the control device 101, and the power button is pressed.
  • the infrared control unit 133 converts the infrared remote control code received by the infrared receiving unit 132 into digital data and outputs the digital data to the information processing unit 140. Subsequently, the information processing unit 140 writes the infrared remote control code output from the infrared control unit 133 in the storage unit 150.
  • the infrared remote control code may be stored in the storage unit 150 as a database in advance by some means.
  • the input unit 210 accepts an input of information based on the operation (step). S12).
  • the network communication unit 220 of the communication terminal 200 connects to the control device 101 (step S13).
  • a method such as UPnP (Universal Plug and Play) or DDNS (Dynamic Domain Name System).
  • a unique server may be prepared between the communication terminal 200 and the control device 101 and connected via the server.
  • the method for connecting from the communication terminal 200 to the control device 101 is not particularly limited.
  • the camera 111 of the control device 101 starts imaging (step S14).
  • the image processing unit 112 performs image processing on the image captured and acquired by the camera 111.
  • the wireless LAN interface unit 121 or the wired LAN interface unit 123 transmits the image subjected to the image processing to the communication terminal 200 via the communication network 300 (step S15).
  • the display unit 230 of the communication terminal 200 displays the transmitted image (step S16).
  • a user possessing the communication terminal 200 can check the state of the electric device 400 by viewing the image displayed on the display unit 230.
  • FIG. 9 is a diagram illustrating an example of an image displayed on the display unit 230 of the communication terminal 200 in step S16.
  • an image acquired by the camera 111 is displayed on the display unit 230.
  • the display unit 230 displays an air conditioner that is turned off.
  • the display unit 230 displays an infrared transmission button 231 for instructing the control device 101 to transmit infrared rays.
  • the input unit 210 receives an input based on the selection (step S17). This selection may be based on the movement of the cursor, or may be the approach or contact of a finger or the like to the infrared transmission button 231 when the display unit 230 has a touch panel function.
  • the network communication unit 220 transmits an operation request signal for requesting the control device 101 to transmit infrared rays to the control device 101 via the communication network 300 (step S18).
  • the information processing unit 140 analyzes the operation request signal and reads the infrared remote control code from the storage unit 150. For example, a case where the infrared transmission button 231 is selected for the image shown in FIG. 9 and an operation request signal is transmitted will be described. In this case, the operation request signal indicates a request to turn on the air conditioner, and the information processing unit 140 reads an infrared remote control code for turning on the air conditioner from the storage unit 150.
  • the infrared control unit 133 transmits the infrared remote control code read from the storage unit 150 by the information processing unit 140 from the infrared transmission unit 131 to the electric device 400 as a control signal using infrared rays (step S19). Then, the electric device 400 performs an operation based on the infrared remote control code transmitted from the infrared transmission unit 131. For example, when an infrared remote control code for turning on the power is transmitted, the electric device 400 turns on its own power.
  • the image processing unit 112 performs image processing on the image acquired by the camera 111, and the wireless LAN interface unit 121 or the wired LAN interface unit 123 transmits the image to the communication terminal 200 via the communication network 300 (step). S20).
  • the wireless LAN interface unit 121 or the wired LAN interface unit 123 continues to transmit the moving image acquired by the camera 111 and subjected to image processing by the image processing unit 112. It may be.
  • the continuation of the moving image transmission can be performed from step S15 to step S20.
  • the display unit 230 of the communication terminal 200 displays the transmitted image (step S21).
  • a user who has the communication terminal 200 can confirm the result of transmitting the infrared remote control code by looking at the image displayed on the display unit 230.
  • FIG. 10 is a diagram illustrating an example of an image displayed on the display unit 230 of the communication terminal 200 in step S21.
  • the image acquired by the camera 111 is displayed on the display unit 230.
  • the display unit 230 displays an air conditioner that is turned on.
  • the control device 101 has a GUI (Graphical User Interface).
  • the GUI of the control device 101 has a function of displaying an image displayed by the control device 101 on the communication terminal 200 and a function of controlling the infrared remote controller.
  • the confirmation method of the acquired image from the communication terminal 200 to the control device 101 and the implementation method of the infrared transmission operation are realized by installing a dedicated application on the communication terminal 200 and starting it. It may be a thing.
  • the user may log in to the WebGUI of the control apparatus 101 from an arbitrary browser of the communication terminal 200 to realize this.
  • the processing in steps S16 to S21 is performed from the communication terminal 200 via this GUI.
  • the communication terminal 200 displays an image captured and acquired by the camera 111.
  • infrared remote control can be performed while checking the state of the home electrical device 400 acquired by the camera 111 from the communication terminal 200, and the result of operating the home electrical device 400 with the infrared remote control can be checked in real time. Is possible.
  • the wireless router serving as the parent device and the control device 101 are connected wirelessly, and the installation location of the control device 101 becomes free.
  • FIG. 11 is a diagram showing a third embodiment of the control device of the present invention.
  • the control device 102 in the present embodiment includes a camera 111, an image processing unit 112, a wireless antenna 124, a wireless control unit 125, an Ether port 126, an infrared transmission unit 131, an infrared reception unit 132, and infrared control. Part 133. Further, the control device 102 in the present embodiment includes an information processing unit 141, a storage unit 150, a panning motor 160, a tilting motor 161, and a motor drive control unit 162.
  • FIG. 11 illustrates an example of main components related to the present embodiment among the components provided in the control apparatus 102 according to the present embodiment.
  • the camera 111, the image processing unit 112, the infrared transmission unit 131, the infrared reception unit 132, the infrared control unit 133, and the storage unit 150 are the same as those in the second embodiment.
  • the wireless antenna 124 transmits and receives wireless signals.
  • the radio control unit 125 performs conversion between a radio signal and an electric signal, and controls a signal transmitted and received by the radio antenna 124.
  • the Ethernet port 126 has an Ethernet (registered trademark) interface function.
  • the wireless antenna 124, the wireless control unit 125, and the Ether port 126 constitute a network communication unit.
  • the information processing unit 141 controls the image processing unit 112, the wireless control unit 125, the Ether port 126, the infrared control unit 133, and the motor drive control unit 162.
  • the pan motor 160 is a motor that changes the direction of the control device 102 in the left-right direction (swing motion) based on control from the motor drive control unit 162.
  • the tilt motor 161 is a motor that changes the direction of the control device 102 in the vertical direction (swing motion) based on control from the motor drive control unit 162.
  • FIG. 12 is a diagram showing an example of the appearance of the control device 102 shown in FIG.
  • the camera 111 and the infrared transmission unit 131 transmit the control signal transmitted by the infrared transmission unit 131 in the direction of the camera 111, that is, in the imaging range of the camera 111. It arrange
  • the infrared transmission unit 131 may employ a component that can transmit infrared rays over a wider range and can transmit infrared rays around the imaging range of the camera 111.
  • the infrared receiving unit 132 is arranged in the housing 108 in the same direction as the infrared transmitting unit 131, but this is not a limitation.
  • the control device 102 is provided with a pan driving rotation unit 163 and a tilt driving rotation unit 164.
  • the pan driving rotation unit 163 rotates the casing 108 in the left-right direction as the pan motor 160 is driven.
  • the tilt driving rotation unit 164 rotates the casing 108 in the vertical direction as the tilt motor 161 is driven. With these rotations, the orientation of the camera 111 and the infrared transmission unit 131 can be changed.
  • FIG. 13 is a diagram illustrating an example of the arrangement of a plurality of electrical devices in a home.
  • an air conditioner 410, an illumination 420, and a television 430 are arranged in a house 500 apart from each other.
  • the air conditioner 410, the illumination 420, and the television 430 correspond to the electric device 400 in FIG. Further, the direction A of the air conditioner 410, the direction B of the illumination 420, and the direction C of the television 430 from the control device 102 are different from each other.
  • the state of the air conditioner 410 is confirmed and controlled from the communication terminal 200. be able to.
  • confirmation and control of the state of the illumination 420 and the television 430 cannot be performed from the communication terminal 200.
  • the information processing unit 141 outputs a predetermined signal to the motor drive control unit 162, the motor drive control unit 162 performs signal control necessary for motor control, and drives the pan motor 160 and the tilt motor 161.
  • the pan drive rotation unit 163 and the tilt drive rotation unit 164 are rotated based on the drive.
  • the imaging direction of the camera 111 of the control apparatus 102 and the infrared transmission direction of the infrared transmission unit 131 can be changed to the direction B to the illumination 420 and the direction C to the television 430.
  • the storage unit 150 may store a control sequence in advance, and the information processing unit 141 may read and execute the sequence at a predetermined timing.
  • the control device 102 changes the direction to the direction B when the control of the air conditioner 410 is completed, and changes the direction to the direction C when the control of the lighting 420 is completed, and the control of the television 430 is completed. Then, the direction may be changed to the direction A again.
  • the control of the air conditioner 410 is acquisition of an image or transmission of infrared rays.
  • the information processing unit 141 may perform direction control. For example, when the display unit 230 of the communication terminal 200 displays an image acquired by the camera 111, the display unit 230 performs display such as arrows indicating left and right and up and down for changing the imaging direction, and performs information processing according to the arrow selected by the user.
  • the unit 141 may perform direction control.
  • this method is not limited to infrared transmission only. Even when a control method other than infrared is adopted, the direction control of the transmission direction can be performed by this method.
  • the present invention can be similarly applied even when wireless communication with high straightness (wireless communication with a high frequency such as 60 GHz) is used instead of infrared rays.
  • the moving object detection function is a function that performs a predetermined process when a certain amount of change occurs in the image projected by the camera.
  • this moving object detection function By installing this moving object detection function in the control device, when the information processing unit detects a change in the image output from the image processing unit, it automatically performs any predetermined operation (notifying a designated contact, Start recording).
  • the control device can detect it and notify the communication terminal.
  • the control device can detect that the timer set in the electric device has been operated and can notify the communication terminal.
  • confirmation of the operation result is not limited to real-time image confirmation, and convenience is greatly improved.
  • FIG. 14 is a diagram showing a fifth embodiment of the control device of the present invention.
  • the control device 103 in the present embodiment includes a camera 111, an image processing unit 112, a wireless antenna 124, a wireless control unit 125, an ether port 126, an infrared transmission unit 131, an infrared reception unit 132, and infrared control. Part 133. Furthermore, the control device 103 in the present embodiment includes an information processing unit 142, a storage unit 150, a panning motor 160, a tilting motor 161, a motor drive control unit 162, and a voice input unit 170. ing. FIG. 14 illustrates an example of main components related to the present embodiment among the components provided in the control device 103 according to the present embodiment.
  • the camera 111, the image processing unit 112, the wireless antenna 124, the wireless control unit 125, the Ether port 126, the infrared transmission unit 131, the infrared reception unit 132, and the infrared control unit 133 are the same as those in the third embodiment.
  • the storage unit 150, pan motor 160, tilt motor 161, and motor drive control unit 162 are the same as those in the third embodiment.
  • the control device 103 in the present embodiment controls electric devices such as an air conditioner, lighting, and a television set.
  • the information processing unit 142 controls the image processing unit 112, the wireless control unit 125, the Ether port 126, the infrared control unit 133, the motor drive control unit 162, and the voice input unit 170.
  • the voice input unit 170 is a microphone or the like for inputting ambient voice. In addition, the voice input unit 170 outputs the input voice to the information processing unit 142.
  • the information processing unit 142 transmits the sound output from the sound input unit 170 together with the image from the wireless antenna 124 or the Ether port 126 to the communication terminal 200.
  • the communication terminal 200 displays an image transmitted from the control device 103 and reproduces sound.
  • control device 103 transmits the surrounding audio information to the communication terminal 200 in addition to the image acquired by the camera 111, and the communication terminal 200 reproduces the information so that the user uses the image and the sound. To check the infrared transmission result.
  • FIG. 15 is a diagram showing a sixth embodiment of the control device of the present invention.
  • the control device 104 includes a camera 111, an image processing unit 112, a wireless antenna 124, a wireless control unit 125, an Ether port 126, an infrared transmission unit 131, an infrared reception unit 132, and infrared control. Part 133. Furthermore, the control device 104 in the present embodiment includes an information processing unit 143, a storage unit 150, a pan motor 160, a tilt motor 161, a motor drive control unit 162, and a temperature sensor 180. Yes. FIG. 15 illustrates an example of main components related to the present embodiment among the components provided in the control device 104 according to the present embodiment.
  • the camera 111, the image processing unit 112, the wireless antenna 124, the wireless control unit 125, the Ether port 126, the infrared transmission unit 131, the infrared reception unit 132, and the infrared control unit 133 are the same as those in the third embodiment.
  • the storage unit 150, pan motor 160, tilt motor 161, and motor drive control unit 162 are the same as those in the third embodiment.
  • the control device 104 in the present embodiment controls electric devices such as an air conditioner, lighting, and a television.
  • the information processing unit 143 controls the image processing unit 112, the wireless control unit 125, the Ether port 126, the infrared control unit 133, the motor drive control unit 162, and the temperature sensor 180.
  • the temperature sensor 180 measures the temperature in the house. In addition, the temperature sensor 180 outputs the measured temperature to the information processing unit 143.
  • the information processing unit 143 transmits the temperature output from the temperature sensor 180 to the communication terminal 200 from the wireless antenna 124 or the Ether port 126 together with an image.
  • the communication terminal 200 displays the image transmitted from the control device 104 and also displays the temperature.
  • the control device 104 transmits in-house temperature information to the communication terminal 200 in addition to the image acquired by the camera 111, and the communication terminal 200 displays the information so that the user can display the image and temperature. Can be used to check the state of the electrical equipment. For example, when the user confirms that the temperature in the house has changed for some reason, the user performs an operation for transmitting infrared rays to turn on the air conditioner on the communication terminal 200 to adjust the temperature in the house. It becomes possible.
  • the control device 104 automatically senses the ambient temperature change, and automatically performs infrared transmission to the electrical device based on the sensing result. To do.
  • the control device 104 automatically determines the transmission result of the infrared transmission based on the camera image, and can automatically notify the communication terminal 200 via the Internet.
  • the electric devices include the electric device 400 shown in FIG. 3, the air conditioner 410, the illumination 420, the television 430, and the like shown in FIG. In the following description, it is assumed that the control device 104 controls the electric device 400.
  • FIG. 16 is a sequence diagram for explaining an example of the control method in the sixth embodiment of the control apparatus of the present invention.
  • the control device 104 includes a temperature sensor 180 and always detects the state of the ambient temperature. At some point, the control device 104 detects a change in the ambient temperature with its own temperature sensor 180 (step S21). At this time, when the change in the ambient temperature is equal to or greater than a predetermined value set in advance in the control device 104, the control device 104 instructs the electric device 400 to turn on (or power off) from the infrared transmission unit 131. For this purpose, infrared transmission is performed (step S22). The electric device 400 receives the infrared signal and turns on (or turns off) its own power supply (step S23).
  • the electric device 400 is turned on (or turned off) to cause an operation of the device, and the state is captured by the camera 111 of the control device 104, and an image is acquired (step S24).
  • the control device 104 determines that the electric device 400 has been operated by the moving object detection function (step S25).
  • the control device 104 learns that the electric device 400 has been operated, and transmits (notifies) the result to the communication terminal 200 via the Internet (step S26).
  • the notification of this result includes an image acquired by the camera 111.
  • the display unit 230 of the communication terminal 200 displays the notification transmitted from the control device 104 (step S27).
  • control device 104 can automatically control the electric device 400. Furthermore, the control result can be automatically determined / recognized. Furthermore, the recognized result is automatically transmitted to the communication terminal 200, so that the user can immediately know the result.
  • control device has a night vision function, it is possible to confirm the result of remote control operation on the electric device that is the operation target with an image even in a dark house where the illumination power is not turned on. .
  • each component provided in each of the control devices 100 to 104 described above may be performed by a logic circuit produced according to the purpose.
  • the embodiment of the present invention can also be realized by causing the control devices 100 to 104 to read the computer program recorded on the recording medium and causing the control devices 100 to 104 to execute each procedure of the computer program.
  • This recording medium can be read by each of the control devices 100 to 104, and is recorded with a computer program in which processing contents are described as a procedure.
  • the recording media readable by each of the control devices 100 to 104 include controllable recording media such as floppy (registered trademark) disks, magneto-optical disks, DVDs (Digital Versatile Disks), CDs (Compact Discs), etc. It refers to memories such as ROM (Read Only Memory) and RAM (Random Access Memory), HDD (Hard Disk Drive), etc. incorporated in each of the devices 100-104.
  • the program recorded in this recording medium is read by a CPU (Central Processing Unit) such as a control unit provided in each of the control devices 100 to 104, and the same processing as described above is performed under the control of the CPU.
  • the CPU operates as a computer that executes a program read from a recording medium on which the program is recorded.
  • An imaging unit that performs imaging and acquires an image
  • a network communication unit for transmitting an image acquired by the imaging unit to a communication terminal via a communication network and receiving a signal transmitted from the communication terminal via the communication network
  • a control signal transmission unit configured to transmit a control signal for controlling the electric device to the electric device based on a signal received by the network communication unit
  • a storage unit for storing an infrared remote control code for controlling the electrical device
  • the control signal transmitting unit transmits an infrared remote control code stored in the storage unit as the control signal using infrared rays.
  • the network communication part is a control apparatus which transmits the audio
  • the network communication unit is a control device that transmits the temperature measured by the temperature sensor to the communication terminal via the communication network.
  • a communication terminal that transmits a signal based on the input;
  • An image capturing function is provided, an image acquired using the image capturing function is transmitted to the communication terminal via a communication network, and a signal transmitted from the communication terminal via the communication network is received.
  • a control device for transmitting a control signal for controlling the electric device to the electric device based on the received signal;
  • the communication terminal is a communication system for displaying an image transmitted from the control device.
  • the control device has a storage unit for storing an infrared remote control code for controlling the electrical equipment,
  • the said control signal transmission part is a communication system which transmits the infrared remote control code memorize
  • the control device has an infrared control unit that learns the infrared remote control code;
  • storage part is a communication system which memorize
  • the said control apparatus is a communication system which has a motor which changes the direction of the said imaging part and the said control signal transmission part.
  • the control device has a voice input unit,
  • the said network communication part is a communication system which transmits the audio
  • the control device has a temperature sensor;
  • the network communication unit is a communication system that transmits the temperature measured by the temperature sensor to the communication terminal via the communication network.
  • Appendix 26 In the program described in Appendix 25, A program for further executing a procedure for changing the imaging range and a transmission direction for transmitting the control signal.
  • (Supplementary note 27) In the program according to any one of supplementary notes 22 to 26, The procedure to input the surrounding sound, A program for further executing the procedure of transmitting the input voice to the communication terminal via the communication network.
  • (Supplementary note 28) In the program according to any one of supplementary notes 22 to 27, A procedure to measure the temperature; A program for further executing a procedure of transmitting the measured temperature to the communication terminal via the communication network.

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)
  • Selective Calling Equipment (AREA)
  • Studio Devices (AREA)

Abstract

 遠隔で電気機器を制御して、その制御した結果を容易に確認する。本発明の制御装置は、撮像を行い、画像を取得する撮像部と、上記撮像部が取得している画像を、通信ネットワークを介して通信端末へ送信し、上記通信端末から上記通信ネットワークを介して送信されてきた信号を受信するネットワーク通信部と、上記ネットワーク通信部が受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御信号送信部と、を有する。

Description

制御装置、通信システム、制御方法およびプログラム
 本発明は、機器を制御する制御装置、通信システム、制御方法およびプログラムに関する。
 近年、外出先から公衆回線を介して赤外線リモコン機能を持つ装置へ所定の信号を送信し、その装置から宅内の電気機器への赤外線送信を制御する技術が考えられている(例えば、特許文献1参照)。この技術を用いることで、例えば、外出先から家の中に設置されているエアコン等の電源を投入することができる。
 また、近年、各メーカーがネットワークカメラと呼ばれる製品を発売している。利用者が自宅にネットワークカメラを設置して、そのネットワークカメラを通信ネットワークに接続する。これにより、外出先等からスマートフォン等の通信装置を用いて、ネットワークカメラが撮像して取得している画像を確認できる。
 また、HEMS(Home Energy Management System)やECHONET Liteといった、宅内の電気機器を制御し、その結果を確認する方式が考えられている。
 特許文献2は電気機器の遠隔操作に関するものであり、リモコン装置がセンサで電気機器の状態を検知し、電話機を介して利用者に電気機器の状態を音声通知することを提案している。特許文献3は家電製品の遠隔制御に関するものであり、通信回線に接続されたパソコンと赤外線発信装置とを有線で接続し、赤外線発信装置で家電製品を遠隔制御することを提案している。特許文献4は家電の遠隔操作に関するものであり、リモコンの送信方向とカメラの撮影方向とがお互いに平行になるように、カメラユニットへリモコンとカメラとを搭載し、こうして撮影されたカメラの画像を遠隔操作装置に表示することを提案している。特許文献4では、利用者は遠隔操作装置の表示画像により、リモコンの送信方向が家電等の操作対象に向いていることを確認しながら、操作対象を遠隔操作することができる。
特開平9-69885号公報 特開2001-86256号公報 特開2003-125466号公報 特開2004-7106号公報
 上述した赤外線送信の技術やネットワークカメラを用いたシステムにおいては、遠隔で宅内の電気機器を制御して、その制御した結果を確認することができないという問題点がある。また、HEMSやECHONET Liteの方式は、普及率が低く、機器の規格化が必要である等、一般家庭に容易に導入することは困難であるという問題点がある。
 本発明の目的は、上述した課題を解決する制御装置、通信システム、制御方法およびプログラムを提供することである。
 本発明の制御装置は、
 撮像を行い、画像を取得する撮像部と、
 前記撮像部が取得している画像を、通信ネットワークを介して通信端末へ送信し、前記通信端末から前記通信ネットワークを介して送信されてきた信号を受信するネットワーク通信部と、
 前記ネットワーク通信部が受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御信号送信部と、を有する。
 また、本発明の通信システムは、
 所定の入力を受け付けた場合、該入力に基づいた信号を送信する通信端末と、
 撮像機能を具備し、前記撮像機能を用いて取得している画像を、通信ネットワークを介して前記通信端末へ送信し、前記通信端末から前記通信ネットワークを介して送信されてきた信号を受信し、該受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御装置と、を有し、
 前記通信端末は、前記制御装置から送信されてきた画像を表示する。
 また、本発明の制御方法は、
 撮像を行い、画像を取得する処理と、
 前記取得している画像を、通信ネットワークを介して通信端末へ送信する処理と、
 前記通信端末から通信ネットワークを介して送信されてきた信号を受信する処理と、
 前記受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する処理と、を行う。
 また、本発明のプログラムは、
 コンピュータに実行させるためのプログラムであって、
 撮像を行い、画像を取得する手順と、
 前記取得している画像を、通信ネットワークを介して通信端末へ送信する手順と、
 前記通信端末から通信ネットワークを介して送信されてきた信号を受信する手順と、
 前記受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する手順と、を実行させる。
 以上説明したように、本発明においては、遠隔で電気機器を制御して、その制御した結果を容易に確認することができる。
本発明の制御装置の第1の実施の形態を示す図である。 図1に示した制御装置における制御方法の一例を説明するためのフローチャートである。 本発明の制御装置の第2の実施の形態を示す図である。 図3に示した制御装置の内部構成の一例を示す図である。 図3に示した制御装置の外観の一例を示す図である。 図3に示した通信端末の内部構成の一例を示す図である。 図3に示した制御装置の宅内の接続の一例を示す図である。 図3に示した通信システムにおける制御方法の一例を説明するためのシーケンス図である。 ステップS16にて表示部に表示された画像の一例を示す図である。 ステップS21にて表示部に表示された画像の一例を示す図である。 本発明の制御装置の第3の実施の形態を示す図である。 図11に示した制御装置の外観の一例を示す図である。 宅内における複数の電気機器の配置の一例を示す図である。 本発明の制御装置の第5の実施の形態を示す図である。 本発明の制御装置の第6の実施の形態を示す図である。 本発明の制御装置の第6の実施の形態における制御方法の一例を説明するためのシーケンス図である。
 以下に、本発明の実施の形態について図面を参照して説明する。
 (第1の実施の形態)
 図1は、本発明の制御装置の第1の実施の形態を示す図である。
 本実施の形態における制御装置100は、撮像部110と、ネットワーク通信部120と、制御信号送信部130と、を有している。なお、図1には、本実施の形態における制御装置100に設けられた構成要素のうち、本実施の形態に関わる主要な構成要素の一例を示す。
 撮像部110は、例えば、カメラ等であり、撮像を行い、画像を取得する機能を具備する。
 ネットワーク通信部120は、通信ネットワークとの間で通信を行うインタフェース機能を具備する。ネットワーク通信部120は、撮像部110が取得している画像を、通信ネットワークを介して通信端末へ送信する。ネットワーク通信部120は、通信端末から通信ネットワークを介して送信されてきた信号を受信して、制御信号送信部130へ出力する。
 制御信号送信部130は、ネットワーク通信部120から出力されてきた信号に基づいて、宅内に設置された電気機器を制御するための制御信号を、その電気機器へ送信する。
 以下に、図1に示した制御装置100における制御方法について説明する。
 図2は、図1に示した制御装置100における制御方法の一例を説明するためのフローチャートである。
 まず、撮像部110が撮像を開始する(ステップS1)。撮像部110が撮像を開始するタイミングは、通信端末からネットワーク通信部120が所定の信号を受信したときで良い。続いて、ネットワーク通信部120は、撮像部110が撮像して取得している画像を通信端末へ送信する(ステップS2)。
 その後、ネットワーク通信部120が、通信端末から所定の信号を受信すると(ステップS3)、制御信号送信部130は、電気機器を制御するための制御信号を電気機器へ送信する(ステップS4)。さらに、ネットワーク通信部120は、撮像部110が取得している画像を通信端末へ送信する(ステップS5)。ここで、撮像部110が動画を取得している場合、ネットワーク通信部120は、撮像部110が取得している動画をステップS2からステップS5までの間、送信し続けるものであっても良い。
 このように、制御装置100は、通信端末からの指示に基づいて、電気機器に対して制御信号を送信し、撮像して取得している画像を通信端末へ送信する。そのため、遠隔で電気機器を制御して、その制御した結果を容易に確認することができる。
 (第2の実施の形態)
 図3は、本発明の制御装置の第2の実施の形態を示す図である。
 本実施の形態は図3に示すように、制御装置101と通信端末200とが通信ネットワーク300を介して接続され、制御装置101と電気機器400とが家屋500の中に設置された通信システムとなっている。また、制御装置101から送信された制御信号を電気機器400が受信可能な構成となっている。
 電気機器400は、赤外線受信機能を具備し、一般的なリモコン等から送信される赤外線信号で制御されるエアコン、テレビ、照明、レコーダ等の電気機器である。また、電気機器400は、1つであっても良いし、複数(エアコンとテレビ等)であっても良い。また、電気機器400それぞれには、専用のリモコンが添付されており、通常、家屋500の中(以下、宅内と称する)に存在する利用者はそのリモコンを操作して電気機器400それぞれを制御する。
 制御装置101は、通信端末200から送信されてきた信号に基づいて、赤外線を用いて電気機器400へ制御信号を送信する。また、制御装置101は、撮像機能を具備し、撮像を行って取得している画像を通信端末200へ送信する。
 図4は、図3に示した制御装置101の内部構成の一例を示す図である。
 図3に示した制御装置101は図4に示すように、カメラ111と、画像処理部112と、無線LAN(Local Area Network)インタフェース部121と、無線LAN制御部122と、有線LANインタフェース部123と、を有している。さらに制御装置101は図4に示すように、赤外線送信部131と、赤外線受信部132と、赤外線制御部133と、情報処理部140と、記憶部150と、を有している。なお、図4には、本実施の形態における制御装置101に設けられた構成要素のうち、本実施の形態に関わる主要な構成要素の一例を示す。
 カメラ111は、撮像機能を具備する撮像部である。また、カメラ111が撮像して取得する画像は、動画が好ましい。
 画像処理部112は、カメラ111が取得している画像について、所定の画像処理を行う。
 無線LANインタフェース部121は、無線ネットワークとの間のインタフェース機能を具備する。なお、ここで無線とは、IEEE802.11ac/n/a規格に準拠した5GHz帯無線LANや、もしくはIEEE802.11n/g/b規格に準拠する2.4GHz帯無線LANであっても良く、使用する無線周波数帯に制限されるものではない。以下の説明においても同じである。
 無線LAN制御部122は、無線LANインタフェース部121を制御する。
 有線LANインタフェース部123は、通信ケーブル等が接続され、有線ネットワークとの間のインタフェース機能を具備する。制御装置101は、無線LANインタフェース部121または有線LANインタフェース部123を介して通信ネットワーク300と接続する。なお、無線LANインタフェース部121、無線LAN制御部122および有線LANインタフェース部123でネットワーク通信部を構成する。
 赤外線送信部131は、赤外線制御部133からの指示で、赤外線を用いて制御信号を電気機器400へ送信する。この制御信号は、電気機器400が電源を投入するため制御、電源を切断するための制御等を行うための信号である。また、赤外線送信部131は、記憶部150に記憶されている赤外線パターン(以下、赤外線リモコンコードと称する)を、赤外線を用いて制御信号として送信する。
 赤外線受信部132は、電気機器400に添付されたリモコンから送信されてきた赤外線を受信する。
 赤外線制御部133は、赤外線送信部131からの赤外線の送信を制御する。また、赤外線制御部133は、赤外線受信部132が受信した赤外線に基づいて、その赤外線リモコンコードを解析する。また、赤外線制御部133は、赤外線リモコンコードを学習する機能を具備するものであっても良い。
 情報処理部140は、画像処理部112、赤外線制御部133、無線LAN制御部122および有線LANインタフェース部123を制御する。
 記憶部150は、赤外線リモコンコードを記憶する。この赤外線リモコンコードは、あらかじめ設定されたものや、赤外線制御部133が解析したもの、赤外線制御部133が学習したものである。
 図5は、図3に示した制御装置101の外観の一例を示す図である。
 図3に示した制御装置101は図5に示すように、カメラ111と赤外線送信部131とが、カメラ111の向き、つまりカメラ111の撮像範囲に、赤外線送信部131が制御信号を送信する送信方向が含まれるように、配置されている。また、赤外線送信部131がより広範囲に赤外線を送信できる部品を採用し、カメラ111の撮像範囲の周囲に赤外線送信が可能な構成をとっても良い。なお、図5では、赤外線受信部132が、赤外線送信部131と同じ向きに配置されているが、これに限らない。
 通信端末200は、利用者が所持する通信装置であり、例えば、PC(Personal Computer)やスマートフォン等の移動通信端末である。
 図6は、図3に示した通信端末200の内部構成の一例を示す図である。
 図3に示した通信端末200は図6に示すように、入力部210と、ネットワーク通信部220と、表示部230と、を有している。なお、図6には、本実施の形態における通信端末200に設けられた構成要素のうち、本実施の形態に関わる主要な構成要素の一例を示す。
 入力部210は、利用者の操作に基づいて、情報の入力を受け付ける。
 ネットワーク通信部220は、通信ネットワーク300との間で通信を行うインタフェース機能を具備する。ネットワーク通信部220は、入力部210が受け付けた入力に基づいた信号を、通信ネットワーク300を介して制御装置101へ送信する。
 表示部230は、情報を表示するディスプレイである。表示部230は、制御装置101から送信されてきた画像を表示する。なお、表示部230がタッチパネル機能を具備するものである場合、表示部230が入力部210の機能も果たす。
 図7は、図3に示した制御装置101の宅内の接続の一例を示す図である。
 図7に示すように、家屋500の宅内にHGW(Home Gate Way)700と、親機となる無線ルータ600とが設置されている。通信ネットワーク300とHGW700とが接続されており、HGW700の配下に無線ルータ600が接続されている。制御装置101は、無線LANインタフェース部121または有線LANインタフェース部123を用いて、無線ルータ600と接続する。これにより制御装置101はインターネット接続環境下となる。
 以下に、図3に示した形態における制御方法について説明する。
 図8は、図3に示した通信システムにおける制御方法の一例を説明するためのシーケンス図である。
 ここで、制御装置101が図3(図7)に示すように通信ネットワーク300と接続され、インターネット環境下に配置されていることが前提となる。
 まず、制御装置101の情報処理部140が、電気機器400を制御するための赤外線リモコンコードを記憶部150に設定する(ステップS11)。その設定方法として、赤外線リモコンコードを学習する方法を例に挙げて説明する。例えば、制御対象となる電気機器400であるエアコンの電源を投入するための赤外線リモコンコードを、制御装置101に学習させる場合を説明する。この場合には例えば、エアコンに添付されている当該エアコン専用のリモコンの赤外線送信部を制御装置101の赤外線受信部132に向けて、電源ボタンを押下する。
 すると、赤外線制御部133は、赤外線受信部132が受信した赤外線リモコンコードをデジタルデータへ変換し、情報処理部140へ出力する。続いて、情報処理部140は赤外線制御部133から出力されてきた赤外線リモコンコードを記憶部150に書き込む。赤外線リモコンコードの設定方法は、このほか、赤外線リモコンコードを事前に何らかの手段でデータベース化して記憶部150に記憶しておくものであっても良い。
 その後、外出先にいる利用者が、通信端末200の入力部210に対して制御装置101へアクセスするための操作を行うと、入力部210は当該操作に基づいて、情報の入力を受け付ける(ステップS12)。すると、通信端末200のネットワーク通信部220は、制御装置101への接続を行う(ステップS13)。このとき、例えば、UPnP(Universal Plug and Play)やDDNS(Dynamic Domain Name System)といった方式を用いて接続することが一般的である。これらの接続方式に限らず、例えば、通信端末200と制御装置101との間に独自のサーバを用意して、そのサーバを介して接続させることも可能である。本実施の形態において、通信端末200から制御装置101に接続する方法は、特に限定しない。
 すると、制御装置101のカメラ111が撮像を開始する(ステップS14)。続いて、カメラ111が撮像して取得している画像に対して画像処理部112が画像処理を行う。さらに、画像処理が行われた画像を無線LANインタフェース部121または有線LANインタフェース部123が通信ネットワーク300を介して通信端末200へ送信する(ステップS15)。
 制御装置101から画像が送信されてくると、通信端末200の表示部230は、送信されてきた画像を表示する(ステップS16)。通信端末200を所持している利用者は、表示部230に表示されている画像を見ることで、電気機器400の状態を確認することができる。
 図9は、ステップS16にて通信端末200の表示部230に表示された画像の一例を示す図である。
 図9に示すように、表示部230には、カメラ111が取得している画像が表示される。ここでは、表示部230には、電源がオフの状態であるエアコンが表示される。また、表示部230には、制御装置101に赤外線の送信を指示するための赤外線送信ボタン231が表示される。
 その後、利用者が、通信端末200の表示部230に表示されている赤外線送信ボタン231を選択すると、当該選択に基づいた入力を入力部210が受け付ける(ステップS17)。この選択は、カーソルの移動によるものであっても良いし、表示部230がタッチパネル機能を具備している場合は、赤外線送信ボタン231への指等の接近または接触であっても良い。
 すると、ネットワーク通信部220は、制御装置101に赤外線の送信を要求するための操作要求信号を、通信ネットワーク300を介して制御装置101へ送信する(ステップS18)。
 無線LANインタフェース部121または有線LANインタフェース部123が、通信端末200から所定の操作要求信号を受信すると、情報処理部140がこの操作要求信号を解析し、記憶部150から赤外線リモコンコードを読み出す。例えば、図9に示した画像に対して赤外線送信ボタン231が選択され、操作要求信号が送信された場合を説明する。この場合、その操作要求信号はエアコンの電源を投入する要求を示すものであり、情報処理部140は記憶部150からエアコンの電源を投入するための赤外線リモコンコードを読み出す。
 続いて、赤外線制御部133は、赤外線を用いて、情報処理部140が記憶部150から読み出した赤外線リモコンコードを制御信号として赤外線送信部131から電気機器400へ送信する(ステップS19)。すると、電気機器400は、赤外線送信部131から送信されてきた赤外線リモコンコードに基づいた動作を行う。例えば、電源を投入するための赤外線リモコンコードが送信されてきた場合、電気機器400は自身の電源を投入する。
 そして、カメラ111が取得している画像について画像処理部112が画像処理を行い、その画像を無線LANインタフェース部121または有線LANインタフェース部123が通信ネットワーク300を介して通信端末200へ送信する(ステップS20)。ここで、カメラ111が動画を取得している場合、無線LANインタフェース部121または有線LANインタフェース部123は、カメラ111が取得し、画像処理部112が画像処理を施した動画を、送信し続けるものであっても良い。この動画送信の継続は、ステップS15からステップS20までの間、とすることができる。
 制御装置101から画像が送信されてくると、通信端末200の表示部230は、送信されてきた画像を表示する(ステップS21)。通信端末200を所持している利用者は、表示部230に表示されている画像を見ることで、赤外線リモコンコードを送信した結果を確認することができる。
 図10は、ステップS21にて通信端末200の表示部230に表示された画像の一例を示す図である。
 図10に示すように、表示部230には、カメラ111が取得している画像が表示される。ここでは、表示部230には、電源がオンの状態であるエアコンが表示される。
 一般的な構成として、制御装置101はGUI(Graphical User Interface)を具備している。本実施の形態では、制御装置101のGUIとして、通信端末200に制御装置101が映し出している画像を表示できる機能と赤外線リモコンを制御する機能と、を具備しておく。このとき、通信端末200から制御装置101に対して取得画像の確認や、赤外線送信の操作の実施方法については、通信端末200に専用のアプリケーションを搭載させておき、これを起動することで実現するものであっても良い。また、これらの操作の他の実施方法として、通信端末200の任意のブラウザから制御装置101のWebGUIにログインして、これを実現するものであっても良い。ステップS16~S21の処理については、通信端末200からこのGUIを介して行う。
 このように、カメラ111が撮像して取得している画像を通信端末200が表示する。これにより、通信端末200からカメラ111が取得している宅内の電気機器400の状態を確認しながら赤外線リモコン制御が可能となり、赤外線リモコンで宅内の電気機器400を操作した結果をリアルタイムに確認することが可能となる。
 本実施の形態では、以下の効果を得ることができる。
 第1の効果として、カメラ機能と赤外線リモコン機能との融合により、外出先から遠隔操作した赤外線リモコン送信結果を、カメラ画像により外出先からより付加価値のある映像としてリアルタイムで視認することが可能となる。
 第2の効果として、カメラ機能と赤外線リモコン機能との融合により、外出先から宅内の様子を確認した際に、宅内の照明オン/オフ、エアコンのオン/オフ等の確認が可能になる。このような確認が可能になることによって、宅内の異常を察知した際でも、宅内の状況をカメラ画像で確認した上で、環境の是正が可能となる。
 第3の効果として、カメラ機能と赤外線リモコン機能との融合により、一般的な赤外線リモコン機能を具備している電気機器に対して遠隔操作およびその操作結果を確認することが可能になる。この遠隔操作およびその操作結果の確認には、操作対象となる電気機器がECHONET Lite等の規格に対応している必要がない。
 第4の効果として、無線機能を有することで、親機となる無線ルータと制御装置101とが無線で接続され、制御装置101の設置場所が自由になる。
 (第3の実施の形態)
 第3の実施の形態では、撮像する向きおよび赤外線を送信する向きを変更可能とする形態について説明する。
 図11は、本発明の制御装置の第3の実施の形態を示す図である。
 本実施の形態における制御装置102は、カメラ111と、画像処理部112と、無線アンテナ124と、無線制御部125と、Etherポート126と、赤外線送信部131と、赤外線受信部132と、赤外線制御部133と、を有している。さらに本実施の形態における制御装置102は、情報処理部141と、記憶部150と、パン用モータ160と、チルト用モータ161と、モータ駆動制御部162と、を有している。なお、図11には、本実施の形態における制御装置102に設けられた構成要素のうち、本実施の形態に関わる主要な構成要素の一例を示す。
 カメラ111、画像処理部112、赤外線送信部131、赤外線受信部132、赤外線制御部133および記憶部150は、第2の実施の形態におけるものと同じものである。
 無線アンテナ124は、無線信号の送受信を行う。
 無線制御部125は、無線信号と電気信号との変換を行い、無線アンテナ124が送受信する信号を制御する。
 Etherポート126は、Ethernet(登録商標)のインタフェース機能を有する。なお、無線アンテナ124、無線制御部125およびEtherポート126でネットワーク通信部を構成する。
 情報処理部141は、画像処理部112、無線制御部125、Etherポート126、赤外線制御部133およびモータ駆動制御部162を制御する。
 パン用モータ160は、モータ駆動制御部162からの制御に基づいて、制御装置102の左右方向への向きの変更(首振り動作)を行うモータである。
 チルト用モータ161は、モータ駆動制御部162からの制御に基づいて、制御装置102の上下方向への向きの変更(首振り動作)を行うモータである。
 図12は、図11に示した制御装置102の外観の一例を示す図である。
 図11に示した制御装置102は図12に示すように、カメラ111と赤外線送信部131とが、カメラ111の向き、つまりカメラ111の撮像範囲に、赤外線送信部131が制御信号を送信する送信方向が含まれるように、筐体108に配置されている。また、赤外線送信部131がより広範囲に赤外線を送信できる部品を採用し、カメラ111の撮像範囲の周囲に赤外線送信が可能な構成をとっても良い。なお、図12では、赤外線受信部132が、赤外線送信部131と同じ向きに筐体108に配置されているが、これに限らない。また、制御装置102には、パン駆動用回転部163と、チルト駆動用回転部164とが配備されている。
 パン駆動用回転部163は、パン用モータ160の駆動に伴い、筐体108を左右方向に回転させる。チルト駆動用回転部164は、チルト用モータ161の駆動に伴い、筐体108を上下方向に回転させる。これらの回転によって、カメラ111および赤外線送信部131の向きを変更することができる。
 図13は、宅内における複数の電気機器の配置の一例を示す図である。
 図13に示すように、家屋500内に、エアコン410と、照明420と、テレビ430とが、互いに離れて配置されている。これらのエアコン410、照明420およびテレビ430は、図3の電気機器400に相当するものである。また、制御装置102からの、エアコン410の方向Aと、照明420の方向Bと、テレビ430の方向Cとが互いに異なる方向である。
 例えば、図13に示した配置において、制御装置102のカメラ111の撮像方向および赤外線送信部131の赤外線の送信方向がAである場合、通信端末200から、エアコン410の状態の確認および制御を行うことができる。しかし、通信端末200から、照明420およびテレビ430の状態の確認および制御を行うことはできない。
 そこで、情報処理部141がモータ駆動制御部162に対して所定の信号を出力し、モータ駆動制御部162がモータ制御に必要な信号制御を実施し、パン用モータ160およびチルト用モータ161を駆動させる。パン用モータ160およびチルト用モータ161が駆動すると、それらの駆動に基づいて、パン駆動用回転部163およびチルト駆動用回転部164が回転する。これにより、照明420への方向Bやテレビ430への方向Cへ、制御装置102のカメラ111の撮像方向および赤外線送信部131の赤外線の送信方向を変更することができる。
 この方向制御は、記憶部150が制御のシーケンスをあらかじめ記憶しておき、情報処理部141が所定のタイミングでシーケンスを読み出して実行するものであっても良い。このシーケンスとは、例えば、制御装置102が、エアコン410の制御が完了すると、方向Bへ方向を変更し、照明420の制御が完了すると、方向Cへ方向を変更し、テレビ430の制御が完了すると、再度方向Aへ方向を変更するようなものであっても良い。ここでエアコン410の制御とは、画像の取得や赤外線の送信である。
 また、通信端末200からの指示に基づいて、情報処理部141が方向制御を行うものであっても良い。例えば、通信端末200の表示部230が、カメラ111が取得した画像を表示する際、撮像方向を変更させるための左右上下を示す矢印等の表示を行い、利用者が選択した矢印に従って、情報処理部141が方向制御を行うものであっても良い。
 本実施の形態では、以下の追加効果を得ることができる。
 第1の追加効果として、赤外線を送信する向きの方向制御が可能になる。これにより、リモコン制御したい電気機器の配置を考慮することなく、宅内の任意の位置に制御装置102を設置することが可能になる。
 第2の追加効果として、宅内の様々な位置に配置されている電気機器に対しても赤外線リモコン制御可能にするとともにカメラ画像による確認が可能となる。
 第3の追加効果として、赤外線リモコン操作対象機器が配置されている方向に向かって赤外線を送信するため、常に指向特性が最大となる位置関係でリモコン送信可能になり、赤外線リモコン有効送信距離範囲が長くなる。
 第4の追加効果として、赤外線リモコン操作対象機器が配置されている方向に向かって赤外線を送信するため、赤外線リモコン送信特性の無駄がなくなり、最小限の送信出力でリモコン送信が可能になり、赤外線送信部の消費電力低減にも貢献が可能となる。
 第1の追加効果で、赤外線送信の方向制御ができることを記載したが、この方式は赤外線送信だけに限定される効果ではない。赤外線以外の制御方式を採用した場合にも、この方式により送信向きの方向制御が可能である。例えば、制御信号を送信する際、赤外線ではなく、直進性の高い無線通信(60GHz等の周波数が高い無線通信)を用いた場合でも、同様に適用することができる。
 (第4の実施の形態)
 以下に、第4の実施の形態として、動体検知機能が搭載されている形態について説明する。
 動体検知機能とは、カメラで映し出している映像内にある一定量の変化が発生すると、所定の処理を行う機能である。この動体検知機能を制御装置に搭載することで、情報処理部が画像処理部から出力されてきた画像の変化を検知した際、自動で任意の所定動作(指定連絡先に通知をすることや、録画開始をする等)を行う。本機能を用いることで、例えば、照明の電源が投入されたり、テレビの電源が投入されたりすると、制御装置がそれを検知し、通信端末に対して通知を出すことが可能となる。これにより、例えば、赤外線リモコン機能でタイマー設定などを電気機器に設定した場合、電気機器に設定したタイマーが作動したことを制御装置が検知して、通信端末に通知をすることが可能になる。その結果、操作結果の確認がリアルタイムでの画像確認のみにとどまらず、利便性が大きく向上する。
 (第5の実施の形態)
 図14は、本発明の制御装置の第5の実施の形態を示す図である。
 本実施の形態における制御装置103は、カメラ111と、画像処理部112と、無線アンテナ124と、無線制御部125と、Etherポート126と、赤外線送信部131と、赤外線受信部132と、赤外線制御部133と、を有している。さらに本実施の形態における制御装置103は、情報処理部142と、記憶部150と、パン用モータ160と、チルト用モータ161と、モータ駆動制御部162と、音声入力部170と、を有している。なお、図14には、本実施の形態における制御装置103に設けられた構成要素のうち、本実施の形態に関わる主要な構成要素の一例を示す。
 カメラ111、画像処理部112、無線アンテナ124、無線制御部125、Etherポート126、赤外線送信部131、赤外線受信部132および赤外線制御部133は、第3の実施の形態におけるものと同じものである。また、記憶部150、パン用モータ160、チルト用モータ161およびモータ駆動制御部162は、第3の実施の形態におけるものと同じものである。本実施の形態における制御装置103は、第3の実施の形態と同様に、エアコン、照明やテレビなどの電気機器を制御する。
 情報処理部142は、画像処理部112、無線制御部125、Etherポート126、赤外線制御部133、モータ駆動制御部162および音声入力部170を制御する。
 音声入力部170は、周囲の音声が入力されるマイク等である。また、音声入力部170は、入力した音声を情報処理部142へ出力する。
 情報処理部142は、音声入力部170から出力されてきた音声を無線アンテナ124またはEtherポート126から通信端末200へ画像とともに送信する。
 通信端末200は、制御装置103から送信されてきた画像を表示するとともに、音声を再生する。
 このように、制御装置103は、カメラ111が取得している画像に加えて、周囲の音声情報も通信端末200へ送信し、通信端末200が再生することで、利用者が画像および音声を用いて赤外線送信結果を確認することができる。
 (第6の実施の形態)
 図15は、本発明の制御装置の第6の実施の形態を示す図である。
 本実施の形態における制御装置104は、カメラ111と、画像処理部112と、無線アンテナ124と、無線制御部125と、Etherポート126と、赤外線送信部131と、赤外線受信部132と、赤外線制御部133と、を有している。さらに本実施の形態における制御装置104は、情報処理部143と、記憶部150と、パン用モータ160と、チルト用モータ161と、モータ駆動制御部162と、温度センサ180と、を有している。なお、図15には、本実施の形態における制御装置104に設けられた構成要素のうち、本実施の形態に関わる主要な構成要素の一例を示す。
 カメラ111、画像処理部112、無線アンテナ124、無線制御部125、Etherポート126、赤外線送信部131、赤外線受信部132および赤外線制御部133は、第3の実施の形態におけるものと同じものである。また、記憶部150、パン用モータ160、チルト用モータ161およびモータ駆動制御部162は、第3の実施の形態におけるものと同じものである。本実施の形態における制御装置104は、第3の実施の形態と同様に、エアコン、照明やテレビなどの電気機器を制御する。
 情報処理部143は、画像処理部112、無線制御部125、Etherポート126、赤外線制御部133、モータ駆動制御部162および温度センサ180を制御する。
 温度センサ180は、宅内の温度を測定する。また、温度センサ180は、測定した温度を情報処理部143へ出力する。
 情報処理部143は、温度センサ180から出力されてきた温度(を示す値)を無線アンテナ124またはEtherポート126から通信端末200へ画像とともに送信する。
 通信端末200は、制御装置104から送信されてきた画像を表示するとともに、温度を表示する。
 このように、制御装置104は、カメラ111が取得している画像に加えて、宅内の温度情報も通信端末200へ送信し、通信端末200がこれらを表示することで、利用者が画像および温度を用いて電気機器の状態を確認することができる。例えば、利用者が、何らかの原因により宅内の温度が変化していることを確認すると、エアコンの電源を投入するための赤外線を送信する操作を通信端末200に対して行い、宅内の温度を調整するといったことが可能となる。
 上述した第4の実施形態と図15に示した形態とを組み合わせることで、制御装置104が周囲の温度変化を自動的に感知し、その感知結果を元に自動で電気機器へ赤外線送信を実施する。この赤外線送信の送信結果を制御装置104がカメラ画像で自動的に判定し、インターネットを介して通信端末200に自動で通知を出すことが可能になる。ここで電気機器とは、図3に示される電気機器400や、図13に示されるエアコン410、照明420やテレビ430などである。以下では、制御装置104が電気機器400を制御するものとして説明する。
 図16は、本発明の制御装置の第6の実施の形態における制御方法の一例を説明するためのシーケンス図である。
 制御装置104は、温度センサ180を具備しており常に周囲温度の状態を検知している。ある時、制御装置104が、周囲温度の変化を自身の温度センサ180によって検知する(ステップS21)。この時、周囲温度の変化が制御装置104に事前に設定してある規定値以上であった場合、制御装置104は、赤外線送信部131から電気機器400へ電源オン(または電源オフ)を指示するための赤外線の送信を実施する(ステップS22)。電気機器400は、赤外線信号を受信し、自身の電源をオン(または電源をオフ)する(ステップS23)。電気機器400は、自身の電源をオン(または電源をオフ)することにより機器に動作が発生し、その様子が制御装置104のカメラ111によって撮像され、画像が取得される(ステップS24)。制御装置104は、動体検知機能により電気機器400が動作したことを判別する(ステップS25)。制御装置104は、電気機器400が動作したことを知り、その結果をインターネット経由で通信端末200へ送信(通知)する(ステップS26)。この結果の通知には、カメラ111が取得した画像が含まれる。
 すると、通信端末200の表示部230は、制御装置104から送信されてきた通知の表示を行う(ステップS27)。
 これにより、制御装置104が電気機器400を自動制御することが可能になる。さらに、その制御結果を自動で判定/認識することが可能になる。さらに、その認識した結果が自動で通信端末200へ送信されることにより、利用者がその結果を即時に知ることが可能になる。
 (その他の実施の形態)
 その他の形態として、ドア開閉センサや人感センサ、湿度センサ、ガスセンサなど様々なセンサを利用した検知機能と併用することも可能である。各センサからの入力情報を付加価値とすることで、取得された画像による操作対象の電気機器の変化の過程を確認するとともに、操作対象の電気機器の状態の変化が取得された画像だけでは判別がつきにくい場合であっても、操作結果が容易に確認できるようになる。これにより、利便性を大きく向上させることが可能である。
 また、制御装置が暗視機能を具備すれば、照明の電源が投入されていない暗い宅内であったとしても、操作対象である電気機器へのリモコン操作結果を画像で確認することが可能になる。
 なお、上述した各実施の形態を組み合わせても良い。
 上述した制御装置100~104それぞれに設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。
 本発明の実施の形態は、記録媒体に記録されたコンピュータプログラムを制御装置100~104それぞれに読み込ませ、コンピュータプログラムの各手順を制御装置100~104に実行させることによっても、実現される。この記録媒体は、制御装置100~104それぞれにて読取可能なものであり、処理内容を手順として記述したコンピュータプログラムが記録されたものである。
 制御装置100~104それぞれにて読取可能な記録媒体とは、フロッピー(登録商標)ディスク、光磁気ディスク、DVD(Digital Versatile Disk)、CD(Compact Disc)などの移設可能な記録媒体の他、制御装置100~104それぞれに内蔵されたROM(Read Only Memory)、RAM(Random Access Memory)等のメモリやHDD(Hard Disk Drive)等を指す。
 この記録媒体に記録されたプログラムは、制御装置100~104それぞれに設けられた制御部等のCPU(Central Processing Unit)にて読み込まれ、CPUの制御によって、上述したものと同様の処理が行われる。ここで、CPUは、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。
 上記の実施の形態の一部または全部は、以下の付記のようにも記載され得るが、以下には限られない。
(付記1)撮像を行い、画像を取得する撮像部と、
前記撮像部が取得している画像を、通信ネットワークを介して通信端末へ送信し、前記通信端末から前記通信ネットワークを介して送信されてきた信号を受信するネットワーク通信部と、
前記ネットワーク通信部が受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御信号送信部と、を有する制御装置。
(付記2)付記1に記載の制御装置において、
前記電気機器を制御するための赤外線リモコンコードを記憶する記憶部を有し、
前記制御信号送信部は、前記記憶部に記憶されている赤外線リモコンコードを、赤外線を用いて前記制御信号として送信する制御装置。
(付記3)付記2に記載の制御装置において、
前記赤外線リモコンコードを学習する赤外線制御部を有し、
前記記憶部は、前記赤外線制御部が学習した赤外線リモコンコードを記憶する制御装置。
(付記4)付記1から3のいずれか一つに記載の制御装置において、
前記撮像部の撮像範囲に、前記制御信号送信部が制御信号を送信する送信方向が含まれるように、前記撮像部と前記制御信号送信部とが配置される制御装置。
(付記5)付記4に記載の制御装置において、
前記撮像部および前記制御信号送信部の向きを変更するモータを有する制御装置。
(付記6)付記1から5のいずれか一つに記載の制御装置において、
音声入力部を有し、
前記ネットワーク通信部は、前記音声入力部に入力された音声を、前記通信ネットワークを介して前記通信端末へ送信する制御装置。
(付記7)付記1から6のいずれか一つに記載の制御装置において、
温度センサを有し、
前記ネットワーク通信部は、前記温度センサが測定した温度を、前記通信ネットワークを介して前記通信端末へ送信する制御装置。
(付記8)所定の入力を受け付けた場合、該入力に基づいた信号を送信する通信端末と、
撮像機能を具備し、前記撮像機能を用いて取得している画像を、通信ネットワークを介して前記通信端末へ送信し、前記通信端末から前記通信ネットワークを介して送信されてきた信号を受信し、該受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御装置と、を有し、
前記通信端末は、前記制御装置から送信されてきた画像を表示する通信システム。
(付記9)付記8に記載の通信システムにおいて、
前記制御装置は、前記電気機器を制御するための赤外線リモコンコードを記憶する記憶部を有し、
前記制御信号送信部は、前記記憶部に記憶されている赤外線リモコンコードを、赤外線を用いて前記制御信号として送信する通信システム。
(付記10)付記9に記載の通信システムにおいて、
前記制御装置は、前記赤外線リモコンコードを学習する赤外線制御部を有し、
前記記憶部は、前記赤外線制御部が学習した赤外線リモコンコードを記憶する通信システム。
(付記11)付記8から10のいずれか一つに記載の通信システムにおいて、
前記撮像部の撮像範囲に、前記制御信号送信部が制御信号を送信する送信方向が含まれるように、前記制御装置の前記撮像部と前記制御信号送信部とが配置される通信システム。
(付記12)付記11に記載の通信システムにおいて、
前記制御装置は、前記撮像部および前記制御信号送信部の向きを変更するモータを有する通信システム。
(付記13)付記8から12のいずれか一つに記載の制御装置において、
前記制御装置は、音声入力部を有し、
前記ネットワーク通信部は、前記音声入力部に入力された音声を、前記通信ネットワークを介して前記通信端末へ送信する通信システム。
(付記14)付記8から13のいずれか一つに記載の通信システムにおいて、
前記制御装置は、温度センサを有し、
前記ネットワーク通信部は、前記温度センサが測定した温度を、前記通信ネットワークを介して前記通信端末へ送信する通信システム。
(付記15)撮像を行い、画像を取得する処理と、
前記取得している画像を、通信ネットワークを介して通信端末へ送信する処理と、
前記通信端末から通信ネットワークを介して送信されてきた信号を受信する処理と、
前記受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する処理と、を行う制御方法。
(付記16)付記15に記載の制御方法において、
前記電気機器を制御するための赤外線リモコンコードを記憶する処理と、
前記記憶された赤外線リモコンコードを、赤外線を用いて前記制御信号として送信する処理と、をさらに行う制御方法。
(付記17)付記16に記載の制御方法において、
前記赤外線リモコンコードを学習する処理と、
前記学習した赤外線リモコンコードを記憶する処理と、をさらに行う制御方法。
(付記18)付記15から17のいずれか一つに記載の制御方法において、
前記画像を取得するための撮像の撮像範囲に、前記制御信号を送信する送信方向が含まれる制御方法。
(付記19)付記18に記載の制御方法において、
前記撮像範囲および前記制御信号を送信する送信方向を変更する処理をさらに行う制御方法。
(付記20)付記15から19のいずれか一つに記載の制御方法において、
周囲の音声を入力する処理と、
前記入力した音声を、前記通信ネットワークを介して前記通信端末へ送信する処理と、をさらに行う制御方法。
(付記21)付記15から20のいずれか一つに記載の制御方法において、
温度を測定する処理と、
前記測定した温度を、前記通信ネットワークを介して前記通信端末へ送信する処理と、をさらに行う制御方法。
(付記22)コンピュータに、
撮像を行い、画像を取得する手順と、
前記取得している画像を、通信ネットワークを介して通信端末へ送信する手順と、
前記通信端末から通信ネットワークを介して送信されてきた信号を受信する手順と、
前記受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する手順と、を実行させるためのプログラム。
(付記23)付記22に記載のプログラムにおいて、
前記電気機器を制御するための赤外線リモコンコードを記憶する手順と、
前記記憶された赤外線リモコンコードを、赤外線を用いて前記制御信号として送信する手順と、をさらに実行させるためのプログラム。
(付記24)付記23に記載のプログラムにおいて、
前記赤外線リモコンコードを学習する手順と、
前記学習した赤外線リモコンコードを記憶する手順と、をさらに実行させるためのプログラム。
(付記25)付記22から24のいずれか一つに記載のプログラムにおいて、
前記画像を取得するための撮像の撮像範囲に、前記制御信号を送信する送信方向が含まれるプログラム。
(付記26)付記25に記載のプログラムにおいて、
前記撮像範囲および前記制御信号を送信する送信方向を変更する手順をさらに実行させるためのプログラム。
(付記27)付記22から26のいずれか一つに記載のプログラムにおいて、
周囲の音声を入力する手順と、
前記入力した音声を、前記通信ネットワークを介して前記通信端末へ送信する手順と、をさらに実行させるためのプログラム。
(付記28)付記22から27のいずれか一つに記載のプログラムにおいて、
温度を測定する手順と、
前記測定した温度を、前記通信ネットワークを介して前記通信端末へ送信する手順と、をさらに実行させるためのプログラム。
 以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる
 この出願は、2014年5月26日に出願された日本出願特願2014-108001号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
 100~104  制御装置
 108  筐体
 110  撮像部
 111  カメラ
 112  画像処理部
 120、220  ネットワーク通信部
 121  無線LANインタフェース部
 122  無線LAN制御部
 123  有線LANインタフェース部
 124  無線アンテナ
 125  無線制御部
 126  Etherポート
 130  制御信号送信部
 131  赤外線送信部
 132  赤外線受信部
 133  赤外線制御部
 140~143  情報処理部
 150  記憶部
 160  パン用モータ
 161  チルト用モータ
 162  モータ駆動制御部
 163  パン駆動用回転部
 164  チルト駆動用回転部
 170  音声入力部
 180  温度センサ
 200  通信端末
 210  入力部
 230  表示部
 231  赤外線送信ボタン
 300  通信ネットワーク
 400  電気機器
 410  エアコン
 420  照明
 430  テレビ
 500  家屋
 600  無線ルータ
 700  HGW

Claims (10)

  1.  撮像を行い、画像を取得する撮像部と、
     前記撮像部が取得している画像を、通信ネットワークを介して通信端末へ送信し、前記通信端末から前記通信ネットワークを介して送信されてきた信号を受信するネットワーク通信部と、
     前記ネットワーク通信部が受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御信号送信部と、を有する制御装置。
  2.  請求項1に記載の制御装置において、
     前記電気機器を制御するための赤外線リモコンコードを記憶する記憶部を有し、
     前記制御信号送信部は、前記記憶部に記憶されている赤外線リモコンコードを、赤外線を用いて前記制御信号として送信する制御装置。
  3.  請求項2に記載の制御装置において、
     前記赤外線リモコンコードを学習する赤外線制御部を有し、
     前記記憶部は、前記赤外線制御部が学習した赤外線リモコンコードを記憶する制御装置。
  4.  請求項1から3のいずれか1項に記載の制御装置において、
     前記撮像部の撮像範囲に、前記制御信号送信部が制御信号を送信する送信方向が含まれるように、前記撮像部と前記制御信号送信部とが配置される制御装置。
  5.  請求項4に記載の制御装置において、
     前記撮像部および前記制御信号送信部の向きを変更するモータを有する制御装置。
  6.  請求項1から5のいずれか1項に記載の制御装置において、
     音声入力部を有し、
     前記ネットワーク通信部は、前記音声入力部に入力された音声を、前記通信ネットワークを介して前記通信端末へ送信する制御装置。
  7.  請求項1から6のいずれか1項に記載の制御装置において、
     温度センサを有し、
     前記ネットワーク通信部は、前記温度センサが測定した温度を、前記通信ネットワークを介して前記通信端末へ送信する制御装置。
  8.  所定の入力を受け付けた場合、該入力に基づいた信号を送信する通信端末と、
     撮像機能を具備し、前記撮像機能を用いて取得している画像を、通信ネットワークを介して前記通信端末へ送信し、前記通信端末から前記通信ネットワークを介して送信されてきた信号を受信し、該受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する制御装置と、を有し、
     前記通信端末は、前記制御装置から送信されてきた画像を表示する通信システム。
  9.  撮像を行い、画像を取得する処理と、
     前記取得している画像を、通信ネットワークを介して通信端末へ送信する処理と、
     前記通信端末から通信ネットワークを介して送信されてきた信号を受信する処理と、
     前記受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する処理と、を行う制御方法。
  10.  コンピュータに、
     撮像を行い、画像を取得する手順と、
     前記取得している画像を、通信ネットワークを介して通信端末へ送信する手順と、
     前記通信端末から通信ネットワークを介して送信されてきた信号を受信する手順と、
     前記受信した信号に基づいて、電気機器を制御するための制御信号を該電気機器へ送信する手順と、を実行させるためのプログラム。
PCT/JP2015/002505 2014-05-26 2015-05-19 制御装置、通信システム、制御方法およびプログラム WO2015182062A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201580027551.XA CN106416221A (zh) 2014-05-26 2015-05-19 控制装置、通信系统、控制方法及程序
US15/311,343 US20170085777A1 (en) 2014-05-26 2015-05-19 Control device, communication system, control method, and program
EP15799084.7A EP3151537A4 (en) 2014-05-26 2015-05-19 Control device, communication system, control method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014108001A JP2015226081A (ja) 2014-05-26 2014-05-26 制御装置、通信システム、制御方法およびプログラム
JP2014-108001 2014-05-26

Publications (1)

Publication Number Publication Date
WO2015182062A1 true WO2015182062A1 (ja) 2015-12-03

Family

ID=54698419

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/002505 WO2015182062A1 (ja) 2014-05-26 2015-05-19 制御装置、通信システム、制御方法およびプログラム

Country Status (5)

Country Link
US (1) US20170085777A1 (ja)
EP (1) EP3151537A4 (ja)
JP (1) JP2015226081A (ja)
CN (1) CN106416221A (ja)
WO (1) WO2015182062A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107202404A (zh) * 2017-06-08 2017-09-26 无锡走向智能科技有限公司 一种空调能效管理系统及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002125273A (ja) * 2000-10-16 2002-04-26 Matsushita Electric Ind Co Ltd 通信機
JP2006310987A (ja) * 2005-04-26 2006-11-09 Ntt Docomo Inc 中継リモコンおよび遠隔制御方法
JP2013236190A (ja) * 2012-05-07 2013-11-21 Sharp Corp 自走式電子機器、端末装置、およびリモコン付き電子機器の操作システム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4765209B2 (ja) * 2001-07-03 2011-09-07 パナソニック株式会社 遠隔操作システム
JP2003125466A (ja) * 2001-10-16 2003-04-25 Takara Co Ltd 遠隔操作システム
CN1614984A (zh) * 2003-11-05 2005-05-11 河村电器产业株式会社 用于从远程处控制电气设备的系统
CN101989072B (zh) * 2009-07-31 2012-10-03 宁波家天下智能系统有限公司 一种家居设备控制器
CN102097000A (zh) * 2010-12-20 2011-06-15 张学荣 监控遥控电器空调设备
EP2827605B1 (en) * 2012-03-12 2016-09-28 NTT DoCoMo, Inc. Remote control system, remote control method, communication device and program
KR101994695B1 (ko) * 2012-04-19 2019-07-01 엘지전자 주식회사 공기조화기 제어시스템 및 그 방법
US9233472B2 (en) * 2013-01-18 2016-01-12 Irobot Corporation Mobile robot providing environmental mapping for household environmental control
DE102013226390A1 (de) * 2013-12-18 2015-06-18 BSH Hausgeräte GmbH Verfahren zum Umschalten von Haushaltsgeräten zwischen einem Zuhause-Modus und einem Nicht-Zuhause-Modus, tragbare Bedienvorrichtung, System und Computerprogrammprodukt

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002125273A (ja) * 2000-10-16 2002-04-26 Matsushita Electric Ind Co Ltd 通信機
JP2006310987A (ja) * 2005-04-26 2006-11-09 Ntt Docomo Inc 中継リモコンおよび遠隔制御方法
JP2013236190A (ja) * 2012-05-07 2013-11-21 Sharp Corp 自走式電子機器、端末装置、およびリモコン付き電子機器の操作システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3151537A4 *

Also Published As

Publication number Publication date
EP3151537A4 (en) 2018-02-07
US20170085777A1 (en) 2017-03-23
JP2015226081A (ja) 2015-12-14
EP3151537A1 (en) 2017-04-05
CN106416221A (zh) 2017-02-15

Similar Documents

Publication Publication Date Title
US11064158B2 (en) Home monitoring method and apparatus
US8689249B2 (en) In-home monitoring method and system having a video camera connected to a set-top box
EP2273330B1 (en) Home appliance control system and methods in a networked environment
US20150220075A1 (en) System and method for remote control of home appliances without infrastructure changes
KR20150005746A (ko) 가전 원격 제어 방법 및 장치
JP5866538B1 (ja) 監視システム及び監視システムにおける監視方法
JP6159576B2 (ja) 制御装置及びプログラム
US20100125678A1 (en) Electronic device and related method for controlling a peripheral device
US11133952B2 (en) Notification control apparatus, detection apparatus, notification control system, notification control method, and detection method
KR101377065B1 (ko) 모바일 기기를 이용한 홈오토메이션 시스템
WO2015182062A1 (ja) 制御装置、通信システム、制御方法およびプログラム
KR102028944B1 (ko) 스마트 가전 제품의 복수의 서버에 액세스하기 위한 방법, 장치, 시스템, 프로그램 및 저장매체
JP2017022745A (ja) 制御装置、通信システム、制御方法およびプログラム
KR101083292B1 (ko) 유비쿼터스 영상확인 가전제어 시스템 및 방법
KR101030064B1 (ko) 이동 단말기에 의해 제어되는 와이파이 모듈을 구비한 엔브이알과 홈시어터를 이용하여 구축된 홈 네트워킹 시스템.
KR100545157B1 (ko) 유비쿼터스 통합컨트롤 시스템
KR20130137490A (ko) 이동형 스마트 단말기와 터치 중계기를 이용한 디지털기기 제어 및 홈 컨트롤 시스템
US20240264724A1 (en) Application extensibility for smart device control
US12100284B2 (en) System and method for providing a vacation mode of home device operation
KR20090100138A (ko) 디지털 보안 어댑터
KR20160120051A (ko) 디지털기기 통합 제어 시스템 및 그 제어 방법
Hong House Monitoring System
JP2004236024A (ja) 遠隔操作装置及び遠隔操作システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15799084

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2015799084

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2015799084

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 15311343

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE