WO2017163526A1 - 情報処理装置、その制御方法ならびに制御プログラム - Google Patents

情報処理装置、その制御方法ならびに制御プログラム Download PDF

Info

Publication number
WO2017163526A1
WO2017163526A1 PCT/JP2016/088867 JP2016088867W WO2017163526A1 WO 2017163526 A1 WO2017163526 A1 WO 2017163526A1 JP 2016088867 W JP2016088867 W JP 2016088867W WO 2017163526 A1 WO2017163526 A1 WO 2017163526A1
Authority
WO
WIPO (PCT)
Prior art keywords
information processing
processing apparatus
operating
control
devices
Prior art date
Application number
PCT/JP2016/088867
Other languages
English (en)
French (fr)
Inventor
達士 安田
慶文 奥田
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Publication of WO2017163526A1 publication Critical patent/WO2017163526A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Definitions

  • the present invention relates to an information processing apparatus, a control method thereof, and a control program.
  • Patent Document 1 discloses a remote controller that receives a code signal transmitted from a device, identifies the device, and performs remote operation.
  • Patent Document 2 discloses a remote controller that displays a menu screen in which a remote control object is represented by an icon.
  • Patent Document 3 discloses a wearable terminal for remotely operating a home appliance.
  • Patent Document 4 discloses an input device that detects the position of an electronic device by exchanging signals with the electronic device.
  • An object of the present invention is to provide a technique for solving the above-described problems.
  • an apparatus for remotely controlling a plurality of devices, Specifying means for specifying a device to be operated based on a direction in which the information processing apparatus is directed; Storage means for storing a plurality of control screens for operating a plurality of devices; Display means for reading out and displaying a control screen for operating the specified device from the storage means; Transmitting means for transmitting an operation signal for operating the specified device in response to an operation on the control screen displayed on the display means; Is an information processing apparatus.
  • the method according to the present invention comprises: A method for controlling an information processing apparatus for remotely controlling a plurality of devices,
  • the information processing apparatus includes storage means for storing a plurality of control screens for operating a plurality of devices.
  • a program for an information processing apparatus for remotely controlling a plurality of devices,
  • the information processing apparatus includes storage means for storing a plurality of control screens for operating a plurality of devices.
  • the information processing apparatus 100 is an apparatus that remotely controls a plurality of devices.
  • the information processing apparatus 100 includes a storage unit 101, a specifying unit 102, a display unit 103, and a transmission unit 104.
  • the storage unit 101 stores a plurality of control screens for operating a plurality of devices.
  • the specifying unit 102 specifies a device to be operated based on the direction in which the information processing apparatus 100 is directed.
  • the display unit 103 reads a control screen for operating the specified device from the storage unit 101 and displays the control screen.
  • the transmission unit 104 transmits an operation signal for operating the identified device in response to an operation on the control screen displayed on the display unit 103.
  • the operation screen for the device is displayed simply by pointing the information processing apparatus 100 to any one of the devices 111 to 113, remote operation of the desired device can be performed intuitively.
  • FIG. 2 is a diagram for explaining a usage state of the information processing apparatus 200 according to the present embodiment.
  • the information processing apparatus 200 is a so-called smartphone, and functions as a remote controller by executing a remote control application for remote operation.
  • the information processing apparatus 200 has a function of detecting its position and orientation.
  • an air conditioner 210, a lighting 220, a television 230, and a video 240 are provided as examples of equipment.
  • the positions of these devices 210 to 240 are registered in the information processing apparatus 200.
  • a smartphone is illustrated as an example of the information processing apparatus 200, but a wearable terminal such as a smart watch may be used.
  • the information processing apparatus 200 determines which device the user is trying to operate using its own position and orientation and the position of each device. As a result of the determination, an operation screen corresponding to the specified device is displayed on the display. Thereby, the user can start the remote control operation only by pointing the information processing apparatus 200 to the device that the user wants to operate.
  • an instruction input to the operation screen is transmitted to the device using a technology such as Bluetooth (registered trademark) or wireless LAN (Local Area Network). That is, it is only necessary to perform pairing with the specified device at the timing of displaying the operation screen, and transmit the operation content on the operation screen to the device by wireless communication.
  • FIG. 3 is a diagram illustrating an internal configuration of the information processing apparatus 200.
  • the information processing apparatus 200 includes a storage unit 301, a control unit 302, a touch panel 303, a communication unit 304, and a position / direction detection unit 305.
  • the storage unit 301 stores a remote control application 310.
  • the remote control application 310 includes a plurality of types of control screen display data 311 and a device determination table 312.
  • the control unit 302 selectively reads out the remote control application 310 from the storage unit 301 and executes the remote control application 310 to determine the direction in which the information processing apparatus 100 is directed, and specify a device to be operated based on the direction. .
  • the touch panel 303 displays a control screen read by the control unit 302 and accepts an operation instruction from the user.
  • the communication unit 304 transmits an operation signal to the specified device.
  • the communication unit 304 transmits an operation signal to a target device using a technology such as Bluetooth (registered trademark) or wireless LAN (Local Area Network).
  • a technology such as Bluetooth (registered trademark) or wireless LAN (Local Area Network).
  • Bluetooth registered trademark
  • wireless LAN Local Area Network
  • the position / direction detection unit 305 includes a GPS (Global Positioning System) sensor 351 and a digital compass 352 as an example of a position detection sensor, and detects where the information processing apparatus 200 is and where it is facing.
  • GPS Global Positioning System
  • the remote control application 310 includes control screen display data for each device. However, the remote control application 310 may further include control screen display data for each situation and allow the user to select according to the user's preference. For example, buttons such as “getting up”, “going home”, “going out”, and “sleeping” may be displayed, and a plurality of devices may be remotely controlled simultaneously by simply operating these buttons. For example, “lighting ON, air conditioner ON, shutter OPEN” may be registered in association with the “wake-up” button by setting. For example, “lighting ON, air conditioner ON, TV ON” may be registered in association with the “return home” button.
  • “illumination OFF, air conditioner OFF, TV OFF, security sensor ON” may be registered in association with the “go out” button. Further, for example, settings such as “TV OFF, lighting OFF, and air conditioner OFF after a certain period of time” may be registered in association with the “sleep” button.
  • FIG. 4 is a diagram showing the contents of the device determination table 312 provided in the remote control application 310.
  • various device names, their position information, and control screens to be displayed are stored in association with each other.
  • the illumination A exists at the latitude A1 and the longitude A2
  • the display screen for operating the illumination A is the illumination operation type X
  • the device address is “XXX1XXX2XXXX”.
  • a device to which the information processing apparatus 200 is directed is specified, a GUI (Graphical User Interface) for operating the device is displayed, and a signal for operating the device is displayed as the device address. (That is, the device).
  • GUI Graphic User Interface
  • a screen for selecting the plurality of devices is displayed. At that time, those on the straight line to which the information processing apparatus 200 is directed are listed as candidates in the order of distance.
  • the attributes of each device registered in the device determination table 312 need to be registered in advance. For example, by bringing the information processing apparatus 200 to the position of each device such as an air conditioner and pressing the registration button, the position of the information processing device 200 at that time is regarded as the position of each device, and the position of the air conditioner (latitude and longitude) Is registered. Alternatively, the position of each device may be determined by receiving a signal such as an infrared ray from each device.
  • the device address once paired is stored in the device determination table 312.
  • the operation screen can be associated by the user inputting the type of device. Once each device is registered once, it can be operated very easily and remotely.
  • the information processing apparatus 200 itself is provided with a GUI for operating the device.
  • the present invention is not limited to this, and data for display screens may be received from the device. Or download from the server.
  • the storage unit 301 may store an operation history. For example, if the location and time are remembered, a setting that reflects the history of displaying the remote control screen with this GUI when sitting at a certain location will further improve the usability for the user.
  • FIG. 5 is a flowchart for explaining the flow of processing in the information processing apparatus 200.
  • the control unit 302 reads the remote control application 310 from the storage unit 301 and activates it.
  • step S503 the position / direction detection unit 305 detects the position and orientation of the information processing apparatus 200. If the position and orientation of the information processing device 200 are known, the process proceeds to step S505, and the control unit 302 searches the device determination table 312 registered in advance for the device indicated by the information processing device 200.
  • step S507 determines whether there are a plurality of found devices. If one device is found, the process proceeds to step S511. If a plurality of devices are found, the process proceeds to step S519, and the control unit 302 displays a selection screen on the touch panel 303. That is, when there are a plurality of candidate devices specified based on the direction in which the information processing device 200 is directed, the touch panel 303 displays a screen for selecting one operation target from the plurality of candidates. The plurality of candidates may be arranged in order from the shortest distance from the information processing apparatus 200, and a screen for selecting one operation target may be displayed. In this state, if there is a selection input in step S521, one device is selected, and the process proceeds to step S511.
  • step S511 the control unit 302 reads control screen display data corresponding to the specified device from the storage unit 301 and causes the touch panel 303 to display the control screen.
  • step S513 the control unit 302 determines whether there is an input to the touch panel 303. If there is an input, the control unit 302 transmits an operation signal to the device address registered in the device determination table 312 in step S515.
  • step S517 the control unit 302 repeats the processes in step S513 and step S514 until it is determined that the process has been completed.
  • the present embodiment it is possible to perform a remote operation using a single device for a plurality of devices with the same operation as that conventionally performed with a remote controller dedicated to each device.
  • a remote controller dedicated to each device since all the smartphones of each family can be used as a remote control, there is no need to search for the remote control, the space for placing the remote control itself becomes unnecessary, and the situation where remote controls are scattered throughout the house can be improved.
  • devices in different rooms can be operated simply by pointing the terminal, devices in the house can be operated from the spot.
  • FIG. 6 is a diagram for explaining a functional configuration of the information processing apparatus 600 according to the present embodiment.
  • the information processing apparatus 600 according to the present embodiment is different from the second embodiment in that it includes an acceleration sensor 653 and an atmospheric pressure sensor 654. Since other configurations and operations are the same as those of the second embodiment, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • the information processing apparatus 600 can detect the position in the height direction. Further, by using the acceleration sensor 653, the direction in the height direction can be detected. If the output from the atmospheric pressure sensor 654 is used, the three-dimensional positions of the information processing apparatus 600 and a plurality of devices can be detected. Furthermore, by detecting the height direction of the information processing apparatus 600 at the time of operation and using the device determination table 612 as shown in FIG. 7, it is also possible to determine devices that exist at different heights. As a result, as shown in FIG. 8, it is possible to operate the equipment on the second floor while on the first floor, and it is possible to operate the equipment on the first floor while on the second floor.
  • FIG. 9 is a diagram for explaining a functional configuration of the information processing apparatus 900 according to the present embodiment.
  • the information processing apparatus 900 according to the present embodiment is different from the first embodiment in that it includes an environment information acquisition unit 906. Since other configurations and operations are the same as those of the second embodiment, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • the environment information acquisition unit 906 acquires information (brightness, temperature, sound) related to the environment around the information processing apparatus 200, and includes a brightness sensor 961, a temperature sensor 962, and a microphone 963.
  • the brightness sensor 961 detects the brightness around the information processing apparatus 200.
  • the temperature sensor 962 detects the ambient temperature of the information processing apparatus 200.
  • the microphone 963 detects a noise situation around the information processing apparatus 200.
  • the control unit 302 specifies a device according to the environment information acquired by the environment information acquisition unit 906 using the device determination table 912 shown in FIG. For example, when the ambient brightness is a predetermined value or less, the control unit 302 selects the illumination closest to the information processing apparatus 200 and displays a control screen for the operation. In addition, when the ambient temperature is below a certain value or above a certain value, the control unit 302 selects the air conditioner closest to the information processing apparatus 200 and displays a control screen for its operation. Furthermore, when the time is within a predetermined range and the ambient sound is equal to or lower than the predetermined value, the control unit 302 selects the television closest to the information processing apparatus 200 and displays a control screen for the operation. If the weather is good and the shutter is closed, a control screen for opening the shutter is displayed. If the weather is bad and the shutter is open, a control screen for closing the shutter is displayed.
  • the information processing apparatus 900 determines which device the remote controller should be according to the surrounding environment. As a result, the user's situation can be accurately grasped, and the device that the user intends to control can be accurately estimated. Thereby, a more user-friendly remote controller can be realized.
  • FIG. 11 is a diagram for explaining a functional configuration of the information processing apparatus 1100 according to the present embodiment.
  • the information processing apparatus 1100 according to the present embodiment is different from the first embodiment in that an advertisement display unit 1107 is provided. Since other configurations and operations are the same as those of the second embodiment, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • the advertisement display unit 1107 causes the control unit 302 to display an advertisement screen of a product related to the device to be controlled in conjunction with the control screen displayed on the touch panel 303.
  • the replacement time of consumables such as filters and the advertisement for purchasing the consumables or the state of the device may be displayed.
  • the consumable item replacement alert generated in the device may be received via wireless communication, and an advertisement screen corresponding to the received alert may be displayed.
  • the user can confirm the replacement time of the consumables every time the remote operation is performed, and can purchase the consumables with a simple operation.
  • the present invention may be applied to a system composed of a plurality of devices, or may be applied to a single device. Furthermore, the present invention can also be applied to a case where an information processing program that implements the functions of the embodiments is supplied directly or remotely to a system or apparatus. Therefore, in order to realize the functions of the present invention on a computer, a program installed on the computer, a medium storing the program, and a WWW (World Wide Web) server that downloads the program are also included in the scope of the present invention. . In particular, at least a non-transitory computer readable medium storing a program for causing a computer to execute the processing steps included in the above-described embodiments is included in the scope of the present invention.

Abstract

簡易な操作で障害物の先にある機器を遠隔操作するための情報処理装置であって、情報処理装置が向けられている方向を判定し、その方向に基づいて操作対象となる機器を特定する特定手段と、複数の機器を操作するための複数のコントロール画面を記憶する記憶手段と、特定した機器を操作するためのコントロール画面を記憶手段から読出して表示する表示手段と、表示手段に表示されたコントロール画面に対する操作に応じて、特定した機器を操作するための操作信号を送信する送信手段と、を備えた。

Description

情報処理装置、その制御方法ならびに制御プログラム
　本発明は、情報処理装置、その制御方法ならびに制御プログラムに関する。
　上記技術分野において、特許文献１には、機器から送信されたコード信号を受信して、その機器を識別した上で、遠隔操作するリモコンが開示されている。また特許文献２には、リモコン対象をアイコンで表わしたメニュー画面を表示するリモコンが開示されている。特許文献３には、家電機器を遠隔操作するウェアラブル端末が開示されている。特許文献４は、電子機器との間で信号をやりとりすることにより、電子機器の位置を検出する入力機器が開示されている。
実案第３０９２３７２号公報 特開２０１５－１９４９９８号公報 特開２０１５－０７６８７７号公報 特開２００８－０９９１９４号公報
　しかしながら、上記文献に記載の技術では、機器との間で直接信号をやりとりしなければ、遠隔操作を実現できなかった。つまり、障害物がある場合には、遠隔制御はできず、また、メニュー画面で機器を選択するのでは、直感的な操作とは言えず、ユーザにとって煩雑な操作が必要になるという欠点があった。
　本発明の目的は、上述の課題を解決する技術を提供することにある。
　上記目的を達成するため、本発明に係る装置は、
　複数の機器を遠隔制御する情報処理装置であって、
　前記情報処理装置が向けられている方向に基づいて操作対象となる機器を特定する特定手段と、
　複数の機器を操作するための複数のコントロール画面を記憶する記憶手段と、
　前記特定した機器を操作するためのコントロール画面を前記記憶手段から読出して表示する表示手段と、
　前記表示手段に表示されたコントロール画面に対する操作に応じて、前記特定した機器を操作するための操作信号を送信する送信手段と、
　を備えた情報処理装置である。
　上記目的を達成するため、本発明に係る方法は、
　複数の機器を遠隔制御する情報処理装置の制御方法であって、
　前記情報処理装置は、複数の機器を操作するための複数のコントロール画面を記憶する記憶手段を備え、
　前記情報処理装置が向けられている方向に基づいて操作対象となる機器を特定する特定ステップと、
　前記特定した機器を操作するためのコントロール画面を前記記憶手段から読出して表示する表示ステップと、
　表示された前記コントロール画面に対する操作に応じて、前記特定した機器を操作するための操作信号を送信する送信ステップと、
　を含む情報処理装置の制御方法である。
　上記目的を達成するため、本発明に係るプログラムは、
　複数の機器を遠隔制御する情報処理装置の制御プログラムであって、
　前記情報処理装置は、複数の機器を操作するための複数のコントロール画面を記憶する記憶手段を備え、
　前記情報処理装置が向けられている方向に基づいて操作対象となる機器を特定する特定ステップと、
　前記特定した機器を操作するためのコントロール画面を前記記憶手段から読出して表示する表示ステップと、
　表示された前記コントロール画面に対する操作に応じて、前記特定した機器を操作するための操作信号を送信する送信ステップと、
　を情報処理装置に実行させる制御プログラムである。
　本発明によれば、簡易な操作で障害物の先にある機器を遠隔操作することができる。
本発明の第１実施形態に係る情報処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る情報処理装置の利用状況を示す図である。 本発明の第２実施形態に係る情報処理装置の機能構成を示す図である。 本発明の第２実施形態に係る情報処理装置の機器判定テーブルを示す図である。 本発明の第２実施形態に係る情報処理装置の処理の流れを説明するフローチャートである。 本発明の第３実施形態に係る情報処理装置の機能構成を示す図である。 本発明の第３実施形態に係る情報処理装置の機器判定テーブルを示す図である。 本発明の第３実施形態に係る情報処理装置の利用状況を示す図である。 本発明の第４実施形態に係る情報処理装置の機能構成を示す図である。 本発明の第４実施形態に係る情報処理装置の機器判定テーブルを示す図である。 本発明の第５実施形態に係る情報処理装置の機能構成を示す図である。
　以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素はあくまで例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。
　［第１実施形態］
　本発明の第１実施形態としての情報処理装置１００について、図１を用いて説明する。情報処理装置１００は、複数の機器を遠隔制御する装置である。
　図１に示すように、情報処理装置１００は、記憶部１０１と特定部１０２と表示部１０３と送信部１０４とを含む。
　記憶部１０１は、複数の機器を操作するための複数のコントロール画面を記憶する。
　特定部１０２は、情報処理装置１００が向けられている方向に基づいて操作対象となる機器を特定する。
　表示部１０３は、特定した機器を操作するためのコントロール画面を記憶部１０１から読出して表示する。
　送信部１０４は、表示部１０３に表示されたコントロール画面に対する操作に応じて、特定した機器を操作するための操作信号を送信する。
　以上の構成によれば、情報処理装置１００を機器１１１～１１３のいずれかに向けるだけでその機器用の操作画面が表示されるため、望んだ機器の遠隔操作を直感的に行なうことができる。従来から、それぞれの機器専用のリモコンで行なっていたものと同じ操作で、かつ、複数の機器に対して一つの装置を用いて遠隔操作を行なうことができる。
　［第２実施形態］
　次に本発明の第２実施形態に係る情報処理装置について、図２～図５を用いて説明する。図２は、本実施形態に係る情報処理装置２００の使用状態を説明するための図である。
　情報処理装置２００は、いわゆるスマートフォンであり、遠隔操作用のリモコンアプリケーションを実行することにより、リモコンとして機能する。情報処理装置２００は、その位置および向きを検出する機能を有している。家の中には、機器の一例としてエアーコンディショナ２１０、照明２２０、テレビ２３０、ビデオ２４０が設けられている。これらの機器２１０～２４０のそれぞれの位置は、情報処理装置２００内に登録されている。ここでは、情報処理装置２００の一例としてスマートフォンを図示しているが、スマートウォッチのようなウェアラブル端末であってもよい。
　情報処理装置２００は、自らの位置および向きならびに各機器の位置を用いて、ユーザがどの機器を操作しようとしているのか判定する。そして、判定の結果、特定された機器に応じた操作画面を、ディスプレイに表示する。これにより、ユーザは、その情報処理装置２００を操作したい機器に向けるだけで、リモコン操作を開始することができる。また、操作画面に対して入力された指示については、Bluetooth（登録商標）や無線ＬＡＮ（Local Area Network）などの技術を用いて、機器に送信される。つまり、操作画面を表示するタイミングで、その特定された機器との間でペアリングを行ない、操作画面に対する操作内容を、無線通信で機器に送信すればよい。
　このような方法によれば、従来から、それぞれの機器専用のリモコンで行なっていた操作と同じ操作で、かつ、複数の機器に対して一つの装置を用いて遠隔操作を行なうことができる。また、家族それぞれが持っているスマートフォンを全てリモコンとして用いることができるので、リモコンを探す手間はなく、リモコンを置くスペース自体が不要になり、かつ家中にリモコンが散在している現状を改善できる。さらに、異なる部屋の機器の操作も、端末を向けるだけで可能になるため、家中の機器をその場から操作できる。
　図３は、情報処理装置２００の内部構成を示す図である。情報処理装置２００は、記憶部３０１、制御部３０２、タッチパネル３０３、通信部３０４、および位置方向検出部３０５、を備えている。
　記憶部３０１は、リモコンアプリケーション３１０を記憶している。リモコンアプリケーション３１０は、複数種類のコントロール画面表示用データ３１１と機器判定テーブル３１２とを含む。
　制御部３０２は、リモコンアプリケーション３１０を記憶部３０１から選択的に読出して実行することで、情報処理装置１００が向けられている方向を判定し、その方向に基づいて操作対象となる機器を特定する。
　タッチパネル３０３は、制御部３０２によって読出されたコントロール画面を表示し、ユーザからの操作指示を受け付ける。
　通信部３０４は、操作信号を、特定された機器に向けて送信する。通信部３０４は、Bluetooth（登録商標）や無線ＬＡＮ（Local Area Network）などの技術を用いて、対象となる機器に操作信号を送信される。複数の機器に対応するプロファイルを備えており、操作画面に対する操作内容を、無線通信で機器に送信する。
　位置方向検出部３０５は、位置検出センサの一例としてのＧＰＳ(Global Positioning System)センサ３５１とデジタルコンパス３５２とを備え、情報処理装置２００がどこにあって、どの方向を向いているのかを検出する。
　リモコンアプリケーション３１０は、機器ごとのコントロール画面表示用データを備えているが、さらに、ユーザの好みに応じて、状況ごとのコントロール画面表示用データを備え、ユーザに選択させてもよい。例えば、「起床」「帰宅」「外出」「睡眠」といったボタンを表示させ、それらのボタンを操作するだけで複数の機器を同時にリモートコントロールしてもよい。例えば、設定により、「照明ＯＮ、エアコンＯＮ、雨戸ＯＰＥＮ」を「起床」ボタンに関連付けて登録してもよい。例えば、「照明ＯＮ、エアコンＯＮ、テレビＯＮ」を「帰宅」ボタンに関連付けて登録してもよい。例えば、「照明ＯＦＦ、エアコンＯＦＦ、テレビＯＦＦ、セキュリティセンサＯＮ」を「外出」ボタンに関連付けて登録してもよい。さらに例えば、「テレビＯＦＦ、照明ＯＦＦ、エアコン一定時間後ＯＦＦ」といった設定を、「睡眠」ボタンに関連付けて登録してもよい。
　図４は、リモコンアプリケーション３１０が備えた機器判定テーブル３１２の内容を示す図である。図４に示すように、各種の機器名と、その位置情報と、表示すべきコントロール画面とを、関連付けて記憶している。例えば、照明Ａは、緯度Ａ１、経度Ａ２に存在し、その照明Ａを操作するための表示画面は、照明操作用タイプＸであり、機器アドレスは、「ＸＸＸ１ＸＸＸ２ＸＸＸＸ」である。この情報を用いれば、情報処理装置２００が向けられている機器を特定し、その機器を操作するためのＧＵＩ（Graphical User Interface）を表示し、その機器を操作するための信号を、その機器アドレス（つまりその機器）に送信できる。
　情報処理装置２００からみて同じ方向に複数の機器がある場合には、その複数の機器を選択する画面を表示する。そのとき、情報処理装置２００が向けられた直線上にあるものが、距離順に候補として挙げられる。
　なお、機器判定テーブル３１２に登録された各機器の属性については、あらかじめ登録しておく必要がある。例えば、エアコンなど各機器の位置に、情報処理装置２００を持って行き、登録ボタンを押すことで、その際の情報処理装置２００の位置を各機器の位置と見なし、エアコンの位置（緯度経度）が登録される。また、各機器から赤外線などの信号を受信して、各機器の位置を判断してもよい。
　Bluetooth（登録商標）によるペアリングでは、一度ペアリングされた際の機器アドレスが、機器判定テーブル３１２に保存される。操作画面については、ユーザが機器の種類を入力することで、関連付けることができる。各機器について一度づつ登録してしまえば、非常に簡便に遠隔操作できるようになる。なお、ここでは、機器を操作するためのＧＵＩを情報処理装置２００自体が備えていることとしているが、本発明はこれに限定されるものではなく、表示画面用のデータを、機器から受け取ったり、サーバからダウンロードしたりしてもよい。記憶部３０１には機器判定テーブル３１２の他に、操作履歴を保存してもよい。例えば、場所と時間を覚えさせておけば、ある場所にある時間に座ったら、このＧＵＩでリモコン画面を表示する、といった履歴を反映した設定にすれば、ユーザにとってより一層使い勝手が向上する。
　図５は、情報処理装置２００における処理の流れを説明するフローチャートである。ステップＳ５０１において、制御部３０２がリモコンアプリケーション３１０を記憶部３０１から読出して起動する。
　次に、ステップＳ５０３において、位置方向検出部３０５が情報処理装置２００の位置および向きを検出する。情報処理装置２００の位置および向きが分かれば、ステップＳ５０５に進み、制御部３０２が、その情報処理装置２００が示している機器を、あらかじめ登録された機器判定テーブル３１２において検索する。
　情報処理装置２００のユーザが操作しようとしている機器が見つかれば、ステップＳ５０７からステップＳ５０９に進み、制御部３０２は、見つかった機器が複数か否か判定する。見つかった機器が１つであれば、ステップＳ５１１に進む。複数の機器が見つかった場合には、ステップＳ５１９に進み、制御部３０２は、タッチパネル３０３に選択画面を表示する。つまり、タッチパネル３０３は、情報処理装置２００が向けられている方向に基づいて特定される機器の候補が複数ある場合に、その複数の候補から一つの操作対象を選択する画面を表示する。その複数の候補を、情報処理装置２００からの距離が近いものから順番に並べて、一つの操作対象を選択する画面を表示してもよい。その状態で、ステップＳ５２１において、選択入力があれば、一つの機器が選択され、ステップＳ５１１に進む。
　ステップＳ５１１においては、制御部３０２が、特定された機器に応じたコントロール画面の表示用データを記憶部３０１から読出し、タッチパネル３０３において、コントロール画面を表示させる。ステップＳ５１３では、制御部３０２が、タッチパネル３０３に対する入力があったか判定し、入力があった場合には、ステップＳ５１５において、機器判定テーブル３１２に登録された機器アドレスに、操作信号を送信する。
　ステップＳ５１７において、処理が終了したと判断するまで、制御部３０２がステップＳ５１３およびステップＳ５１４の処理を繰り返す。
　以上、本実施形態によれば、従来から、それぞれの機器専用のリモコンで行なっていた操作と同じ操作で、かつ、複数の機器に対して一つの装置を用いて遠隔操作を行なうことができる。また、家族それぞれが持っているスマートフォンを全てリモコンとして用いることができるので、リモコンを探す手間はなく、リモコンを置くスペース自体が不要になり、かつ家中にリモコンが散在している現状を改善できる。さらに、異なる部屋の機器の操作も、端末を向けるだけで可能になるため、家中の機器をその場から操作できる。
　［第３実施形態］
　本発明の第３実施形態に係る情報処理装置について、図６乃至図８を用いて説明する。図６は、本実施形態に係る情報処理装置６００の機能構成を説明するための図である。本実施形態に係る情報処理装置６００は、上記第２実施形態と比べると、加速度センサ６５３および気圧センサ６５４を有する点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　気圧センサ６５４を備えることで、情報処理装置６００は、その高さ方向の位置を検出できる。さらに加速度センサ６５３を用いることにより、高さ方向の向きを検出できる。気圧センサ６５４からの出力を用いれば、情報処理装置６００および複数の機器の３次元的な位置を検出することができる。さらに、操作時の情報処理装置６００の高さ方向の向きを検出し、図７のような機器判定テーブル６１２を用いれば、高さの違う場所に存在する機器を判別することもできる。これにより、図８に示すように、１階にいながら、２階の機器の操作を行なうことができ、２階にいながら、１階の機器の操作を行なうことができる。
　［第４実施形態］
　本発明の第４実施形態に係る情報処理装置について、図９および図１０を用いて説明する。図９は、本実施形態に係る情報処理装置９００の機能構成を説明するための図である。本実施形態に係る情報処理装置９００は、上記第実施形態と比べると、環境情報取得部９０６を有する点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　環境情報取得部９０６は、情報処理装置２００の周囲の環境に関する情報（明るさ、気温、音）を取得するものであり、明るさセンサ９６１、気温センサ９６２およびマイク９６３を備えている。明るさセンサ９６１は、情報処理装置２００の周囲の明るさを検出する。気温センサ９６２は、情報処理装置２００の雰囲気温度を検出する。マイク９６３は、情報処理装置２００の周囲の雑音状況を検出する。
　制御部３０２は、図１０に示す機器判定テーブル９１２を利用して、環境情報取得部９０６が取得した環境情報に応じた機器を特定する。例えば、制御部３０２は、周囲の明るさが一定値以下の場合には、情報処理装置２００に最も近い照明を選択して、その操作用のコントロール画面を表示させる。また、制御部３０２は、周囲の気温が一定値以下または一定値以上の場合、情報処理装置２００に最も近いエアコンを選択して、その操作用のコントロール画面を表示させる。さらに、制御部３０２は、時刻が所定の範囲内で、周辺音が所定値以下の場合、情報処理装置２００に最も近いテレビを選択して、その操作用のコントロール画面を表示させる。天気が良くて雨戸が閉まってれば雨戸を開けるためのコントロール画面を表示させ、天気が悪くて雨戸が開いていれば、雨戸を閉めるためのコントロール画面を表示させればよい。
　真っ暗かつ夜中なら、小さなフットライトのリモコンＯＮ、真っ暗かつ朝なら、大きなシーリングライトのリモコンＯＮ、夜寝るタイミングかつ明るいなら、大きなシーリングライトのリモコンＯＦＦなど、ユーザが操作しやすい画面を表示してもよい。
　本実施形態の情報処理装置９００は、周りの環境に合わせて自分がどの機器のリモコンであるべきか判断する。これにより、ユーザの状況を的確に把握でき、さらにユーザがコントロールしようとする機器を正確に推定することが可能となる。これにより、よりユーザフレンドリーなリモコンを実現することができる。
　［第５実施形態］
　本発明の第５実施形態に係る情報処理装置について、図１１を用いて説明する。図１１は、本実施形態に係る情報処理装置１１００の機能構成を説明するための図である。本実施形態に係る情報処理装置１１００は、上記第実施形態と比べると、広告表示部１１０７を有する点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　広告表示部１１０７は、制御部３０２が、タッチパネル３０３に表示するコントロール画面に連動して、コントロールしようとする機器に関連する製品の広告画面を表示させる。例えば、エアコンのコントロール画面に連動して、フィルターなど消耗品の交換時期およびその消耗品の購入のための広告または機器の状態を表示させればよい。ここで、機器内で発生した消耗品交換アラートを、無線通信を介して受信し、その受信したアラートに応じた広告画面を表示してもよい。
　以上、本実施形態によれば、ユーザは、遠隔操作を行なう度に、消耗品の交換時期を確認でき、かつ、簡単な操作で消耗品を購入することができる。
　［他の実施形態］
　以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
　また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。
　この出願は、２０１６年３月２３日に出願された日本出願特願２０１６－０５８０２２を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims (10)

  1. 　複数の機器を遠隔制御する情報処理装置であって、
    　前記情報処理装置が向けられている方向に基づいて操作対象となる機器を特定する特定手段と、
    　複数の機器を操作するための複数のコントロール画面を記憶する記憶手段と、
    　前記特定した機器を操作するためのコントロール画面を前記記憶手段から読出して表示する表示手段と、
    　前記表示手段に表示されたコントロール画面に対する操作に応じて、前記特定した機器を操作するための操作信号を送信する送信手段と、
    　を備えた情報処理装置。
  2. 　前記特定手段は、前記情報処理装置の位置および方向を判定して、操作対象となる機器を特定する請求項１に記載の情報処理装置。
  3. 　前記特定手段は、前記情報処理装置に内蔵された位置検出センサ、加速度センサおよびデジタルコンパスを用いて、操作対象となる機器を特定する請求項２に記載の情報処理装置。
  4. 　前記特定手段は、前記機器から受信したその機器を特定できる情報を含む信号に基づいて、向けられている方向を判定する請求項１、２または３に記載の情報処理装置。
  5. 　前記記憶手段は、前記複数の機器を操作するための複数のコントロール画面を含む複数のアプリケーションプログラムを記憶し、
    　前記表示手段は、前記特定した機器を操作するためのアプリケーションプログラムを前記記憶手段から選択的に読出して実行する請求項１乃至４のいずれか１項に記載の情報処理装置。
  6. 　前記表示手段は、前記コントロール画面に加えて、前記特定した機器に関連する製品の広告画面を表示する請求項１乃至５のいずれか１項に記載の情報処理装置。
  7. 　前記表示手段は、前記情報処理装置が向けられている方向に基づいて特定される機器の候補が複数ある場合に、その複数の候補から一つの操作対象を選択する画面を表示する請求項１乃至６のいずれか１項に記載の情報処理装置。
  8. 　前記表示手段は、前記情報処理装置が向けられている方向に基づいて特定される機器の候補が複数ある場合に、その複数の候補を、距離が近いものから順番に並べて、一つの操作対象を選択する画面を表示する請求項７に記載の情報処理装置。
  9. 　複数の機器を遠隔制御する情報処理装置の制御方法であって、
    　前記情報処理装置は、複数の機器を操作するための複数のコントロール画面を記憶する記憶手段を備え、
    　前記情報処理装置が向けられている方向に基づいて操作対象となる機器を特定する特定ステップと、
    　前記特定した機器を操作するためのコントロール画面を前記記憶手段から読出して表示する表示ステップと、
    　表示された前記コントロール画面に対する操作に応じて、前記特定した機器を操作するための操作信号を送信する送信ステップと、
    　を含む情報処理装置の制御方法。
  10. 　複数の機器を遠隔制御する情報処理装置の制御プログラムであって、
    　前記情報処理装置は、複数の機器を操作するための複数のコントロール画面を記憶する記憶手段を備え、
    　前記情報処理装置が向けられている方向に基づいて操作対象となる機器を特定する特定ステップと、
    　前記特定した機器を操作するためのコントロール画面を前記記憶手段から読出して表示する表示ステップと、
    　表示された前記コントロール画面に対する操作に応じて、前記特定した機器を操作するための操作信号を送信する送信ステップと、
    　を情報処理装置に実行させる制御プログラム。
PCT/JP2016/088867 2016-03-23 2016-12-27 情報処理装置、その制御方法ならびに制御プログラム WO2017163526A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-058022 2016-03-23
JP2016058022 2016-03-23

Publications (1)

Publication Number Publication Date
WO2017163526A1 true WO2017163526A1 (ja) 2017-09-28

Family

ID=59899939

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/088867 WO2017163526A1 (ja) 2016-03-23 2016-12-27 情報処理装置、その制御方法ならびに制御プログラム

Country Status (1)

Country Link
WO (1) WO2017163526A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001238147A (ja) * 2000-02-21 2001-08-31 Sharp Corp 情報表示装置及び情報表示システム
JP2002135862A (ja) * 2000-10-20 2002-05-10 Yoshitsugu Ota 制御データ供給方法およびリモートコントロール装置
JP2004166193A (ja) * 2002-09-27 2004-06-10 Matsushita Electric Ind Co Ltd リモコン装置
JP2005303423A (ja) * 2004-04-07 2005-10-27 Sony Corp 制御システム、制御装置および方法、プログラム、並びに記録媒体
WO2015029231A1 (ja) * 2013-08-30 2015-03-05 日立マクセル株式会社 端末装置およびリモート制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001238147A (ja) * 2000-02-21 2001-08-31 Sharp Corp 情報表示装置及び情報表示システム
JP2002135862A (ja) * 2000-10-20 2002-05-10 Yoshitsugu Ota 制御データ供給方法およびリモートコントロール装置
JP2004166193A (ja) * 2002-09-27 2004-06-10 Matsushita Electric Ind Co Ltd リモコン装置
JP2005303423A (ja) * 2004-04-07 2005-10-27 Sony Corp 制御システム、制御装置および方法、プログラム、並びに記録媒体
WO2015029231A1 (ja) * 2013-08-30 2015-03-05 日立マクセル株式会社 端末装置およびリモート制御方法

Similar Documents

Publication Publication Date Title
CA2959707C (en) Home automation control using context sensitive menus
US8666523B2 (en) Device, method and timeline user interface for controlling home devices
JP6508199B2 (ja) スマートホーム機器の制御方法、装置、システムおよび機器
KR102071575B1 (ko) 이동로봇, 사용자단말장치 및 그들의 제어방법
US9760174B1 (en) Haptic feedback as accessibility mode in home automation systems
KR102231105B1 (ko) 제어 장치 및 그 제어 방법
JP5908676B2 (ja) 制御装置、制御方法、プログラムおよびシステム
US10055094B2 (en) Method and apparatus for dynamically displaying device list
US9911321B2 (en) Simplified adaptable controller
US20160366481A1 (en) Method and apparatus for service oriented input and output
US10956012B2 (en) Display apparatus with a user interface to control electronic devices in internet of things (IoT) environment and method thereof
US20130335203A1 (en) Portable electronic device for remotely controlling smart home electronic devices and method thereof
US20170265286A1 (en) Light Control Apparatus and Light Control Method Thereof
JP2004320209A (ja) 通信装置、その表示方法、コンピュータプログラム、および通信方法
JP6242535B2 (ja) ユーザ入力に基づいて制御システムのためのジェスチャ区域定義データを取得する方法
KR102507254B1 (ko) 실시간 실내 영상을 이용한 홈 오토메이션 시스템
CN107688298B (zh) 远程控制设备及其控制方法
KR102330250B1 (ko) 디스플레이 장치, 제어 장치 및 그 동작 방법
US10877645B2 (en) Electronic device and operating method thereof
JP6049494B2 (ja) 携帯端末
KR102351263B1 (ko) 디스플레이장치 및 그 제어방법
WO2017163526A1 (ja) 情報処理装置、その制御方法ならびに制御プログラム
JP2017060096A (ja) 操作器及び通信システム
US20170269572A1 (en) Telerobotic controller
KR102311315B1 (ko) 지능형 홈 에코 시스템의 제어기기 등록용 스마트 단말장치와 그 등록 방법

Legal Events

Date Code Title Description
NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16895549

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 16895549

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP