JP2014064048A - ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法 - Google Patents

ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法 Download PDF

Info

Publication number
JP2014064048A
JP2014064048A JP2011014968A JP2011014968A JP2014064048A JP 2014064048 A JP2014064048 A JP 2014064048A JP 2011014968 A JP2011014968 A JP 2011014968A JP 2011014968 A JP2011014968 A JP 2011014968A JP 2014064048 A JP2014064048 A JP 2014064048A
Authority
JP
Japan
Prior art keywords
network
remote control
controlled device
operation mode
predetermined command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011014968A
Other languages
English (en)
Inventor
Shigeki Matsunaga
繁樹 松永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2011014968A priority Critical patent/JP2014064048A/ja
Priority to US13/981,580 priority patent/US9348427B2/en
Priority to PCT/JP2011/007282 priority patent/WO2012101726A1/ja
Publication of JP2014064048A publication Critical patent/JP2014064048A/ja
Priority to US15/134,731 priority patent/US9971417B2/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/283—Processing of data at an internetworking point of a home automation network
    • H04L12/2834—Switching of information between an external network and a home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212—Specific keyboard arrangements
    • H04N21/42213—Specific keyboard arrangements for facilitating data entry
    • H04N21/42214—Specific keyboard arrangements for facilitating data entry using alphanumerical characters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/40—Remote control systems using repeaters, converters, gateways

Abstract

【課題】ユーザが操作対象である被制御機器の操作状態とその操作状態に最適な操作方法を知らない場合であっても、制御機器で被制御機器の状態を検出し、操作方法を提供する。
【解決手段】ネットワーク制御システムにおいて、制御機器は、ネットワークリモコンアプリケーションと、操作情報を入力する入力部と、操作コマンドを生成する第１処理部と、操作コマンドを出力する第１通信部とを備え、被制御機器は、アプリケーションの動作状態に応じて被制御機器の操作形態を特定するＧＵＩ制御部と、操作形態を所定コマンドに変換する第２処理部と、所定コマンドを出力する第２通信部とを備え、第１及び第２処理部において機器発見処理が完了した場合、第２処理部は所定コマンドを生成し、第１処理部は受信した所定コマンドを解析し、ネットワークリモコンアプリケーションは解析された操作形態に応じた操作ＧＵＩを表示する。
【選択図】図１

Description

本発明はデジタル家電機器やスマートホンに代表される携帯端末などネットワークに接続される機器に関するものであり、特にネットワークを介して他機器を操作するネットワーク制御機器が、ネットワークを介して操作されるネットワーク被制御機器の状態を検出し、ネットワーク被制御機器に最適な操作方法を提供することが可能なネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法に関するものである。
従来、デジタルテレビ（以下、ＤＴＶと称す）やＨＤＤレコーダなどのデジタル家電機器にはそれぞれの機器専用のリモコンが付属し、ユーザはそれぞれのリモコンで機器を操作していた。また、リモコンは一般的にチャンネルボタンやミュートボタンなどそれぞれの機能が割り当てられた複数のボタンで構成される。このような従来型のリモコンではそれぞれのボタンに割り当てられた機能のみを使う場合に限り非常に快適に操作ができる。
しかし、近年のデジタル家電機器では、キーワード検索やインターネットブラウジングを行うことも可能になり、文字を入力する機会が増えてきている。従来型のリモコンで文字を入力する場合はチャンネル番号ボタンなどを複数回押下して所望の文字を選択するのが一般的であり、直感的でなく慣れが必要で非常に面倒でもあった。
上記問題を解決するため、機器備え付けのリモコンの代わりに携帯電話など文字入力に適した携帯端末をデジタル家電機器のリモコンとし、機器備え付けのリモコンと同等の操作を可能としながら、文字入力時はキーボードなど携帯端末が備える入力方法を利用可能とすることで操作性の向上を図る試みがある（例えば、特許文献１参照）。
特開２００２−０７８０４２号公報
しかしながら、上記特許文献１に記載の既存方式では、操作されるデジタル家電機器が文字入力状態か否かをユーザが判断し、文字入力時に限ってキーボードで文字を入力する必要があった。すなわちユーザは操作対象であるデジタル家電機器の状態を理解した上で最適な操作方法を選択する必要があり、操作方法が複数ある場合、ユーザは最適な操作方法をうまく選択できないという課題があった。
本発明は上記事情に鑑みてなされたものであって、ユーザが操作対象であるデジタル家電機器（ネットワーク被制御機器）の状態とその状態に最適な操作方法を知らない場合であっても、携帯端末（ネットワーク制御機器）側で操作対象であるデジタル家電機器の状態を検出し、ユーザに最適な操作方法を提供することが可能なネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法を提供することを目的とする。
本発明のネットワーク制御システムは、ネットワーク制御機器とネットワーク被制御機器がネットワーク接続されたネットワーク制御システムであって、ネットワーク制御機器は、ネットワーク被制御機器を操作するためのネットワークリモコンアプリケーションと、操作情報を入力するタッチパッド制御部と、ネットワークリモコンアプリケーションの操作に応じて、操作コマンドを生成する第１ネットワークリモコンプロトコル処理部と、生成された操作コマンドを出力する第１ネットワーク通信部と、を備え、ネットワーク被制御機器は、アプリケーションの動作状態に応じて、ネットワーク被制御機器の操作形態を特定するＧＵＩ制御部と、特定された操作形態から、所定コマンドを生成する第２ネットワークリモコンプロトコル処理部と、生成された所定コマンドを出力する第２ネットワーク通信部と、を備え、第１ネットワークリモコンプロトコル処理部及び第２ネットワークリモコンプロトコル処理部において機器発見処理が完了した場合に、第２ネットワークリモコンプロトコル処理部は所定コマンドを生成し、第１ネットワークリモコンプロトコル処理部は第１ネットワーク通信部を介して受信した所定コマンドを解析し、ネットワークリモコンアプリケーションは解析された操作形態に応じた操作ＧＵＩを表示する、ことを特徴とする。
本発明によれば、ユーザは常にデジタル家電を最適な方法で操作することが可能となり、より直感的にデジタル家電機器を使いこなすことができる。
本発明の実施の形態１におけるネットワーク制御システムの構成を示すブロック図 本発明の実施の形態１における機器制御を示すフローチャート 本発明の実施の形態１における操作ＧＵＩの例を示した図
以下本発明を実施するための最良の形態について、図面を参照しながら説明する。
（実施の形態１）
図１は本発明の実施の形態１におけるネットワーク制御システムの構成を示すブロック図であり、例えば、ＤＴＶやＨＤＤレコーダ、ＢＤプレーヤなどのデジタル家電機器に相当しネットワーク上の他機器から操作される被操作機器Ａ１００（ネットワーク被制御機器）と、例えばタッチパネルを備えたスマートホンや携帯電話、学習リモコン、パソコンなどの携帯端末に相当し被操作機器Ａ１００を操作する操作機器Ａ２００（ネットワーク制御機器）とがネットワークＡ３００を介して接続されている。
被操作機器Ａ１００では、放送番組を視聴するための放送視聴アプリケーションＡ１０１や、インターネット上のホームページを閲覧し楽しむためのブラウザアプリケーションＡ１０２などのアプリケーションなどが実行される。各アプリケーションはＧＵＩ制御部Ａ１１１を介して実行され、アプリケーションはＧＵＩ制御部Ａ１１１から後述する操作情報を受け取ったり、ＧＵＩ制御部Ａ１１１に対してＧＵＩ画面の描画を依頼するため、ＧＵＩ画面情報を出力する。
ＧＵＩ制御部Ａ１１１は、アプリケーションからＧＵＩ画面情報を受け取ると受け取ったＧＵＩ画面情報を映像信号に変換して映像出力部Ａ１２１に送信する。また、受け取ったＧＵＩ画面情報から被制御機器Ａ１００の操作形態を特定する。映像出力部Ａ１２１は、受信した映像信号をディスプレイに表示したり、映像端子に出力する。
被操作機器Ａ１００は、例えばＩＲで通信する専用のリモコン（図示せず）を備えており、ユーザは基本的には専用のリモコンで被操作機器Ａ１００を操作する。専用リモコンの操作情報（例えばチャンネル番号ボタンの押下や、メニューボタンの押下）は、ＩＲリモコン制御部Ａ１２２にて受信され、受信された操作情報は入力制御部Ａ１１２に通知される。
入力制御部Ａ１１２は、被操作機器Ａ１００に対する操作情報を集約する部分であり、例えばマウス（図示せず）が接続されている場合はマウス制御部Ａ１２３を有効化し、マウスからの操作情報を受ける。入植制御部Ａ１１２は集約した操作情報をＧＵＩ制御部Ａ１１１に通知する。ＧＵＩ制御部Ａ１１１は、通知された操作情報を現在実行されているアプリケーションに通知し、例えば専用リモコンからチャンネルアップ信号が送出されていた場合、放送視聴アプリケーションＡ１０１はチャンネルを変更する。このようにして被操作機器Ａ１００はユーザからの操作に対応した動作を実行する。
以上説明した動作は、既存のデジタル家電機器の構成とその動作にあたるが、本発明の被操作機器Ａ１００は上記に加え、ネットワーク通信を制御するネットワーク通信部Ａ１３２と、ネットワーク上の機器発見や制御コマンドを処理するネットワークリモコンプロトコル処理部Ａ１３１を備える。例えばネットワークＡ３００がイーサネット（登録商標）である場合、ネットワーク通信部Ａ１３２はＴＣＰ／ＩＰ通信処理スタックに相当し、ネットワークリモコンプロトコル処理部Ａ１３１は例えばＵｎｉｖｅｒｓａｌ Ｐｌｕｇ ａｎｄ Ｐｌａｙ（ＵＰｎＰ）プロトコルスタックに相当し、後述する操作機器Ａ２００からの機器発見コマンドに応答したり、操作機器Ａ２００からの操作コマンドを解析する処理を行う。具体的制御内容は図２を用いて後述する。
操作機器Ａ２００は、被操作機器Ａ１００とほぼ同等の構成を有し、被操作機器Ａ１００を操作するためのネットワークリモコンアプリケーションＡ２０１などが実行される。ＧＵＩ制御部Ａ２１１および映像出力部Ａ２２１、入力制御部Ａ２１２、ネットワーク通信部Ａ２３２は被操作機器Ａ１００と同等のため説明を割愛する。操作機器Ａ２００では、操作情報をタッチパネルを有するタッチパッド制御部Ａ２２２から受信する点が被操作機器Ａ１００と異なる。また、ネットワークリモコンプロトコル処理部Ａ２３１は、被操作機器Ａ１００に搭載されるネットワークリモコンプロトコル処理部Ａ１３１の対となるものであり、機器発見コマンドを送信して被制御機器Ａ１００を発見したり、ネットワークリモコンアプリケーションＡ２０１の操作に応じて被制御機器Ａ１００を制御するための操作コマンドを生成し、ネットワーク通信部Ａ２３２を介して被制御機器Ａ１００へ送信したりする。
次に、本発明の実施の形態の具体的なふるまいを図２に示すフローチャートと操作機器Ａ２００に表示する操作ＧＵＩの例を示す図３を用いて説明する。例として被制御機器Ａ１００をＤＴＶ、制御機器Ａ２００をタッチパネルを有するスマートホンなどの携帯端末として記載している。またネットワークＡ３００は例としてイーサネット（登録商標）として説明する。
はじめに被制御機器Ａ１００および制御機器Ａ２００がネットワークＡ３００に接続されると、ネットワーク通信部Ａ１３２およびネットワーク通信部Ａ２３２はＩＰアドレスを取得するなどして通信の準備を完了する（ステップＳ０００１）。通信ができるようになると操作機器Ａ２００のネットワークリモコンプロトコル処理部Ａ２３１は、機器発見コマンドを送出する。機器発見コマンドに応答がない場合は（Ｓ０００２の「ｎｏ」）、被操作機器Ａ１００が発見されるまで定期的に機器発見コマンドを送出し続ける。
被操作機器Ａ１００は機器発見コマンドを受信するとネットワークリモコンプロトコル処理部Ａ１３１は応答パケットを送信する。これにより操作機器Ａ２００は被操作機器Ａ１００を発見する（ステップＳ０００２の「ｙｅｓ」）。
操作機器Ａ２００は、被操作機器Ａ１００を発見することで被操作機器Ａ１００の能力や操作形態などの情報を知ることができる。ネットワークリモコンアプリケーションＡ２０１はこれらの情報に基づいて最適な操作ＧＵＩを携帯端末に表示する（ステップＳ０００３）。能力は例えば表示したり解釈できる言語やテレビ上で動きうるアプリケーションなどの情報であり、操作機器Ａ１００が英語を解釈できる場合、ネットワークリモコンアプリケーションＡ２０１は、説明文書やボタン名を英語で表示したり、操作機器Ａ１００が３Ｄ表示能力を持っている場合は、タッチパネル上に３Ｄ設定ボタンを表示したりする。操作形態は被操作機器Ａ１００が受け付ける操作に関する情報であり、例えば基本操作を受け付けており付属するＩＲリモコンキーに相当するコマンドを受け付ける状態にあるという情報であったり、文字列を受け付ける状態にあるという情報であったり、マウス操作可能でありベクトル情報を受け付ける状態にあるという情報であったり、音声入力により操作可能であり音声情報を受け付ける状態にあるという情報であったり、ジェスチャーやジャイロ操作を受け付ける状態にあるという情報であったりする。これらの操作形態は同時に指定可能であるものとし、ネットワークリモコンアプリケーションＡ２０１は同時に指定されている操作形態をすべて満たすＧＵＩを表示しても良いし、同時に指定されている操作形態の中で優先度などを基準として一つを選択してそれに最適なＧＵＩを表示しても良い。ここではまず被操作機器Ａ１００が基本操作を受け付ける状態であるとして、図３の基本画面Ｂ１００をタッチパネルに描画する。
このようにして表示した操作ＧＵＩに対し、ユーザが操作すると（ステップＳ０００４の「ｙｅｓ」）、ネットワークリモコンプロトコル処理部Ａ２３１は操作に対応した操作コマンドを、ネットワーク通信部Ａ２３２を介して被操作機器Ａ１００に送信する（ステップＳ０００５）。ここでは例としてチャンネル＋ボタンＢ１０１が押下されたとすると、操作機器Ａ２００からはチャンネルアップに相当するＩＲリモコンコードがネットワークＡ３００を介して被操作機器Ａ１００に送信される。被操作機器Ａ１００は上記コマンドをネットワーク通信部Ａ１３２にて受信すると、ネットワークリモコンプロトコル処理部Ａ１３１にてコマンドの内容を解釈し、その内容を入力制御部Ａ１１２、ＧＵＩ制御部Ａ１１１を介して実行中のアプリケーション（ここでは放送視聴アプリケーションＡ２０１）に通知し、放送視聴アプリケーションＡ２０１は対応する処理としてチャンネルを１つアップする（ステップＳ０００６）。
なお、図３のＢ１００に示す操作ＧＵＩではチャンネルアップを制御するためチャンネル＋ボタンＢ１０１を設けたが、操作機器Ａ２００がタッチパネルを備える場合はボタンではなく、操作コマンドをジェスチャー操作に紐づけても良い。例えば二本指で上方向にタッチパネルをなぞった場合（スワイプ操作）はチャンネルをアップするコマンドを被操作機器Ａ１００に送信し、二本指で下方向にタッチパネルをなぞった場合は、チャンネルダウン、二本指で右方向になぞった場合は入力切り替え、二本指で左方向になぞった場合は放送切り替え、二本以上の指をタッチパネルに触れさせて右方向に回転させた場合は音量アップ、左方向に回転させた場合は音量ダウン、タッチパネルで二本指でつまむ操作をした場合（ピンチ操作）はミュートというように機能を割り当てても良い。また操作機器Ａ２００をシャッフルすることで被操作機器Ａ１００の電源を落とすボタンを表示しても良いし、電源を落とすボタンが押された場合に被操作機器Ａ１００に電源オフボタンを送りつつ、操作機器Ａ２００上で動作するネットワークリモコンアプリケーションＡ２０１を終了させても良い。
上記処理後または操作ＧＵＩに対してユーザ操作がない場合（ステップＳ０００４の「ｎｏ」）は、操作機器Ａ２００は被操作機器Ａ１００から操作形態の変化通知が来ていないかチェックする（ステップＳ０００７）。操作形態の変化通知が来ていない場合（ステップＳ０００７の「ｎｏ」）は、ステップＳ０００４に戻り操作機器Ａ２００はユーザ操作を待機する。
ここで、例えば被操作機器Ａ１００において放送視聴中の状態からブラウザアプリケーションＡ１０２が起動されてログイン画面が表示されている場合、被操作機器Ａ１００は英語文字列入力状態となり（ステップＳ０００７のｙｅｓ）、被操作機器Ａ１００は操作機器Ａ２００にその旨を通知する（Ｓ０００８）。通知を受けた操作機器Ａ２００はステップＳ０００３に戻り通知された操作形態に適した操作ＧＵＩを表示する。ここでは英語文字入力状態を通知されたため、例えば図３のＢ２００に示す英字キーボード画面をタッチパネルに表示する。これによりユーザは被操作機器Ａ１００が英語文字列待機状態であることを簡単に知ることができるし、タッチパネルキーボードやハードウェアキーボードなど操作端末Ａ２００の使い慣れた方法で被操作機器Ａ１００に文字列を入力することができる。
ここで文字列に関して、被操作機器Ａ１００が英語ではなく数字文字列を待機している場合、操作機器Ａ２００はＢ３００の数字キーボード画面を表示すれば、ユーザは即座に数字入力を行うことができる。また、前述のようにキーボード種類を通知する他、例えば文字列の入力方法に関しても被操作機器Ａ１００から操作機器Ａ２００に対して一文字ずつ入力して欲しいのか、一文で入力して欲しいのかを通知しても良い。前者の一文字ずつの入力は、例えば検索画面での検索文字入力に適しており、被操作機器Ａ１００は受信した一文字毎に検索結果を更新していくインクリメンタルサーチを実現することができる。後者の一文入力の場合、操作端末Ａ１００側で仮名漢字変換を終わらせた上で送信することが可能であり、メールアプリケーションなど長文を書く場合に適している。また、被操作機器Ａ１００において文字列入力状態ではなくなった場合、その旨を通知することで操作機器Ａ２００は再度基本操作画面Ｂ１００を表示することができる。
また、操作機器Ａ２００は、被操作機器Ａ１００から操作形態としてベクトル入力（ブラウザ操作）状態である通知を受けた場合、操作ＧＵＩとして例えば図３のＢ４００に示すようなタッチパッドモード画面を表示する。タッチパッドモード画面では、タッチパッドに対するドラッグ操作やタップ操作、ピンチ操作などに対応するコマンドを被操作機器Ａ１００に送信することができる。加えてスクロールバーＢ４０１を表示しページスクロールコマンドを被操作機器Ａ１００に送るようにしても良いし、ブラウザ起動ボタンＢ４０２を表示しても良い。ブラウザ起動ボタンＢ４０２が押された場合、操作機器Ａ２００は被操作機器Ａ１００より被操作機器Ａ１００が現在表示しているＷｅｂページのＵＲＬを取得し、Ｗｅｂページを操作機器Ａ２００が備えるブラウザで起動し表示する。ここでＵＲＬがＷｅｂページではなくマルチメディアコンテンツを指している場合は対応するプレーヤを起動しても良い。
以上のように、本発明の実施の形態によれば、ユーザは操作機器Ａ２００を用いて被操作機器Ａ１００を直感的にかつ簡便に操作することが可能となる。
本発明によれば、ユーザはより簡便にデジタル家電機器を操作することが可能となるので、ネットワークを介してデジタル家電機器を制御する場合に有用である。
Ａ１００ 被操作機器
Ａ１０１ 放送視聴アプリケーション
Ａ１０２ ブラウザアプリケーション
Ａ１１１、Ａ２１１ ＧＵＩ制御部
Ａ１１２、Ａ２１２ 入力制御部
Ａ１２１、Ａ２２１ 映像出力部
Ａ１２２ ＩＲリモコン制御部
Ａ１２３ マウス制御部
Ａ１３１、Ａ２３１ ネットワークリモコンプロトコル処理部
Ａ１３２、Ａ２３２ ネットワーク通信部
Ａ２００ 操作機器
Ａ２０１ ネットワークリモコンアプリケーション
Ａ２２２ タッチパッド制御部
Ａ３００ ネットワーク

Claims (17)

  1. ネットワーク制御機器とネットワーク被制御機器がネットワーク接続されたネットワーク制御システムであって、
    前記ネットワーク制御機器は、
    前記ネットワーク被制御機器を操作するためのネットワークリモコンアプリケーションと、
    前記ネットワークリモコンアプリケーションの操作に応じて、操作コマンドを生成する第１ネットワークリモコンプロトコル処理部と、
    生成された前記操作コマンドを出力する第１ネットワーク通信部と、
    を備え、
    前記ネットワーク被制御機器は、
    アプリケーションの動作状態に応じて、前記ネットワーク被制御機器の操作形態を特定するＧＵＩ制御部と、
    特定された前記操作形態から、所定コマンドを生成する第２ネットワークリモコンプロトコル処理部と、
    生成された前記所定コマンドを出力する第２ネットワーク通信部と、
    を備え、
    前記第１ネットワークリモコンプロトコル処理部及び前記第２ネットワークリモコンプロトコル処理部において機器発見処理が完了した場合に、前記第２ネットワークリモコンプロトコル処理部は前記所定コマンドを生成し、前記第１ネットワークリモコンプロトコル処理部は前記第１ネットワーク通信部を介して受信した前記所定コマンドを解析し、前記ネットワークリモコンアプリケーションは解析された前記操作形態に応じた操作ＧＵＩを表示する、
    ことを特徴とするネットワーク制御システム。
  2. 前記ＧＵＩ制御部において前記操作形態が変化した場合、前記第２ネットワークリモコンプロトコル処理部は変化した操作形態に対応する所定コマンドを生成し、
    前記第１ネットワークリモコンプロトコル処理部は前記第１ネットワーク通信部を介して受信した前記変化した操作形態に対応する所定コマンドを解析し、
    前記ネットワークリモコンアプリケーションは前記変化した操作形態に応じた操作ＧＵＩを表示する、ことを特徴とする請求項１に記載のネットワーク制御システム。
  3. 前記第２ネットワークリモコンプロトコル処理部は、特定された前記操作形態及び前記ネットワーク被制御機器の能力情報から前記所定コマンドを生成し、
    前記ネットワークリモコンアプリケーションは、前記操作形態及び前記能力情報に応じた操作ＧＵＩを表示する、ことを特徴とする請求項１に記載のネットワーク制御システム。
  4. 前記第１ネットワークリモコンプロトコル処理部は、前記ネットワークリモコンアプリケーションの操作をＵＰｎＰプロトコルに準拠した操作コマンドに変換する、ことを特徴とする請求項１に記載のネットワーク制御システム。
  5. 操作情報をジェスチャー操作で入力するタッチパッド制御部と、を更に備えることを特徴とする請求項１に記載のネットワーク制御システム。
  6. 前記ＧＵＩ制御部において前記操作形態が変化した場合、前記第２ネットワークリモコンプロトコル処理部は変化した前記操作形態で使用されるキーボード種類および／または文字列の入力方法を含む所定コマンドを生成し、
    前記ネットワークリモコンアプリケーションは、前記キーボード種類および／または前記文字列の入力方法に応じた操作ＧＵＩを表示する、ことを特徴とする請求項２に記載のネットワーク制御システム。
  7. ネットワーク制御機器とネットワーク被制御機器がネットワーク接続されたネットワーク制御システムにおけるネットワーク制御機器であって、
    前記ネットワーク被制御機器を操作するためのネットワークリモコンアプリケーションと、
    前記ネットワークリモコンアプリケーションの操作に応じて、操作コマンドを生成する第１ネットワークリモコンプロトコル処理部と、
    生成された前記操作コマンドを出力する第１ネットワーク通信部と、
    を備え、
    前記第１ネットワーク通信部が前記ネットワーク被制御機器の操作形態を表す所定コマンドを受信した場合に、前記第１ネットワークリモコンプロトコル処理部は受信された前記所定コマンドを解析し、前記ネットワークリモコンアプリケーションは解析された前記操作形態に応じた操作ＧＵＩを表示する、
    ことを特徴とするネットワーク制御機器。
  8. 前記所定コマンドは、前記ネットワーク被制御機器の能力情報を更に含み、
    前記ネットワークリモコンアプリケーションは、前記操作形態及び前記能力情報に応じた操作ＧＵＩを表示する、ことを特徴とする請求項７に記載のネットワーク制御機器。
  9. 前記第１ネットワークリモコンプロトコル処理部は、前記ネットワークリモコンアプリケーションの操作をＵＰｎＰプロトコルに準拠した操作コマンドに変換する、ことを特徴とする請求項７に記載のネットワーク制御機器。
  10. 操作情報をジェスチャー操作で入力するタッチパッド制御部と、を更に備えることを特徴とする請求項７に記載のネットワーク制御機器。
  11. 前記所定コマンドは、前記操作形態で使用されるキーボード種類および／または文字列の入力方法を含み、
    前記ネットワークリモコンアプリケーションは、前記キーボード種類および／または前記文字列の入力方法に応じた操作ＧＵＩを表示する、ことを特徴とする請求項７に記載のネットワーク制御機器。
  12. ネットワーク制御機器とネットワーク被制御機器がネットワーク接続されたネットワーク制御システムにおけるネットワーク被制御機器であって、
    アプリケーションの動作状態に応じて、前記ネットワーク被制御機器の操作形態を特定するＧＵＩ制御部と、
    特定された前記操作形態から、所定コマンドを生成する第２ネットワークリモコンプロトコル処理部と、
    生成された前記所定コマンドを出力する第２ネットワーク通信部と、
    を備え、
    前記第２ネットワークリモコンプロトコル処理部は、前記ネットワーク制御機器との機器発見処理が完了した場合または前記ＧＵＩ制御部において前記操作情報が変化した場合、操作形態に対応する前記所定コマンドを生成し、前記第２ネットワーク通信部は生成した前記所定コマンドを出力する、
    ことを特徴とするネットワーク被制御機器。
  13. 前記第２ネットワークリモコンプロトコル処理部は、特定された前記操作形態及び前記ネットワーク被制御機器の能力情報から前記所定コマンドを生成する、ことを特徴とする請求項１２に記載のネットワーク被制御機器。
  14. 前記ＧＵＩ制御部において前記操作形態が変化した場合、前記第２ネットワークリモコンプロトコル処理部は変化した前記操作形態で使用されるキーボード種類および／または文字列の入力方法を含む所定コマンドを生成する、ことを特徴とする請求項１２に記載のネットワーク被制御機器。
  15. ネットワーク制御機器とネットワーク被制御機器がネットワーク接続されたネットワーク制御システムにおける機器制御方法であって、
    前記ネットワーク制御機器と前記ネットワーク被制御機器間で機器発見処理を実行するステップと、
    前記機器発見処理が完了した場合に、前記ネットワーク被制御機器において、前記ネットワーク被制御機器の操作形態及び／または能力情報に対応する所定コマンドを生成するステップと、
    前記ネットワーク被制御機器において、生成された前記所定コマンドを送信するステップと、
    前記ネットワーク制御機器において、送信された前記所定コマンドを受信するステップと、
    前記ネットワーク制御機器において、受信した前記所定コマンドを解析するステップと、
    前記ネットワーク制御機器において、解析された前記所定コマンドに含まれる前記操作形態及び／または能力情報に応じた操作ＧＵＩを表示するステップと、
    を有することを特徴とする機器制御方法。
  16. 前記ネットワーク被制御機器の前記操作形態が変化した場合に、前記ネットワーク被制御機器において、変化した前記操作形態に対応する所定コマンドを生成するステップ、を更に有することを特徴とする請求項１５に記載の機器制御方法。
  17. 前記ネットワーク被制御機器の前記操作形態が変化した場合に、前記ネットワーク被制御機器において、変化した前記操作形態で使用されるキーボード種類および／または文字列の入力方法を含む所定コマンドを生成するステップ、を更に有することを特徴とする請求項１５に記載の機器制御方法。
JP2011014968A 2011-01-27 2011-01-27 ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法 Pending JP2014064048A (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2011014968A JP2014064048A (ja) 2011-01-27 2011-01-27 ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法
US13/981,580 US9348427B2 (en) 2011-01-27 2011-12-26 Network control system, control apparatus, controlled apparatus, and apparatus control method
PCT/JP2011/007282 WO2012101726A1 (ja) 2011-01-27 2011-12-26 ネットワーク制御システム、制御機器、被制御機器及び機器制御方法
US15/134,731 US9971417B2 (en) 2011-01-27 2016-04-21 Network control system, control apparatus, controlled apparatus, and apparatus control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011014968A JP2014064048A (ja) 2011-01-27 2011-01-27 ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法

Publications (1)

Publication Number Publication Date
JP2014064048A true JP2014064048A (ja) 2014-04-10

Family

ID=46580339

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011014968A Pending JP2014064048A (ja) 2011-01-27 2011-01-27 ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法

Country Status (3)

Country Link
US (2) US9348427B2 (ja)
JP (1) JP2014064048A (ja)
WO (1) WO2012101726A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016174248A (ja) * 2015-03-16 2016-09-29 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム、情報処理装置および遠隔操作支援方法

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014064048A (ja) * 2011-01-27 2014-04-10 Panasonic Corp ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法
KR101634745B1 (ko) 2011-12-30 2016-06-30 삼성전자 주식회사 전자장치, 이를 제어할 수 있는 사용자 입력장치 및 그 제어방법
JP2014052872A (ja) * 2012-09-07 2014-03-20 Toshiba Corp 電子機器、及び電子機器のプログラム
FR2996086B1 (fr) * 2012-09-25 2014-10-24 Kadrige Procede de presentation a distance entre au moins deux terminaux connectes a travers un reseau
KR20140077015A (ko) * 2012-12-13 2014-06-23 삼성전자주식회사 디스플레이 장치, 원격 제어 장치 및 그들의 사용자 인터페이스 제공 방법
WO2014128784A1 (ja) * 2013-02-20 2014-08-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 携帯情報端末の制御方法及びプログラム
KR20150066132A (ko) * 2013-12-06 2015-06-16 삼성전자주식회사 디스플레이 장치, 리모컨, 디스플레이 시스템, 및 디스플레이 방법
KR102206385B1 (ko) 2014-04-11 2021-01-22 엘지전자 주식회사 이동 단말기 및 이의 제어방법
CN103957271A (zh) * 2014-05-14 2014-07-30 杭州古北电子科技有限公司 新型物联网设备组成的系统
CN103974111B (zh) * 2014-05-22 2017-12-29 华为技术有限公司 将智能终端上的数据传输至电视终端的方法、装置
US10503398B2 (en) * 2014-11-26 2019-12-10 Blackberry Limited Portable electronic device and method of controlling display of selectable elements
KR20160068494A (ko) * 2014-12-05 2016-06-15 삼성전자주식회사 터치 입력을 처리하는 전자 장치 및 터치 입력을 처리하는 방법
US10331312B2 (en) * 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
DK201670583A1 (en) * 2016-03-28 2017-10-16 Apple Inc Keyboard input to an electronic device
US11150798B2 (en) 2016-03-28 2021-10-19 Apple Inc. Multifunction device control of another electronic device
EP3465400B1 (en) * 2016-06-07 2021-10-13 Koninklijke Philips N.V. Operation control of wireless sensors
CN110166821A (zh) * 2019-05-21 2019-08-23 四川虹美智能科技有限公司 一种空调的演示系统及方法
US10951956B1 (en) * 2019-10-25 2021-03-16 Xandr Inc. System and method for establishing a virtual identity for a premises

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5909183A (en) * 1996-12-26 1999-06-01 Motorola, Inc. Interactive appliance remote controller, system and method
JP4569790B2 (ja) 1998-11-20 2010-10-27 ソニー株式会社 制御装置および方法、並びに記録媒体
US6892230B1 (en) * 1999-06-11 2005-05-10 Microsoft Corporation Dynamic self-configuration for ad hoc peer networking using mark-up language formated description messages
US8032833B1 (en) * 1999-07-27 2011-10-04 Samsung Electronics Co., Ltd. Home network device information architecture
TW456112B (en) * 1999-12-10 2001-09-21 Sun Wave Technology Corp Multi-function remote control with touch screen display
JP2002078042A (ja) 2000-08-30 2002-03-15 Hitachi Ltd 携帯端末リモコン装置
KR100811339B1 (ko) * 2001-10-11 2008-03-07 엘지전자 주식회사 그래픽 유저 인터페이스가 구현되는 원격제어 시스템 및방법
JP2003143670A (ja) * 2001-10-31 2003-05-16 Sony Corp リモートコントロールシステム、電子機器、及びプログラム
US6911545B2 (en) * 2001-12-19 2005-06-28 Hoffman-La Roche Inc. Crystals of glucokinase and methods of growing them
JP3925297B2 (ja) * 2002-05-13 2007-06-06 ソニー株式会社 映像表示システム及び映像表示制御装置
KR20040111658A (ko) * 2002-05-20 2004-12-31 소니 가부시끼 가이샤 정보 처리 시스템, 정보 처리 장치 및 정보 처리 방법
US7170422B2 (en) * 2002-06-24 2007-01-30 Matsushita Electric Industrial Co., Ltd. Personal programmable universal remote control
JP2004201133A (ja) * 2002-12-19 2004-07-15 Canon Inc スキャナドライバ
KR100924776B1 (ko) * 2003-04-23 2009-11-03 삼성전자주식회사 우선순위 조정이 가능한 하이브리드 기기 및 그 사용자인터페이스방법
JP2005101887A (ja) 2003-09-25 2005-04-14 Oki Electric Ind Co Ltd 遠隔制御システム
KR100546674B1 (ko) * 2003-11-05 2006-01-26 엘지전자 주식회사 통합 리모컨 구현장치 및 그 방법
JP4726418B2 (ja) * 2004-02-20 2011-07-20 三菱電機株式会社 監視制御装置
JP4534869B2 (ja) * 2005-05-23 2010-09-01 ソニー株式会社 制御装置および方法、並びにプログラム
JP2006345240A (ja) * 2005-06-09 2006-12-21 Sony Corp 遠隔操作システムおよび遠隔操作方法
CN101310234B (zh) * 2006-01-26 2013-03-06 株式会社东芝 工厂设备监视控制装置
US8054294B2 (en) * 2006-03-31 2011-11-08 Sony Corporation Touch screen remote control system for use in controlling one or more devices
KR101532369B1 (ko) * 2006-12-11 2015-06-29 삼성전자주식회사 휴대용 단말기의 원격제어 장치 및 방법
KR100836617B1 (ko) * 2006-12-26 2008-06-10 삼성전자주식회사 이동통신 시스템의 원격 제어 장치 및 방법
JP4804403B2 (ja) * 2007-04-03 2011-11-02 キヤノン株式会社 情報処理装置、映像表示装置及びそれらの制御方法並びにそれらが接続されてなる映像表示システム
US8789149B2 (en) * 2007-12-20 2014-07-22 The Directv Group, Inc. Method and apparatus for communicating between a user device and a user device locating module to allow a partner service to be provided to a user device
KR101466120B1 (ko) * 2008-09-10 2014-11-27 삼성전자 주식회사 영상처리장치 및 그 제어 방법
JP2010183438A (ja) * 2009-02-06 2010-08-19 Sumitomo Electric Networks Inc コンテンツ出力装置、通信端末、遠隔制御システムおよび遠隔制御プログラム
US8400344B2 (en) * 2009-02-20 2013-03-19 Echostar Technologies L.L.C. Methods and apparatus for learning remote control commands
US8344859B2 (en) * 2009-06-29 2013-01-01 Echostar Technologies L.L.C. Automatic change of association of a remote control device with an electronic device
KR101642111B1 (ko) * 2009-08-18 2016-07-22 삼성전자주식회사 방송수신장치, 모바일 디바이스, 서비스 제공 방법 및 방송수신장치 제어 방법
CN101996145B (zh) * 2009-08-21 2017-04-12 三星电子株式会社 用于产生或者使用交互作用活动信息的方法和装置
US8375328B2 (en) * 2009-11-11 2013-02-12 Google Inc. Implementing customized control interfaces
KR101694159B1 (ko) * 2010-04-21 2017-01-09 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
US20120127081A1 (en) * 2010-11-24 2012-05-24 Guoxiang Lin Methods of remote text input and editing on TV screen using locally-text-editable remote control
US8958018B2 (en) * 2010-12-22 2015-02-17 Google Technology Holdings LLC Remote control device and method for controlling operation of a media display system
US9065876B2 (en) * 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
JP2014064048A (ja) * 2011-01-27 2014-04-10 Panasonic Corp ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法
US9081547B2 (en) * 2011-10-17 2015-07-14 Blackberry Limited System and method of automatic switching to a text-entry mode for a computing device
EP2683181A1 (en) * 2012-07-06 2014-01-08 Samsung Electronics Co., Ltd Providing Remote Communication of a Mobile Device in a Communication Network
ES2558759T3 (es) * 2013-04-29 2016-02-08 Swisscom Ag Método; dispositivo electrónico y sistema para la introducción de texto por vía remota

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016174248A (ja) * 2015-03-16 2016-09-29 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム、情報処理装置および遠隔操作支援方法

Also Published As

Publication number Publication date
US20160231829A1 (en) 2016-08-11
US9971417B2 (en) 2018-05-15
US20130307785A1 (en) 2013-11-21
WO2012101726A1 (ja) 2012-08-02
US9348427B2 (en) 2016-05-24

Similar Documents

Publication Publication Date Title
JP2014064048A (ja) ネットワーク制御システム、ネットワーク制御機器、ネットワーク被制御機器及び機器制御方法
JP4857406B1 (ja) 制御装置およびスクリプト変換方法
KR101719268B1 (ko) 검색창과 영상 표시창이 상호전환되는 검색 서비스 제공방법 및 이를 적용한 디스플레이 장치
US9024894B1 (en) Remote control including touch-sensing surface
US20140130101A1 (en) System, television receiver, information terminal, control method, program, and recording medium
US20120162101A1 (en) Control system and control method
JP2007293849A (ja) 機能アイコンの表示システム及び方法
TWI460652B (zh) 資訊瀏覽方法及儲存電腦程式的機器可讀媒體
US20110314363A1 (en) Information processing device, information processing method, program, and information processing system
KR20120134732A (ko) 원격제어기를 이용하여 웹 브라우징을 수행하는 장치 및 방법
WO2016107462A1 (zh) 一种信息输入方法、装置及智能终端
CN102081506A (zh) 遥控器手势输入方法
WO2011120419A1 (zh) 一种电子设备和输入方法
JP2012222626A (ja) リモートコントロールシステム、テレビ、リモートコントローラ、リモートコントロール方法およびプログラム
US20060184875A1 (en) Browser program and content display device
KR20140089837A (ko) 디스플레이 장치, 그의 ui 표시 방법 및 컴퓨터 판독가능 기록매체
JP2014219867A (ja) 画像形成装置、画像形成装置が操作方法を案内する方法、プログラム、および、システム
KR101914207B1 (ko) 셋톱박스
CN202435537U (zh) 一种触控鼠标型遥控器
WO2018000623A1 (zh) 一种网页的操控方法及装置
KR20120048966A (ko) 가상 키보드 제공 장치 및 방법
TWI427966B (zh) 遠端管理系統、多電腦切換器及遠端管理方法
US9548894B2 (en) Proximity based cross-screen experience App framework for use between an industrial automation console server and smart mobile devices
WO2018045882A1 (zh) 控制智能终端应用的软操作键的方法及系统
JP6386222B2 (ja) ネットワークシステム、被制御機器および被制御機器制御方法