JP2004194011A - Remote operation control system, remote controller, remote operation method, program and storage medium - Google Patents

Remote operation control system, remote controller, remote operation method, program and storage medium Download PDF

Info

Publication number
JP2004194011A
JP2004194011A JP2002359947A JP2002359947A JP2004194011A JP 2004194011 A JP2004194011 A JP 2004194011A JP 2002359947 A JP2002359947 A JP 2002359947A JP 2002359947 A JP2002359947 A JP 2002359947A JP 2004194011 A JP2004194011 A JP 2004194011A
Authority
JP
Japan
Prior art keywords
operation
network
remote
device
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002359947A
Other languages
Japanese (ja)
Inventor
Satoru Fukuda
Masaki Kutsuna
Katsuhiro Miyamoto
Yoshikazu Shibamiya
Takashi Yamamoto
勝弘 宮本
高司 山本
芳和 柴宮
正樹 沓名
哲 福田
Original Assignee
Canon Inc
キヤノン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc, キヤノン株式会社 filed Critical Canon Inc
Priority to JP2002359947A priority Critical patent/JP2004194011A/en
Publication of JP2004194011A publication Critical patent/JP2004194011A/en
Application status is Pending legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To eliminate the need of preparing dedicated software on an Internet terminal side and to enable quick remote operations.
SOLUTION: A device 12 to be operated transmits first display information composed of operation elements through a network S11 to a remote controller 11 and the remote controller detects a communication state between the remote controller and a remote operation terminal 15 through the network S16. The remote controller generates second display information on the basis of the first display information and the communication state and transmits it to the remote operation terminal. The remote operation terminal displays the operation elements at an image display device on the basis of the second display information and transmits the one selected by a user from the operation elements to the remote controller as operation information. The remote controller generates an operation signal on the basis of the operation information and transmits it to the device to be operated, and the device to be operated controls the operation of the device itself on the basis of the operation signal.
COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】 [0001]
【発明の属する技術分野】 BACKGROUND OF THE INVENTION
本発明は、リモート操作制御システム、リモート制御装置、リモート操作方法、プログラム、及び記憶媒体に関し、特に、第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システム、該リモート操作制御システムにおけるリモート制御装置、該リモート操作制御システム及びリモート制御装置に適用されるリモート操作方法、該リモート操作方法をコンピュータに実行させるためのプログ The present invention is a remote operation control system, a remote control device, remote operation method, a program, and relates to a storage medium, in particular, a first network, a different second network to the first network, the first network It is connected to, and the operation device controls the operation of its own device based on the operation signal received via the first network, and a remote controller connected to the first and second network, the second is connected to the network, the remote operation control system comprising a remote operating terminal provided with an image display device and an input device, the remote control device in the remote operation control system, a remote operation applied to the remote operation control system and a remote control device method, programming for executing the remote operating method in a computer ム、及び該プログラムを記憶した記憶媒体に関する。 Arm, and a storage medium storing the program.
【0002】 [0002]
【従来の技術】 BACKGROUND OF THE INVENTION
近年、家庭用のオーディオビジュアル(AV)機器等では、規格IEEE1394に基づくネットワーク化が可能になり、該規格及び関連規格に基づいた、機器のリモート操作が可能となっている。 In recent years, the home audio-visual (AV) equipment such enables networking based on standard IEEE1394, based on this standard and related standards, which enables remote operation of the device.
【0003】 [0003]
一方、インターネット用プロトコルIP(Internet Protocol)をベースにし、携帯電話やパーソナルコンピュータ(以下「PC」という)を端末とするインターネット通信は既に広く普及しており、こうしたインターネット端末を利用して、前記家庭用のAV機器等をリモート操作したいという要求が出てくるようになった。 On the other hand, the Internet protocol IP (Internet Protocol) based, mobile phones and personal computer (hereinafter referred to as "PC") the Internet to the terminal communication is already widely used, by using these Internet terminal, the home request that you want to remotely control the AV equipment such use began to come out.
【0004】 [0004]
例えば、こうした要求に応える装置が、家庭用のAV機器等にWWWサーバ機能を内蔵することにより、携帯電話やPC等のWWWブラウズ機能を持つ機器からAV機器を制御することができる。 For example, meet these requirements devices, by incorporating a WWW server function on the AV apparatus of the household or the like, it is possible to control the AV device from the device having a mobile phone and WWW browsing functions PC or the like. ここでは、各AV機器にIPアドレスを割り当てるようにしている(例えば特許文献1参照)。 Here, it is to assign an IP address to each AV device (for example, see Patent Document 1).
【0005】 [0005]
【特許文献1】 [Patent Document 1]
特開平10−191463号公報【0006】 Japanese Unexamined Patent Publication No. 10-191463 [0006]
【発明が解決しようとする課題】 [Problems that the Invention is to Solve
しかしながら、上記従来の、インターネット端末を利用して、家庭用のAV機器等をリモート操作する装置では、規格IEEE1394と、IPベースインターネット環境とでプロトコルが異なるため、規格IEEE1394上で実現される良好なリモート制御を、インターネットを通じて実現するには、インターネット端末側に専用のソフトウエアを、リモート制御の都度用意する必要がある。 However, the above conventional, via the Internet terminal, remotely to device an AV apparatus or the like for home use, the standard IEEE1394, IP-based Internet and because the protocol is different environments, good implemented on standard IEEE1394 remote control, to achieve over the Internet, a dedicated software on the Internet terminal, it is necessary to prepare each of the remote control.
【0007】 [0007]
また、家庭内の各AV機器間を結ぶIEEE1394ネットワークと家庭外のインターネットでは、家庭外のインターネットの混雑状況等に起因してデータ転送速度が異なり、俊敏な制御が阻害されることもあり得る。 Further, in the IEEE1394 network and outside the home of the Internet connecting the respective AV devices in the home, due to congestion outside the home, such as the Internet different data rates may also be agile control is inhibited.
【0008】 [0008]
本発明はこのような問題点に鑑みてなされたものであって、インターネット端末側に専用のソフトウエアを用意する必要がなく、かつ俊敏なリモート操作が可能なリモート操作制御システム、リモート制御装置、リモート操作方法、プログラム、及び記憶媒体を提供することを目的とする。 The present invention was made in view of such problems, it is not necessary to prepare a dedicated software on the Internet terminal, and agile remote operation capable remote operation control system, a remote control device, and to provide remote operation method, a program, and a storage medium.
【0009】 [0009]
【課題を解決するための手段】 In order to solve the problems]
上記目的を達成するために、請求項1記載の発明によれば、第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システムにおいて、前記被操作装置に設けられ、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記リモート制御装置に送信する第1の送信手段と、前記リモート制御装置に設けられ、前記第2のネットワーク To achieve the above object, according to the first aspect of the invention, a first network, a different second network to the first network, are connected to the first network, the first network based on the operation signal received through the controlling operation of the device itself and the operated device, and a remote controller connected to said first and second networks, connected to said second network, the image display device in and remote operation control system comprising a remote operating terminal having an input device, wherein provided in the operating device, the first display information composed of at least one operating element including the display image information, the first a first transmitting means for transmitting to said remote control device via a network, provided in the remote control device, the second network 介した前記リモート制御装置と前記リモート操作端末との間の通信状態を検出する検出手段と、前記リモート制御装置に設けられ、前記被操作装置から送信された前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成手段と、前記リモート制御装置に設けられ、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第2の送信手段と、前記リモート操作端末に設けられ、前記リモート制御装置から送信された前記第2の表示情報に基づき、前記画像表示装置に操作要素を表示する表示手段と、前記リモート操作端末に設けられ、前記画像表示装置に表示された操作要素のうち、前記入力装置を用いてユーザによって選択された1つを、操作情報 Detecting means for detecting a communication state between the remote operation terminal and the remote control device via the provided remote control device, said transmitted from the operated apparatus the first display information and said detection means based on the communication condition detected by a generating means for generating a second display information, provided in the remote control device, the second display information to the remote operating terminal through the second network and second transmitting means for transmitting, provided in the remote operation terminal, and display means based on said second display information transmitted from a remote control device, displays the operating elements on the image display device, wherein the remote provided to the operation terminal, the image display apparatus of the displayed operation elements, one selected by the user using the input device, the operation information して前記第2のネットワークを介して前記リモート制御装置へ送信する第3の送信手段と、前記リモート制御装置に設けられ、前記リモート操作端末から送信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第4の送信手段とを有することを特徴とするリモート操作制御システムが提供される。 And third transmitting means for transmitting to said remote control device via the second network by, provided in the remote control device, the operation signal based on the operation information transmitted from the remote operating terminal generated, the remote operation control system characterized by a fourth transmission means for transmitting to the operated apparatus via the first network is provided.
【0010】 [0010]
請求項11記載の発明によれば、第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と前記第1ネットワークを介して接続されるとともに、前記第1のネットワークとは異なる第2のネットワークを介して、画像表示装置を備えたリモート操作端末と接続されるリモート制御装置において、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記被操作装置から受信する第1の受信手段と、前記第2のネットワークを介した前記リモート操作端末との間の通信状態を検出する検出手段と、前記被操作装置から受信した前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成手段と、 According to the invention of claim 11, it is connected via the first network and the operating device for controlling the operation of its own device based on the operation signal received through the first network, the first network via different second network and, in the remote control apparatus connected to the remote operating terminal provided with an image display device, the first display information composed of at least one operating element including the display image information, first receiving means for receiving from the operated apparatus via the first network, and detecting means for detecting a communication state between the remote operating terminal through the second network, the operated based on the communication state detected by the first display information has been received and the detecting means from the device, a generating means for generating a second display information, 記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第1の送信手段と、前記リモート操作端末において、前記送信された第2の表示情報に基づき前記画像表示装置に操作要素が表示され、該表示された操作要素のうちユーザによって選択された1つが、操作情報として前記第2のネットワークを介して返信されたとき、該操作情報を受信する第2の受信手段と、前記第2の受信手段によって受信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第2の送信手段とを有することを特徴とするリモート制御装置が提供される。 Serial first transmission means for transmitting to the remote operation terminal of the second display information via the second network, the at remote operating terminal, the transmitted said image display device based on the second display information the operating element is displayed, one selected by the user out of the displayed operation element, when returned via the second network as operation information, a second receiving means for receiving the manipulation information If, in that a second transmission means for generating the operation signal based on the operation information received by said second receiving means, for transmitting via said first network to the operated device remote control device is provided which is characterized.
【0011】 [0011]
また、請求項16記載の発明によれば、第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システムに適用されるリモート操作方法において、前記被操作装置が、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記リモート制御装置に送信する第1の送信ステップと、前記リモート制御装置が、前記第2のネットワークを According to the invention of claim 16 wherein the first network, and a different second network to the first network, are connected to the first network, it received via the first network operation and the operating device for controlling the operation of the apparatus based on the signal, and a remote controller connected to said first and second networks, connected to said second network, including an image display device and an input device in remote operation method applied to remote operation control system comprising a remote operating terminal, the operated device, a first display information composed of at least one operating element including the display image information, the first a first transmission step of transmitting to said remote control device via the network, the remote control device, the second network した前記リモート制御装置と前記リモート操作端末との間の通信状態を検出する検出ステップと、前記リモート制御装置が、前記被操作装置から送信された前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、前記リモート制御装置が、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第2の送信ステップと、前記リモート操作端末が、前記リモート制御装置から送信された前記第2の表示情報に基づき、前記画像表示装置に操作要素を表示する表示ステップと、前記リモート操作端末が、前記画像表示装置に表示された操作要素のうち、前記入力装置を用いてユーザによって選択された1つを、操作情報として前記第2のネ A detection step of detecting a communication state between the remote control device and the remote operation terminal which has the remote control device, said detected by the first display information and the detection means which is transmitted from the operating device It was based on the communication state, a generation step of generating a second display information, wherein the remote control device, the second transmitting the second display information to the remote operating terminal through the second network a transmission step, the remote operation terminal, based on the second display information transmitted from said remote control device, a display step of displaying the operating elements on the image display apparatus, the remote operation terminal, the image display of the displayed operating elements in the apparatus, one selected by the user using the input device, as operation information the second value トワークを介して前記リモート制御装置へ送信する第3の送信ステップと、前記リモート制御装置が、前記リモート操作端末から送信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第4の送信ステップと、前記被操作装置が、前記第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う動作制御ステップとを有することを特徴とするリモート操作方法が提供される。 A third transmission step of transmitting to said remote control device via the network, the remote control device is configured to generate the operation signal based on the operation information transmitted from the remote operating terminal, the first network a fourth step of transmitting to be transmitted to the operated device through, the operated device, having an operation control step for controlling the operation of its own device based on the operation signal received via the first network remote operation wherein is provided.
【0012】 [0012]
請求項17記載の発明によれば、第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と前記第1ネットワークを介して接続されるとともに、前記第1のネットワークとは異なる第2のネットワークを介して、画像表示装置を備えたリモート操作端末と接続されるリモート制御装置に適用されるリモート操作方法において、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記被操作装置から受信する第1の受信ステップと、前記第2のネットワークを介した前記リモート操作端末との間の通信状態を検出する検出ステップと、前記被操作装置から受信した前記第1の表示情報及び前記検出ステップによって検出された前記通信状態に基づ According to the invention of claim 17 wherein, is connected via the first network and the operating device for controlling the operation of its own device based on the operation signal received through the first network, the first network composed of different second over a network, the remote operation method applied to remote control apparatus connected to the remote operating terminal provided with an image display device, at least one operating element including the display image information and the first display information, to detect the communication state between the first of the remote operation terminal via a first receiving step of receiving from the operated apparatus via the network, the second network a detection step, based the on the communication state detected by the first display information and the detection step received from the operating device 、第2の表示情報を生成する生成ステップと、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第1の送信ステップと、前記リモート操作端末において、前記送信された第2の表示情報に基づき前記画像表示装置に操作要素が表示され、該表示された操作要素のうちユーザによって選択された1つが、操作情報として前記第2のネットワークを介して返信されたとき、該操作情報を受信する第2の受信ステップと、前記第2の受信ステップによって受信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第2の送信ステップとを有することを特徴とするリモート操作方法が提供される。 A generation step of generating a second display information, and a first transmission step of transmitting to the remote operating terminal the second display information via the second network, in the remote operation terminal, the transmission It is has been displayed the image display device on the operation element based on the second display information, one selected by the user out of the displayed operation element, sent back via the second network as the operation information when, a second receiving step of receiving the manipulation information, the generating the operation signal based on the operation information received by the second receiving step, the operated apparatus via the first network remote operation method characterized by a second transmission step of transmitting to is provided.
【0013】 [0013]
さらに、上記リモート操作方法をコンピュータに実行させるためのプログラム、及び上記リモート操作方法をプログラムとして記憶した、コンピュータにより読み出し可能な記憶媒体が提供される。 Furthermore, a program for executing the remote operating method on a computer, and storing the remote operation method as a program, readable storage medium is provided by a computer.
【0014】 [0014]
【発明の実施の形態】 DETAILED DESCRIPTION OF THE INVENTION
以下、本発明の実施の形態を、図面を参照して説明する。 Hereinafter, the embodiments of the present invention will be described with reference to the drawings.
【0015】 [0015]
図1は、本発明に係るリモート操作制御システムの一実施の形態の全体構成を示すブロック図である。 Figure 1 is a block diagram showing the overall configuration of an embodiment of a remote operation control system according to the present invention.
【0016】 [0016]
図中11は、TV装置であって、TV放送の受信、TV装置操作用のリモートコントローラからの受信、家庭内外の各ネットワークにそれぞれ接続された各装置とのデータの送受信、データのプロトコル変換、自装置の制御等を行う。 Figure 11 is a TV device, the reception of TV broadcast, received from a remote controller for TV device operation, transmission and reception of data with each device connected to each network home and out, data protocol conversion, performing control of its own apparatus. また、こうした各送受信を通して得たTV画像データ、その他の画像データ、各種アイコンデータ、制御情報等の表示を行う。 Moreover, these TV image data obtained through the transmission and reception, and other image data, various types of icon data, a display such as control information performed.
【0017】 [0017]
12は、ビデオ記録装置(VTR装置)であって、TV装置11に接続されて、映像/音声等を記録・再生する。 12 is a video recorder (VTR apparatus), and is connected to the TV set 11, for recording and reproducing video / audio, and the like.
【0018】 [0018]
S11は、規格IEEE1394に基づく家庭内ネットワーク(以下「1394ネットワーク」と略記)であって、TV装置11とVTR装置12とを接続する。 S11, to a home network based on the standard IEEE1394 (hereinafter abbreviated as "1394 network"), to connect the TV 11 and the VTR device 12.
【0019】 [0019]
14は、TV装置11と後述のインターネット網S16とを接続する接続サービス部である。 14 is a connection service unit for connecting the Internet network S16 described later with TV device 11.
【0020】 [0020]
S15は、電話回線ネットワークであって、TV装置11をインターネットサービス部14に接続するために使用される。 S15 is a telephone line network, which is used to connect the TV 11 to the Internet service unit 14.
【0021】 [0021]
15は、インターネット接続可能な携帯端末であって、電話機としての通話機能、WEBサイトの閲覧機能を持つ他に、TV装置11やVTR装置12の操作制御機能を持つ。 15 is a Internet-enabled mobile device, calling functions as a telephone, in addition to having a browsing function of the WEB site, with the operation control function of the TV device 11 and the VTR apparatus 12.
【0022】 [0022]
16は、携帯端末15をインターネット網S16に接続するための接続サービス部である。 16 is a connection service unit for connecting the mobile terminal 15 to the Internet S16.
【0023】 [0023]
S16は、インターネット網であり、TCP/IPベースで各種データの送受信に使用される。 S16, a Internet network, used to transmit and receive various data to TCP / IP-based.
【0024】 [0024]
S17は、携帯端末15と接続サービス部16を接続する無線ネットワーク である。 S17, a wireless network for connecting the connection service unit 16 and the portable terminal 15.
【0025】 [0025]
なお、図1においては、1394ネットワークS11にTV装置11とVTR装置12とだけが接続されているが、該1394ネットワークS11に各種AV機器、家電機器、パソコン装置等が接続され得る。 In FIG. 1, but is connected to the TV set 11 and the VTR device 12 to 1394 network S11, various types of AV equipment to the 1394 network S11, home appliances, computer device or the like can be connected.
【0026】 [0026]
図2は、TV装置11の内部構成を示すブロック図である。 Figure 2 is a block diagram showing the internal configuration of the TV apparatus 11.
【0027】 [0027]
図中1101は、アンテナ装置であって、外部よりTV電波を受信し、高周波電気信号に変換し、チューナ部1102へ送る。 Figure 1101, an antenna device, receives a TV radio wave from outside is converted into high-frequency electrical signal and sends it to the tuner unit 1102.
【0028】 [0028]
チューナ部1102は、アンテナ部1101より送られた高周波電気信号を増幅し、希望局を選局し、搬送波により変調されている高周波TV信号を復調し、デコーダ部1103へ出力する。 Tuner 1102 amplifies the high-frequency electrical signal transmitted from the antenna section 1101, selects a desired channel, demodulates the high-frequency TV signal modulated by a carrier wave, and outputs to the decoder 1103.
【0029】 [0029]
デコーダ部1103は、チューナ部1102より送られた信号を、画像データ、音声データ、他のデータ放送データ、電子番組ガイドデータ等の付加データに分離し、デコードを行う。 The decoder unit 1103, a signal sent from the tuner section 1102 separates the image data, voice data, other data broadcasting data, the additional data such as electronic program guide data, and decodes. 画像データは画像制御部1121へ、音声データは音声制御部1123へ、その他のデータはバスS111へ出力する。 Image data to the image control unit 1121, the audio data to the audio control section 1123, and other data are output to the bus S111.
【0030】 [0030]
画像制御部1121は、デコーダ部1103よりの画像データ、VTRデコーダ部1131から送られる画像データ、バスS111から送られる画像データの1つを選択し、またはそれらを合成して、RGB画像データ及び水平垂直同期信号として、表示器1122へ出力する。 The image control unit 1121, image data from the decoder section 1103, the image data sent from the VTR decoder 1131 selects one of the image data sent from the bus S111, or by combining them, RGB image data and horizontal as a vertical synchronizing signal, and outputs to the display unit 1122.
【0031】 [0031]
表示器1122は、画像制御部1121よりRGB画像データ及び水平垂直同期信号を受け取り、画像表示を行う。 Display 1122 receives the RGB image data and horizontal and vertical synchronizing signals from the image control unit 1121, an image is displayed.
【0032】 [0032]
音声制御部1123は、デコーダ部1103からの音声データ、VTRデコーダ部1131から送られる音声データ、バスS111から送られる音声データの1つを選択し、またはそれらを合成し、さらに、音量、音質、臨場感などを制御して、音声出力部1124へ音声信号として出力する。 Voice control unit 1123, the audio data from the decoder 1103, the audio data sent from the VTR decoder 1131 selects one of the audio data transmitted from the bus S111, or to synthesize them, further, volume, sound quality, and it controls the realism, and outputs as an audio signal to the audio output unit 1124.
【0033】 [0033]
音声出力部1124は、音声制御部1123より送られた音声信号を増幅し、スピーカ(図示せず)より音声として出力する。 The audio output unit 1124 amplifies the audio signal sent from the audio controller 1123, and outputs a voice from a speaker (not shown).
【0034】 [0034]
1130は、1394インターフェイス(i/F)部であって、1394ネットワークS11とTV装置11とのインターフェイスを行う。 1130, a 1394 interface (i / F) unit, for interfacing with the 1394 network S11 and TV device 11. 1394ネットワークS11にVTR装置12、各種AV機器、家電機器、パソコン装置等が接続される場合には、TV装置11とそれらの機器との間で、データの送受信が行われ、機器の制御が行われ得る。 VTR device 12 to 1394 network S11, various types of AV equipment, household electrical appliances, in the case where the personal computer apparatus or the like is connected, between the TV 11 and their equipment, transmission and reception of data is performed, the control of the equipment row We get.
【0035】 [0035]
TV装置11に1394ネットワークS11を介してVTR装置12を接続する場合、1394i/F部1130は、画像データ及び音声データと、それ以外の制御データ等との分離を行い、画像データ及び音声データはデータバスS112へ出力し、それ以外のVTR装置12の制御データ、トラック番号や撮影開始日時といった情報データ、VTR視聴者が再生、早送り等のVTR操作を行うための操作データ等を、制御バスS111に出力する。 If the TV device 11 via the 1394 network S11 connecting the VTR device 12, 1394 I / F unit 1130, and image data and audio data, performs separation of the other control data, image data and audio data and outputs to the data bus S112, control data of the other VTR device 12, the track number and the shooting start time such information data, VTR viewer play, operation data or the like for performing VTR operation such as fast-forward, control bus S111 and outputs it to.
【0036】 [0036]
1394i/F部1130は、IEEE(Institute of Electrical and Electronics Engineers)で規定された規格IEEE1394、その上位規格であるIEC(International Electrotechnical Commission)、1394TA(1394 Trade Association)で規定された規格IEC61883、Asynchronous Connection 規格、Turner、 VCR、 Panel等の subunit 規格などに基づき制御を行う。 1394 I / F unit 1130, IEEE (Institute of Electrical and Electronics Engineers) stipulated specifications IEEE1394 in, IEC (International Electrotechnical Commission) is its upper standards, 1394TA (1394 Trade Association) at a defined standard IEC61883, Asynchronous Connection standard, Turner, VCR, control based like subunit standards Panel are performed.
【0037】 [0037]
1140はリモコン制御部であって、TV視聴者がリモートコントローラを操作した際に送信される各種データを受信し、該データを制御部1190へ転送する。 1140 denotes a remote controller, receives various data TV viewers is transmitted when operating the remote controller, it transfers the data to the control unit 1190. なお、VTR装置12の操作パネルの操作画面をTV装置11に表示して該操作パネルを操作する場合も上記リモートコントローラが操作される。 Note that the remote controller is operated even when operating the manipulation panel to display the operation screen of the operation panel of the VTR device 12 to the TV set 11.
【0038】 [0038]
1150は、書き換え可能で電源を切っても消滅しないタイプのメモリ部であって、このメモリ部1150には、1394i/F部1130を通して入力されるVTR装置12の操作パネルデータ、インターネット接続サービスに関わる使用料金等のネットワーク接続データ、モデム部1180より入力されるネットワーク調査データ、携帯端末調査データ、該携帯端末調査データに基づき生成される後述の端末表示操作パネル選択テーブルデータ、前記各種情報と後述の操作パネル要素部品より生成される操作端末表示用操作パネルデータ等が格納される。 1150 is a memory unit of the type that does not disappear even cut the rewritable power, this memory unit 1150, involved an operation panel data of the VTR device 12 input through the 1394 I / F unit 1130, the Internet access service network connection data such as usage fees, the network survey data inputted from the modem unit 1180, the portable terminal survey data, the portable terminal survey data based terminal display operation panel selection table data described later that is generated, to be described later and the various information operation terminal display control panel data and the like generated from the operation panel element part is stored. さらに、リモートコントローラ等から送られたTV装置11の動作に必要な各種データ、デコーダ部1103より出力されるEPGデータ、各種のTV放送付加データ等も格納される。 Furthermore, various data necessary for operation of the TV device 11 sent from the remote controller or the like, EPG data output from the decoder 1103, also various TV broadcast additional data like are stored.
【0039】 [0039]
1160は、データROM部であって、TV装置11に接続され得るVTR装置12を始めとする各種機器の操作機能コードに対応する操作パネルの要素部品(図8を参照して後述)を格納する。 1160, a data ROM unit, stores the component parts of the operation panel corresponding to the operation function codes for various devices including VTR device 12 which may be connected to the TV apparatus 11 (described later with reference to FIG. 8) . また、TV装置11の動作に必要なTVチャネル情報、表示用フォント、アイコン、操作パネル、メッセージ、リモートコントローラ等のキーコード、各種テーブル等を格納する。 Also stores TV channel information necessary for the operation of the TV set 11, a display font, icon, an operation panel, a message, the key code of the remote controller or the like, the various tables and the like.
【0040】 [0040]
1170は、HTML保存部であって、VTR装置12より転送された操作パネルデータ、あるいは、データROM部1160内に格納された操作パネルデータを基に端末表示操作パネル選択テーブル(図15を参照して後述)に基づき生成される操作端末表示用操作パネルデータをインターネットブラウザから閲覧、操作できるようにHTMLデータに変換したデータを保存するHTMLサーバである。 1170 is an HTML storage section, the control panel data transferred from the VTR 12, or by referring to the terminal display control panel selection table (FIG. 15 based on the operation panel data stored in the data ROM unit 1160 operation terminal display operation panel data generated on the basis of later) Te browsing the Internet browser, an HTML server that stores the data converted into HTML data to be operable.
【0041】 [0041]
モデム部1180は、電話回線S15を介してTV装置11と接続サービス部14とがデータ交換するための変調/復調を行う。 Modem 1180, the TV device 11 via the telephone line S15 and connection service unit 14 performs modulation / demodulation for exchanging data. また、TV受信において有料放送の視聴の課金のための管理サーバへ視聴情報の送信等にもモデム部1180は使用される。 Further, the modem unit 1180 to transmit such viewing to the management server information for billing viewing the pay broadcast in the TV receiver is used.
【0042】 [0042]
1185は、時計部であって、現在の年月時刻を提示可能であり、料金時間帯の検出、データ転送速度測定等に利用される。 1185 is a clock unit, is capable of presenting the current date time, detection of the charge time zone, is used for data transfer speed measurement and the like.
【0043】 [0043]
制御部1190は、バスS111に接続されており、TV装置11内各部を統括的に制御する。 Control unit 1190 is connected to the bus S111, performs overall control of the TV set 11 in the respective sections. すなわち、アンテナ部1101、チューナ部1102、デコーダ部1103の制御を行い、チャネル切り替え設定や、データ放送データ、電子番組ガイドデータ等の保存を行う。 That is, the antenna unit 1101, the tuner unit 1102, and controls the decoder 1103 performs channel switching settings and data broadcast data, the storage such as an electronic program guide data.
【0044】 [0044]
また、制御部1190は、画像制御部1121を制御し、デコーダ部1103から送られる放送TV画像データ、データ放送データ、電子番組データ、VTRデコーダ部1131から送られるVTR画像データ、バスS111から送られるVTR装置12等のデバイスアイコン、操作パネル等の各種画像データについて、それらのうち1つの選択や、それらの合成等の表示設定制御を行う。 The control unit 1190 is sent to control the image control unit 1121, a broadcast TV image data sent from the decoder 1103, data broadcast data, electronic program data, VTR image data sent from the VTR decoder unit 1131, from the bus S111 device icon such as a VTR device 12, various image data such as an operation panel, one selection and one of them performs display setting control such as their synthesis.
【0045】 [0045]
同様に、制御部1190は、音声制御部1123を制御し、各部より送られる音声データの合成、出力制御を行う。 Similarly, the control unit 1190 controls the audio controller 1123, the synthesis of speech data sent from each part performs output control.
【0046】 [0046]
こうした表示設定制御や合成出力制御は、TV装置11の内部状況、放送データ情報、TV装置11に接続された各種装置よりの情報、TV視聴者のリモートコントローラ操作により入力される操作データ情報などに基づき行われる。 Such display setting control and composite output control, the internal status of the TV set 11, the broadcast data information, information from the various devices connected to the TV set 11, such as the operation data information inputted by the remote controller operation of TV viewers based carried out.
【0047】 [0047]
また制御部1190は、リモコン制御部1140が受信したデータに応じて、あるいはTV装置11内部の状況の変化、放送受信データ、1394i/F部1130よりのデータ、モデム部1180よりのデータに応じて、リモコン制御部1140より、VTR装置12のリモートコントローラ装置へ、制御データ及び表示データを送信させる。 The controller 1190, in accordance with data remote controller 1140 has received, or TV device 11 changes the internal status, broadcast receiving data, data from the 1394 I / F unit 1130, according to data from the modem unit 1180 , the remote controller control unit 1140, to the remote controller device of the VTR device 12 to transmit the control data and display data.
【0048】 [0048]
操作パネル制御においては、制御部1190が、モデム部1180を介して、各接続サービス部14,16、各ネットワークS15、S16、S17の混雑状況の調査、携帯端末15の表示解像度、表示可能色数といった性能調査、こうした混雑状況と携帯端末15に応じた操作パネルの選択、選択したIEEE1394ベースの操作パネルデータのHTMLデータへの変換、HTML保存部1170への格納、携帯端末15へのHTML操作パネルデータの送信、携帯端末15からの操作パネル制御データ(後述、ユーザアクション)の受信、この受信データのIEEE1394ベース操作パネルへの再変換、VTR装置12への送信等を行う。 In the operation panel control, the control unit 1190, via a modem unit 1180, the connection service portions 14 and 16, each network S15, S16, S17 investigation congestion, display resolution of the mobile terminal 15, the displayable number of colors performance survey, these congestion and selection of the operation panel corresponding to the mobile terminal 15, converted into HTML data of the IEEE1394-based operations panel data selected, stored in the HTML storage unit 1170, HTML operation panel to a mobile terminal 15 such as transmission of data, the operation panel control data (described later, a user action) from the mobile terminal 15 receives the re-conversion to IEEE1394-based control panel of the received data, the transmission to the VTR apparatus 12 performs.
【0049】 [0049]
またVTR視聴においては、制御部1190が、1394i/F部1130を制御し、装置接続有無の検出、VTR装置12の操作パネルデータの送受信等を行い、VTR装置12の視聴、制御を可能にする。 In the VTR viewing, the control unit 1190 controls the 1394 I / F section 1130, the detection of the device connection existence performs transmission and reception of the operation panel data of the VTR unit 12, viewing the VTR device 12, allowing control .
【0050】 [0050]
この他、後述する本実施の形態におけるHTMLデータ変換や、操作パネルの表示動作の制御は、すべて制御部1190により行われる。 In addition, HTML data conversion and in this embodiment to be described later, the control of the display operation of the operation panel is performed by all the control section 1190.
【0051】 [0051]
なお、これらの制御動作に必要なワークエリアも制御部1190に存在する。 Also present in the control unit 1190 work area necessary for these control operations.
【0052】 [0052]
S111は、TV装置11内の制御バスであって、前述したように、画像データ及び音声データの転送や、操作パネルデータ及び各部情報の転送に使用される。 S111 is a control bus of the TV apparatus 11, as described above, the transfer of image data and audio data, are used to transfer the operation panel data and each unit information.
【0053】 [0053]
図3は、VTR装置12の内部構成を示すブロック図である。 Figure 3 is a block diagram showing the internal structure of the VTR device 12.
【0054】 [0054]
VTR装置12は、規格IEC61884で規定される仕様を基本としている。 VTR device 12 is in the basic specifications defined by standards IEC61884.
【0055】 [0055]
本実施の形態におけるVTR装置12のTV装置11との接続インターフェイスには、IEC61883、1394TAのAsynchronous Connection、VCRsubunit、Panel subunit で規定されているものを中心に使用している。 The connection interface between the TV apparatus 11 of the VTR device 12 of the present embodiment is used in the center IEC61883,1394TA the Asynchronous Connection, VCRsubunit, those specified in Panel subunit.
【0056】 [0056]
1201は、VCR部(レコーダ部)であって、ビデオテープの走行系機構部、該機構部の制御部、ビデオ信号の記録、再生、変復調部、付加情報の記録、再生部などからなる。 1201, a VCR unit (recorder section), the traveling system mechanism of the video tape, the control unit of the mechanism, of the video signal recording, reproduction, the modem unit, the recording of the additional information, and the like playback unit. 後述の制御部1209により動作制御、付加情報データの転送などが行われ、VCR部1201で記録、再生が行われる。 Operation control by the control unit 1209 described later, such as the transfer of additional information data is performed, recorded in VCR unit 1201, reproduction is performed.
【0057】 [0057]
上記の付加情報データは、属性情報やメタデータとも呼ばれ、テープの記録位置を表すトラックナンバー、記録開始インデックスID、記録年月日時、録画モード、著作権情報等から成る。 Said additional information data, also known as the attribute information or metadata, track number representing the recording position of the tape, the recording start index ID, the recording date, recording mode, consisting of the copyright information or the like.
【0058】 [0058]
1204は、データROM部であって、リモート制御のためにTV装置11に表示する表示データ(操作パネル)、デバイスアイコンなどのデータを格納する。 1204, a data ROM unit, the display data (operation panel) which displays the TV device 11 for remote control, and stores data such as device icons.
【0059】 [0059]
1205は、1394i/F部であり、前述した1394i/F部1130と同様のものである。 1205 is a 1394 I / F section is similar to the 1394 I / F unit 1130 described above. 1394i/F部1205は、制御バスS121及びデータバスS122からのデータを1394ネットワークS11へ送転送し、VTR装置12内のデータの送受信を制御、管理する。 1394 I / F section 1205, the data from control bus S121 and the data bus S122 feed was transferred to the 1394 network S11, controls transmission and reception of data of the VTR device 12, manages.
【0060】 [0060]
制御部1209は、制御バスS121より受け取った操作パネル、デバイスアイコン、制御コマンド等の制御に必要な各種データ、及びデータバスS122より受け取った映像/音声データを、1394i/F部1205を介してTV装置11へ送信する。 Control unit 1209, an operation panel received from the control bus S121, device icons, various data necessary for control, such as control commands, and a video / audio data received from the data bus S122, via the 1394 I / F unit 1205 TV to send to the device 11.
【0061】 [0061]
また制御部1209は、TV装置11の1394i/F部1130より送信される操作パネルに対する後述のユーザアクションや、各種コマンドを受信し、これに基づき、VCR部1201の動作制御や、操作パネルデータの送信を行う。 The control unit 1209, and user actions which will be described later with respect to the operation panel which is transmitted from the 1394 I / F unit 1130 of the TV 11 receives various commands, based on this, the operation control of the VCR unit 1201, the operation panel data It performs the transmission.
【0062】 [0062]
S121は、VTR装置12の制御バスであって、該バスを通して、前記各種データの転送や、VCR部1201の制御が行われる。 S121 is a control bus of the VTR unit 12, through said bus, transfer and the various data, control of the VCR unit 1201 is performed.
【0063】 [0063]
S122は、VCR部1201において記録、再生される画像/音声データ、及び付加情報データを、1394i/F部1205へ転送するためのデータバスである。 S122 is recorded in the VCR unit 1201, the image / audio data is reproduced, and additional information data, a data bus for transferring to the 1394 I / F unit 1205.
【0064】 [0064]
図4は、TV装置11、VTR装置12等のリモート操作にも使用される、電話機能を備えた携帯端末15の内部構成を示すブロック図であり、図5は携帯端末15の前面を示す外観図である。 4, TV device 11 is also used to VTR device 12 remotely, such as, a block diagram showing the internal configuration of the portable terminal 15 having a telephone function, appearance 5 showing a front surface of the portable terminal 15 it is a diagram.
【0065】 [0065]
図中1501はキー入力部であり、電話として使用するときのダイヤリング、文字の入力、携帯端末15の制御等に使用される。 Figure 1501 is a key input unit, dialing when using as a telephone, a character input is used for control of the mobile terminal 15.
【0066】 [0066]
キー入力部1501中、1501aは、左右上下位置にあるカーソルキーと中心位置の決定/実行キーとから成るキー部分である。 Among the key input unit 1501, 1501a is a key part consisting of a decision / execution key of the cursor keys and the central position on the left and right vertical position. 1501bは、インターネット接続メニューキーであって、インターネット機能の一覧メニューを表示させるために使用される。 1501b is an Internet connection menu key, is used to display a list menu of the Internet function.
【0067】 [0067]
後述する操作パネルの操作は主にキー部分1501aと、インターネット接続メニューキー1501bとによって行われる。 Operation described below the operation panel is carried out primarily with the key portion 1501a, by the Internet connection menu key 1501b.
【0068】 [0068]
1502は音声入出力部であって、通話の際の音声の入出力、インターネット閲覧時や操作パネル操作時における確認音、警告音の出力等に使用される。 1502 is a voice input and output unit, voice input and output during a call, Internet browsing or when the operation panel confirmed during operation sound, is used for the output or the like of the alarm sound.
【0069】 [0069]
1503は表示部であって、横250ドット、縦320ドット、256色表示可能な表示装置であり、電話番号、メニュー等の表示、メールの表示、インターネット閲覧時のサイト表示、そして操作パネルの表示に使用される。 1503 is a display unit, a horizontal 250 dots, vertical 320 dots, 256-color display can display, telephone number, display a menu such as the display of the mail, Internet browsing at the site display, and the display of the operation panel They are used to.
【0070】 [0070]
図6は、TV装置11の操作に使用されるリモートコントローラの前面を示す外観図である。 Figure 6 is an external view showing a front surface of the remote controller used in the operation of the TV device 11.
【0071】 [0071]
リモートコントローラは、メニューキー61、カーソルキー62、実行取消キー63、数字キー64等を有し、TV装置11及び各種操作パネルの操作を行うが、本実施の形態に直接関係するものではない。 The remote controller includes a menu key 61, cursor keys 62, executes the cancel key 63 has numeric keys 64 or the like, performs the operation of the TV set 11 and various operation panel, not directly related to the present embodiment.
【0072】 [0072]
次に、本発明に係る操作パネルの構成、制御コマンド、および操作パネルの転送手順について説明する。 Next, the configuration of the operation panel according to the present invention, control commands, and transfer procedure of the operation panel will be described. なおこれらはいずれも、前述のIEEE1394、IEC61883、1394TAの規格に準拠する。 Note Both of these conform to the above-mentioned IEEE1394, IEC61883,1394TA standards.
【0073】 [0073]
まず、本発明に係る操作パネルの構成について説明する。 First, the configuration of the operation panel according to the present invention.
【0074】 [0074]
図7は、VTR装置12の備える操作パネルの表示画面を示す図である。 Figure 7 is a view showing a display screen of the operation panel provided in the VTR apparatus 12.
【0075】 [0075]
該操作パネルは、ボタン112、アイコン113、テキスト114、背景115等の各要素からなっており、これらでパネル要素(操作パネル全体)111を構成している。 The manipulation panel, a button 112, icons 113, text 114, is configured and made of elements, such as background 115, these panel elements (entire operation panel) 111. なお、本実施の形態における操作パネルは、256色使用で、横400ドット、縦250ドットのサイズをもつ。 The operation panel according to the present embodiment, 256 colors used, with the horizontal 400 dots, the vertical 250 dots size.
【0076】 [0076]
図8は、上記の操作パネルのデータ構造を示す図である。 Figure 8 is a diagram showing the data structure of the operation panel.
【0077】 [0077]
すべての要素は、固有のIDを有する。 All of the elements, has a unique ID.
【0078】 [0078]
パネル要素は、操作パネルのタイトルとなる文字列データであるラベルと、表示画面上の操作パネルの位置及びサイズを表すデータとを有する。 Panel element has a label that is a character string data as the operation panel title, and the data representing the position and size of the operation panel on the display screen. また、操作パネルの背景の色指定データ、背景に表示するビットマップデータ、表示する文字列に対するフォントの選択指定データをオプションとして保持する。 Also maintains color designation data of the background of the operation panel, the background on the display bitmap data, font selection specifying data for a character string to be displayed as an option. また、画像及び音声のデータをストリームで転送するIsochronous 転送チャネルデータをオプションとして保持する。 Further, to hold the Isochronous transfer channel data to be transferred images and audio data in the stream as an option. このオプションが指定された場合には、転送されるストリームからデコードされるオーディオビデオデータをパネル要素に表示することができる。 If this option is specified, it is possible to display the audio video data to be decoded from the stream to be transferred to the panel element.
【0079】 [0079]
ボタン要素は、ユーザがボタンを押すまたは離すといったユーザアクション操作をしたときに、それらの操作を表示するためのデータであり、押されたときに表示するビットマップデータと、離されたときに表示するビットマップデータとを有する。 Button element, when a user a user action operation such pressing a button or release, which is data for displaying their operation, and bitmap data to be displayed when pressed, displayed when released and a bit map data.
【0080】 [0080]
ビットマップの大きさはサイズデータで示され、表示位置は位置データで示される。 The size of the bitmap is represented by the size data, display position indicated by the position data. 位置データは、この要素が属するパネル要素内での相対位置を画素単位で指定したものである。 Position data is obtained by specifying the relative position in the panel element this element belongs in pixel units. なお、ボタン要素のタイトル(または機能的な説明)となるラベルへのリンクを保持し、表示する文字列に対するフォントの選択肢をオプションとして保持することができる。 Note that holds a link to a label which is a button element titles (or functional description), it is possible to hold the font choice as an option for a character string to be displayed. また本実施の形態では、ボタン要素は、再生、停止、録画といった機能コードが割り当てられており、該コードにより、TV装置11において、該ボタン操作時の機能がわかる。 Further, in this embodiment, the button element, play, stop, recording such function codes are assigned by the code, the TV device 11, function when the button operation can be seen. 該機能コードは機器の特殊な操作をする場合、存在しない場合もある。 When the functional code of the special operation of the equipment, may not exist.
【0081】 [0081]
アイコン要素は、ビットマップデータで表示され、ユーザが選択することのできる要素である。 Icon element is displayed in the bitmap data, which is an element which the user can select. ビットマップデータ、ラベル、位置及びサイズのデータ、ラベルとなるテキストデータを保持し、フォントの選択肢をオプションとして保持することができる。 Bitmap data, labels, location and size of the data, it contains the text data to be labeled, it is possible to hold the font choice as an option. 複数のアイコンを連続的に表示することで、疑似アニメーション効果を出すことも可能である。 By continuously displaying a plurality of icons, it is also possible to produce a pseudo animation effect.
【0082】 [0082]
テキスト要素は、タイトルや説明を文字列で表示する要素であり、位置及びサイズのデータ、ラベルとなるテキストデータを保持する。 Text element is an element that displays the title or description string, the position and size of the data, to hold the text data that labels. また、背景色の指定とフォントの選択肢をオプションとして保持することができる。 Further, it is possible to retain the option of background color specified and font optional.
【0083】 [0083]
次に、上記で説明した操作パネルに対するユーザアクション(ボタンの押下、解放など)により、操作機器(例えばTV装置11)と被操作機器(例えばVTR装置12)との間で転送されるコマンドについて説明する。 Next, (depression of the button, release, etc.) a user action with respect to the operation panel described above by, the commands are transferred between the operating device (e.g. TV 11) and the operated device (e.g., the VTR 12) Description to.
【0084】 [0084]
GUi_Update(open)コマンドは、操作パネルを使用した制御を行う際、操作機器から被操作機器に対して、最初に発行されるコマンドであり、このコマンドの発行により、操作機器は被操作機器より、デバイスアイコン等の機器情報を得ると共に、操作機器と被操作機器との間に非同期接続(Asynchronous Connection)が確立される。 GUI_UPDATE (open) command, when performing control using the operation panel, with respect to the operated device from the operating device, a command issued initially by issuing this command, the operation device from the operation device, with obtaining device information such as device icons, asynchronous connection (asynchronous connection) is established between the operating device and the operating device.
【0085】 [0085]
GUi_Update(start)コマンドは、被操作機器の操作パネルにおける表示データに変化があった場合に新しい操作パネルデータを転送することにより操作機器にその変化を通知するように被操作機器に指示するコマンドであり、このコマンドを受け取った被操作機器は、GUi_Update(stop)コマンドを受け取るまでこの指示に従う。 GUI_UPDATE (start) command is a command that instructs to the operated equipment to notify the change to the operating device by transferring the new control panel data when a change in the display data on the operation panel of the operating device There, the operating device that has received this command, follows this instruction until it receives a GUI_UPDATE (stop) command.
【0086】 [0086]
Push_Guiコマンドは、操作機器が被操作機器に直接、操作パネルデータの転送を要求するコマンドである。 Push_Gui command operating device directly to the operating device, a command to request the transfer of the operation panel data. このコマンドを受信した被操作機器は、データROM部1203から操作パネルデータを操作機器(TV装置11)へ転送する。 The operating device that has received this command transfers the data ROM 1203 to the control panel data to the operating device (TV 11).
【0087】 [0087]
User_actionコマンドは、操作機器に送信された操作パネルに対し、ユーザがリモートコントローラを使用して操作(ユーザアクション)を行った際、操作機器から被操作機器に対して発行されるコマンドである。 User_action command to the operation panel that was sent to the operating device, when a user performs an operation using a remote controller (user action), a command to be issued to the operated equipment from operating equipment. 該user_actionコマンドでは、ボタン(要素)IDと、ユーザアクションの内容とがaction_codeとして一緒に送信される。 In the user_action command and button (element) ID, and the content of the user actions are sent together as action_code.
【0088】 [0088]
ユーザアクションとしては、キーの押下及び開放があり、キーが押された時(所定項目の選択後、実行キーが押された時)には押下のユーザアクションが、またそのキーが開放された時には開放のユーザアクションが、action_codeと共に送信される。 The user action, there is pressing and releasing the key, when the key is pressed when (after selection of a predetermined item, when the execution key is pressed) is user actions pressed, also to that key is opened user action of opening is transmitted along with the action_code.
【0089】 [0089]
被操作機器は、あらかじめ定められたユーザアクションに対応する制御を行う。 The operating device performs control corresponding to the user action predetermined.
【0090】 [0090]
なお、被操作機器は、操作機器からユーザアクションの送信が無い場合でも、操作パネルが変化した場合は、操作パネルデータを操作機器に転送する。 Incidentally, the operation device, even when there is no transmission of user actions from the operating device, when the operation panel has changed, and transfers the control panel data to the operation device.
【0091】 [0091]
GUi_Update(stop)コマンドは、被操作機器に対する制御を終了させたい場合に操作機器が発行するコマンドである。 GUI_UPDATE (stop) command is a command issued by the operating device in the case of intending to end the control with respect to the operating device.
【0092】 [0092]
図9は、TV装置11が独自に有する操作パネルの要素のうち、VTR操作関連のものを示す図である。 9, among the elements of the operation panel TV device 11 has on its own, it shows those related VTR operation.
【0093】 [0093]
この操作パネルの各要素は機能コードに対応しており、表示画面に応じて、テキスト表示、白黒(2値)表示、16色表示の3種類が用意されている。 Each element of the operation panel corresponds to the function code, in accordance with a display screen, a text display, monochrome (binary) display, three types of 16-color display are prepared. また、該要素は、図15を参照して後述する端末表示操作パネル選択テーブルにおける端末表示解像度の3種類のランクに応じて、テキスト表示、白黒(2値)表示、16色表示とも各3種類ずつ用意されている。 Also, the element, according to three ranks of terminal display resolution of the terminal display operation panel selection table to be described later with reference to FIG. 15, text display, monochrome (binary) display, 16-color display both the three each are provided.
【0094】 [0094]
VTR装置12より転送された操作パネルをTV装置11で表示する場合、TV装置11が独自に有する操作パネルの要素のうち、VTR装置12の操作パネルの各要素の機能コードに対応する要素が代替えとして表示される。 When displaying the transferred operation panel from the VTR 12 on the TV 11, among the elements of the operation panel TV device 11 has a unique function code corresponding elements to the alternative of the elements of the operation panel of the VTR 12 It is displayed as. なお、こうした代替え表示は、後述するように、操作パネルを外部のインターネット端末(携帯端末15等)に表示する際も、回線や端末の状況に応じて、図15の端末表示操作パネル選択テーブルによって選択される方法によって行われる。 Incidentally, this alternative display, as described later, even when displaying the operation panel on the outside of the Internet terminal (portable terminal 15, etc.), depending on the situation of the lines and terminals, the terminal display operation panel selection table of Fig. 15 It is performed by a method selected.
【0095】 [0095]
図10は、携帯端末15(操作端末)のインターネット接続メニュー画面を示す図である。 Figure 10 is a diagram showing an Internet connection menu screen of the mobile terminal 15 (operation terminal). この画面は、携帯端末15のインターネット接続メニューキー1501bを操作することによって携帯端末15に表示される。 This screen is displayed on the mobile terminal 15 by operating an Internet connection menu key 1501b of the mobile terminal 15.
【0096】 [0096]
このインターネット接続メニュー画面内の「5 家庭内操作」を選択実行すると、携帯端末15がインターネット網S16を介して、本実施の形態では、予め設定された家庭内ネットワークのTV装置11に接続される。 Selecting execute "5 home operation" of the Internet connection menu screen, the mobile terminal 15 via the Internet network S16, in this embodiment, it is connected to the TV set 11 of a preset home network . こうした選択実行は、携帯端末15のキー入力部1501のキー部分1501aを操作することによって行われる。 Such selection execution is carried out by operating the key portion 1501a of the key input unit 1501 of the portable terminal 15.
【0097】 [0097]
図11は、携帯端末15がTV装置11にインターネットを介して接続された直後に携帯端末15に表示される機器操作サイトの画面を示す図である。 Figure 11 is a diagram showing a screen of the device operation sites the mobile terminal 15 is displayed on the portable terminal 15 immediately after being connected to the TV set 11 via the Internet.
【0098】 [0098]
ここでは、家庭内ネットワークに接続されたTV装置11やVTR装置12が操作対象として一覧表示される。 Here, TV 11 and VTR device 12 connected to the home network is listed as the operation target. 携帯端末15のユーザは、この一覧表示の中から操作したい機器を選択できる。 The user of the portable terminal 15 can select the equipment you want to operate from within this list.
【0099】 [0099]
図12は、図11に示す画面において「VTR1」(VTR装置12に相当)が選択された場合に表示される画面を示す図であり、この画面はテキスト表示が指定されている場合の画面である。 Figure 12 is a diagram showing a screen displayed when "VTR1" which (corresponding to VTR device 12) is selected on the screen shown in FIG. 11, the screen when this screen text display is designated is there. (A)は、操作項目「録画」が選択された画面であり、(B)は、選択された操作項目に従ってVTR装置12が動作しているときの画面である。 (A) is a screen operation item "recording" is selected, (B) is a screen when the VTR device 12 is operating in accordance with the operation item selected.
【0100】 [0100]
図13は、図11に示す画面において「VTR1」(VTR装置12に相当)が選択された場合に表示される画面を示す図であり、この画面は、16色表示が指定され、選択された操作項目に従ってVTR装置12が動作しているときの画面である。 Figure 13 is a diagram showing a screen displayed when "VTR1" which (corresponding to VTR device 12) is selected on the screen shown in FIG. 11, the screen 16-color display is specified, the selected it is a screen when the VTR device 12 is operating according to the operation item.
【0101】 [0101]
図14は、本実施の形態における携帯端末15で使用しているものより大きく、フルカラー表示可能な表示画面を備えるインターネット端末に、VTR装置12より転送された操作パネルをそのまま表示した場合の画面を示す図である。 Figure 14 is larger than those used in the portable terminal 15 in the present embodiment, the Internet terminal with a full color display screen capable of displaying a screen when it is displayed an operation panel which is transferred from the VTR 12 It illustrates.
【0102】 [0102]
操作端末側を、このような表示画面を有する装置で構成するようにしてもよい。 The operation terminal may be composed of a device having such a display screen.
【0103】 [0103]
図15は、端末表示操作パネル選択テーブルを示す図である。 Figure 15 is a diagram showing a terminal display operation panel selection table.
【0104】 [0104]
この端末表示操作パネル選択テーブルは、操作端末で表示可能な複数の操作パネルの中から、ネットワークの使用料金時間帯、ネットワーク速度、操作端末の表示性能(解像度、色数)に応じて、表示に適した操作パネルを選択するために使用される。 The terminal display operation panel selection table, from among the plurality of operation panels that can be displayed on the operation terminal, the use of the network charge time zone, depending on the network speed, the display of the operation terminal performance (resolution, number of colors), the display It is used to select the appropriate control panel.
【0105】 [0105]
該テーブルの中の表示可能な操作パネルは、操作端末の操作パネルサイズと、操作端末の表示性能に応じて決まる。 Displayable control panel in the table, an operation panel size of the operation terminal, determined in accordance with the display performance of the operating terminal. 図15に示すテーブルは、操作端末(携帯端末15)の操作パネルサイズが横250ドット、縦320ドットであって、表示性能が256色表示であり、VTR装置12の操作パネルサイズが横400ドット、縦250ドットである場合における端末表示操作パネル選択テーブルになっている。 The table shown in FIG. 15, the operation terminal operation panel size horizontal 250 dots (mobile terminal 15), a vertical 320 dots, the display performance is 256-color display, VTR device 12 operating panel size horizontal 400 dots , which is the terminal display operation panel selection table in case of a vertical 250 dots. 図9を参照して前述したように、TV装置11の有しているパネルデータは、操作端末の解像度ランクに対応できるように、3種類用意されている。 As described above with reference to FIG. 9, panel data which has a TV set 11, to accommodate the resolution rank of the operation terminal are three types.
【0106】 [0106]
図16は、操作端末(携帯端末15)からVTR装置12に対するリモート操作制御時における、操作端末とTV装置11とVTR装置12との間での各種制御信号の送受信を示すシーケンス図である。 16, when the remote operation control for the VTR unit 12 from the operation terminal (mobile terminal 15) is a sequence diagram showing the transmission and reception of various control signals between the operation terminal and the TV set 11 and the VTR device 12.
【0107】 [0107]
まず、携帯端末15の操作者による操作に先立ち、TV装置11が、1394ネットワークS11に接続が確認されている機器に対して、Gui_Update(open)コマンドを発行し、操作パネルで操作できる機器の調査を行い、操作できる機器のリストを生成する(st3101、st3102)。 Prior to operation by the operator of the portable terminal 15, TV device 11, with respect to devices connected to the 1394 network S11 is confirmed, it issues a GUI_UPDATE (open) command, survey equipment that can be operated by the operation panel It was carried out, to generate a list of equipment that can be manipulated (st3101, st3102).
【0108】 [0108]
操作者が携帯端末15を操作し、図10に示すインターネットメニュー画面から「5 家庭内操作」を選択し、実行する(st3181)。 Operator operates the mobile terminal 15, select "5 home operation" from the Internet menu screen shown in FIG. 10, executes (st3181).
【0109】 [0109]
携帯端末15は、公衆回線網を介してTV装置11へ接続し、機器操作HTMLサーバの公開を要求するとともに、携帯端末15の機種名、表示性能(解像度、表示色数)をTV装置11へ通知する(st3182)。 The mobile terminal 15 is connected to the TV set 11 via the public network, together with the requesting publication of device operation HTML server, the model name of the portable terminal 15, display performance (resolution, number of display colors) to the TV set 11 notify (st3182).
【0110】 [0110]
その後、携帯端末15は、すぐにこの接続回線を切断し、今度は、インターネットの接続サービス部16へ接続し、TV装置11の操作機器一覧ページを入手し表示する(st3183)。 After that, the mobile terminal 15, immediately cutting the connection line, in turn, connected to the Internet connection service unit 16, to get the operation device list page of the TV device 11 displays (st3183).
【0111】 [0111]
TV装置11は、携帯端末15より機器操作HTMLサーバの公開要求を受信すると、予め生成した操作可能機器リストを、この公開要求を送ってきた携帯端末15の解像度に合わせ、各機器の選択がリンクとなるようHTMLデータに変換し、HTML保存部1170内の操作機器一覧ページに保存する。 TV device 11 receives the public request for the apparatus operation HTML server from the portable terminal 15, an operable device list generated in advance, tailored to the resolution of the mobile terminal 15 which sent the public demand, the selection of each device link and so as to convert into HTML data, it is stored in the operating device list page in the HTML storage unit 1170. 同時に、インターネットの接続サービス部14に接続し、前記HTMLデータに変換された操作可能機器リストを操作機器一覧として公開する(st3152、st3183)。 At the same time, connected to a connection service unit 14 of the Internet, it exposes an operable device list converted into the HTML data as a manipulation device list (st3152, st3183). 携帯端末15は、操作機器一覧ページを検出できると、これを表示する(st3183、図11)。 Mobile terminal 15, when it detects an operating device list page, and displays it (St3183, Figure 11).
【0112】 [0112]
次に、TV装置11は、携帯端末15に転送速度調査パケットを転送し、応答を待つ。 Then, TV device 11 transfers the transfer speed check packet to the mobile terminal 15, and waits for a response. これを受信した携帯端末15は、直ちにこれをTV装置11に返送し、これを受信したTV装置11は、該パケットの応答時間より、TV装置11と携帯端末15との間のネットワークの平均伝送速度を推定する。 The mobile terminal 15 which has received this, immediately return it to the TV set 11, TV set 11 that has received the than the response time of the packet, the average of the network transmission between the TV apparatus 11 and the mobile terminal 15 to estimate the speed. この際、時計部1185より現在時刻を検出しておく(st3184)。 At this time, it keeps detecting the current time from the clock unit 1185 (st3184).
【0113】 [0113]
携帯端末15の操作者が、操作機器一覧ページの中からVTR装置12を選択すると(st3185)、これを検出したTV装置11は、VTR装置12にGui_Update(open)コマンドを発行し、操作パネル受信の初期化を行い、さらにVTR装置12との間で非同期接続(Asynchronous Connection)を確立する(st3105、st3106)。 The operator of the portable terminal 15 and selects the VTR device 12 from the operating device list page (st3185), TV device 11 detects this, issues a GUI_UPDATE (open) command to the VTR unit 12, the operation panel receives performs initialization, further establishes an asynchronous connection (asynchronous connection) with the VTR device 12 (st3105, st3106).
【0114】 [0114]
次にTV装置11は、Gui_Update(start)コマンド、Push_Gui_DataコマンドをVTR装置12に発行して、VTR装置12に操作パネルデータを要求する(st3107、st3108)。 Then TV device 11, GUI_UPDATE (start) command, by issuing a Push_Gui_Data command to the VTR unit 12, and requests the operation panel data to the VTR unit 12 (st3107, st3108). これを受信したVTR装置12は、初期の操作パネルデータをTV装置11に送信する(st3109)。 This VTR device 12 receiving the transmits the initial control panel data to the TV apparatus 11 (st3109).
【0115】 [0115]
TV装置11は、VTR装置12より受信した操作パネルデータを基に、上記推定された平均伝送速度と、上記検出した時刻、上記受信した携帯端末15の性能等から、現在、携帯端末15が表示するのに最適な操作パネルデータを、図15に示す端末表示操作パネル選択テーブルより選択し、携帯端末15用の操作パネルデータを生成する。 TV device 11 based on the operation panel data received from the VTR 12, and the estimated average transmission rate, the time that the detected, the performance of the mobile terminal 15 thus received, currently, the mobile terminal 15 is displayed an optimum operation panel data to, and select from the terminal display operation panel selection table shown in FIG. 15, generates an operation panel data for the mobile terminal 15.
【0116】 [0116]
例えば、携帯端末15は、横250ドット、縦320ドット、256色表示可能な表示部1503を有するので、検出した時刻が高料金時間帯に含まれ、ネットワーク速度(推定平均伝送速度)が遅い場合、上記選択テーブルより、図12に示すようなテキスト表示の操作パネルが選択される。 For example, the portable terminal 15, the horizontal 250 dots, vertical 320 dots, because it has a 256-color display can display unit 1503, the detected time is included in the high charge time zone, if the network speed (estimated average transmission rate) is slow , from the selection table, the text display of the operation panel shown in FIG. 12 is selected. また、検出した時刻が高料金時間帯に含まれ、ネットワーク速度が早い場合、上記選択テーブルより、図13に示すような16色表示の操作パネルが選択される。 The time that the detected is included in the high charge time zone, if the network speed is higher than the selection table, 16-color display of the operation panel as shown in FIG. 13 is selected.
【0117】 [0117]
VTR装置12の持つ操作パネルデータを使用する時以外は、操作パネルデータの生成が必要になるが、この際、VTR装置12のパネル要素の要素ID及び機能コードと、新しく生成される操作パネルのパネル要素の要素ID及び機能コードとが同じになるようにして生成が行われる。 Except when using the control panel data possessed by the VTR unit 12, but it is necessary to generate the control panel data, this time, the element ID and the function code of the panel element of the VTR device 12, the newly generated operation panel generation is performed and the element ID and the function code of the panel elements is set to be the same.
【0118】 [0118]
そしてTV装置11は、上記のように選択され生成された操作パネルデータをHTMLデータに変換し、HTML保存部1170内の操作パネルページに保存する(st3159)。 The TV device 11 converts the control panel data is selected is generated as described above in HTML data, stores the operation panel page in HTML storage unit 1170 (st3159).
【0119】 [0119]
操作パネルページに操作パネルデータが保存されると、携帯端末15は、この操作パネルデータをHTML保存部1170から読み出して表示部1503に表示する(st3189)。 When the operation panel data on the operation panel page is stored, the portable terminal 15 displays on the display unit 1503 reads out the operation panel data from the HTML storage unit 1170 (st3189).
【0120】 [0120]
携帯端末15の操作者は、キー入力部1501のカーソルキーで、操作したいボタンを選択し、決定/実行キーを押下して、VTR装置12を操作する。 The operator of the portable terminal 15, the cursor key of the key input unit 1501, select the button to be operated, determining / by the Enter key pressed to operate the VTR unit 12.
【0121】 [0121]
決定/実行キーが押下されると、ここでの操作情報がTV装置11で検出され(st3190)、TV装置11は、これを選択ボタンのボタン押下のユーザアクションとして、User_Actionコマンドに変換し(st3160)、1394ネットワークS11を介してVTR装置12に転送する(st3110)。 When determining / execution key is pressed, wherein the operation information is detected by the TV set 11 (st3190), TV device 11, which as a user action button press the select button, then converted to User_Action command (St3160 ), transferred to the VTR unit 12 via the 1394 network S11 (st3110).
【0122】 [0122]
これを受信したVTR装置12は、ボタン押下に対応する装置動作を行う。 VTR device 12 receives this performs device operation corresponding to the button pressed.
【0123】 [0123]
また、対応した新たな操作パネルデータを、TV装置11へ送信する(st3111)。 Also, a new operation panel data corresponding to transmitted to the TV apparatus 11 (st3111). TV装置11は、新たな操作パネルデータを受信したならば、前述と同様の手順によって、携帯端末15用の操作パネルデータを生成してHTMLデータに変換し、HTML保存部170へ保存する(st3161)。 TV device 11, on receiving a new operation panel data, by a procedure similar to that described above, and generates an operation panel data for the mobile terminal 15 is converted into HTML data, stores the HTML storage unit 170 (st3161 ). これが、携帯端末15で受信され、携帯端末15で新たな操作パネルとして表示される(st3191)。 This is received by the mobile terminal 15, is displayed as a new control panel with the mobile terminal 15 (st3191).
【0124】 [0124]
また、TV装置11からVTR装置12に対して、User_Actionコマンドの送信がない場合も、VTR装置12が新たな操作パネルデータをTV装置11へ送信した際、前述と同様の手順で、新たな操作パネルが携帯端末15に表示される(st3112、st3162、st3192)。 Further, with respect to the VTR 12 from the TV 11, even when there is no transmission of User_Action command, when the VTR device 12 transmits a new operation panel data to the TV apparatus 11, in a procedure similar to the one previously described, a new operation panel is displayed on the portable terminal 15 (st3112, st3162, st3192).
【0125】 [0125]
操作者が携帯端末15上で、操作を終了するボタンを選択し、決定/実行キーを押下すると、これを検出したTV装置11は、これをGui_Update(stop)コマンドに変換し、VTR装置12へ発行する(st3193、st3163、st3113)。 Operator on the mobile device 15, select the button to end the operation, and presses the decision / execution key, TV device 11 detects this, which was converted into GUI_UPDATE (stop) command, the VTR device 12 issue (st3193, st3163, st3113).
【0126】 [0126]
Gui_Update(stop)コマンドを受信したVTR装置12とTV装置11との間では、確立している非同期接続(Asynchronous Connection)を切断する処理を行い(st3114)、TV装置11がVTR装置12に再度Gui_Update(stop)コマンドを発行し、VTR装置12との間の操作パネルによるリモート制御処理を終了する(st3115)。 Between the VTR unit 12 and the TV 11 which receives the GUI_UPDATE (stop) command, asynchronous connections established (Asynchronous Connection) performs a process to disconnect the (st3114), TV device 11 is again VTR device 12 GUI_UPDATE issue the (stop) command, and terminates the remote control process performed by the operation panel between the VTR unit 12 (st3115).
【0127】 [0127]
さらにTV装置11は、インターネット接続の切断処理を行って、すべての処理を終了する(st3199)。 Further TV device 11 performs a disconnection process of the Internet connection, the whole process is terminated (st3199).
【0128】 [0128]
以上のようにして、本実施の形態では、IPベースインターネット環境下の操作端末によって、規格IEEE1394環境下の被操作端末をリモート操作する際に、操作端末に専用のソフトウエアを用意する必要がなく、かつ、ネットワーク混雑状況等に応じて最適な操作パネル表示を行うので、高速なリモート操作が可能となる。 As described above, in the present embodiment, the IP-based Internet environment of the operation terminal, when the remote operation the operated terminal under standard IEEE1394 environment, there is no need to prepare the dedicated software in the operating terminal and, since the optimal operation panel display according to the network congestion or the like, thereby enabling fast remote operation.
【0129】 [0129]
[他の実施の形態] Other Embodiments
上記の実施の形態では、HTML保存部1170を、制御部1190と共にTV装置11内に具備するようにしたが、これに代わって、制御部1190とHTML保存部1170をTV装置11から独立した単独機器として具備するようにしてもよい。 Alone in the above embodiment, the HTML storage unit 1170, has been so equipped to the TV apparatus 11 together with the control unit 1190, in place of this, the independent control unit 1190 and the HTML storage unit 1170 from the TV set 11 it may be provided as a device.
【0130】 [0130]
また上記の実施の形態では、操作端末を携帯端末15としたが、操作端末は携帯端末15に限られるものではなく、例えば携帯ノート型やデスクトップ型のパーソナルコンピュ−タ、ゲーム機等であって、インターネット接続及びWebサイト閲覧が可能な機器であれば、通信機能が無線、有線を問わず、どんな機器であってもよい。 In the above embodiment, although the operation terminal and the mobile terminal 15, the operating terminal is not limited to the portable terminal 15, for example, a mobile notebook or desktop personal computer - data, a game machine, etc. if a device capable of Internet connection and Web site browsing, communication function wireless, whether wired, may be any equipment.
【0131】 [0131]
また上記の実施の形態では、インターネット接続網として外部ネットワークを例に挙げて説明したが、これに代わって、イーサネット(登録商標)等、TCP/IP(Transmission Control Protocol/Internet Protocol)ベースのネットワークであってもよい。 In the above embodiment has been described as an example an external network as the Internet connection network, Alternatively, the Ethernet (registered trademark) or the like, with TCP / IP (Transmission Control Protocol / Internet Protocol) based network it may be. またHTTP(Hypertext Transfer Protocol)ベースのネットワークであってもよい。 The HTTP may be a (Hypertext Transfer Protocol) based network.
【0132】 [0132]
また、被操作端末は、規格IEEE1394に準拠し、操作パネルを有する機器であれば、どんなものであってもよい。 Moreover, the operated terminal is compliant IEEE1394, if a device having an operation panel, may be anything.
【0133】 [0133]
また上記の実施の形態では、操作端末に送信すべき操作パネル要素を選択する際、例えばVTR装置12より転送された操作パネルと、TV装置11内にあらかじめ用意された機能コードに対応した要素部品とを基に、HTML変換すべき操作パネルを決定したが、これに代わって、VTR装置12より転送されたパネル要素のみ使用し、所望の表示サイズ、色数へ拡大/縮小、減色、2値化等の処理を行うようにしてもよい。 In the above embodiment, when selecting the operation panel element to be transmitted to the operation terminal, for example, an operation panel which is transferred from the VTR 12, component parts corresponding to the function code prepared in advance to the TV apparatus 11 based on bets has been determined operation panel to be HTML conversion, Alternatively, using only transferred panel element from the VTR 12, the desired display size, enlargement / reduction to the number of colors, color reduction, 2 value it may perform processing, etc..
【0134】 [0134]
なお、本発明の目的は、実施の形態の機能を実現するソフトウエアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成される。 The object of the present invention, a storage medium storing software program code for realizing the functions of the embodiment to a system or apparatus, the system or apparatus (or CPU or MPU) is stored also achieved by reading and executing the program code stored in the medium.
【0135】 [0135]
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。 In this case, the program code itself read from the storage medium realizes the functions of the above described embodiment, the storage medium storing the program code constitutes the present invention.
【0136】 [0136]
また、プログラムコードを供給するための記憶媒体としては、例えば、フロッピー(登録商標)ディスク、ハードディスク、光磁気ディスク、CD−ROM、CD−R、CD−RW、DVD−ROM、DVD−RAM、DVD−RW、DVD−R、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。 The storage medium for supplying the program code include a floppy (registered trademark) disk, hard disk, a magneto-optical disk, CD-ROM, CD-R, CD-RW, DVD-ROM, DVD-RAM, DVD -RW, DVD-R, a magnetic tape, a nonvolatile memory card, and a ROM.
【0137】 [0137]
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。 Further, by executing the read program by computer, besides the functions of the above described embodiment may be realized, based on instructions of the program code, such as an OS (operating system) running on the computer It performs a part or the whole of the processing so that the functions of the above-described embodiments are realized by those processes.
【0138】 [0138]
更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。 Furthermore, the program code read from the storage medium are written in a memory of a function expansion unit connected to a function expansion board inserted into the computer or on the basis of the instructions of the program code, the function expansion CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing so that the functions of the above-described embodiments are realized by those processes.
【0139】 [0139]
【発明の効果】 【Effect of the invention】
以上詳述したように本発明によれば、被操作装置が、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、第1のネットワークを介してリモート制御装置に送信する。 According to the present invention as described in detail above, transmitting the operated device, a first display information composed of at least one operating element including the display image information, the remote control device via the first network to. また該リモート制御装置が、第2のネットワークを介したリモート制御装置とリモート操作端末との間の通信状態を検出する。 Also the remote control unit detects the communication state between the remote controller and the remote operation terminal via a second network. 前記リモート制御装置は、前記被操作装置から送信された前記第1の表示情報及び前記検出された通信状態に基づき、第2の表示情報を生成し、前記第2のネットワークを介して前記リモート操作端末に送信する。 Said remote control device, based the on the first display information and the detected communication state transmitted from the operated device, generating a second display information, the remote operation through the second network and transmits it to the terminal. 前記リモート操作端末は、前記リモート制御装置から送信された前記第2の表示情報に基づき、画像表示装置に操作要素を表示し、前記画像表示装置に表示された操作要素のうち、入力装置を用いてユーザによって選択された1つを、操作情報として前記第2のネットワークを介して前記リモート制御装置へ送信する。 Said remote control terminal, based on said second display information transmitted from said remote control device, to display the operating elements on the image display apparatus, among the displayed operation element to the image display device, using the input device one selected by the user Te, and transmits to the remote control device via the second network as the operation information. これを受け取ったリモート制御装置は、該操作情報に基づいて操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する。 Remote control device which has received this, generates an operation signal based on the manipulation information is transmitted to the operated apparatus via the first network. 前記被操作装置は、前記第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う。 The operated device, controls the operation of its own device based on the operation signal received via the first network.
【0140】 [0140]
これにより、例えばIPベースインターネット環境下のリモート操作端末によって、規格IEEE1394環境下の被操作装置をリモート操作する際に、リモート操作端末に専用のソフトウエアを用意する必要がなく、かつ、第2のネットワークの混雑状況等に応じてリモート操作端末において操作要素の最適な表示を行うので、高速なリモート操作が可能となる。 Thus, for example, by the IP-based Internet environment of the remote operating terminal, when the remote operation the operated device under standard IEEE1394 environment, there is no need to prepare the dedicated software in the remote operation terminal, and the second since the optimal display of the operating elements in the remote operating terminal in response to network congestion or the like, thereby enabling fast remote operation.
【0141】 [0141]
また、第1及び第2のネットワークが互いに異なる通信方式をベースにしていても、リモート操作端末から被操作装置を、それらの機器の種類、機能を問わずにリモート操作することが可能となる。 Also, a different communication schemes first and second networks with each other are based, an operated device from the remote operating terminal, the type of these devices, it is possible to remotely operate regardless of functionality.
【0142】 [0142]
さらに、リモート操作端末において、第2のネットワークの混雑状況、使用時間帯(料金設定と関連)、リモート操作端末の性能に適した操作要素の最適な表示(最適な操作パネルの表示)を行うことが可能であるので、より俊敏に、より低料金でリモート操作が行われ得る。 Further, by performing the remote operation terminal, the congestion status of the second network, using time zone (pricing and related), the optimal display of the operation element suitable performance of the remote operating terminal (display optimal operation panel) since it is possible, more agile, remote operation can be performed at lower rates.
【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS
【図1】本発明に係るリモート操作制御システムの一実施の形態の全体構成を示すブロック図である。 1 is a block diagram showing the overall configuration of an embodiment of a remote operation control system according to the present invention.
【図2】TV装置の内部構成を示すブロック図である。 2 is a block diagram showing the internal configuration of the TV apparatus.
【図3】VTR装置の内部構成を示すブロック図である。 3 is a block diagram showing the internal structure of the VTR device.
【図4】TV装置、VTR装置等のリモート操作にも使用される、電話機能を備えた携帯端末の内部構成を示すブロック図である。 [4] TV device is also used for remote operation of the VTR apparatus such as a block diagram showing the internal configuration of the portable terminal having a telephone function.
【図5】携帯端末の前面を示す外観図である。 5 is an external view showing a front surface of the portable terminal.
【図6】TV装置の操作に使用されるリモートコントローラの前面を示す外観図である。 6 is an external view showing a front surface of the remote controller used in the operation of the TV device.
【図7】VTR装置の備える操作パネルの表示画面を示す図である。 7 is a diagram showing a display screen of the operation panel provided in the VTR apparatus.
【図8】操作パネルのデータ構造を示す図である。 8 is a diagram showing the data structure of the operation panel.
【図9】TV装置が独自に有する操作パネルの要素のうち、VTR操作関連のものを示す図である。 [9] TV apparatus of the elements of the operation panel having a unique illustrates those related VTR operation.
【図10】携帯端末(操作端末)のインターネット接続メニュー画面を示す図である。 10 is a diagram showing an Internet connection menu screen of the mobile terminal (operation terminal).
【図11】携帯端末がTV装置にインターネットを介して接続された直後に携帯端末に表示される機器操作サイトの画面を示す図である。 11 is a diagram showing a screen of a device operation site displayed on the mobile terminal immediately after the portable terminal is connected via the Internet to the TV apparatus.
【図12】図11に示す画面において「VTR1」が選択された場合に表示される画面を示す図であり、この画面はテキスト表示が指定されている場合の画面である。 [Figure 12] is a diagram showing a screen "VTR1" is displayed when it is selected in the screen shown in FIG. 11, this screen is the screen when the text display is specified.
【図13】図11に示す画面において「VTR1」が選択された場合に表示される画面を示す図であり、この画面は、16色表示が指定され、選択された操作項目に従ってVTR装置が動作しているときの画面である。 [Figure 13] is a diagram showing a screen displayed when "VTR1" is selected in the screen shown in FIG. 11, the screen 16-color display is designated, VTR apparatus operates in accordance with the operation item selected it is a screen when you are.
【図14】本実施の形態における携帯端末で使用しているものより大きく、フルカラー表示可能な表示画面を備えるインターネット端末に、VTR装置より転送された操作パネルをそのまま表示した場合の画面を示す図である。 [14] greater than those used in the portable terminal of the present embodiment, the Internet terminal with a full color display screen capable of displaying a diagram showing a screen in the case where it displays an operation panel which is transferred from the VTR it is.
【図15】端末表示操作パネル選択テーブルを示す図である。 15 is a diagram showing a terminal display operation panel selection table.
【図16】操作端末(携帯端末)からVTR装置に対するリモート操作制御時における、操作端末とTV装置とVTR装置との間での各種制御信号の送受信を示すシーケンス図である。 In [16] during the remote operation control for the VTR apparatus from the operation terminal (mobile terminal) is a sequence diagram showing the transmission and reception of various control signals between the operation terminal and the TV apparatus and the VTR apparatus.
【符号の説明】 DESCRIPTION OF SYMBOLS
11 TV装置(リモート制御装置、検出手段、生成手段、第2の送信手段、第4の送信手段) 11 TV device (remote control unit, detecting means, generating means, second transmitting means, fourth transmitting means)
12 ビデオ記録装置(VTR装置、被操作装置、第1の送信手段) 12 Video recorder (VTR apparatus, the operated device, a first transmission means)
14 接続サービス部15 携帯端末(リモート操作端末、表示手段、第3の送信手段) 14 connecting the service unit 15 the mobile terminal (remote operating terminal, display means, a third transmitting means)
16 接続サービス部S11 家庭内ネットワーク(1394ネットワーク、第1のネットワーク) 16 connecting the service unit S11 home network (1394 network, the first network)
S15 電話回線ネットワーク(第2のネットワーク) S15 telephone line network (the second network)
S16 インターネット網S17 無線ネットワーク S16 Internet network S17 wireless network

Claims (21)

  1. 第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システムにおいて、 A first network, a different second network to the first network, which is connected to the first network, the operation of controlling the operation of its own device based on the operation signal received via the first network a device, and a remote controller connected to said first and second networks, connected to said second network, in the remote operation control system comprising a remote operating terminal provided with an image display device and an input device,
    前記被操作装置に設けられ、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記リモート制御装置に送信する第1の送信手段と、 Wherein provided on the operated device, and a first transmission means for transmitting the first display information composed of at least one operating element including the display image information, said remote control device via the first network ,
    前記リモート制御装置に設けられ、前記第2のネットワークを介した前記リモート制御装置と前記リモート操作端末との間の通信状態を検出する検出手段と、 Provided in the remote control device, a detecting means for detecting a communication state between the remote operation terminal and the remote control device via the second network,
    前記リモート制御装置に設けられ、前記被操作装置から送信された前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成手段と、 Provided in the remote control device, and wherein based on the communication state detected by the transmitted first display information and said detection means from the operating unit, generating means for generating a second display information,
    前記リモート制御装置に設けられ、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第2の送信手段と、 Provided in the remote control device, a second transmission means for transmitting the second display information to the remote operation terminal via the second network,
    前記リモート操作端末に設けられ、前記リモート制御装置から送信された前記第2の表示情報に基づき、前記画像表示装置に操作要素を表示する表示手段と、 Provided in the remote operation terminal, and display means based on said second display information transmitted from a remote control device, displays the operating elements on the image display device,
    前記リモート操作端末に設けられ、前記画像表示装置に表示された操作要素のうち、前記入力装置を用いてユーザによって選択された1つを、操作情報として前記第2のネットワークを介して前記リモート制御装置へ送信する第3の送信手段と、 Wherein provided on the remote operating terminal, the one of the displayed operating element to an image display device, one selected by the user using the input device, the remote control via the second network as the operation information and third transmitting means for transmitting to the device,
    前記リモート制御装置に設けられ、前記リモート操作端末から送信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第4の送信手段とを有することを特徴とするリモート操作制御システム。 Provided in the remote controller, to generate the operation signal based on the operation information transmitted from the remote operation terminal, a fourth transmission means for transmitting via said first network to the operated device remote operation control system, comprising a.
  2. 前記検出手段は、さらに現在時刻を検出し、 It said detecting means further detects the current time,
    前記生成手段は、前記被操作装置から送信された前記第1の表示情報並びに前記検出手段によって検出された前記通信状態及び前記現在時刻に基づき、前記第2の表示情報を生成することを特徴とする請求項1記載のリモート操作制御システム。 Said generating means includes a wherein based on the communication state and the present time detected by said first display information and said detection means is transmitted from the operating device to generate the second display information remote operation control system of claim 1 wherein the.
  3. 前記検出手段は、さらに前記リモート操作端末の性能を検出し、 It said detecting means further detects the performance of the remote operation terminal,
    前記生成手段は、前記被操作装置から送信された前記第1の表示情報並びに前記検出手段によって検出された前記通信状態及び前記リモート操作端末の性能に基づき、前記第2の表示情報を生成することを特徴とする請求項1記載のリモート操作制御システム。 Said generating means, said based on the performance of the communication state and the remote operating terminal detected by the transmitted first display information and said detecting means from the operating device to generate the second display information remote operation control system according to claim 1, wherein.
  4. 前記第1のネットワークは、規格IEEE1394に準拠したネットワークであることを特徴とする請求項1記載のリモート操作制御システム。 The first network, the remote operation control system of claim 1, wherein it is a network conforming to the standard IEEE1394.
  5. 前記第2のネットワークは、IP(Internet Protocol)を基に通信を行うネットワークであることを特徴とする請求項1記載のリモート操作制御システム。 It said second network, IP remote operation control system of claim 1, wherein it is a network for performing communication based on (Internet Protocol).
  6. 前記リモート制御装置は、前記第2の表示情報をHTMLデータ形式で保持し、 It said remote control device holds the second display information in HTML data format,
    前記リモート操作端末は、前記リモート制御装置に保持されたHTMLデータ形式の前記第2の表示情報にアクセスして、前記画像表示装置に操作要素を表示することを特徴とする請求項5記載のリモート操作制御システム。 Said remote control terminal, the access to the second display information in HTML data format held in the remote control device of claim 5, wherein the displaying the operation element to the image display device remote operation control system.
  7. 前記第2のネットワークは、TCP(Transmission ControlProtocol)またはHTTP(Hypertext Transfer Protocol)を基に通信を行うネットワークであることを特徴とする請求項1記載のリモート操作制御システム。 Said second network, TCP (Transmission ControlProtocol) or remote operation control system of claim 1, wherein the an HTTP (Hypertext Transfer Protocol) is a network for performing communication based on.
  8. 前記生成手段は、前記第1の表示情報及び前記検出手段に検出された前記通信状態、並びに前記リモート制御装置が生成した表示情報に基づき、前記第2の表示情報を生成することを特徴とする請求項1記載のリモート操作制御システム。 The generation unit, based on the first display information and said detection means on the detected communication state, and the display information in which the remote control device has generated, and generates the second display information remote operation control system of claim 1, wherein.
  9. 前記リモート制御装置はテレビ受信装置であり、前記被操作装置はVTR装置であることを特徴とする請求項1記載のリモート操作制御システム。 It said remote control device is a television receiver, the remote operation control system of claim 1 wherein the the operated device is a VTR device.
  10. 前記リモート操作端末は携帯電話端末であることを特徴とする請求項1記載のリモート操作制御システム。 It said remote operating terminal remote operation control system of claim 1, wherein it is a mobile phone terminal.
  11. 第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と前記第1ネットワークを介して接続されるとともに、前記第1のネットワークとは異なる第2のネットワークを介して、画像表示装置を備えたリモート操作端末と接続されるリモート制御装置において、 It is connected via the first network and the operating device for controlling the operation of its own device based on the operation signal received through the first network, via a different second network from the first network in the remote control apparatus connected to the remote operating terminal provided with an image display device,
    表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記被操作装置から受信する第1の受信手段と、 The first display information composed of at least one operating element including the display image information, a first receiving means for receiving from the operated apparatus via the first network,
    前記第2のネットワークを介した前記リモート操作端末との間の通信状態を検出する検出手段と、 Detecting means for detecting a communication state between the remote operating terminal through the second network,
    前記被操作装置から受信した前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成手段と、 A generating means for generating said based on the communication state detected by the first display information has been received and the detecting means from the operating device, the second display information,
    前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第1の送信手段と、 A first transmitting means for transmitting to said remote operating terminal the second display information via the second network,
    前記リモート操作端末において、前記送信された第2の表示情報に基づき前記画像表示装置に操作要素が表示され、該表示された操作要素のうちユーザによって選択された1つが、操作情報として前記第2のネットワークを介して返信されたとき、該操作情報を受信する第2の受信手段と、 In the remote operating terminal, the display transmitted the image display device on the operation element based on the second display information is, one selected by the user out of the displayed operation element, the second as the operation information when sent back through the network, and a second receiving means for receiving the manipulation information,
    前記第2の受信手段によって受信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第2の送信手段とを有することを特徴とするリモート制御装置。 And characterized by a second transmission means for the generating an operation signal, and transmits through the first network to the operated device based on the operation information received by said second receiving means remote control device for.
  12. 前記検出手段は、さらに現在時刻を検出し、 It said detecting means further detects the current time,
    前記生成手段は、前記被操作装置から送信された前記第1の表示情報並びに前記検出手段によって検出された前記通信状態及び前記現在時刻に基づき、前記第2の表示情報を生成することを特徴とする請求項11記載のリモート制御装置。 Said generating means includes a wherein based on the communication state and the present time detected by said first display information and said detection means is transmitted from the operating device to generate the second display information remote control device according to claim 11.
  13. 前記検出手段は、さらに前記リモート操作端末の性能を検出し、 It said detecting means further detects the performance of the remote operation terminal,
    前記生成手段は、前記被操作装置から送信された前記第1の表示情報並びに前記検出手段によって検出された前記通信状態及び前記リモート操作端末の性能に基づき、前記第2の表示情報を生成することを特徴とする請求項11記載のリモート制御装置。 Said generating means, said based on the performance of the communication state and the remote operating terminal detected by the transmitted first display information and said detecting means from the operating device to generate the second display information remote control device according to claim 11, wherein.
  14. 前記第1のネットワークは、規格IEEE1394に準拠したネットワークであることを特徴とする請求項11記載のリモート制御装置。 The first network, the remote control device according to claim 11, characterized in that a network conforming to the standard IEEE1394.
  15. 前記第2のネットワークは、IP(Internet Protocol)を基に通信を行うネットワークであることを特徴とする請求項11記載のリモート制御装置。 It said second network, IP remote controller according to claim 11, wherein it is a network for performing communication based on (Internet Protocol).
  16. 第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システムに適用されるリモート操作方法において、 A first network, a different second network to the first network, which is connected to the first network, the operation of controlling the operation of its own device based on the operation signal received via the first network application and device, and a remote controller connected to said first and second networks, connected to said second network, the remote operation control system comprising a remote operating terminal provided with an image display device and an input device in remote operation methods,
    前記被操作装置が、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記リモート制御装置に送信する第1の送信ステップと、 The operated device, a first transmission step of transmitting the first display information composed of at least one operating element including the display image information, said remote control device via the first network,
    前記リモート制御装置が、前記第2のネットワークを介した前記リモート制御装置と前記リモート操作端末との間の通信状態を検出する検出ステップと、 Said remote control device, a detection step of detecting a communication state between the remote operation terminal and the remote control device via the second network,
    前記リモート制御装置が、前記被操作装置から送信された前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、 A generation step of the remote control device, the based on the communication state detected by the transmitted first display information and said detection means from the operating unit, generating a second display information,
    前記リモート制御装置が、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第2の送信ステップと、 It said remote control device, and a second transmission step of transmitting the second display information to the remote operation terminal via the second network,
    前記リモート操作端末が、前記リモート制御装置から送信された前記第2の表示情報に基づき、前記画像表示装置に操作要素を表示する表示ステップと、 A display step the remote operation terminal, which based on the second display information transmitted from said remote control device, displays the operating elements on the image display device,
    前記リモート操作端末が、前記画像表示装置に表示された操作要素のうち、前記入力装置を用いてユーザによって選択された1つを、操作情報として前記第2のネットワークを介して前記リモート制御装置へ送信する第3の送信ステップと、 The remote operation terminal, among the displayed operation element to the image display device, one selected by the user using the input device, to said remote control device via the second network as the operation information a third transmission step of transmitting,
    前記リモート制御装置が、前記リモート操作端末から送信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第4の送信ステップと、 Said remote control device, a fourth transmitting step of generating said operation signal based on the operation information transmitted from the remote operating terminal, transmits via the first network to the operated device,
    前記被操作装置が、前記第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う動作制御ステップとを有することを特徴とするリモート操作方法。 Remote operation method the operated device is characterized by having an operation control step for controlling the operation of its own device based on the operation signal received via the first network.
  17. 第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と前記第1ネットワークを介して接続されるとともに、前記第1のネットワークとは異なる第2のネットワークを介して、画像表示装置を備えたリモート操作端末と接続されるリモート制御装置に適用されるリモート操作方法において、 It is connected via the first network and the operating device for controlling the operation of its own device based on the operation signal received through the first network, via a different second network from the first network in remote operation method applied to remote control apparatus connected to the remote operating terminal provided with an image display device,
    表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記被操作装置から受信する第1の受信ステップと、 A first receiving step of receiving the first display information composed of at least one operating element including the display image information, from the operated apparatus via the first network,
    前記第2のネットワークを介した前記リモート操作端末との間の通信状態を検出する検出ステップと、 A detection step of detecting a communication state between the remote operating terminal through the second network,
    前記被操作装置から受信した前記第1の表示情報及び前記検出ステップによって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、 A generating step of generating the based on the communication state detected by the first display information and the detection step received from the operation device, the second display information,
    前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第1の送信ステップと、 A first transmission step of transmitting to the remote operating terminal the second display information via the second network,
    前記リモート操作端末において、前記送信された第2の表示情報に基づき前記画像表示装置に操作要素が表示され、該表示された操作要素のうちユーザによって選択された1つが、操作情報として前記第2のネットワークを介して返信されたとき、該操作情報を受信する第2の受信ステップと、 In the remote operating terminal, the display transmitted the image display device on the operation element based on the second display information is, one selected by the user out of the displayed operation element, the second as the operation information when sent back through the network, a second reception step of receiving the manipulation information,
    前記第2の受信ステップによって受信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第2の送信ステップとを有することを特徴とするリモート操作方法。 And characterized by a second transmission step of generating the operation signal based on the operation information received by said second receiving step, it transmits via the first network to the operated device remote operation how to.
  18. 第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システムに適用されるリモート操作方法を、コンピュータに実行させるためのプログラムにおいて、 A first network, a different second network to the first network, which is connected to the first network, the operation of controlling the operation of its own device based on the operation signal received via the first network application and device, and a remote controller connected to said first and second networks, connected to said second network, the remote operation control system comprising a remote operating terminal provided with an image display device and an input device the remote operation method is, in the program to be executed by a computer,
    前記リモート操作方法が、 The remote operation method,
    前記被操作装置が、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記リモート制御装置に送信する第1の送信ステップと、 The operated device, a first transmission step of transmitting the first display information composed of at least one operating element including the display image information, said remote control device via the first network,
    前記リモート制御装置が、前記第2のネットワークを介した前記リモート制御装置と前記リモート操作端末との間の通信状態を検出する検出ステップと、 Said remote control device, a detection step of detecting a communication state between the remote operation terminal and the remote control device via the second network,
    前記リモート制御装置が、前記被操作装置から送信された前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、 A generation step of the remote control device, the based on the communication state detected by the transmitted first display information and said detection means from the operating unit, generating a second display information,
    前記リモート制御装置が、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第2の送信ステップと、 It said remote control device, and a second transmission step of transmitting the second display information to the remote operation terminal via the second network,
    前記リモート操作端末が、前記リモート制御装置から送信された前記第2の表示情報に基づき、前記画像表示装置に操作要素を表示する表示ステップと、 A display step the remote operation terminal, which based on the second display information transmitted from said remote control device, displays the operating elements on the image display device,
    前記リモート操作端末が、前記画像表示装置に表示された操作要素のうち、前記入力装置を用いてユーザによって選択された1つを、操作情報として前記第2のネットワークを介して前記リモート制御装置へ送信する第3の送信ステップと、 The remote operation terminal, among the displayed operation element to the image display device, one selected by the user using the input device, to said remote control device via the second network as the operation information a third transmission step of transmitting,
    前記リモート制御装置が、前記リモート操作端末から送信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第4の送信ステップと、 Said remote control device, a fourth transmitting step of generating said operation signal based on the operation information transmitted from the remote operating terminal, transmits via the first network to the operated device,
    前記被操作装置が、前記第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う動作制御ステップとを有することを特徴とするプログラム。 The program which the operating device, and having an operation control step for controlling the operation of its own device based on the operation signal received via the first network.
  19. 第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と前記第1ネットワークを介して接続されるとともに、前記第1のネットワークとは異なる第2のネットワークを介して、画像表示装置を備えたリモート操作端末と接続されるリモート制御装置に適用されるリモート操作方法を、コンピュータに実行させるためのプログラムにおいて、 It is connected via the first network and the operating device for controlling the operation of its own device based on the operation signal received through the first network, via a different second network from the first network the remote operation method applied to remote control apparatus connected to the remote operating terminal provided with an image display device, the program for causing a computer to execute,
    前記リモート操作方法が、 The remote operation method,
    表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記被操作装置から受信する第1の受信ステップと、 A first receiving step of receiving the first display information composed of at least one operating element including the display image information, from the operated apparatus via the first network,
    前記第2のネットワークを介した前記リモート操作端末との間の通信状態を検出する検出ステップと、 A detection step of detecting a communication state between the remote operating terminal through the second network,
    前記被操作装置から受信した前記第1の表示情報及び前記検出ステップによって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、 A generating step of generating the based on the communication state detected by the first display information and the detection step received from the operation device, the second display information,
    前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第1の送信ステップと、 A first transmission step of transmitting to the remote operating terminal the second display information via the second network,
    前記リモート操作端末において、前記送信された第2の表示情報に基づき前記画像表示装置に操作要素が表示され、該表示された操作要素のうちユーザによって選択された1つが、操作情報として前記第2のネットワークを介して返信されたとき、該操作情報を受信する第2の受信ステップと、 In the remote operating terminal, the display transmitted the image display device on the operation element based on the second display information is, one selected by the user out of the displayed operation element, the second as the operation information when sent back through the network, a second reception step of receiving the manipulation information,
    前記第2の受信ステップによって受信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第2の送信ステップとを有することを特徴とするプログラム。 And characterized by a second transmission step of generating the operation signal based on the operation information received by said second receiving step, it transmits via the first network to the operated device program to be.
  20. 第1のネットワークと、該第1のネットワークとは異なる第2のネットワークと、前記第1ネットワークに接続され、該第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と、前記第1及び第2のネットワークに接続されたリモート制御装置と、前記第2のネットワークに接続され、画像表示装置及び入力装置を備えたリモート操作端末とから成るリモート操作制御システムに適用されるリモート操作方法をプログラムとして記憶した、コンピュータにより読み出し可能な記憶媒体において、 A first network, a different second network to the first network, which is connected to the first network, the operation of controlling the operation of its own device based on the operation signal received via the first network application and device, and a remote controller connected to said first and second networks, connected to said second network, the remote operation control system comprising a remote operating terminal provided with an image display device and an input device in remote operation method stored as a program, readable storage medium by a computer that is,
    前記リモート操作方法が、 The remote operation method,
    前記被操作装置が、表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記リモート制御装置に送信する第1の送信ステップと、 The operated device, a first transmission step of transmitting the first display information composed of at least one operating element including the display image information, said remote control device via the first network,
    前記リモート制御装置が、前記第2のネットワークを介した前記リモート制御装置と前記リモート操作端末との間の通信状態を検出する検出ステップと、 Said remote control device, a detection step of detecting a communication state between the remote operation terminal and the remote control device via the second network,
    前記リモート制御装置が、前記被操作装置から送信された前記第1の表示情報及び前記検出手段によって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、 A generation step of the remote control device, the based on the communication state detected by the transmitted first display information and said detection means from the operating unit, generating a second display information,
    前記リモート制御装置が、前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第2の送信ステップと、 It said remote control device, and a second transmission step of transmitting the second display information to the remote operation terminal via the second network,
    前記リモート操作端末が、前記リモート制御装置から送信された前記第2の表示情報に基づき、前記画像表示装置に操作要素を表示する表示ステップと、 A display step the remote operation terminal, which based on the second display information transmitted from said remote control device, displays the operating elements on the image display device,
    前記リモート操作端末が、前記画像表示装置に表示された操作要素のうち、前記入力装置を用いてユーザによって選択された1つを、操作情報として前記第2のネットワークを介して前記リモート制御装置へ送信する第3の送信ステップと、 The remote operation terminal, among the displayed operation element to the image display device, one selected by the user using the input device, to said remote control device via the second network as the operation information a third transmission step of transmitting,
    前記リモート制御装置が、前記リモート操作端末から送信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第4の送信ステップと、 Said remote control device, a fourth transmitting step of generating said operation signal based on the operation information transmitted from the remote operating terminal, transmits via the first network to the operated device,
    前記被操作装置が、前記第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う動作制御ステップとを有することを特徴とする記憶媒体。 The operated device, a storage medium characterized by having an operation control step for controlling the operation of its own device based on the operation signal received via the first network.
  21. 第1ネットワークを介して受信した操作信号に基づき自装置の動作制御を行う被操作装置と前記第1ネットワークを介して接続されるとともに、前記第1のネットワークとは異なる第2のネットワークを介して、画像表示装置を備えたリモート操作端末と接続されるリモート制御装置に適用されるリモート操作方法をプログラムとして記憶した、コンピュータにより読み出し可能な記憶媒体において、 It is connected via the first network and the operating device for controlling the operation of its own device based on the operation signal received through the first network, via a different second network from the first network , storing the remote operation method applied to remote control apparatus connected to the remote operating terminal provided with an image display device as a program, in readable storage medium by a computer,
    前記リモート操作方法が、 The remote operation method,
    表示画像情報を含む少なくとも1つの操作要素から構成される第1の表示情報を、前記第1のネットワークを介して前記被操作装置から受信する第1の受信ステップと、 A first receiving step of receiving the first display information composed of at least one operating element including the display image information, from the operated apparatus via the first network,
    前記第2のネットワークを介した前記リモート操作端末との間の通信状態を検出する検出ステップと、 A detection step of detecting a communication state between the remote operating terminal through the second network,
    前記被操作装置から受信した前記第1の表示情報及び前記検出ステップによって検出された前記通信状態に基づき、第2の表示情報を生成する生成ステップと、 A generating step of generating the based on the communication state detected by the first display information and the detection step received from the operation device, the second display information,
    前記第2の表示情報を前記第2のネットワークを介して前記リモート操作端末に送信する第1の送信ステップと、 A first transmission step of transmitting to the remote operating terminal the second display information via the second network,
    前記リモート操作端末において、前記送信された第2の表示情報に基づき前記画像表示装置に操作要素が表示され、該表示された操作要素のうちユーザによって選択された1つが、操作情報として前記第2のネットワークを介して返信されたとき、該操作情報を受信する第2の受信ステップと、 In the remote operating terminal, the display transmitted the image display device on the operation element based on the second display information is, one selected by the user out of the displayed operation element, the second as the operation information when sent back through the network, a second reception step of receiving the manipulation information,
    前記第2の受信ステップによって受信された前記操作情報に基づいて前記操作信号を生成し、前記第1のネットワークを介して前記被操作装置へ送信する第2の送信ステップとを有することを特徴とする記憶媒体。 And characterized by a second transmission step of generating the operation signal based on the operation information received by said second receiving step, it transmits via the first network to the operated device storage medium.
JP2002359947A 2002-12-11 2002-12-11 Remote operation control system, remote controller, remote operation method, program and storage medium Pending JP2004194011A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002359947A JP2004194011A (en) 2002-12-11 2002-12-11 Remote operation control system, remote controller, remote operation method, program and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002359947A JP2004194011A (en) 2002-12-11 2002-12-11 Remote operation control system, remote controller, remote operation method, program and storage medium

Publications (1)

Publication Number Publication Date
JP2004194011A true JP2004194011A (en) 2004-07-08

Family

ID=32759195

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002359947A Pending JP2004194011A (en) 2002-12-11 2002-12-11 Remote operation control system, remote controller, remote operation method, program and storage medium

Country Status (1)

Country Link
JP (1) JP2004194011A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006092233A (en) * 2004-09-24 2006-04-06 Fujitsu Ltd Device control system
JP2007052594A (en) * 2005-08-17 2007-03-01 Toshiba Corp Information processing terminal, information processing method, information processing program, and network system
JP2010504030A (en) * 2006-09-13 2010-02-04 サバント システムズ エルエルシー Programming environment and meta-data management for the programmable multimedia controller
JP2012175606A (en) * 2011-02-24 2012-09-10 Sumitomo Electric Ind Ltd Program, mobile terminal, image reception apparatus, image reception system, mobile terminal control method, and image reception apparatus control method
JP2013047954A (en) * 2008-05-13 2013-03-07 Apple Inc Pushing user interface to remote device
US9176651B2 (en) 2008-05-13 2015-11-03 Apple Inc. Pushing a user interface to a remote device
JPWO2014080465A1 (en) * 2012-11-21 2017-01-05 三菱電機株式会社 Equipment systems, equipment management apparatus, and program
US9875006B2 (en) 2008-05-13 2018-01-23 Apple Inc. Pushing a graphical user interface to a remote device with display rules provided by the remote device

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4588395B2 (en) * 2004-09-24 2010-12-01 富士通株式会社 Information processing terminal
JP2006092233A (en) * 2004-09-24 2006-04-06 Fujitsu Ltd Device control system
JP2007052594A (en) * 2005-08-17 2007-03-01 Toshiba Corp Information processing terminal, information processing method, information processing program, and network system
US8997011B2 (en) 2006-09-13 2015-03-31 Savant Systems, Llc Programming environment for configuring a system of audio/video components
JP2010504030A (en) * 2006-09-13 2010-02-04 サバント システムズ エルエルシー Programming environment and meta-data management for the programmable multimedia controller
US10261529B2 (en) 2006-09-13 2019-04-16 Savant Systems, Llc Configuring a system of components using graphical programming environment having a zone map
JP2013047954A (en) * 2008-05-13 2013-03-07 Apple Inc Pushing user interface to remote device
US9875006B2 (en) 2008-05-13 2018-01-23 Apple Inc. Pushing a graphical user interface to a remote device with display rules provided by the remote device
US9285968B2 (en) 2008-05-13 2016-03-15 Apple Inc. User interface including content from a remote device
US9335907B2 (en) 2008-05-13 2016-05-10 Apple Inc. User interface including content from an accessory
US9471207B2 (en) 2008-05-13 2016-10-18 Apple Inc. Pushing a user interface to a remote device that controls multiple displays
US9870130B2 (en) 2008-05-13 2018-01-16 Apple Inc. Pushing a user interface to a remote device
US9176651B2 (en) 2008-05-13 2015-11-03 Apple Inc. Pushing a user interface to a remote device
JP2012175606A (en) * 2011-02-24 2012-09-10 Sumitomo Electric Ind Ltd Program, mobile terminal, image reception apparatus, image reception system, mobile terminal control method, and image reception apparatus control method
JPWO2014080465A1 (en) * 2012-11-21 2017-01-05 三菱電機株式会社 Equipment systems, equipment management apparatus, and program

Similar Documents

Publication Publication Date Title
CN100337448C (en) Remotely controlling appliances using a wireless terminal
CN100385873C (en) Systems and methods for integrated control within a home entertainment system
CN100525438C (en) Phone interactive with television system
JP3026512B2 (en) Home entertainment system with a high-quality display
US7140033B1 (en) Methods and systems for controlling consumer electronics external devices via data delivered to a device
US7421654B2 (en) Method, system, software, and signal for automatic generation of macro commands
JP5194673B2 (en) Transmitting and receiving method of a mobile terminal, and information
KR100754196B1 (en) Method for switching media renderer in the middle of streaming playback of content
JP4707673B2 (en) The user interface method and system for searching for linked device to the network
US20050257164A1 (en) Graphic user interface for digital networks
JP6306971B2 (en) Configuration of the user interface
US20020194596A1 (en) Control of multiple AV-devices by a single master controller using infrared transmitted commands and bus transmitted commands
EP1571803B1 (en) Information-provision control method, information reproduction system, and information-provision apparatus
EP1133120A2 (en) Control data system and control data transmission method
JP2912899B2 (en) Multimedia system and method for transmitting and receiving the program number
CN100525436C (en) Content playback system, content playback apparatus, and content playback method
US8286210B2 (en) HDMI switching technology for the coupling of consumer electronic control and/or non-consumer electronic control devices in an audio/visual environment
US7904939B2 (en) Methods, systems, and products for automated control of devices
US9178712B2 (en) Remote audio
JP4169182B2 (en) Simulation of bidirectional connectivity to unidirectional data streams to a plurality opponent
JP5282447B2 (en) The information processing apparatus, information processing method, program and information processing system
US20050060750A1 (en) Information apparatus and resource control method
JP3746474B2 (en) Remote controller with modular
CN1193610C (en) Bidirectional communication system, display device, base arrangement and bidirectional communication method
US8286204B2 (en) Data communication system, apparatus and control method therefor