CN1287763A - 网络控制系统 - Google Patents

网络控制系统 Download PDF

Info

Publication number
CN1287763A
CN1287763A CN99801876A CN99801876A CN1287763A CN 1287763 A CN1287763 A CN 1287763A CN 99801876 A CN99801876 A CN 99801876A CN 99801876 A CN99801876 A CN 99801876A CN 1287763 A CN1287763 A CN 1287763A
Authority
CN
China
Prior art keywords
video data
equipment
information
controller
picture video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN99801876A
Other languages
English (en)
Inventor
柳川良文
铃木诚一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1287763A publication Critical patent/CN1287763A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/281—Exchanging configuration information on appliance services in a home automation network indicating a format for calling an appliance service function in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2814—Exchanging control software or macros for controlling appliance services in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40—Bus networks
    • H04L12/40052—High-speed IEEE 1394 serial bus
    • H04L12/40117—Interconnection of audio or video/imaging devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/75—Indicating network or usage conditions on the user display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/329—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4112—Peripherals receiving signals from specially adapted client devices having fewer capabilities than the client, e.g. thin client having less processing power or no tuning capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44231—Monitoring of peripheral device or external card, e.g. to detect processing problems in a handheld device or the failure of an external recording device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/162—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing
    • H04N7/163—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing by receiver means only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/2849—Audio/video appliances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S715/00—Data processing: presentation processing of document, operator interface processing, and screen saver display processing
    • Y10S715/961—Operator interface with visual structure or function dictated by intended use
    • Y10S715/965—Operator interface with visual structure or function dictated by intended use for process control and configuration
    • Y10S715/969—Network layout and operation interface

Abstract

在网络控制系统中,装置具有表示其操作画面的画面显示数据和其识别信息,控制器发送画面请求(101),从装置获得该画面显示数据等作为画面信息(111)。控制器用该画面显示数据等显示操作画面,一旦对操作画面进行操作,就将该操作信息和画面显示数据的识别信息作为操作请求(241)发送给装置。装置执行对应该操作请求的功能。由此,一旦装置中画面显示数据变化,装置就将变化后的画面显示数据等作为画面信息(121)发送给控制器。

Description

网络控制系统
技术领域
本发明涉及通过网络对连接在网络上的设备进行操作的网络控制系统，尤其涉及应用图形用户接口(GUI)的设备控制系统，该接口借助图形、文字等在画面上支持用户对设备进行操作。
背景技术
近年来，出现了一种设备控制系统，它将表示设备功能的画面显示用数据或文字等构成的图形显示在TV(Television)画面上并用TV遥控器选择操作这些图形进行设备控制。还出现了一种网络系统，它利用IEEE1394-1995连接DVC(digitalvediocassette)等数字设备收发图像/声音数据。
特开平9-149325号公报揭示了一种已有技术的网络控制系统。
下面，说明这种已有网络控制系统的一例。
AV设备像IEEE1394规格等数字接口那样，用串行总线连接而成，各AV设备不切换连接，而是采用与其它AV设备双向包(数据包)通信方式周期地提供均等的通信机会。
这里，各AV设备预先存储着各自的画面显示用数据，根据具有图形显示功能的控制器(电视接收机)来的请求，向控制器发送该画面显示用数据，控制器显示该画面显示用数据。控制器具有询问处于连接状态的AV设备显示所必须的数据的功能，和根据来自AV机器的画面显示用数据控制显示画面的功能。而且，在AV设备中具有存储画面显示用数据的记录媒体，并具有对来自控制器的画面显示用数据的询问选择画面显示用数据的功能。
在这样构成的网络控制系统中，各装置(AV设备)预先保管着画面显示用数据，并根据控制器(电视接收机)来的显示请求加以输出，在控制器画面上显示各装置(AV设备)自己的图形。
但是，在上述结构中，当操作画面的显示随装置内单元状态变化而变化时，该装置不能向控制器通知装置状态的变化，所以控制器内的显示画面信息与装置内的显示画面信息不匹配，存在的问题是不能向用户提供正确的设备操作信息。
本发明鉴于上述问题，其目的在于用简单的结构提供一种网络控制用系统，当操作画面的显示随装置内单元状态变化时，该系统能快速向控制器通知这种状态变化，从而能使控制器和装置共有同一状态信息，而且通信线路的传输负载也小。
本发明揭示
本发明的第一方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经传送线路向控制器发送画面显示数据和识别信息，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收画面显示数据及识别信息，
用画面显示数据将操作画面显示在显示手段上，
根据用户对操作画面的操作，经传送线路将显示该操作的操作信息和识别信息发送给装置，对装置进行控制。
本发明的第2方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经传送线路向控制器发送画面显示数据和识别信息，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收画面显示数据及识别信息，
用画面显示数据及识别信息将操作画面显示在显示手段上，
根据用户对操作画面的操作，经传送线路将显示该操作的操作信息和识别信息发送给装置，对装置进行控制。
按照本发明的第1或第2方面，用识别信息区别画面显示数据，控制器容易可靠地确认用户发送给装置的操作信息是对应于哪个画面显示数据且装置得到确认，能防止装置的误动作。而且，按照本发明的第1或第2方面，控制器管理表示装置操作画面的画面显示数据并根据用户的操作向装置发送操作信息，但不必把握装置的功能或操作的含义(操作与装置功能的关系)。也即，由控制器管理及处理与用户接口相关的信息(画面显示数据和操作信息等)，而与装置控制直接相关的控制信息(表示装置功能的信息或装置功能与操作的关系的信息等)由装置管理和处理。因此，可减轻控制器中的处理，控制器可进行不限定于装置控制用操作种类的各种操作。而且，按照本发明的第1或第2方面，控制器从装置获得表示装置操作画面的画面显示数据及其识别信息，并用它们显示装置的操作画面，故即使是具有当前还不能想到那样新功能的装置，但只要向控制器发送对应于这种新功能的画面显示数据，就能很容易地向用户提示这种新功能，用户就能使用该新功能。
本发明的第3方面是，在本发明的第1或第2方面中，其特征在于，
识别信息包含有表示画面显示数据版本的版本信息。
按照本发明第3方面，控制器从装置获得的识别信息中包含版本信息，故控制器可检测装置的操作画面信息的变化，由此，很容易检测到装置的状态因另一控制器来的指示或装置内自身变化的变化。另外，根据用户的操作，表示操作画面的画面显示数据的版本信息与操作信息一起发送给装置，因此，装置能容易且可靠地把握对于哪个操作画面的操作，并能执行用户意图中存在的动作。再有，按照本发明第3方面，控制器从装置接收画面显示数据时检查其版本信息，在版本信息刚好更新情况下，只要更新操作画面的显示，因此能减轻同一画面显示数据多次发送情况下的控制器的负载。
本发明第4方面是，在本发明的第1或第2方面中，其特征在于，
操作信息包含表示操作画面上操作位置的操作位置信息。
按照本发明第4方面，根据用户的操作在发送给装置的操作信息中包含表示操作画面上操作位置的操作位置信息，因此，在对操作画面的操作中可利用指示装置直接指定所需操作位置。由此，能提高装置控制用的操作性。
本发明第5方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的并由多个部分画面显示数据构成的画面显示数据，经传送线路向控制器发送部分画面显示数据，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收部分画面显示数据，
用部分画面显示数据将操作画面显示在显示手段上，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息发送给装置，对装置进行控制。
按照本发明第5方面，利用画面分割由多个部分画面显示数据构成画面显示数据，故能减少数据传送量。
本发明的第6方面是，在本发明的第5方面中，其特征在于，
所述装置，在装置画面显示数据发生变化时，向控制器发送画面显示数据中变化了的部分画面显示数据，
所述控制器，经传送线路从装置接收变化了的部分画面显示数据，并根据接收到的部分画面显示数据更新显示在显示手段中的操作画面。
按照本发明的第6方面，当装置的画面显示数据随装置内单元状态等变化而变化时，只要向控制器发送属于变化了的显示要素的部分画面显示数据，故当画面显示变化了时，能减少向控制器传送的数据量，也简化了装置或控制器中的处理。
本发明的第7方面是，在本发明的第5方面中，其特征在于，
所述装置具有部分画面识别信息，作为识别部分画面显示数据的识别信息，经传送线路与部分画面显示数据一起向控制器发送该部分画面识别信息，
所述控制器经传送线路从所述装置接收部分画面显示数据和部分画面识别信息。
本发明的第8方面是，在本发明的第7发明中，其特征在于，
当装置的画面显示数据变化了时，所述装置向控制器发送画面显示数据中变化了的部分画面显示数据和该部分画面显示数据的部分画面识别信息，
控制器，经传送线路从装置接收变化了的部分画面显示数据和该部分画面显示数据的部分画面识别信息，并根据接收到的部分画面显示数据及部分画面识别信息更新显示在显示手段上的操作画面。
按照本发明第8方面，当装置的画面显示数据变化了时，向控制器一起发送属于变化了的显示要素的部分画面显示数据及其部分画面识别信息，因此，控制器能容易指定变化了的部分画面显示数据，并减轻了画面显示数据变化了时操作画面显示更新等的处理负担。
本发明第9方面是，在本发明第7方面中，其特征在于，
控制器根据用户对操作画面的操作，经传送线路向装置发送表示该操作的操作信息和对应于该操作的部分画面识别信息，由此，控制所述装置。
按照本发明第9方面，根据用户的操作向装置发送操作信息和对应于该操作的部分画面识别信息，因此，装置能容易且可靠地识别发送给装置的操作信息对应于哪部分画面显示数据，并能防止装置的误动作。
本发明第10方面是，在本发明第7至第9方面的任一方面中，其特征在于，
部分画面识别信息包含表示部分画面显示数据版本的版本信息。
按照本发明第10方面，当装置的画面显示数据变化了时，与部分画面显示数据一起发送给控制器的部分画面识别信息包含版本信息，故控制器利用该版本信息可防止操作画面的误动作。另外，根据用户的操作，对应于该操作的部分画面显示数据的版本信息与操作信息一起发送给装置，因此，装置能容易且可靠地把握用户的操作内容，并能执行用户意图中存在的动作。
本发明第11方面是，在本发明第7至第9方面的任一方面中，其特征在于，
画面显示中一个显示要素配置在分别对应于多个部分画面显示数据的多个显示部分中任一显示部分内。
按照本发明第11方面，操作画面中任一显示要素变化时，从装置向控制器只发送属于该显示要素的部分画面显示数据，没有必要发送多个部分画面显示数据。因此，当画面显示变化了时，能减少向控制器传送的数据量，也能简化装置或控制器中的处理。
本发明第12方面是，在本发明第7至第9方面中，其特征在于，
画面显示中对应于用户操作单位的显示要素配置在分别对应于多个部分画面显示数据的多个显示部分中任一显示部分内。
按照本发明第12方面，对应于用户操作单位的显示要素配置在分别对应于多个部分画面显示数据的多个显示部分中任一显示部分内，因此，当根据用户操作向装置发送操作信息和对应于该操作的部分画面识别信息时，装置利用该部分画面识别信息能容易识别用户的操作。
本发明第13方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和操作画面上重叠显示用的重叠显示数据，经传送线路向控制器发送画面显示数据和重叠显示数据，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收画面显示数据及重叠显示数据，
用画面显示数据将操作画面显示在显示手段上，同时用重叠显示数据对显示在显示手段上的操作画面进行重叠显示，
根据用户对操作画面的操作，经传送线路将显示该操作的操作信息送给装置，由此对装置进行控制。
本发明第14方面是，在本发明第13方面中，其特征在于，
重叠显示数据是显示光标用的光标信息，表示用户对操作画面操作的位置。
本发明第15方面是，在本发明第14方面中，其特征在于，
光标信息包含表示操作画面中光标位置的位置信息。
本发明第16方面是，在本发明第14方面中，其特征在于，
光标信息包含表示光标形状的形状信息。
按照本发明第16方面，通过设定光标形状信息，可使光标的图案适合于操作画面中各显示要素的图案。
本发明第17方面是，在本发明第14方面中，其特征在于，
光标信息包含表示光标大小的尺寸信息。
按照本发明第17方面，通过设定光标尺寸信息，可使光标的大小适合于操作画面中各显示要素的大小。
本发明第18方面是，在本发明第14方面中，其特征在于，
光标信息包含表示光标颜色的颜色信息。
按照本发明第18方面，通过设定光标的颜色信息，可使光标的图案适合于操作画面中各显示要素的图案。另外，按照本发明第18方面，装置能表现设想的GUI，并很容易将GUI设计者的意图传送给用户。
本发明第19方面是，在本发明第14方面中，其特征在于，
光标信息包含表示许可用户操作的许可信息。
按照本发明第19方面，当操作者进行操作时，利用光标信息内的许可信息可判断该操作是否是许可操作，当表明是不许可操作时，能将操作信息不发送给装置，并在控制器内进行出错处理。
本发明第20方面是，在本发明第13方面中，其特征在于，
当对应于装置的重叠显示数据的显示部分变化了时，装置向控制器发送重叠显示数据，
控制器经传送线路从装置接收重叠显示数据，并根据接收到的重叠显示数据更新显示在显示手段上的操作画面。
按照本发明第20方面，当通过用户操作仅改变重叠显示数据时，接收到表示该操作的操作信息的装置向控制器发送重叠显示数据，而不发送画面显示数据。控制器利用发来的重叠显示数据对操作画面更新重叠显示。因而，如用重叠显示数据进行光标显示情况下，可以减少数据的传送量，对光标移动的操作可提高响应速度。
本发明第21方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经传送线路向控制器发送画面显示数据和识别信息，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收画面显示数据及识别信息，
用画面显示数据将操作画面显示在显示手段上。
本发明第22方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经传送线路向控制器发送画面显示数据和识别信息，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收画面显示数据及识别信息，
用画面显示数据及识别信息将操作画面显示在显示手段上。
本发明第23方面提供一种网络控制系统，该网络系统的第1及第2设备用传送线路连接，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和在操作画面上重叠显示用的重叠显示数据，经传送线路向控制器发送画面显示数据和重叠显示数据，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收画面显示数据及重叠显示数据，
用画面显示数据将操作画面显示在显示手段上，同时用重叠显示数据对显示在显示手段上的操作画面进行重叠显示。
本发明第24方面提供一种设备，该设备是包含装置的第2设备，通过传送线路与包含控制器的第1设备相连，并经传送线路由控制器对其进行控制，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经传送线路向控制器发送画面显示数据和识别信息，
接收控制器发送的画面显示数据的识别信息和表示用户操作的操作信息，并根据接收到的识别信息及操作信息进行工作。
本发明第25方面提供一种设备，该设备是包含控制器的第1设备，经传送线路与第2设备连接，所述控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收表示装置操作画面的画面显示数据及识别该画面显示数据用的识别信息，
用画面显示数据将操作画面显示在显示手段上，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息和识别信息发送给装置，由此对装置进行控制。
本发明第26方面是，在本发明第24方面中，其特征在于，
操作信息包含表示操作画面上操作位置的操作位置信息。
本发明第27方面是，在本发明第25方面中，其特征在于，
操作信息包含表示操作画面上操作位置的操作位置信息。
本发明第28方面提供一种设备，该设备是包含装置的第2设备，通过传送线路与包含控制器的第1设备相连，并经传送线路由控制器对其进行控制，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的由多个部分画面显示数据构成的画面显示数据，经传送线路向控制器发送部分画面显示数据，
接收控制器发送的表示用户操作的操作信息，并根据接收到的操作信息进行工作。
本发明第29方面提供一种设备，该设备是包含控制器的第1设备，经传送线路与第2设备连接，所述控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收表示装置操作画面的多个部分画面显示数据，
用部分画面显示数据将操作画面显示在显示手段上，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息发送给装置，由此对装置进行控制。
本发明第30方面是，在本发明第28方面中，其特征在于，
当装置的画面显示数据变化了时，装置向控制器发送画面显示数据中变化了的部分画面显示数据。
本发明第31方面是，在本发明第29方面中，其特征在于，
当装置的画面显示数据变化了时，控制器经传送线路从装置接收画面显示数据中变化了的部分画面显示数据，并根据接收到的部分画面显示数据更新显示在显示手段上的操作画面。
本发明第32方面提供一种设备，该设备是包含装置的第2设备，通过传送线路与包含控制器的第1设备相连，并经传送线路由控制器对其进行控制，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示装置操作画面用的画面显示数据和在操作画面上重叠显示用的重叠显示数据，经传送线路向控制器发送画面显示数据及重叠显示数据，
接收控制器发送的表示用户操作的操作信息，并根据接收到的操作信息进行工作。
本发明第33方面提供一种设备，该设备是包含控制器的第1设备，经传送线路与第2设备连接，所述控制器经传送线路控制包含在第2设备中的装置，其特征在于，
第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述控制器备有包含显示手段的用户接口，经传送线路从所述装置接收表示装置操作画面的画面显示数据和操作画面上表示重叠用的重叠显示数据，
用画面显示数据将操作画面显示在显示手段上，同时用重叠显示数据对显示在显示手段上的操作画面进行重叠显示，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息发送给装置，由此对装置进行控制。
本发明第34方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送显示装置操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从装置发送的画面显示数据在控制器中显示操作画面的显示步骤，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息和识别信息从控制器发送给装置、由此对装置进行控制的控制步骤。
本发明第35方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送显示装置操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从装置发送的画面显示数据及识别信息在控制器中显示操作画面的显示步骤，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息和识别信息从控制器发送给装置、由此对装置进行控制的控制步骤。
本发明第36方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送构成显示装置操作画面用的画面显示数据的多个部分画面显示数据中至少一个部分画面显示数据的发送步骤，
用从装置发送的部分画面显示数据在控制器中显示操作画面的显示步骤，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息从控制器发送给装置、由此对装置进行控制的控制步骤。
本发明第37方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送显示装置操作画面用的画面显示数据和操作画面上重叠显示用的重叠显示数据的发送步骤，
用从装置发送的画面显示数据和重叠显示数据在控制器中显示操作画面，同时根据重叠显示数据对显示的操作画面进行重叠显示的显示步骤，
根据用户对操作画面的操作，经传送线路将表示该操作的操作信息从控制器发送给装置、由此对装置进行控制的控制步骤，
本发明第38方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送显示装置操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从装置发送的画面显示数据在控制器中显示操作画面的显示步骤。
本发明第39方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送显示装置操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从装置发送的画面显示数据及识别信息在控制器中显示操作画面的显示步骤。
本发明第40方面提供一种网络控制系统中的控制方法，其特征在于，
该网络系统的第1及第2设备用传送线路连接，第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在第1设备中的控制器经传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从装置经传送线路向控制器发送显示装置操作画面用的画面显示数据和操作画面上重叠显示用的重叠显示数据的发送步骤，
用从装置发送的画面显示数据及重叠显示数据在控制器中显示操作画面、同时根据重叠显示数据对显示的操作画面进行重叠显示的显示步骤。
附图的简单说明
图1为表示本发明第1实施形态网络控制系统中装置结构的框图；
图2表示第1实施形态网络控制系统中控制器结构的框图；
图3为表示第1实施形态中网络控制系统一例的系统结构图；
图4为表示第1实施形态中从装置传送到控制器的画面信息的结构图；
图5为第1实施形态中网络控制系统协议的说明图；
图6为表示第1实施形态控制器中表示的一例操作画面图；
图7为第1实施形态中网络控制系统协议的说明图；
图8为表示第2实施形态中从装置传送到控制器的画面信息的结构图；
图9为表示第2实施形态控制器中表示的一例操作画面图；
图10为表示第2实施形态中装置的版本管理单元结构的框图；
图11为表示第2实施形态中装置的版本管理单元工作的流程图；
图12为表示第2实施形态中版本信息的说明图；
图13表示第2实施形态中网络控制系统的协议说明图；
图14为表示本发明第3实施形态控制器中表示的一例操作画面图；
图15表示第3实施形态中网络控制系统的协议说明图；
图16为表示本发明第4实施形态中从装置传送到控制器的画面信息的结构图；
图17为表示本发明第4实施形态控制器中表示的一例操作画面图；
图18为表示本发明第4实施形态变形例控制器中表示的一例操作画面图；
图19为表示本发明第5实施形态中从装置传送到控制器的画面信息的结构图；
图20为表示本发明第5实施形态控制器中表示的一例操作画面图。
本发明的最佳实施形态
下面，结合附图更详细地说明本发明。
《第1实施形态》
图1为表示本实施形态网络控制系统中装置结构的框图，图2为表示本实施形态网络控制系统中控制器结构的框图。下面，用图1、图2说明本实施形态网络控制系统的结构及工作。
本说明书中所述的装置是指控制对象，而控制器是指对众多控制对象进行控制的装置。本实施形态中控制器有：具有图形显示功能的视频监视器等的显示手段；和用户观测视频监视器等的画面进行操作用的鼠标或键盘、TV用遥控器等操作手段构成的用户接口。在一个设备中，装置和控制器可共存，也可只具有它们中的一种。设备可以是对应于传送线路上的一个节点，也可以构成在一个筐体内有多个节点那样的装置。控制器和视频监视器可以是不同的设备，其间可作任意连接，也可作模拟信号连接，也可采用本实施形态中所示的传送线路。
《1.1第1实施形态中的装置》
如图1所示，本实施形态网络控制系统中的装置备有：分组(packet)收发信单元2；同步数据收发信单元3；装置信号处理单元4；非同步数据收发信单元5；装置非同步数据处理单元6；设备构成信息7；信息管理单元18；及画面显示数据生成单元20。分组收发信单元2连接传送线路1。
传送线路1如可以是由IEEE1394标准(IEEE1394-1995及可与其互换的某个上位标准)规定的串行总线(1394总线)。传送线路1未必限定为1394总线，也可使用ATM，或以太网、红外线传送等的传送线路。
分组收发信单元2可取与传送线路1实体的及电的接口，同时还可对总线的使用权进行协调、对同步传送用周期进行控制等。分组收发信单元2可对应地址取舍选择接收传送线路1上的分组信息(packet)，或向传送线路1发送分组信息。
同步数据收发信单元3，发送时进行传送速率管理(数据分割)或附加报文头单元(head)。例如，使用1394总线的AV协议(IEC61883)标准情况下，可用同步数据收发信单元3附加CIP(公用同步分组：CommonIsochronousPacket)报文头单元。相反，接收数据时，将接收的分组排成正确的顺序，并删除报文头单元等。
装置信号处理单元4从同步数据收发信单元3接收同步数据，进行与装置对应的信号处理。例如，若该装置是数字VTR等记录再现设备，则将同步数据记录在记录媒体(例如磁带)上。或，装置信号处理单元4从记录媒体、广播信号取出同步数据，发送给同步数据收发信单元3。
非同步数据收发信单元5进行与传送线路1的协议对应的非同步数据的事务处理，例如，在1394总线情况下，进行读事务处理，写事务处理，逻辑事务处理等。这里，非同步数据收发信单元5也可用软件构成。
装置非同步数据处理单元6处理从非同步数据收发信单元5接收到的非同步数据，再传送给该装置内的适当构成部分。例如，假设装置非同步数据处理单元6接收到的非同步数据是控制码和用户的操作信息，就判断其有效性，若有效，就向设备内单元控制单元9输出执行与该控制码和用户操作信息相当的功能的命令。这里，也可假定向信息管理单元18传送控制码和用户操作信息，此时，信息管理单元18判断它们的有效性，若有效，则向设备内单元控制单元9命令执行它们指示的功能。
当控制器请求设备构成信息7时，装置非同步数据处理单元6根据经由非同步数据收发信单元5等接收到的请求，将记录在设备构成信息7中的信息经由非同步数据收发信单元5等发送给控制器。装置非同步数据处理单元6再根据设备内单元控制单元9来的指示，从装置内构成部分向非同步数据收发信单元5发送非同步数据。这里，非同步数据收发信单元5和装置非同步数据处理单元6也可构成一个单元。
设备构成信息表示设备的构成信息，它的描述例如遵守组态(configuration)ROM表示的按照ISO/IEC13213：1994标准表示的CSR(命令和状态寄存器：CommandandStatusRegisters)结构的规则，在使用1394总线情况下，具有单元目录(unitdirectory)、该设备标识符的唯一ID等，该单元目录包含：是否支持总线管理器(bussmanager)或同步工作的该设备对应的总线信息；和是否支持AV协议的信息。
当将位图数据(表示应显示在控制器显示手段的画面上作为装置操作画面，下面称为“画面显示数据”)发送给控制器时，信息管理单元18将识别画面显示数据用的识别信息附加到画面显示数据加以发送。根据设备内部控制单元9的指示对画面显示数据生成单元20指示更新画面显示数据。
该识别信息就是指定该装置用的信息(如，设备特有的唯一ID)或版本信息等。例如，在识别信息包含版本信息情况下，信息管理单元18进行画面显示数据的版本管理，并用计数器构成，每当根据设备内部控制单元9更新画面信息时，信息管理单元18内的计数器就增量计数。这里，该计数器是一种具有足够位长的有限位长无限循环计数器。一旦增量到最大值就变为最小值。该计数器的位长虽然是任意的，但要有足够的位长，使得控制器至少在具有控制权或状态变化的购读权的时间内，该计数器未循环完一次，从而使得同一计数值不显示不同的画面显示数据。
控制器读入画面显示数据时，所述计数值与画面显示数据一起也读入控制器，该计数值表示读入的画面显示数据的版本信息。由此，控制器能确认版本信息，提高了可靠性。
画面显示数据生成单元20根据装置状态及用户的操作按照设备内单元控制器9来的指示生成表示该装置操作画面的画面显示数据(例如位图形式的画面显示数据)。这里，画面显示数据生成单元20生成的画面显示数据就是显示在控制器的一幅画面上的画面显示数据，该画面大小(尺寸)按照装置与控制器的通信或标准等预先确定，并进一步记载在画面信息的报文头部等。用该画面显示数据显示的操作画面上有控制装置用的控制信息，内容信息，工作状态信息等。
这里，控制信息就是如在VTR情况下表示VTR操作面板(再现按钮，停止按钮，录像按钮等)的信息。内容信息就是将内容通知用户用的信息，在STB(机顶盒：settopbox)情况下，是指当前播放的节目信息，也即节目标题、标题画面、主题音乐、概要、演出者等信息。在DVD装置场合，是指显示作为记录媒体的盘片上所记录的内容的信息，即标题、标题画面、主题音乐、概要、演出者等信息。所述工作状态信息在如VTR场合，是指显示设备的工作状态(再现中，倒带中，录像预约中)的。显示单元等的显示要素(称为“目标”)的信息。其中，也可写入使用该装置的控制器的识别信息等为网络控制所必需的信息或录像预约时间和频道号等。
设备内部控制单元9控制包含该装置内部机构等各构成要素，如果装置非同步数据处理单元6接收到的数据是表示装置工作的控制码，则通过装置非同步数据处理单元6的指示按照该控制码进行工作。又，根据装置内部的状态变化或用户的操作，经由信息管理单元18对画面显示数据生成单元20指示更新画面显示数据。
装置相对于控制器请求的工作如下。当装置连接于传送线路1时或控制器连接于传送线路1时，首先，控制器读入装置的设备构成信息7，判断该装置是否有画面显示数据，对装置请求GUI信息，并从画面显示数据生成单元20读入画面显示数据。
再后，当从控制器接收到用户的操作信息时，装置根据状况执行该操作信息所指示的处理。
这里，控制器用画面显示数据显示装置的操作画面时，例如，在控制器能发送用户操作“选择”的操作信息(下面称为“操作信息‘选择’”)情况下，非同步数据收发信单元5将该操作传送给设备内部控制单元9，设备内部控制单元9根据画面显示数据的状态向装置各构成要素发出指示。装置向控制器发送在再现按钮基础上显示光标的画面显示数据，且控制器显示该画面显示数据时，在用户进行“选择”操作情况下，装置接收该用户的操作信息“选择”，设备内部控制单元9根据在画面显示数据或作成画面显示数据的基础上形成的状态，识别该用户的操作是指示“再现”，向装置内部各构成要素发出指令，开始再现动作。
此时，用户操作时控制器显示的画面显示数据的识别信息与用户的操作信息一起发送给装置。因而，装置能正确地判别该操作是用户对于哪个画面显示数据的操作，用户操作后，由于装置内装置状态发生了变化(如，画面显示数据全变化成其它物的一情况下)，能判断该用户操作无效，或是指其它功能控制那样的情况也是如此。由此，能防止装置误动作。这样一来，在用户的操作因装置内信息变化而无效时，装置能更新画面显示数据，用户能知道操作无效。
如上所述，装置对控制器来的GUI(图形用户接口：Graphical UserInterface)信息请求只要提示画面显示数据信息就可以，故能减小装置的负载。又，无需由标准化单位对装置各功能规定命令，即使对具有当前未想到的新功能的装置，只要将对应该新功能的画面显示数据发送给控制器，就能很容易经传送线路1向用户提示该新功能，用户就能使用该新功能。因此，利用用户的操作信息和画面显示数据和指定装置功能，用户就能用简单的构成控制装置。
这里，同步数据收发信单元3、装置信号处理单元4等构成要素可以根据装置功能任意构成，没有也可以。各部分可以用硬件或软件任一种构成。
用户的操作信息也可以编码后发送给装置。而且，未必要用同一传送线路接收发送画面信息的传送和用户的操作信息，也可用采用电缆的1394总线传送画面信息，用红外线传送操作信息。
《1.2第1实施形态中的控制器》
图2为表示本实施形态网络控制系统中控制器结构的框图。该控制器备有控制器信号处理单元10，控制器非同步数据处理单元11，画面显示数据管理单元12，显示/功能选择单元14，及画面显示数据保持单元21。在图2中，与图1所示相同的构成部分赋以同一标号，并省略其说明。
控制器信号处理单元10从同步数据收发信单元3接收同步数据，进行与控制器相应的信号处理。该控制器如果是具有显示视频监视器等图像功能的某种设备，就对同步数据(如，MPEG2数据流)进行解码，并向画面显示。
控制器非同步数据处理单元11对从非同步数据收发信单元5收到的非同步数据进行处理，并传送到该控制器内适当的构成部分。另外，控制器非同步数据处理单元11经由非同步数据收发信单元5从分组(packet)收发信单元2接收传送线路1上有关新装置连接或老装置拆除等装置信息，或装置的画面显示数据等并传送到画面显示数据管理单元12。而且，控制器非同步数据处理单元11根据显示/功能选择单元14来的指示从控制器内构成部分向非同步数据收发信单元5发送非同步数据。这里，非同步数据收发信单元5与控制器非同步数据处理单元11也可构成一个单元。
将控制器和装置装在同一设备内情况下，为了用设备内部控制单元9作成该设备内装置的画面显示数据，该设备要有该装置的画面显示数据，然而，该设备内的画面显示数据管理单元12可以不管理该装置的画面显示数据，但也可管理。在控制器和装置设在同一设备内情况下，控制器信号处理单元10与装置信号处理单元4、控制器非同步数据处理单元11与装置非同步数据处理单元6也可分别构成一体。
画面显示数据管理单元12管理着传送线路1上从装置接收到的画面显示数据的信息，从控制器非同步数据处理单元11接收到与连接新装置相关的信息时，就向控制器非同步数据处理单元11发出指示，读取该新装置的画面显示数据的信息。当新接入装置时，也可以由该新装置检索控制器，并自动对控制器发送画面显示数据。
下面，当读入新装置的画面显示数据和其版本信息时，该画面显示数据保持在画面显示数据保持单元21，同时将画面显示数据的识别信息与画面显示数据相连一起存入画面显示数据管理单元12。该识别信息包含读入的版本信息。该识别信息也可与画面显示数据一起存入画面显示数据保持单元21内，画面显示数据管理单元12也可存储并管理该识别信息。当从传送线路1上接收到拆除老装置等信息时，就从画面显示数据保持单元21删除相当的画面显示数据。控制器内的画面显示数据未必是与装置内画面显示数据的形式完全相同，但包含相同的信息就可以。
显示/功能选择单元14在控制器画面上通知用户画面显示数据，该画面显示数据包含显示单元(图像/声音/文字信息等)数据，显示装置的功能或状态，同时根据用户的操作，进行装置及功能选择或各功能的执行指示等。该显示/功能选择单元14对画面显示数据管理单元12输出指示，检索画面显示数据，并用检索得到的画面显示数据将传送线路1上的任意装置操作画面显示在控制器的画面上。另外，该显示/功能选择单元14也可以显示/再现从控制器信号处理单元10接收到的数据(如，图像或声音数据)，或从控制器非同步数据处理单元11接收到的数据。此时，画面显示数据也可与从控制器信号处理单元10接收到的图像数据重叠加以显示，也可通过用户指示对画面显示数据与图像数据的显示画面加以切换显示。而且，可使画面显示数据的背景透明，将图像数据显示在画面显示数据的背景上。
用户对控制器显示的画面按压如遥控选择按钮、按压右向键等操作情况下，显示/功能选择单元14通过控制器非同步数据处理单元11发送该画面显示数据的识别信息和显示该用户操作的操作信息。
显示/功能选择单元14，经由控制器非同步数据处理单元11接收装置对识别信息和用户操作信息的应答作为更新后的画面显示数据，由画面显示数据管理单元12管理识别信息，更新画面显示数据保持单元21内相当的画面显示数据。在作为该应答的画面显示数据上附加的识别信息包含有版本信息的情况下，画面显示数据管理单元12检查版本信息，只有在版本信息被正确更新情况下，才更新保持在画面显示数据保持单元21中的画面显示数据。由此，在能多次来回收发同一画面显示数据情况下，没有必要更新控制器保持着的画面显示数据，从而能减轻负载。
在本实施形态中，控制器未必要理解装置的各功能，即使对当前还未想到的新功能，控制器也能将包含有对新功能的显示要素(如按钮)显示在画面上，并通知用户。在用户利用这些显示要素理解新功能选择新功能情况下，控制器的显示/功能选择单元14对装置发送该用户的操作信息，并由该装置能执行该新功能。因此，利用上述结构，用户就能执行现在还想不到的新功能。
同步数据收发信单元3或控制器信号处理单元10等的构成要素可根据控制器的功能任意构成，也可不这样。
《1.3第1实施形态的系统构成》
图3是表示本实施形态网络控制系统的系统构成图。如图3所示，该网络控制系统备有电视接收机(电视机)21，电视机用遥控器22，个人计算机(PC)23，可录放的DVD31，DV方式的数字VTR(DVC)32，VHS方式的数字VTR(DVHS)33，DV方式的数字影院(DVC影院)34，及CS数字广播等用的机顶盒(STB：settopbox)35。这些统称为图像/音响/信息设备。
这些图像/音响/信息设备用传送线路1加以连接就构成一个网络控制系统(这种系统称为“AVC系统”)。图像/音响/信息设备不限定于上述设备，它可包括图像、音响、信息等各领域中当前流行的(如，打印机或迷你盘)和今后出现的所有设备。
在上述本实施形态的系统中，电视机21是由控制器和装置(地面波调谐器，电视监控器)构成的设备，用户可用遥控器22对显示/功能选择单元14进行指示。PC23是由控制器和装置(取与电话线接口的调制解调器，视频监控器等)构成的设备，利用键盘或鼠标等用户可将指示加给显示/功能选择单元14。
这里，电视机21或PC23定义为由装置和控制器构成一体的设备，设备内装置的操作画面内将其它设备可使用的操作画面发送给其它控制器，本身的画面显示数据并不记录在设备内控制器单元的画面显示数据保持单元21中。另外，也可以将电视机21或PC23定义为各装置和控制器构成的设备，这样对设备内各装置有画面显示数据，设备内各功能表8记录在设备内控制器的画面显示数据保持单元21中。
这里，DVD31及DVC影院34是可记录再现音响及图像数据(下面称为“AV数据”)的装置。DVC32、DVHS33是由可记录再现AV数据的装置和具有数字广播调谐功能的装置构成的设备。而STB35是具有调谐功能用于接收CS数字广播的装置。
这里，DVD31、DVC32、DVHS33、DVC影院34、STB35虽然是装置，但至少能实现用液晶面板等操作其它装置的环境，如果用户用触摸面板或遥控器等能作选择其它装置功能等操作的话，也可以是含有控制器和装置的设备。这些设备含有控制器的处理功能，并具有设备用遥控器，结构上仅使显示及声音通过模拟连线显示在监视器上，用户一边看画面一边用遥控器进行操作。此时，该设备也可包括控制器和装置。
《1.4第1实施形态中的画面显示数据》
图4(a)～(c)是表示本实施形态中从装置发送给控制器的画面信息的结构图。图4(a)表示用ID作为识别信息的画面信息，图4(b)表示识别信息中含有版本信息时的画面信息，图4(c)表示用版本信息作为识别信息时的画面信息。
首先，图4(a)所示画面信息具有标识符(ID)，用于识别各个画面显示数据。这样，利用标识符区分画面显示数据，装置能容易且可靠地识别控制器发送给装置的用户操作信息是对哪个画面显示数据的，从而能防止装置误动作。
图4(b)所示画面信息将识别各个画面显示数据用的标识符(ID)及版本信息作为识别信息。例如，装置是VTR，其结构可以是，在走带机构(deck)单元和调谐部分别有操作画面情况下，对各操作画面有标识符，并有版本信息对应于各操作画面内的变化。这样，利用标识符和版本信息区分画面显示数据，因此，装置能按类分开进行管理，装置能可靠地识别控制器发送给装置的用户操作信息是针对哪个画面显示数据的，从而防止装置的误动作。也容易管理装置内的画面显示数据。而且，即使在因传送线路等发生问题而装置再次发送同一画面显示数据的情况下，控制器也能对此容易判别，可以不进行无用的画面更新，能减少处理。
图4(c)所示画面信息不具有识别各个画面显示数据用的标识符(ID)，而使用版本信息作为识别信息。这样，每当画面显示数据变化时就将依次变化的值作为识别信息，控制器和装置很容易管理控制器发送给装置的用户操作信息是针对哪个画面显示数据的，装置很容易把握控制器当前显示的是哪个画面显示数据，控制器画面和装置画面的显示数据有哪些位不同。在装置发送的画面显示数据因传送线路等问题而发生数据丢失或再发送情况下，能很容易判定该丢失或再发送周期，能根据该丢失的程度考虑变更处理或再发送周期进行画面显示的控制，能向用户提供易使用的显示画面。
作为画面信息，报文头单元也可以有表示画面显示数据类型(如位图数据型：bitmapdata)的类型信息，表示是不是分割画面显示数据或是否有版本信息等的属性信息，及表示画面显示数据大小的尺寸信息等。
而且，读入控制器后的画面信息的物理/逻辑结构未必要与装置内的画面信息的形式相同，如果包含在控制器具有的画面信息中的画面显示有效信息至少与装置内对应的相同也是可以的。总之，画面信息在物理上未必要具有如图4(a)～(c)所示的报文头部等，如果能用控制器管理报文头部等信息也是可以的。
《1.5第1实施形态的控制动作》
图5为第1实施形态中网络控制系统的协议说明图。下面，用该图说明控制器及装置的控制动作。
首先，在新装置200连接到传送线路1的情况下，在该传送线路1上的控制器100通过如作为1394总线的总线复位等识别新装置200，按照画面显示数据管理单元12的指示经传送线路1先向装置200发送画面请求101。发送给画面请求101的装置200发送画面信息111的画面显示数据及识别信息作为应答，控制器100读入画面信息111。然后，控制器100的画面显示数据管理单元12读入该画面显示数据并记录，存储在控制器100的画面显示数据保持单元21中。
这里，结构上也可以作成当新装置200连接于传送线路1上时，装置200自动地向控制器100发送画面显示数据。再有，结构上也可作成当新装置200连接于传送线路1上时，控制器100与装置200通信以确定画面显示数据的发送方法，接着装置200按该方法向控制器100发送画面显示数据。
读入控制器100的画面显示数据按照各装置200固有的唯一ID等识别信息加以区分，例如，可有各装置200具有的入口的列表结构或目录结构。此外，画面显示数据的保持形态可是任意的。
控制器100的显示/功能选择单元14通过画面显示管理单元12，参照画面显示数据保持单元21内的画面显示数据并显示在显示画面上。这里，用户希望显示连接于控制器100的其它装置200的操作画面情况下，用遥控器显示切换按钮等将连接于控制器100的装置200的画面显示数据依次显示在显示画面上，显示代表所希望装置200的操作画面的画面显示数据。
这里，控制器100显示特定的装置200的画面显示数据时，显示/功能选择单元14用装置200的唯一ID等向画面显示数据管理单元12请求该装置200的画面显示数据，画面显示数据管理单元12从画面显示数据保持单元21内的画面显示数据检索该装置200的画面显示数据，并发送给显示/功能选择单元14。显示/功能选择单元14将该画面显示数据显示在显示画面上。
但是，显示/功能选择单元14具有的连接在传送线路1上的装置200虽然在表示连接装置的装置一览表中，但在该装置200的画面显示数据不在画面显示数据保持单元21中情况下，画面显示数据管理单元12就将图5所示的画面请求101作为命令发送给装置200。装置200返回画面信息111作为应答，在该画面应答111中包含显示装置200的操作画面等的画面显示数据和该画面显示数据的识别信息。该识别信息包含着标识符(ID)或版本信息等。该版本信息表示画面显示数据的版本，每当更新画面时就更新版本信息。
装置一览表是由显示/功能选择单元14根据连接于传送线路1上装置200的变化信息(例如，通知增加/拆除的总线复位信号)检索传送线路1、检测连接的装置200编制而成的。
装置200也可只返回装置200内的识别信息作为画面信息111，此时，控制器100必须从装置200进一步读取画面显示数据的本体。但是，在控制器100获取画面显示数据等情况中，希望装置200发送与过去发送的相同的画面时，画面显示数据本体不必发送给控制器100，从而可减少传送的数据量，传送线路的负载或控制器100及装置200的处理可得到简化。
如上所述，利用画面显示数据管理单元12读入装置200的画面显示数据。因而，显示/功能选择单元14用画面显示数据管理单元12从该控制器100内的画面显示数据保持单元读出希望的画面显示数据，并显示在画面上。由此，在画面上可显示任意装置200的画面显示数据。
接着，用户操作遥控器的按钮时，显示/功能选择单元14将操作过的按钮种类及操作(例如，“按压”，“分离”，“选择”)和该画面显示数据的识别信息发送给装置200。也即，在遥控器具有表示上下左右各箭头键情况下，例如，用户如果按压右方向箭头键时，则控制器100向装置200发送操作信息(“按压”“右箭头键”)和从装置200获得的画面显示数据的识别信息，作为操作请求241发送给装置200。因而，装置200能正确容易地识别操作是针对哪个操作画面的，并能执行正确的动作。利用鼠标等指示装置200对控制器100中显示的操作画面进行操作时，表示鼠标等操作位置的信息(下面称为“操作位置信息”)包含在发送给装置200的操作信息中。此时，装置200根据被发送的识别信息和包含操作位置信息的操作信息识别操作是针对哪个操作画面的，并执行对应该识别结果的动作。这样一来，如果结构上利用鼠标等操作控制装置200，就能将光标直接移动到操作画面上所要的位置，从而改善了操作性。
也可以只将操作信息作为操作请求241发送给装置200，此时，装置200虽然不能可靠把握操作是针对哪个操作画面的，但能简化处理，并能减小传送线路的通信量。这里，用户的操作信息也可以经编码与识别信息一起发送，也可分别作为一个命令(操作数是画面显示数据的ID等的控制码)发送。在对画面显示数据只可作选择操作的按钮情况下，结构上也可使得对装置200只发送表示该按钮的控制码，从而能使处理简单，并能减小传送线路1上的通信量。
下面，当装置200内的状态发生变化使装置200内的画面显示数据变化时，装置200自动返回画面信息121。该画面信息121内含有识别信息和画面显示数据，其结构与图4(a)～(b)所示的相同。也可这样来构成装置200，使得画面信息121两次应答画面请求，此时，控制器100收到两次应答后再发送画面请求。但是，如果画面显示数据未发生变化，则对两次应答后的画面请求的一次应答也可只包含识别信息，也可不发送画面信息。如果这样，请求与命令的对应关系就明确，能简化装置200的处理。
例如，VTR再现中磁带运行至终端自动倒带开始后，当装置200将操作画面显示变更为表示在倒带的显示时，可使用画面信息121。对于操作画面按钮的压下、松开操作使操作画面上的静止画面变化(从凸显示到凹显示)，也可使用画面信息121。
控制器100内的画面显示数据更新后，画面显示数据管理单元12向显示/功能选择单元14指示更新画面显示，显示/功能选择单元14更新画面。
除了本实施形态所示各请求/应答等外，控制器100与装置200间还可进行其它通信，虽未图示，但在结构上也可使得如对各请求或应答返回确认信号，确认对方已收到。通过上述过程，控制器100能始终把握装置200的状态。
图6表示显示在控制器显示画面上的一例操作画面。在该例中，用装置发来的画面显示数据显示画面显示500作为VTR的操作画面。该画面显示500中显示有：表示操作对象的装置是VTR的显示要素；作为内容信息的2个标题画；作为控制信息的倒带、再现、进带、暂停、停止及录像的各按钮；通道增量和减量的按钮。
在图5所示的协议中，操作信息和画面显示数据的识别信息作为操作请求241从控制器100发送到装置200，但如图7所示，也可用版本信息代替操作请求241中的识别信息。装置200利用该版本信息可判别操作是针对哪个操作画面的，能获得与使用图5所示协议情况相同的技术效果。
在本实施形态中，如图4(b)、(c)所示，在将画面显示数据中的版本信息作为画面信息的一部分从装置发送到控制器情况下，可用版本信息通知控制器装置状态信息的变化，能很容易指定控制器来的操作信息是针对哪个画面显示数据的，因此，任何时候装置都能改变自身的状态信息。也即，控制器检测到装置的状态信息变化后，即使在该状态信息取入之前期间，装置还可改变自身的状态信息，装置没有必要使用缓存器暂时存储状态的变化，从而处理简单，且可减小存储区。
本发明不仅适用于装置的画面显示数据更新时，而且在控制器经常把握装置的任意画面显示数据时也适用。例如，对于利用画面变化监视入侵者那样的监视系统或以远地把握系统工作状况为目的的系统，本发明都很有效。
《1.6第1实施形态的效果》
如上所述，按照本实施形态，装置具有表示装置操作画面的画面显示数据和画面显示数据的识别信息，控制器从装置读入画面显示数据和识别信息，当识别信息含有版本信息时，利用识别信息能检测装置的操作画面信息的变化。由此，控制器能很容易检测来自其它控制器的指示变化或装置状态为了装置内自动变化而作的变化，同时，控制器能容易可靠地识别正确反映装置状态的操作信息。而且，装置能容易可靠地把握操作是针对哪个操作画面的，能执行用户意图的动作。
按照本实施形态，控制器管理表示装置操作画面的画面显示数据，根据用户的操作将操作信息发送给装置，没有必要把握装置功能或操作的含义(操作与装置功能的关系)。也即，控制器管理及处理与用户接口有关的信息(画面显示数据或操作信息等)，而装置管理及处理与装置控制直接有关的控制信息(表示装置功能的信息，或表示装置功能与操作关系的信息等)。因此，按照本实施形态能减少控制器中的处理。
《2.第2实施形态》
下面，说明本发明第2实施形态的网络控制系统。本实施形态中的装置及控制器的结构与第1实施形态的结构相同，同一构成要素赋以同一标号，并省略其说明(参照图1及图2)
《2.1第2实施形态中的画面信息》
图8为本实施形态中从装置发送到控制器的画面信息的结构例。在本实施形态中，画面信息由多个部分画面信息构成，分别对应于将表示操作画面的画面显示数据分割成多个而成的部分画面显示数据，各部分画面信息有列表形式，具有各种报文头部信息或属性信息。但是，各部分画面信息未必要取列表结构，部分画面信息也可分别独立存在，不用画面信息集合表也可以。
图8所示的画面信息53由画面信息集合表70和部分画面信息61、62、63构成。画面信息53中报文头部的结构与第1实施形态的相同。画面信息集合表70由对应于画面信息53的标识符和多个菜单入口构成，各菜单入口中设有画面信息53中各部分画面信息61～63内的各部分画面显示数据的标识符。
各部分画面信息61～63由报文头部、版本信息、配置信息和部分画面显示数据构成。这里，部分画面显示数据就是位图数据，用于显示构成对应于画面信息53的操作画面一部分的部分画面。报文头部及版本信息与第1实施形态的相同。配置信息是针对对应于画面信息53的操作画面、指定配置哪部分画面显示数据的信息。
图9求出本实施形态中控制器的显示在显示画面中的一例操作画面。在该例中，操作画面由4个部分画面显示501～504构成。因此，表示操作画面的画面显示数据由4个部分画面显示数据构成，分别对应于上述4个部分画面显示。在图9所示的本实施形态中，将画面显示数据分割成多个部分画面显示数据，使得对用户来说不横穿表示一个含义的显示要素。
《2.2第2实施形态中的版本管理》
图10表示装置中信息管理单元18内画面显示数据的版本管理部分(下面称为“版本管理单元”)的结构框图。本实施形态中的版本管理单元包含画面显示版本生成单元91，更新画面显示判定单元92，及多个部分画面显示版本信息保持单元95、96、97、…等。
在上述结构版本管理单元中，画面显示版本信息生成单元91对画面显示数据生成单元20生成的画面显示数据进行版本管理，由计数器构成，每当信息管理单元18改变画面显示数据生成单元20生成的画面显示数据时，就从设备内单元控制单元9获得画面显示更新信息，且计数器加1。该计数器是具有足够位长且位长有限的无限循环计数器，增量一达到最大值后计数就成为最小值。这里，该计数器的位长是任意的，但为了同一计数值表示不同画面显示数据，最好是具有足够的位长，使得至少在控制器具有控制权或状态变化的购读权的时间内，装置的该计数器的值还未循环一次。
更新画面显示判定单元92用从设备内部控制单元9获得的画面显示更新信息检测哪部分画面显示数据发生了变化，并将更新后的部分画面显示数据的版本信息存储到相应部分画面显示数据的部分画面显示版本信息保持单元。
第1部分画面显示版本信息保持单元95保持着构成表示该装置用操作画面的画面显示数据的任一部分画面显示数据的版本信息。该部分画面显示数据(下面称为“第1部分画面显示数据”)的版本信息就是图8所示部分画面信息61中部分画面显示数据的版本信息，也即是构成部分画面信息61的版本信息。
第2部分画面显示版本信息保持单元96保持着除构成表示该装置用操作画面的画面显示数据的上述第1部分画面显示数据以外的任一部分画面显示数据的版本信息。该第2部分画面显示数据的版本信息就是如图8所示部分画面信息62中部分画面显示数据的版本信息，也即是构成部分画面信息62的版本信息。
第3部分画面显示版本信息保持单元97保持着除构成表示该装置用操作画面的画面显示数据的上述第1及第2部分画面显示数据以外的任一部分画面显示数据的版本信息。该第3部分画面显示数据的版本信息就是如图8所示部分画面信息63中部分画面显示数据的版本信息，也即是构成部分画面信息63的版本信息。
图11是装置的信息管理单元18中表示版本管理单元动作的流程图。一旦装置起动，版本管理单元中的画面显示版本信息生成单元91首先对所有部分画面显示数据的版本信息初始化，如设定为“0”(步骤S701)。接着待机到画面显示数据发生变化(步骤S702)，一旦画面显示数据变化，画面显示版本信息生成单元91就借助计数器增量更新画面显示数据的版本信息(步骤S703)。增量后的计数器值表示更新后的画面显示的版本号。下面，更新画面显示判定单元92用画面显示更新信息检测哪个部分画面显示数据发生了变化，并在相应的部分画面显示数据的部分画面显示版本信息保持单元更新部分画面显示数据的版本信息。也即，将作为画面显示版本信息生成单元91中增量后计数器值的画面显示版本号代入相应部分画面显示数据的版本信息(步骤S704)。这样一来，在部分画面显示数据的版本信息更新之后，判定版本管理单元这一连串的处理是否指示结束，若未指示结束，就回到步骤S702，重复上述一连串的处理(步骤S702～S705)。在电源接入装置200期间重复这一连串处理。在步骤S705判定为指示结束时，结束这一连串处理。
例如，第2部分画面显示数据发生变化时，上述版本管理单元进行下面的动作。首先画面显示版本信息生成单元91从设备内部控制单元9获得表示第2部分画面显示数据变化了的画面显示更新信息，通过画面显示版本信息生成单元91的计数器的增量，更新画面显示数据的版本信息。更新画面判定单元92用该画面显示更新信息检测变化的显示要素属于第2部分画面显示数据，使得第2部分画面显示版本信息保持单元96中更新部分画面显示数据的版本信息。
图12用于说明画面显示数据及各部分画面显示数据的版本信息的变化状况。这里，表示装置操作画面的画面显示数据假定由第1～第3部分画面显示数据构成。
在初始状态，所有版本信息被初始化。也即，画面显示版本号及各部分画面显示版本号均设定为“0”。这里，属于第2部分画面显示数据的显示要素一旦发生变化，画面显示版本信息生成单元91的计数器就增量，将画面显示版本号设定为“1”，同时第2部分画面显示版本号也设定为“1”。下面，属于第3部分画面显示数据的显示要素若发生变化，上述计数器再增量，将画面显示版本号及第3部分画面显示版本号同时设定为“2”。此时，第2部分画面显示版本号保持“1”。之后，若属于第2部分画面显示数据的显示要素再次发生变化，则上述计数器再次增量，将画面显示版本号及第2部分画面显示版本号同时设定为“3”。总之，第2部分画面显示版本号为“2”的状态将不复存在。
如上所述，只要任一显示要素发生变化，画面显示版本信息生成单元91中的计数器就增量，画面显示版本号及变化后显示要素所属部分画面显示数据的版本号按增量后的计数器值更新。
《2.3第2实施形态的控制动作》
图13为第2实施形态中网络控制系统的协议说明图。下面用它说明控制器及装置的控制动作。下面所述的控制动作以外的动作与第1实施形态的相同。
一旦有新装置200接入传送线路1，该传送线路1上的控制器100与第1实施形态的情况相同，就对新装置200发送画面请求101。新装置200发送画面信息111b作为其应答。控制器100读入该画面信息111b。此时，装置200发送的画面信息111b就是包含图8所示画面信息集合表70的画面信息53。但是，也可不用画面信息集合表70，而是将所有部分画面信息作为画面信息111b发送。
下面，若用户从控制器100中作为用户接口的操作画面对该装置200进行操作，则与第1实施形态情形相同，控制器100将表示该操作画面的画面显示数据的识别信息和表示该操作的操作信息作为操作请求241发送给装置200。此时，作为识别信息也可包含版本信息。
当该装置200内状态变化、该装置200内画面显示数据变化时，该装置200自动向控制器100发送部分画面信息121b。该部分画面信息121b与第1实施形态中装置200发送给控制器100的画面信息121不同，由变化后显示要素所属部分画面显示数据和其识别信息构成。也即，在本实施形态中，当画面显示数据变化时，将变化了的显示要素所属部分画面显示数据发送给控制器100以代替画面显示数据。在接收到该部分画面信息121b的控制器100中，画面显示数据管理单元12用部分画面信息121b的部分画面显示数据更新保持在画面显示数据保持单元21中各部分画面显示数据内用部分画面信息121b的识别信息表示的部分画面显示数据，并且部分画面显示数据和画面显示数据保持单元21所保持的版本信息也被更新。
《2.4第2实施形态的效果》
在本实施形态中如图9所示，使得对用户而言表示一种含义的显示要素不加以横切那样将画面显示数据分割成多个部分画面显示数据。因此，在一个显示要素发生变化情况下，不必发送多个部分画面显示数据。这样，画面显示变化了时减少了向控制器传送的数据量，装置或控制器中的处理也简单。
按照本实施形态，每个部分画面显示数据预先设置有标识符，当画面显示数据变化时将变化了的显示要素所属部分画面显示数据与其标识符一起发送给控制器，因此，容易指定变化了的部分画面显示数据。此时，该部分画面显示数据的版本信息也一起发送给控制器，因此，控制器能防止该版本信息的误显示。
画面显示数据的分割方法也可随装置内信息的变化每当装置改变画面显示数据而不同。例如，控制器经常重新构筑装置发来的部分画面显示数据，作成一个画面显示数据，将其存储在画面显示数据保持单元21中，并将装置来的更新后的部分画面显示数据写在保持于画面显示数据保持单元21的画面显示数据上加以显示，进行画面显示数据更新。如果按上述构成，则装置能将任意位置中任意大小的部分画面显示数据发送给控制器，从而能使传送量、控制器及装置的处理简单。此时，对于用户的操作，控制器将画面显示数据的版本信息与用户的操作信息一起发送给装置。
《3.第3实施形态》
下面说明本发明第3实施形态的网络控制系统。本实施形态中装置及控制器的结构也与第1实施形态的相同，故同一构成要素赋以同一标号，并省略其说明(参见图1及图2)。
本实施形态中画面信息的构成与第2实施形态的相同(参见图8)，表示装置操作画面的画面显示数据由多个部分画面显示数据构成。但是，在本实施形态中，将部分画面显示数据的画面显示数据分割成多个部分画面显示数据时的分割方法与第2实施形态的不同。
图14表示本实施形态中显示在控制器显示画面的操作画面例。在本实施形态中，按照用户一次操作选择的每一个或多个显示要素也即每个操作单位生成部分画面显示数据，并由这样生成的部分画面显示数据和构成表示这些部分画面显示数据的显示要素基础(base)、表示显示的部分画面显示数据构成画面显示数据。例如，图14所示的操作画面，由对应于操作单位的多个部分画面显示511～520与构成这些部分画面显示511～520的基础的部分画面显示510(以下称“基础画面显示”)所构成。因而，表示图14的操作画面的画面显示数据由这些部分画面显示511～520及510分别对应的部分画面显示数据组成。而且，作为操作单位对应于多个部分画面显示511～520的显示要素重叠显示在部分画面显示510上即基础(base)画面显示上。
图15为本实施形态中网络控制系统的协议说明图。下面，用它说明控制器及装置的控制动作。下面所述控制动作外的动作与第2实施形态的相同。
控制器100向装置200发送画面请求101，装置200向控制器100发送画面信息111b作为应答后，如果用户利用控制器100的用户接口对装置200进行操作，则控制器100对装置200发送操作请求241c。随着发送该操作请求241c，控制器100向装置200发送作为用户操作对象的显示要素所属部分画面显示数据的识别信息和表示该操作的操作信息。也即，在本实施形态的操作请求241c中，向装置200发送对应操作的部分画面显示数据的识别信息来代替表示操作画面的画面显示数据的识别信息，这一点本实施形态与第2实施形态不同。在本实施形态中，如图14所示，显示在操作画面的各操作单位与部分画面显示数据一一对应。由此，收到操作请求241b的装置200用包含在操作请求241b的部分画面显示数据的识别信息能很容易识别用户的操作。也即，在装置200中，装置非同步数据处理单元6根据接收到的作为操作请求241b的部分画面显示数据的识别信息和操作信息，指示设备内控制单元9执行与对应该识别信息的操作单位和操作信息相当的功能，设备内控制单元9执行基于该指示的功能。
其后，当装置200内的状态变化、该装置200内的画面显示数据变化时，装置200自动向控制器100发送部分画面信息121b。该部分画面显示信息121b与第2实施形态的相同，由变化后显示要素所属部分画面显示数据和其识别信息构成。收到该部分画面信息121b的控制器100与第2实施形态的相同，更新部分画面显示数据及其版本信息。
按照上述本实施形态，表示操作画面的画面显示数据按每个操作单位分割，因此，装置200利用控制器100发来的作为操作请求241c的部分画面显示数据的识别信息，能容易识别用户的操作。按照操作单位不横切那样将画面显示数据分割成部分画面数据情况下，即使不按每个操作单位作这种分割，也容易识别装置200的操作。此时，未必仅用部分画面显示数据的识别信息来指定操作，这是由于利用该识别信息能限定操作的种类。
在本实施形态中，某显示要素变化时，装置200向控制器100只发送与该显示要素所属的部分画面显示数据对应的部分画面信息，因此，与第2实施形态的相同，画面显示变化时能减少向控制器100发送的数据量。
此外，控制器本身能向用户显示表示操作位置的光标，控制器的管理可与光标移动相关，能简化装置内的处理及减少传送量或加快对用户操作的应答。
《4.第4实施形态》
下面，说明本发明第4实施形态的网络控制系统。本实施形态中的装置及控制器的结构与第1实施形态的相同，因此，同一构成要素赋以同一标号，并省略其说明(参见图1及图2)。
图16表示本实施形态中从装置发送给控制器的画面信息54的构成图。该画面信息54由画面信息集合表71、主体画面信息65和光标显示单元信息80构成。在本实施形态中，表示用户操作位置的光标显示单元重叠显示在操作画面上，操作画面本身对应于主体画面信息65，光标显示单元对应于光标显示单元信息80。如图16所示，主体画面信息65包含：表示操作画面作为位图(bitmap)数据的画面显示数据；包含画面显示数据标识符等的报文头部；画面显示数据的版本信息。光标显示单元信息80包含：表示光标显示单元作为位图数据的光标数据；包含光标标识符等的报文头部；光标数据的版本信息；表示光标位置的位置信息。画面信息集合表71包含：含有光标显示单元表示广义操作画面的画面显示数据(广义画面显示数据)的标识符等的报文头部；至主体画面信息65的数据入口；至光标显示单元信息80的数据入口。分别设定有表示操作画面本身的画面显示数据的标识符作为至主体画面信息65的数据入口；及光标数据的标识符作为至光标显示单元的数据入口。
图17表示本实施形态中显示在控制器的显示画面上的操作画面例。在该例中，光标显示单元600重叠显示在操作画面自身的画面显示500上。含有光标显示单元600表示广义操作画面的广义画面显示数据可考虑由分别对应于画面显示500及光标显示单元600的两个部分画面显示数据构成。该操作画面中光标位置用画面显示500左上点为原点的座标值(X座标及Y座标)表达。
本实施形态中网络控制系统的协议与图13所示的第2实施形态的基本相同。在本实施形态中，作为对画面请求101的应答从装置200发送到控制器100的画面信息111b具有图16所示的构成，主体画面信息65及光标显示单元信息80分别对应于第2实施形态中不同的部分画面显示信息。接收到这种画面信息的控制器100用主体画面信息65的画面显示数据将操作画面显示在显示画面上，而且用光标显示单元信息80的光标数据及位置信息将光标显示单元重叠显示在操作画面上。
从控制器100发送操作请求241时，画面显示数据的识别信息与操作信息一起发送到装置200，该操作信息含有表示光标操作位置的操作位置信息。该操作位置信息由操作画面中的X座标及Y座标构成。
在操作请求241发送后，装置200内的状态变化、该装置200内画面显示数据变化时，该装置200与第2实施形态相同，自动地向控制器100发送部分画面信息121b。此时，在本实施形态中，对于光标的移动向控制器100只发送光标显示单元信息80。收到它的控制器100根据包含在该光标显示单元信息80中的位置信息更新光标显示单元对操作画面的重叠显示。因此，按照本实施形态，能提高光标移动对操作的响应速度。
光标的位图数据仅在对画面请求的最初应答(画面信息111b)中发送，在其后的画面信息中可以不包含光标的位图数据，由此，处理变得简单，并能减少传送量或提高响应速度。而且，不从装置发送光标的位图数据，光标的位图数据也可能由控制器独自决定地构成，这时在光标移动中，装置只发送经更新的光标位置作为画面信息就可，处理变得简单且可减少传送量或改善应答性。
《4.1第4实施形态的变形例》
在上述实施形态中，用一个画面显示数据表示操作画面本身，但也可以如第2实施形态那样用多个部分画面显示数据表示操作画面。图18为用多个部分画面显示数据表示操作画面时本实施形态的操作画面显示例。在该例中，操作画面由4个部分画面显示501、502、503、504构成，光标显示单元601重叠显示在该操作画面上。因此，此时，图16所示画面信息54中的画面信息65置换成如图8所示的多个部分画面显示信息。光标显示单元信息也可作为一种部分画面显示信息。
此时的光标显示单元信息的构成与图16所示的光标显示单元信息80的相同。其中，光标单元信息中的配置信息作为图16所示的例子，是用操作画面中的座标来表达的，但在这种情况下如图18所示，也可以是重叠显示光标显示单元601的部分画面显示502中表示相对位置的信息。也即，利用部分画面显示502左上角为原点的座标值(相对X座标及相对Y座标)来表达光标的位置信息。
如上所述，画面显示数据由多个部分画面显示数据构成情况下网络控制系统的协议，基本上与图15所示第3实施形态的协议相同。在这种情况下用户用光标操作时，控制器100向装置200发送操作请求241c，此时发送给装置200的部分画面显示数据的识别信息中包含有光标数据的识别信息。例如，在图18所示例子情况下，部分画面显示502的部分画面显示数据的识别信息与光标显示单元601的光标数据的识别信息一起也发送给装置200。装置200将根据接收到的作为操作请求241c的部分画面显示数据的识别信息(包含光标数据的识别信息)和操作信息，进行规定的功能。
其后，装置200内的状态变化、该装置200内的画面显示数据变化时，装置200自动地向控制100发送部分画面信息121b。基于用户的光标移动操作的操作请求241c从控制器100发送时，操作画面中的变化仅仅是光标显示单元的位置，因此，只向控制器100发送包含有光标显示单元信息的部分画面信息121b。接收到它的控制器100将根据包含在该光标显示单元信息中的位置信息，将光标显示单元重叠显示在操作画面上。
《5.第5实施形态》
下面，说明本发明第5实施形态的网络控制系统。本实施形态中装置及控制器的结构与第1实施形态的相同，因此，同一构成要素赋以相同的标号，并省略其说明(参见图1及图2)。
图19表示本实施形态中从装置发送给控制器的画面信息55的构成。该画面信息55与第4实施形态的相同，由画面信息集合表71、主体画面信息65及光标显示单元信息81构成，在本实施形态中，光标显示单元重叠显示在操作画面上。画面信息55中的画面信息集合表71及主体画面信息65，其内部构成也与第4实施形态的相同。光标显示单元信息81具有包含标识符等的报文头部，版本信息及位置信息，这一点与第4实施形态的相同，但是具有光标显示单元的形状、大小及色彩以代替作为位图数据表达光标显示单元的光标数据，进而具有操作许可信息，这一点与第4实施形态的不同。这里，操作许可信息是表示许可用户操作的种类信息，例如，是表示当前光标位置可移动方向仅仅在上下左右4个方向中的右上方向的信息。
图20表示本实施形态中显示在控制器的显示画面的操作画面例。在该例中，光标显示单元601重叠显示在表示操作画面本身的画面显示500上。这里，如果将光标显示单元601重叠显示在画面显示500上的画面作为广义操作画面，则表示该广义操作画面的画面显示数据(广义画面显示数据)可考虑由分别对应于画面显示500及光标显示单元601的两个部分画面显示数据构成。在图20所示例中，光标显示单元的形状为包围操作单位的矩形，但也可为圆形等其它形状。在本实施形态中，不存在表示光标显示单元的位图数据，光标显示单元的形状、大小及色彩将由包含在光标显示单元信息81中的信息确定。
本实施形态中的网络控制系统的协议基本上与图13所示的第2实施形态的相同。在本实施形态中，从装置200发送给控制器100作为对画面请求101应答的画面信息111b具有图19所示的构成，主体画面信息65及光标显示单元信息81分别对应于第2实施形态中不同的部分画面显示信息。接收到该画面信息的控制器100利用主体画面信息65的画面显示数据将操作画面显示在显示画面上，并利用光标显示单元信息81的形状、大小及色彩的信息和位置信息将光标显示单元重叠显示在操作画面上。
控制器100收到画面信息111b后，如果用户从控制器100中作为用户接口的操作画面对装置200进行操作，则控制器100将表示该操作画面的画面显示数据的识别信息和表示该操作的操作信息作为操作请求241发送给装置200。但是，在操作请求241发送前，控制器100也可根据收到作为画面信息111b的光标显示单元信息81中操许可信息，检查是否许可用户操作。该检查结果不允许该操作时，不发送操作请求241，在控制器100内进行出错处理，故能避免无用的处理。例如，也可规定为：图20所示内容(contents)1有光标时，遥控器左向箭头键的操作无效，或用户按压并放开遥控器的选择键时，不是“按压”、“放开”，而是将“选择”作为用户的操作信息发送给装置，从而简化了装置的处理。
操作请求241发送后，装置200内的状态变化、该装置200内的画面显示数据变化时，该装置200自动地向控制器100发送对应于画面显示数据中变化了的部分的部分画面信息121b。在本实施形态中，用户操作的光标显示单元变化了时，向控制器100只发送图19所示的光标显示单元信息81。接收到该信息的控制器100根据包含在该光标显示单元信息81中表示位置信息及形状、大小和色彩的信息，将光标显示单元重叠显示在操作画面上。
按照上述本实施形态，用户操作的光标显示单元变化时，装置不必向控制器发送画面显示数据等的位图数据，因此能提高对用户操作的响应速度。另外，由于设定包含在光标显示单元信息81的表示形状、大小及色彩的信息，故能使光标显示单元的图案设计适合于操作画面中各显示要素的图案设计。
《其它》
在以上描述的各实施形态中，接于传送线路1的设备是处理图像、音响或信息中至少一种的设备，但也可以是与图像、音响或信息任一种无直接关系的设备，例如空调等也可以作为控制器100的控制对象连接于传送线路1，本发明也能够适用于连接有这样设备的网络控制系统。
产业上的可应用性
本发明适用于通过网络对连接于网络的设备进行操作的网络控制系统，特别适用于采用图形用户接口(GUI)以图形、文字等在画面上支援用户对设备操作的设备控制系统，例如在经IEEE1394标准的串行总线等传送线路连接有多个AV设备的系统中，适用于具有GUI的设备经传送线路控制其它设备的网络系统。

Claims (40)

1．一种网络控制系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经所述传送线路向所述控制器发送所述画面显示数据和所述识别信息，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述画面显示数据及所述识别信息，
用所述画面显示数据将所述操作画面显示在所述显示手段上，
根据用户对所述操作画面的操作，经所述传送线路将显示该操作的操作信息和所述识别信息发送给所述装置，对所述装置进行控制。
2．一种网络控制系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置操作画面用的画面显示数据和识别该画面显示数据用识别信息，经所述传送线路向所述控制器发送所述画面显示数据和所述识别信息，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述画面显示数据及识别信息，
用所述画面显示数据及所述识别信息将所述操作画面显示在所述显示手段上，
根据用户对所述操作画面的操作，经所述传送线路将显示该操作的操作信息和所述识别信息发送给所述装置，对所述装置进行控制。
3．如权利要求1或2所述的网络控制系统，其特征在于，所述识别信息包含有表示所述画面显示数据版本的版本信息。
4．如权利要求1或2所述的网络控制系统，其特征在于，所述操作信息包含表示所述操作画面上操作位置的操作位置信息。
5．一种网络控制系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置操作画面用的并由多个部分画面显示数据构成的画面显示数据，经所述传送线路向所述控制器发送所述部分画面显示数据，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述部分画面显示数据，
用所述部分画面显示数据将所述操作画面显示在所述显示手段上，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的操作信息发送给所述装置，对所述装置进行控制。
6．如权利要求5所述的网络控制系统，其特征在于，
所述装置，在所述装置的所述画面显示数据发生变化时，向所述控制器发送所述画面显示数据中变化了的部分画面显示数据，
所述控制器，经所述传送线路从所述装置接收变化了的部分画面显示数据，并根据接收到的部分画面显示数据更新显示在所述显示手段中的所述操作画面。
7．如权利要求5所述的网络控制系统，其特征在于，
所述装置具有部分画面识别信息，作为识别所述部分画面显示数据的识别信息，经所述传送线路与所述部分画面显示数据一起向所述控制器发送所述部分画面识别信息，
所述控制器经所述传送线路从所述装置接收所述部分画面显示数据和所述部分画面识别信息。
8．如权利要求7所述的网络控制系统，其特征在于，
当所述装置的所述画面显示数据变化了时，所述装置向所述控制器发送所述画面显示数据中变化了的部分画面显示数据和该部分画面显示数据的部分画面识别信息，
所述控制器，经所述传送线路从所述装置接收变化了的部分画面显示数据和该部分画面显示数据的部分画面识别信息，并根据接收到的部分画面显示数据及部分画面识别信息更新显示在所述显示手段上的所述操作画面。
9．如权利要求7所述的网络控制系统，其特征在于，
所述控制器根据用户对所述操作画面的操作，经所述传送线路向所述装置发送表示该操作的操作信息和对应于该操作的部分画面识别信息，由此，控制所述装置。
10．如权利要求7至9的任一权利要求所述的网络控制系统，其特征在于，
所述部分画面识别信息包含表示所述部分画面显示数据的版本的版本信息。
11．如权利要求7至9的任一权利要求所述的网络控制系统，其特征在于，
画面显示中一个显示要素配置在分别对应于所述多个部分画面显示数据的多个显示部分中任一显示部分内。
12．如权利要求7至9的任一权利要求所述的网络控制系统，其特征在于，
画面显示中对应于用户操作单位的显示要素配置在分别对应于所述多个部分画面显示数据的多个显示部分中任一显示部分内。
13．一种网络控制系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置操作画面用的画面显示数据和所述操作画面上重叠显示用的重叠显示数据，经所述传送线路向所述控制器发送所述画面显示数据和所述重叠显示数据，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述画面显示数据及所述重叠显示数据，
用所述画面显示数据将所述操作画面显示在所述显示手段上，同时用所述重叠显示数据对显示在所述显示手段上的所述操作画面进行重叠显示，
根据用户对所述操作画面的操作，经所述传送线路将显示该操作的操作信息发送给所述装置，由此对所述装置进行控制。
14．如权利要求13所述的网络控制系统，其特征在于，
所述重叠显示数据是显示光标用的光标信息，表示用户对所述操作画面操作的位置。
15．如权利要求14所述的网络控制系统，其特征在于，所述光标信息包含表示所述操作画面中所述光标位置的位置信息。
16．如权利要求14所述的网络控制系统，其特征在于，所述光标信息包含表示光标形状的形状信息。
17．如权利要求14所述的网络控制系统，其特征在于，所述光标信息包含表示所述光标大小的尺寸信息。
18．如权利要求14所述的网络控制系统，其特征在于，所述光标信息包含表示所述光标颜色的颜色信息。
19．如权利要求14所述的网络控制系统，其特征在于，所述光标信息包含表示许可用户操作的许可信息。
20．如权利要求13所述的网络控制系统，其特征在于，
当对应于所述装置的所述重叠显示数据的显示部分变化了时，所述装置向所述控制器发送所述重叠显示数据，
所述控制器经所述传送线路从所述装置接收所述重叠显示数据，并根据接收到的所述重叠显示数据更新显示在所述显示手段上的所述操作画面。
21．一种网络控制系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用识别信息，经所述传送线路向所述控制器发送所述画面显示数据和所述识别信息，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述画面显示数据及所述识别信息，
用所述画面显示数据将所述操作画面显示在所述显示手段上。
22．一种网络控制系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用识别信息，经所述传送线路向所述控制器发送所述画面显示数据和所述识别信息，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述画面显示数据及所述识别信息，
用所述画面显示数据及所述识别信息将所述操作画面显示在所述显示手段上。
23．一种网络系统，用传送线路连接第1及第2设备，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置的操作画面用的画面显示数据和在所述操作画面上重叠显示用的重叠显示数据，经所述传送线路向所述控制器发送所述画面显示数据和所述重叠显示数据，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收所述画面显示数据及所述重叠显示数据，
用所述画面显示数据将所述操作画面显示在所述显示手段上，同时用所述重叠显示数据对显示在所述显示手段上的所述操作画面进行重叠显示。
24．一种设备，该设备是包含装置的第2设备，通过传送线路与包含控制器的第1设备相连，并经所述传送线路由控制器对其进行控制，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用识别信息，经所述传送线路向所述控制器发送所述画面显示数据和所述识别信息，
接收所述控制器发送的所述画面显示数据的识别信息和表示用户操作的操作信息，并根据接收到的识别信息及操作信息进行工作。
25．一种设备，该设备是包含控制器的第1设备，经传送线路与第2设备连接，所述控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收表示所述装置的操作画面的画面显示数据及识别该画面显示数据用的识别信息，
用所述画面显示数据将所述操作画面显示在所述显示手段上，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的所述操作信息和所述识别信息发送给所述装置，由此对所述装置进行控制。
26．如权利要求24所述的设备，其特征在于，所述操作信息包含表示所述操作画面上操作位置的操作位置信息。
27．如权利要求25所述的设备，其特征在于，所述操作信息包含表示所述操作画面上操作位置的操作位置信息。
28．一种设备，该设备是包含装置的第2设备，通过传送线路与包含控制器的第1设备相连，并经所述传送线路由所述控制器对其进行控制，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置的操作画面用的由多个部分画面显示数据构成的画面显示数据，经所述传送线路向所述控制器发送所述部分画面显示数据，
接收所述控制器发送的表示用户操作的操作信息，并根据接收到的所述操作信息进行工作。
29．一种设备，该设备是包含控制器的第1设备，经传送线路与第2设备连接，所述控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收表示所述装置的所述操作画面的多个部分画面显示数据，
用所述部分画面显示数据将所述操作画面显示在所述显示手段上，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的操作信息发送给所述装置，由此对所述装置进行控制。
30．如权利要求28所述的设备，其特征在于，
当所述装置的所述画面显示数据变化了时，所述装置向所述控制器发送所述画面显示数据中变化了的部分画面显示数据。
31．如权利要求29所述的设备，其特征在于，
当所述装置的所述画面显示数据变化了时，所述控制器经所述传送线路从所述装置接收所述画面显示数据中变化了的部分画面显示数据，并根据接收到的所述部分画面显示数据更新显示在所述显示手段上的所述操作画面。
32．一种设备，该设备是包含装置的第2设备，通过传送线路与包含控制器的第1设备相连，并经所述传送线路由所述控制器对其进行控制，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述装置具有显示所述装置的操作画面用的画面显示数据和在所述操作画面上重叠显示用的重叠显示数据，经所述传送线路向所述控制器发送所述画面显示数据及所述重叠显示数据，
接收所述控制器发送的表示用户操作的操作信息，并根据接收到的所述操作信息进行工作。
33．一种设备，该设备是包含控制器的第1设备，经传送线路与第2设备连接，所述控制器经所述传送线路控制包含在所述第2设备中的装置，其特征在于，
所述第1及第2设备中至少一个设备是处理图像、音响或信息中至少一种的处理设备，
所述控制器备有包含显示手段的用户接口，经所述传送线路从所述装置接收表示所述装置的操作画面的画面显示数据和所述操作画面上重叠显示用的重叠显示数据，
用所述画面显示数据将所述装置的操作画面显示在所述显示手段上，同时用所述重叠显示数据对显示在所述显示手段上的所述操作画面进行重叠显示，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的操作信息发送给所述装置，由此对所述装置进行控制。
34．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从所述装置发送的所述画面显示数据在所述控制器中显示所述操作画面的显示步骤，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的所述操作信息和所述识别信息从所述控制器发送给所述装置、由此对所述装置进行控制的控制步骤。
35．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从所述装置发送的所述画面显示数据及所述识别信息在所述控制器中显示所述操作画面的显示步骤，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的所述操作信息和所述识别信息从所述控制器发送给装置、由此对所述装置进行控制的控制步骤。
36．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送构成显示所述装置的操作画面用的画面显示数据的多个部分画面显示数据中至少一个部分画面显示数据的发送步骤，
用从所述装置发送的所述部分画面显示数据在所述控制器中显示所述操作画面的显示步骤，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的所述操作信息从所述控制器发送给所述装置、由此对所述装置进行控制的控制步骤。
37．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送显示所述装置的操作画面用的画面显示数据和所述操作画面上重叠显示用的重叠显示数据的发送步骤，
用从所述装置发送的所述画面显示数据及所述重叠显示数据在所述控制器中显示所述操作画面，同时根据所述重叠显示数据对显示的所述操作画面进行重叠显示的显示步骤，
根据用户对所述操作画面的操作，经所述传送线路将表示该操作的操作信息从所述控制器发送给所述装置、由此对所述装置进行控制的控制步骤，
38．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从所述装置发送的所述画面显示数据在所述控制器中显示所述操作画面的显示步骤。
39．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送显示所述装置的操作画面用的画面显示数据和识别该画面显示数据用的识别信息的发送步骤，
用从所述装置发送的所述画面显示数据及所述识别信息在所述控制器中显示所述操作画面的显示步骤。
40．一种网络控制系统中的控制方法，其特征在于，
用传送线路连接第1及第2设备，所述第1及第2设备中至少一个设备处理图像、音响或信息中至少之一，包含在所述第1设备中的控制器经所述传送线路控制包含在所述第2设备中的装置，所述方法包含下列步骤：
从所述装置经所述传送线路向所述控制器发送显示所述装置的操作画面用的画面显示数据和操作画面上重叠显示用的重叠显示数据的发送步骤，
用从所述装置发送的所述画面显示数据及所述重叠显示数据在所述控制器中显示所述操作画面、同时根据所述重叠显示数据对显示的所述操作画面进行重叠显示的显示步骤。
CN99801876A 1998-10-20 1999-10-19 网络控制系统 Pending CN1287763A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP297792/1998 1998-10-20
JP29779298A JP3852892B2 (ja) 1998-10-20 1998-10-20 ネットワーク制御システム

Publications (1)

Publication Number Publication Date
CN1287763A true CN1287763A (zh) 2001-03-14

Family

ID=17851239

Family Applications (1)

Application Number Title Priority Date Filing Date
CN99801876A Pending CN1287763A (zh) 1998-10-20 1999-10-19 网络控制系统

Country Status (6)

Country Link
US (1) US6844886B1 (zh)
EP (1) EP1041851A4 (zh)
JP (1) JP3852892B2 (zh)
KR (1) KR100460219B1 (zh)
CN (1) CN1287763A (zh)
WO (1) WO2000024222A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100355240C (zh) * 2003-12-19 2007-12-12 佳能株式会社 信息显示装置以及信息显示方法
CN102750072A (zh) * 2011-04-20 2012-10-24 纬创资通股份有限公司 加速更新画面的显示方法
CN103530077A (zh) * 2013-08-14 2014-01-22 南通腾启电子商务有限公司 计算机管理系统信息

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4660877B2 (ja) * 2000-01-11 2011-03-30 ソニー株式会社 電子機器システム
JP4652584B2 (ja) * 2001-01-25 2011-03-16 キヤノン株式会社 制御装置、方法およびプログラム
US8479238B2 (en) 2001-05-14 2013-07-02 At&T Intellectual Property Ii, L.P. Method for content-based non-linear control of multimedia playback
JP4102270B2 (ja) * 2003-08-21 2008-06-18 シャープ株式会社 機器制御画面構成出力装置及び機器
WO2005048537A1 (en) * 2003-11-13 2005-05-26 Koninklijke Philips Electronics, N.V. Consistent user interface front end for remote user interfaces
JP4540377B2 (ja) 2004-03-25 2010-09-08 パナソニック株式会社 Ｕｉ表示装置及びｕｉ表示方法
US20060004834A1 (en) * 2004-06-30 2006-01-05 Nokia Corporation Dynamic shortcuts
US7292963B2 (en) * 2004-10-29 2007-11-06 Sap Aktiengesellschaft Aggregating sensor data
KR100752630B1 (ko) * 2005-07-11 2007-08-30 주식회사 로직플랜트 저속통신망과 저사양 개인용통신단말기에 최적화된 컴퓨터원격제어방법 및 그 시스템
JP2007065944A (ja) * 2005-08-31 2007-03-15 Hitachi Ltd 計算機情報の表示方法およびシステム
KR100736094B1 (ko) * 2006-02-17 2007-07-06 삼성전자주식회사 디지털 기기의 상태 정보 제공 방법 및 장치
JP4247694B2 (ja) * 2007-02-01 2009-04-02 ソニー株式会社 表示制御装置および方法、並びにプログラム
US20090156251A1 (en) * 2007-12-12 2009-06-18 Alan Cannistraro Remote control protocol for media systems controlled by portable devices
AU2009240356B2 (en) * 2008-04-21 2014-03-20 Tiefenbach Control Systems Gmbh Screen
US20100011135A1 (en) * 2008-07-10 2010-01-14 Apple Inc. Synchronization of real-time media playback status
US9716774B2 (en) 2008-07-10 2017-07-25 Apple Inc. System and method for syncing a user interface on a server device to a user interface on a client device
USD633908S1 (en) 2010-04-19 2011-03-08 Apple Inc. Electronic device
EP2596622B1 (en) 2010-07-22 2023-06-28 Dolby Laboratories Licensing Corporation System, apparatus and methods for mapping between video ranges of image data and display
USD680125S1 (en) 2010-11-16 2013-04-16 Apple Inc. Display screen or portion thereof with graphical user interface
USD728612S1 (en) 2012-09-07 2015-05-05 Apple Inc. Display screen or portion thereof with graphical user interface
USD755843S1 (en) 2013-06-10 2016-05-10 Apple Inc. Display screen or portion thereof with graphical user interface
US20160150252A1 (en) * 2013-07-23 2016-05-26 Sharp Kabushiki Kaisha Distribution apparatus, distribution method, playback apparatus, playback method, and program
USD733744S1 (en) 2013-10-21 2015-07-07 Apple Inc. Display screen or portion thereof with graphical user interface
USD743443S1 (en) * 2013-10-22 2015-11-17 Apple Inc. Display screen or portion thereof with graphical user interface
USD789419S1 (en) 2014-09-01 2017-06-13 Apple Inc. Display screen or portion thereof with graphical user interface
USD773510S1 (en) 2015-06-05 2016-12-06 Apple Inc. Display screen or portion thereof with graphical user interface
USD775649S1 (en) 2015-09-08 2017-01-03 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD813243S1 (en) 2015-09-08 2018-03-20 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD962954S1 (en) 2016-09-06 2022-09-06 Apple Inc. Display screen or portion thereof with graphical user interface
USD893512S1 (en) 2018-09-10 2020-08-18 Apple Inc. Electronic device with graphical user interface
USD937858S1 (en) 2019-05-31 2021-12-07 Apple Inc. Display screen or portion thereof with graphical user interface
USD937295S1 (en) 2020-02-03 2021-11-30 Apple Inc. Display screen or portion thereof with graphical user interface
USD949186S1 (en) 2020-06-21 2022-04-19 Apple Inc. Display or portion thereof with animated graphical user interface

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2938104B2 (ja) * 1989-11-08 1999-08-23 株式会社日立製作所 共有資源管理法方および情報処理システム
US5283861A (en) * 1990-08-31 1994-02-01 International Business Machines Corporation Remote control of a local processor console
US5261044A (en) * 1990-09-17 1993-11-09 Cabletron Systems, Inc. Network management system using multifunction icons for information display
JP3106495B2 (ja) * 1990-11-21 2000-11-06 ソニー株式会社 ホームバス制御装置
JPH0744477A (ja) 1993-07-30 1995-02-14 Canon Inc マルチメディア機器の制御システム
CN1113302C (zh) 1993-07-30 2003-07-02 佳能株式会社 通过通信线路控制设备的控制器和方法
JPH09149325A (ja) * 1995-11-21 1997-06-06 Sony Corp グラフイック表示データ分散型ａｖシステム
JPH09218815A (ja) * 1996-01-31 1997-08-19 Toshiba Corp ネットワーク通信機能を持つ情報機器及び同機器における情報アクセス方法
JP3735942B2 (ja) * 1996-06-04 2006-01-18 ソニー株式会社 通信制御方法、通信システムおよびそれに用いる電子機器
US5883621A (en) * 1996-06-21 1999-03-16 Sony Corporation Device control with topology map in a digital network
JP3382118B2 (ja) * 1996-12-26 2003-03-04 株式会社日立製作所 情報機器、情報機器システム制御方法及び情報機器システム
US6691150B1 (en) 1996-12-26 2004-02-10 Hitachi, Ltd. Information device, information device system control method, and information device system
US7103834B1 (en) * 1997-06-25 2006-09-05 Samsung Electronics Co., Ltd. Method and apparatus for a home network auto-tree builder
IL139411A0 (en) * 1998-05-07 2001-11-25 Samsung Electronics Co Ltd Method and system for device to device command and control in network
CN1269116A (zh) * 1998-05-13 2000-10-04 松下电器产业株式会社 网络控制系统、控制器及设备
JP2001069580A (ja) * 1999-08-31 2001-03-16 Matsushita Electric Ind Co Ltd Ａｖ機器コントロール装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100355240C (zh) * 2003-12-19 2007-12-12 佳能株式会社 信息显示装置以及信息显示方法
CN102750072A (zh) * 2011-04-20 2012-10-24 纬创资通股份有限公司 加速更新画面的显示方法
CN102750072B (zh) * 2011-04-20 2015-11-18 纬创资通股份有限公司 加速更新画面的显示方法
CN103530077A (zh) * 2013-08-14 2014-01-22 南通腾启电子商务有限公司 计算机管理系统信息

Also Published As

Publication number Publication date
WO2000024222A1 (en) 2000-04-27
JP3852892B2 (ja) 2006-12-06
JP2000125366A (ja) 2000-04-28
US6844886B1 (en) 2005-01-18
KR20010024777A (ko) 2001-03-26
EP1041851A4 (en) 2005-07-06
EP1041851A1 (en) 2000-10-04
KR100460219B1 (ko) 2004-12-08

Similar Documents

Publication Publication Date Title
CN1287763A (zh) 网络控制系统
CN1148041C (zh) 网络控制系统及其控制器、目标及消费器
CN1179280C (zh) 通信系统及其方法，发送装置及其方法
CN1127241C (zh) Av设备使用方法及av设备系统
CN1063863C (zh) 信息记录媒体和信息重现装置
CN1152509C (zh) 信息记录系统
CN1790528A (zh) 重放装置及其方法、记录介质和程序
CN1214330C (zh) 网络连接设备及采用该设备的网络系统
CN1991834A (zh) 内容检索方法
CN1269116A (zh) 网络控制系统、控制器及设备
CN1209716A (zh) 网络控制系统,网络终端和控制终端
CN1615610A (zh) 路由选择装置及其启动方法
CN1681287A (zh) 数字照相机、像簿管理方法、像簿管理程序产品、以及像簿管理程序传送介质
CN101077007A (zh) 内容呈现系统
CN1701314A (zh) 内容提供系统、信息处理装置和方法、输出装置和方法、以及用于其的计算机程序
CN1552075A (zh) 信息处理装置和方法、记录介质以及程序
CN1113347C (zh) 信息数据记录和重放装置
CN1254100C (zh) 控制电视广播节目预约录像的信息处理装置、方法
CN1132395C (zh) 数据通信系统和数据通信方法
CN1301471C (zh) 数据通信系统及其方法
CN1308828A (zh) 网络控制系统及其方法
CN1783784A (zh) 信息处理装置和方法，记录媒体，以及程序
CN1275027A (zh) 用于信息处理的装置、方法和介质
CN1161940C (zh) 数据通信系统、方法、设备和数字接口
CN1279760C (zh) 数据广播调度系统和与此相关的装置、方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
C20 Patent right or utility model deemed to be abandoned or is abandoned