CN1148976C - 图象传送方法和图象译码装置 - Google Patents

图象传送方法和图象译码装置 Download PDF

Info

Publication number
CN1148976C
CN1148976C CNB981064515A CN98106451A CN1148976C CN 1148976 C CN1148976 C CN 1148976C CN B981064515 A CNB981064515 A CN B981064515A CN 98106451 A CN98106451 A CN 98106451A CN 1148976 C CN1148976 C CN 1148976C
Authority
CN
China
Prior art keywords
information
mentioned
demonstration
signal
related data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB981064515A
Other languages
English (en)
Other versions
CN1202073A (zh
Inventor
����ة
文仲丞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1202073A publication Critical patent/CN1202073A/zh
Application granted granted Critical
Publication of CN1148976C publication Critical patent/CN1148976C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本发明的任务是提高访问对应于构成运动图象MI的第一、第二物体的相关数据时的操作性的同时，简化该相关数据的所在信息的管理，但是基本上避免由于传送失误引起的相关数据的所在信息的损失。其解决手段是在对对应于构成运动图象MI的第一、第二物体的数字图象信号进行编码传送时，作为所传送的各物体的图象编码信号的编码比特列包含作为用来对各物体进行图象显示的显示比特列和作为与该各物体相关联的相关数据的所在信息的所在比特列。

Description

图象传送方法和图象译码装置
技术领域
本发明涉及图象传送用数据结构、图象传送方法、图象译码装置及数据记录媒体，特别是涉及对应于构成运动图象的物体的包含与该物体关联的相关数据的所在信息的图象编码信号的数据结构、把各物体的图象信号变换为上述数据结构的图象编码信号后进行传送的方法、对上述数据结构的图象编码信号进行译码的装置以及存储了为用上述图象传送方法或上述图象译码装置进行图象处理的程序的数据记录媒体。
背景技术
在高效地存储或传送数字图象信息时，有必要把数字图象信息进行压缩编码，按照现有技术的状况，作为对数字图象信息进行压缩编码的方法，除了以JPEG(Join Photographic Coding Experts Group)和MPEG(Moving Picture Experts Group)为代表的离散余弦变换(DCT：Discrete Cosine Transform)以外，还有子带、小波、分形等波形编码方法。
作为除掉处于邻接帧等之间的冗长的图象信息的方法，是先进行用运动补偿的画面间预测，也就是用当前画面的象素的象素值与前一幅画面的象素的象素值的差值代表当前画面的象素的象素值，然后把该差值信号进行波形编码。
最近，随着压缩效率的提高，为了能够在对应于各个物体的每个区域重放构成一幅画面的图象信号，在每一个物体上把图象信号分别进行压缩编码再进行传送的方式正在达到实用化的程度。
按照这种方式，在重放侧，对对应于各个物体的经过编码的图象信号进行译码，再合成由该译码重放的各个物体的图象，然后进行相当于一幅画面的图象的显示。这样，通过按物体单位对图象进行编码，就能够自由地组合而合成应该显示的物体的图象，从而能够简单地再编辑运动图象。
按照这种方式，能够根据通信线路的混合状况和重放装置的性能，进而根据观众的喜好，对比较不重要的物体的图象不进行重放，而进行运动图象的显示。
另外，按照上述的方式，能够实现物体单位的分级，也就是能够实现分层次处理。按照这样的分层次处理，用对应于图象清晰度不同的多个层次的图象信号作为对应于各物体的图象信号，并用其他层次的图象信号来进行各层次的图象信号的编码处理或译码处理。
因此，近年来，经由计算机网络能够访问想要看的运动图象的图象提供系统正在普及起来。
图9是为说明这样的图象提供系统的模式图。
在该图象提供系统700中，多个网络即网络701～703相互连接在一起，提供图象信息的多个服务器连接在各网络701～703上，同时，连接着接受提供的图象信息多个图象接收重放终端装置(以下简单地称为终端装置)。在图9中，为了简单地说明，作为上述终端装置，仅表示了连接在上述网络701上的终端装置704。网络701连接着服务器705，网络703连接着服务器706，网络702连接着服务器707。
在这样的图象提供系统700中，在终端装置704接受例如来自服务器705提供的图象信息的情况下，首先，该终端装置704取得与上述的服务器705之间联络，在该终端704与服务器705之间使线路的连接状态成立。然后，该终端装置704接收由服务器705提供的规定节目的图象数据，并把该图象数据进行译码重放出来。
这样，为了进一步在上述终端装置704中能够得到与终端装置所接收到的图象数据(即规定的节目信息)相关的相关数据，在对应于记述着上述图象数据的图象文件的与该图象文件不同格式的文本文件上记述着表示与上述节目有关的相关数据的所在位置的所在信息。因此，用户能够根据文本文件上所记载的该所在信息得到由终端装置所接收到的节目的相关数据。
例如：在作为上述的图象提供系统的当前的网络中，把超文本文件用作文本文件，并把表示文字组和与该文字组相关的其他信息(相关信息)的所在位置的所在信息记述在该文本文件内，当用户选择规定的文字组时，规定的服务器就提供与所选定的文字组相关的其他信息。也就是说，这些文字组与在文本文件、程序文件、图表文件等的其他文件相关联。
现在，即使对于与各个运动图象相关的其他信息(相关信息)，通过在对应于相应运动图象的超文本文件上记述其所在信息，也能指定运动图象的关联地址。
以下，用图10作具体说明。
在作为现在的信息提供系统的因特网中，连接着多个信息源，在各个信息源中，例如存储有与各种各样的事情有关的导引页面HP的信息作为超文本文件。这里，终端装置704连接在保持有称作“恐龙世界”的题目的导引页面HP的信息的信息源上，下面以在该终端装置704的显示器上显示上述导引页面HP(对应于超文本文件的画面HTs)的状况为例来作具体说明。
如图10(a)所示，在该导引页面HP中，用文字组“场景1”～文字组“场景3”表示与恐龙相关的运动图象的项目，进一步用文字组“物体1”，文字组“物体1”来表示构成各项目的运动图象的物体，例如对于场景1，表示与物体ob1，ob2有关的相关数据，这些文字组的显示区域就成为用来指定运动图象的指定区域D1～D3以及指定相关数据的指定区域D11，D12。
该导引页面HP的显示内容被记载在对应于该导引页面的超文本文件Hf中。具体说，如图10(b)所示，成对地记述文字组“场景1”m1～文字组“场景3”m3和表示对应于各场景的运动图象数据的所在位置的所在信息b1～b3，并且成对地记述文字组“物体1”m11，文字组“物体3”m12和表示与各物体相关的相关数据的所在位置的所在信息b11～b12。
用户把鼠标MP移动到上述导引页面HP内的相当于文字组“场景1”的指定区域D1上，如果进行鼠标器的敲击动作，那么，用来显示链接于上述文字组“场景1”的运动图象数据的新的显示画面MPs就作为运动图象MI的画面开始显示。这里，在该运动图象的画面MPs上显示有2个物体ob1，ob2，同时还显示有用来控制运动图象显示的显示控制形式CB1～CB4。用户通过使用鼠标MP来操作该显示控制形式CB1～CB4就能够控制运动图象的显示。
在用户想要看对应于场景2或场景3的运动图象的情况下，就把鼠标从上述图象MI的画面MMPs上移动到上述导引页面HP内的相当于文字组“场景2”或文字组“场景3”的指定区域D2或D3上，如果进行鼠标器的敲击动作，那么，用来显示链接于上述文字组“场景2”或文字组“场景3”的运动图象数据的新的显示画面就作为运动图象的画面开始显示。
另外，在用户检索与构成场景1的运动图象MI的物体ob1相关的相关数据的情况下，就把鼠标MP从上述运动图象的画面MPs上移动到上述导引页面HP内的相当于文字组“物体1”的指定区域D11上，如果进行鼠标器的敲击动作，就显示链接于上述文字组“物体1”的与物体Ob1相关数据。
可是，在像上述那样经由超文本来访问对应于各个场景的运动图象的图象数据的情况下，必须在运动图象MI的画面MP和超文本的画面(导引页面HP)HT之间移动鼠标MP。因此，在终端装置704的显示器上就必须要么显示至少两幅画面，即运动图象的画面MP和超文本文件的画面HT，要么在该显示器上进行上述画面MP和画面HT的切换。
表示与登场在各场景上的物体相关联的相关数据(例如：物体是恐龙的情况下，其外形特征和生息地域等)的所在位置的所在信息也记述在超文本文件中，所以即使在检索这些相关数据的情况下，也必须把鼠标MP从运动图象MI的画面MPs移动到超文本文件的画面HTs上。
特别是在按构成图象的物体单位来进行编码处理和译码处理的方式下，一幅图象由多个物体(即小图象)构成，并存在关于各物体的相关数据，但是各物体的相关数据有可能存储在不同的服务器内。
例如：构成运动图象MI的物体ob1的相关数据在图9所示的服务器706内、物体ob2的相关数据在服务器707内，在这种情况下，当访问对应于各物体的相关数据时，必须从显示着各物体的运动图象MI的画面MPs经由对应的超文本的画面(导引页面等)HTs再访问到规定的服务器内所保持的相关数据，进行相关数据访问的操作性就很坏，这时，就很难管理对应于各个物体的相关数据的所在信息。也就是说，在变更构成运动图象的物体的情况下，同时对于变更了的物体必须变更有关超文本文件内的该物体相关数据的所在信息的记述。
另外，由于传送失误而丢失超文本文件内记述的信息时，构成上述运动图象的各个物体的相关数据的所在信息也丢失了，只用记述在图象文件内的运动图象的数据不能进行物体的相关数据的访问。
发明内容
为解决上述的问题，本发明的目的是提供一种图象传送用数据结构和图象传送方法以及进行具有上述数据结构的图象编码信号的译码处理的图象译码装置，在图谋提高访问对应于构成图象的各物体的相关数据时的操作性的同时，能够简化对由多个物体构成的图象的对应于各物体的相关数据的所在信息的管理，而且，能够避免由于传送失误而造成的对应于物体的相关数据的损失。
本发明的另一个目的是提供一种存储了用于由软件实现用上述图象传送方式和图象译码装置进行的图象处理的程序的数据记录媒体。
本发明提供一种图象传送方法，该方法用于传送对应于构成运动图象的各个物体的数字图象信号，其特征在于：包括步骤，首先对对应于上述各物体的图象信号进行编码，生成图象编码信号；在该图象编码信号中包含表示与对应的物体相关联的相关数据的所在位置的所在信息，将对应于该各物体的图象编码信号与所在信息一体地进行传送。
本发明提供一种图象译码装置，该装置将包含对应于构成运动图象的各物体的、用来对各物体进行图象显示的显示用信息和表示与该各物体相关联的相关数据的所在位置的所在信息的图象编码信号进行译码，其特征在于：所述图象译码装置包括，分离装置，从上述图象编码信号中分离出上述与各物体对应的显示用信息以及上述与各物体对应并与上述显示用信息一体地传送的所在信息；译码单元，将上述分离出的显示用信息译码；发送装置，基于上述分离出的所在信息，将用于访问上述相关数据的访问信息，发帝到该相关数据所在位置即信息源。
附图说明
图1是用来说明按照本发明的实施例1的图象传送方法的示意图，图1(a)表示由第一、第二物体构成的运动图象的显示画面，图1(b)、图1(c)分别表示对应于第一、第二物体的图象编码信号的数据结构。
图2是用来说明按照本发明的实施例2的图象传送方法的示意图，表示把对应于第一、第二物体的图象编码信号多路化了的多路传送编码信号的数据结构。
图3是表示按照上述实施例2的图象传送方法送出的图象编码信号内的相关数据的所在信息一览表的例子的示意图。
图4是表示按照上述实施例2的图象传送方法送出的图象编码信号内的合成信息的例子的示意图。
图5是按照本发明的实施例3的数字图象译码装置的方框图。
图6是用来说明上述实施例3的数字图象译码装置进行物体的合成处理的模式图。
图7是用来说明按照本发明的实施例4的数字图象译码装置的方框图。
图8(a)～图8(c)是说明用来存储具有本发明的各实施例的数据结构的图象编码信号以及用计算机来实现由图象传送方法和图象译码装置进行的图象处理的程序的数据记录媒体的图。
图9是用来说明原来的网络系统的模式图。
图10是用来说明在原来的网络系统的一例即互连网上的图象数据的访问的图，图10(a)表示超文本文件的画面(导引页面)、图10(b)表示上述超文本文件中的记述、图10(c)表示运动图象的显示画面。
具体实施方式
以下用图1～图8来说明本发明的实施例。
实施例1
图1是用来说明按照本发明的实施例1的图象传送方法的图，图1(a)表示由多个物体构成的运动图象MI的显示画面MPs，图1(b)、图1(c)分别表示对应于构成该运动图象MI的第一物体(背景)ob1、第二物体(前景)ob2的图象编码信号的数据结构。
该实施例1的图象传送方法是传送对应于例如构成运动图象MI的第一、第二物体ob1、ob2的数字图象信号的方法。按照该方法，由对应于上述各物体ob1、ob2的数字图象信号的编码处理来生成编码数据，再把对应于该各物体的编码数据附加上表示与该各物体相关联的相关数据的所在位置的所在信息后，作为图象编码信号进行传送。图1(a)中，与图10(c)同样的符号表示同一事物。这里，上述图象编码信号按照遵循MPEG1的标准的编码方式对数字图象信号进行压缩编码。
以下对按照本实施例1的图象传送方法传送的对应于上述第一、第二物体ob1、ob2的图象编码信号的数据结构予以详细说明。
构成对应于上述第一物体ob1的图象编码信号的编码比特列101由对应于各帧的多个单位比特列D1(k)[k＝1，2，...，i，i+1，...n(i，n是正整数)]构成。
例如：对应于第i帧的单位比特列D1(i)由作为对应于各帧的同步信号的同步比特列11、作为用来识别第一物体ob1与其他物体ob2的物体识别符ID的识别比特列12、作为表示关联于上述第一物体ob1的相关数据的所在位置的所在信息RL的所在比特列13以及作为用来对上述第一物体0b1进行图象显示的显示用信息(编码数据)的显示比特列14构成。与上述第i单位比特列D1(i)一样，对应于第(i+1)帧的单位比特列D1(i+1)也由同步比特列15、识别比特列16、所在比特列17和显示比特列18构成。这样，该编码比特列101就把上述所在比特列分配到了每一个对应于各帧的单位比特列(即显示比特列)中。
与第一物体ob1的编码比特列101一样，构成对应于上述第二物体ob2的图象编码信号的编码比特列102也由对应于各帧的多个单位比特列D2(k)[k＝1，2，...，i，i+1，...n(i，n是正整数)]构成。
例如：与第一物体ob1的编码比特列101一样，对应于第i帧的单位比特列D2(i)由作为同步信号的同步比特列21、作为物体识别符ID的识别比特列22、作为表示相关数据的所在位置的所在信息RL的所在比特列23以及作为显示用信息(编码数据)的显示比特列24构成。对应于第(i+1)帧的单位比特列D2(i+1)与上述单位比特列D2(i)不同，而由同步比特列25、识别比特列26和显示比特列27构成，在该帧的单位比特列D2(i+1)内不包含所在比特列。因此，该编码比特列102就把上述所在比特列分配到了每一个对应于两帧以上的单位比特列(即显示比特列)中。
而且，在上述单位比特列D1(i)，D1(i+1)，D2(i)中，同步比特列11，15，21都放在其开头位置、其后是识别比特列2，16，22、所在比特列13，17，23以及显示比特列14，18，24，按照这个顺序排列传送。在上述单位比特列D2(i+1)中，同步比特列25放在其开头位置、其后是识别比特列26、以及显示比特列27，按照这个顺序排列传送。这里，上述识别比特列12，16，22，26具有5比特，所在比特列13，17，23具有64比特。
图1(b)所示的编码比特列101中的各单位比特列D1(k)因为是相同图象系列(物体ob1)的压缩数据，所以，作为各单位比特列中D1(k)的物体识别符ID的识别位全部为一样的值，而且，图1(c)所示的编码比特列102中的各单位比特列D2(k)因为是相同图象系列(物体ob2)的压缩数据，所以，作为各单位比特列中D2(k)的物体识别符ID的识别位全部为一样的值。编码比特列101中的识别比特列和编码比特列102中的识别比特列为不同的值，以便能够区别对应于物体obi的单位比特列D1(k)和对应于物体ob2的单位比特列D2(k)。
这里，例如所谓与第一物体ob1、第二物体ob2的相关联的相关数据是关于该物体的别的图象或文本数据，例如：如图1(a)所示，在第一物体ob1是恐龙的生息地的风景的图象，第二物体ob2是恐龙的图象的情况下，作为第一物体ob1的相关数据，列举有其生息地的地形和候等的说明等，作为第二物体ob2的相关数据，列举有用来说明恐龙的生态的图象、名称和种族的说明等。由第一物体ob1、第二物体ob2构成的运动图象MI的提供者(服务器)具有这种相关数据，其他服务器也有这样的相关数据。在图9中，说明恐龙的生态的图象由服务器705提供，恐龙的生息地的地形和气候等的说明以及恐龙的名称和种族的说明可能由服务器706来提供。
另外，上述第一物体ob1、第二物体ob2的相关数据的所在信息是与第一物体、第二物体相关联的别的数据的所在位置，在本实施例中，作为该所在信息，记述有因特网名(保持相关数据的服务器的所在位置)和遥控路径(该服务器中的相关数据的文件名)。
在这种构成的本实施例1中，当把对应于构成运动图象的第一、第二物体ob1、ob2的数字图象信号进行编码传送时，将作为被传送的图象编码信号的编码比特列101、102加到作为用来对各物体进行图象显示的显示用信息的显示比特列14，18，24，37上，作成包含作为与该各物体相关联的相关数据的所在信息的所在比特列13，17，23的数据结构，所以，重放侧根据图象编码信号就能够直接把物体及其相关数据的所在信息关联起来。因此，不必使用格式与作为上述显示用信息的图象文件不同的文本文件(例如超文本文件)。结果，就能够提高访问对应于构成图象的各物体的相关数据时的操作性。例如：用户在运动图象MI的显示画面MPs上把鼠标MP移动到各物体ob1，ob2的显示区域上，仅进行敲击动作就能够得到与该物体相关联的相关数据。
在上述实施例1中，因为把作为相关数据的所在信息RL的所在比特列按第一物体的编码比特列附加在全部帧内，而按第二物体的编码比特列附加在两帧以上的规定数的每一帧内，所以，根据场景变更产生的运动图象的各种场景就能够改变构成该运动图象的物体的相关数据的所在信息。这时，就能够由运动图象的各种场景来变化相关数据。
对于构成运动图象的各个物体来说，用来显示物体的显示用信息和与该物体相关联的相关数据包含在同一各图象编码信号中，所以，能够简化对应于物体的相关数据的所在信息的管理。
但是，因为各物体的相关数据的所在信息与物体的图象编码信号一体地传送，所以，物体的相关数据的所在信息不会因传送失误而丢失，并能够降低对应于物体的相关数据的所在信息的损失。
在上述实施例1中，虽然把相关数据的所在信息附加在规定数的每一帧的单位比特列内，但是，也可以把相关数据的所在信息只附加在相当于变化其值的时刻的帧的单位比特列内。
这种情况下，把1比特的标示符附加在各单位比特列内，该标示符是1时，表示存在相关数据的所在信息RL，另一方面，如果该标示符是0，则表示不存在相关数据的所在信息。
在全部帧的单位比特列中的相关数据的所在信息的值相同的情况下，也可以把相关数据的所在信息只附加在一个图象系列即对应于一个物体的编码比特列的开头。这种情况下，在具体表示在图1(b)上的编码数据列中，在开头帧的单位比特列前面配置作为相关数据的所在信息的所在比特列。
在上述实施例1中，虽然说明了由两个物体构成运动图象的情况，但是本发明的图象传送方法不被限定于上述实施例1的情况，也可以适用于由N(N是正整数)个物体构成运动图象的情况。
在这种情况下，把对应于第1～第N物体的数字图象信号编码，并生成第1～第N图象编码信号，然后把表示与第1～第N物体相关联的相关数据的所在位置的所在信息附加在第1～第N图象编码信号上，再分别传送第1～第N图象编码信号。
实施例2
图2是用来说明按照本发明的实施例2的图象传送方法的图。
该实施例2的图象传送方法是把对应于构成运动图象的第一、第二物体的数字图象信号编码的同时，对其进行多路化，并生成多路编码信号，然后传送该多路编码信号。
用这样的传送方法发送出去的多路编码信号103的数据结构包含有用来对第一、第二物体进行图象显示的显示用信息、由对应于上述第一、第二物体的物体识别符和对应于该第一、第二物体的相关数据的所在信息构成的一览表信息以及用于两物体合成处理的合成信息。这里，作为对应于第一、第二物体的图象编码信号的编码比特列101、102与上述实施例1的编码比特列的数据结构完全相同。
具体地说，构成上述多路编码信号的多路编码比特列103的数据结构是包含有作为对应于一个运动图象的同步信号的同步比特列30a、其后是作为上述一览表信息RL的一览比特列30b、再下来是多个视频数据包31b～35b以及对应于各视频数据包的数据头31a～35a。而且按规定的编码量来分割构成上述第一物体ob1的图象编码信号的编码比特列101和构成上述第二物体ob2的图象编码信号的编码比特列102，把所分割的比特列作为上述各视频数据包排列在多路编码比特列103内。
例如：对应于第一物体ob1的第i帧的编码比特列D1(i)被分配到视频数据包31b和视频数据包33b内，对应于第二物体ob2的第i帧的编码比特列D2(i)被分配到视频数据包32b和视频数据包34b内等。再把数据头31a～35a附加在上述各视频数据包31b～35b上，在这些数据头内包含有数据包识别符。
这里，用6比特固定长代码来表示数据包识别符，为了区别对应于第一物体ob1的视频数据包和对应于第二物体ob2的视频数据包，数据头31a、33a内的数据包识别符与数据头32a、34a内的数据包识别符不同。
上述合成信息也被数据包化，作为合成数据包35b被包含在多路编码比特列103内。在该合成数据包35b内也包含有与其相对应的数据头35a，在该数据头35a中，包含有不同于视频数据包内的数据包识别符的数据包识别符。
由上述一览比特列30b构成的所在信息一览表信息RLT包含有各物体的物体识别符和对应于各物体的相关数据的所在信息。
图3所表示的是由上述所在信息一览表信息RLT得到的一览表401的例子，在该一览表401的左侧的列402中，记述着作为物体识别符(物体ID)的数值，右侧的列403中记述着各图象(物体)的相关数据的所在信息(资源位置)404～406，即互连网名和遥控通道。在图3所示的一览表401的例子中，上述第一物体ob1的物体识别符(物体ID)是“2”，上述第二物体ob2的物体识别符(物体ID)是“5”。在存在构成运动图象的第三物体的情况下，如图3所示，第三物体ob3的物体识别符(物体ID)就是“7”。
图4表示包含在上述多路编码信号的编码比特列103中的合成信息501的例子。
在该合成信息501中包含有与第一物体(obj1)相关联的合成数据502和与第二物体(obj2)相关联的合成数据503。
作为第一物体的合成数据502，记述着上述物体识别符(id＝2)504、表示是背景还是前景的景深信息(co＝0)505、水平配置信息即处于运动图象的画面MPs上的水平方向的第一物体的配置信息(xpos＝0)506、垂直配置信息即处于运动图象的画面MPs上的垂直方向的第一物体的配置信息(ypos＝0)507以及相关数据的所在信息(ur1)508。与上述第一物体的合成数据502一样，作为第二物体的合成数据503，记述着上述物体识别符(id＝5)509、景深信息(co＝1)510、水平配置信息(xpos＝0)511、垂直配置信息(ypos＝0)512以及相关数据的所在信息(ur1)513。
这样，按照本实施例2，当把对应于第一物体ob1的图象编码信号和对应于第二物体ob2的图象编码信号进行多路化并传送时，由于将被传送的多路传送编码信号作为包含由物体的物体识别符和物体的相关数据的所在信息构成的一览表信息的数据结构，所以，除上述实施例1的效果之外，在重放侧还能够根据多路编码信号的一部分信息即上述一览表信息来把握住各物体与对应于各物体的相关数据的所在信息的对应关系。
而且，按照实施例2，由于包含在上述多路编码信号内的合成信息也有上述各物体的物体识别符和对应于各物体的相关数据的所在信息，所以，能够更确实地进行相关数据的所在信息的传送，并能够几乎不丢失传送过程中的相关数据的所在信息。
按照上述实施例2，虽然多路编码信号的数据结构包含有由物体的物体识别符和物体的相关数据的所在信息构成的一览表信息，同时，包含在上述多路编码信号内的合成信息也有上述各物体的物体识别符和对应于各物体的相关数据的所在信息，但是，在上述物体识别符和物体的相关数据的所在信息被包含在上述合成信息内的情况下，多路编码信号内也可以不包含上述一览表信息；而且在上述多路编码信号包含上述一览表信息的情况下，上述合成信息内也可以不包含物体识别符和相关数据的所在信息。
在上述实施例2中，虽然说明了有关由两个物体构成运动图象的情况，但是，本发明的图象传送方法并不局限于上述实施例2的情况，也能够适用于由N个(N是正整数)物体构成运动图象的情况。
在这种情况下，先把对应于第1～第N物体的数字图象信号进行编码，再把第1～第N图象编码信号多路化，而生成一个多路编码信号。该多路编码信号就包含由第1～第N物体识别符和第1～第N物体的相关数据的所在信息构成的一览表信息，另外，在上述合成信息中，就至少包含第1～第N物体识别符和第1～第N物体的相关数据的所在信息。
按照上述实施例1和实施例2，虽然与物体有关的相关数据作成为与物体不同的数据，但是，也可以把与物体有关的相关数据作成为用来对物体进行图象显示的显示用信息。
实施例3
图5是按照本发明的实施例3的数字图象译码装置的方框图。
该实施例3的数字图象译码装置200a是像上述实施例2所说明的那种重放装置，该装置接收包含合成信息和显示用信息(编码数据)的多路编码信号MEg，并重放由多个物体构成的运动图象。
也就是说，该数字图象译码装置200a具有从输入到输入端210的多路传送编码信号MEg分离提取对应于第一、第二物体的编码数据D1、D2和合成信息Cg的分离器(DEMUX)201、根据该合成信息Cg生成控制信号Cs1、Cs2同时生成用来访问与各物体相关联的相关数据的访问信号As的控制译码器202、接收对应于第一、第二物体的编码数据D1、D2并由其译码处理来生成第一、第二图象重放信号R1、R2的第一、第二视频译码器203、204以及根据上述控制信号Cs1存储该各图象重放信号R1、R2的帧存储库205。这里，进行对应于符合MPEG1的编码方式的译码处理，并从帧存储库205把上述译码处理中所用的预测信号P1、P2供给各视频译码器203、204。可是，在各视频译码器203、204有帧存储器的情况下，就不必从上述帧存储库205把预测信号供给各视频译码器203、204。
而且上述图象译码装置200a具有根据来自控制译码器202的控制信号Cs2合成存储在帧存储库205内的第一、第二图象重放信号R1、R2并生成合成图象信号R12的合成器206以及对该合成图象信号R12进行图象显示的显示器207。
上述图象译码装置200a还具有把来自上述控制译码器202的访问信号As作为发送信号进行发送的发送器220。
在该实施例中虽然表示了具有两个视频译码器的图象译码装置200a，但是，这仅是为了简化图象译码装置的说明，实际的图象译码装置也可以具有更多的视频译码器。即使在图象译码装置中的视频译码器只有一个而且不要图象合成处理的情况下，也可以省略合成器206。
上述多路传送编码信号MEg的数据结构与用上述实施例2的传送方法传送出去的多路传送编码信号103完全一样。可是，关于具体的编码数据则与上述实施例2不一样。即：在上述实施例2中，第一物体是恐龙的生息地的图象，第二物体是恐龙，而在该实施例3中，第一物体是鱼的图象，第二物体是海中的图象，作为第一物体的相关数据，是鱼201的名称、生态等。这样，所谓图象的相关数据就是与相应图象有关的别的图象或文本数据，构成运动图象的各个物体不同，与其物体相关联的相关数据就不同。另外再举例说明，在某物体是东京的奥林匹克的图象的情况下，作为东京的奥林匹克的图象的相关数据，例如有奥林匹克的历史和召开时的日本的状况之类的图象。如实施例2中所说明的那样，这样的数据是相同图象提供者(服务器)所具有的数据，也是其他服务器具有的数据。在图9中，提供东京的奥林匹克图象的是服务器705，不言而喻，奥林匹克历史的图象有可能由服务器706来提供。
下面来说明操作过程。
一旦把包含上述编码数据和合成信息的多路编码信号MEg输入到本数字图象译码装置200a的输入端210，分离器201就把合成信息Cg和对应于第一、第二物体的编码数据D1、D2从该多路编码信号内分离出来，并把该合成信息Cg送到控制译码器202。控制译码器202根据该合成信息Cg生成上述控制信号Cs1、Cs2和上述访问信号As。这时，根据包含在上述合成信息Cg内的相关数据的所在信息来生成访问信号As。
另一方面，从上述多路编码信号MEg中分离出来的对应于第一、第二物体的编码数据D1、D2被分别输入到对应的视频译码器203、204中。各视频译码器203、204进行对对应于各物体的编码数据D1、D2的译码处理，并把由该译码处理所得到的对应于各物体的图象重放信号R1、R2存储在帧存储库205内。虽然在本实施例的视频译码器内把以符合MPEG1标准的编码处理为代表的帧间运动补偿、离散余弦变换方式用于这种译码处理，但是，其他方式也可以用于视频译码器中的译码处理。
根据来自控制译码器202的控制信号Cs1从上述帧存储库205中把成为合成处理对象的物体的图象重放信号读出到合成器206中。这样，该合成器206就根据来自上述控制译码器的控制信号Cs2进行对应于从上述帧存储库205读出的规定的物体的图象重放信号的合成处理。
并且，在显示器207上对由该合成处理合成的合成重放信号R12进行图象显示。
发送器220把在控制译码器202中生成的用来接收与规定的物体相关联的相关数据的访问信号As作为接收请求信号(发送信号)TAs从其发送端221发送到外部去。
以下用图6概念性地说明由来自上述控制译码器202的控制信号Cs1和Cs2合成处理的具体例。
这里，为了说明方便，由包含在上述多路编码信号MEg内的第一编码数据R1来重放鱼的图象作为前景图象(第一物体)51，由包含在上述多路编码信号MEg内的第二编码数据R2来重放海中的图象作为背景图象(第二物体)52，由第一和第二物体显示在海中游泳的鱼的图象作为运动图象53。在图6中，示意性地表示了上述合成第一、第二物体的处理。
如上所述，在上述帧存储库205内存储着由各视频译码器203和204重放的对应于第一、第二物体51、52的第一、第二图象重放信号R1、R2，并根据来自上述控制译码器202的控制信号Cs1，从该帧存储库205中把对应于所要的物体即第一、第二物体51、52的第一、第二图象重放信号R1、R2读出到合成器206内。
合成器206根据来自上述控制译码器202的控制信号Cs2进行上述第一、第二图象重放信号R1、R2的合成处理，生成合成图象即生成对应于运动图象的合成重放信号。这时，由来自控制译码器202的控制信号Cs2指示第一物体是前景图象、第二物体是背景图象。
下面来说明由上述控制译码器和合成器进行的根据图4所示的合成信息的合成处理。
这里，为说明方便，把图4所示的合成信息501内的第一物体合成数据502作为有关图6所示的鱼的图象51的合成数据，把该合成信息501内的第二物体合成数据503作为有关图6所示的海中的图象52的合成数据。在上述合成数据502和503中包含有关于各物体的合成时刻(例如：进行与其他物体合成的定时)的信息(未图示)。
从分离器201把作为图2中所示的一览表信息RLT的一览表比特列30b和合成信息数据包35b送到上述控制译码器202，把作为各物体的编码比特列内的相关数据的所在信息RL的所在比特列13、16、23等也送到上述控制译码器202。在控制译码器202中管理着对应于由物体或多个物体构成的合成图象的相关数据的所在信息。
另一方面，合成器206把对各物体的合成时刻的基准时刻与图象译码装置内的时钟的规定时刻对准，并在装置的时钟达到各物体的合成时刻的时间点，从帧存储库205中读出由物体识别符指定的物体的图象数据(图象重放信号)。并根据上述合成信息内的相应物体的景深和配置信息合成所读出的图象数据。
上述合成信息中的景深信息(co＝0)表示该物体是处于合成图象内的最后的背景图象，景深信息(co＝1)表示是处于有景深信息(co＝0)的物体前面的图象。水平配置信息(xpos)表示处于显示画面上的物体的水平方向的位置，垂直配置信息(ypos)表示处于显示画面上的物体的垂直方向的位置。因此，显示画面上的位置由位置坐标(xpos，ypos)来表示，位置坐标(0，0)表示画面的中心位置。
控制译码器202根据例如包含在上述合成信息内地其他信息来判定相关数据必要的规定物体，并把用来访问该物体的相关数据的访问信号As输出到发送器220。这样，发送器220对上述物体的相关数据的所在信息中所表示的服务器发送接收请求信号TA。接收到该接收请求信号TAs的服务器根据记述在相关数据的所在信息内的遥控通道(文件名)把上述相关数据发送到上述图象译码装置200a的输入端210。在本实施例中，把称之为UDP的通信协议用于图象译码装置200a和服务器之间的通信。
这样，在本实施例3中，由于设置有分离器201和控制译码器202，分离器201接收把对应于多个物体的数字图象信号进行多路编码而得的多路编码信号MEg，并提取包含在该多路编码信号内的对应于各物体的编码数据D1、D2、对应于各物体的相关数据的所在信息以及用来合成多个物体的合成信息，而控制译码器202根据上述相关数据的所在信息和合成信息控制由多个物体构成的运动图象的重放显示，所以，用多路编码信号的译码处理重放显示由多个物体构成的运动图象时，能够根据对应于必要物体的相关数据的所在信息，由控制译码器202的控制自动地取得对应于必要物体的相关数据。
实施例4
图7是用来说明按照本发明的实施例4的数字图象译码装置的方框图。
本实施例4的数字图象译码装置200b的构成是在上述实施例3的数字图象译码装置的200a的结构中再加上用来由用户把指令信号(例如：指令发生用来访问上述相关数据的访问信号的信号)送到控制译码器202的输入终端装置208，其他的构成以及动作与上述实施例3的数字图象译码装置200a完全相同。这里，把鼠标器用作上述输入终端装置208，不言而喻，也可以用遥控器来代替鼠标器。
在这种构成的数字图象译码装置200b中，用上述输入终端装置208来指定例如构成运动图象的多个物体中的所希望的物体并进行要求其相关数据的操作时，就把按照该操作的指令信号Us送到控制译码器202。这样，该控制译码器202就根据该指令信号Us把访问上述物体的相关数据的访问信号As供给发送器220，发生器220再把接收请求信号TAs发送到表示该相关数据的所在信息的服务器。接收到该接收请求信号TAs的服务器把上述所要的物体的相关数据发送到数字图象译码装置200b。
这样，在本实施例4中，由于设置有分离器201、控制译码器202和把构成运动图象的物体指定到其显示画面上的输入终端装置(鼠标器)208，分离器201接收把对应于多个物体的数字图象信号进行多路编码信号，并提取包含在该多路编码信号内的对应于各物体的编码数据、对应于各物体的相关数据的所在信息以及用来合成多个物体的合成信息，而控制译码器202根据上述相关数据的所在信息和合成信息控制由多个物体构成的运动图象的重放显示，所以，在用多路编码信号的译码处理显示由多个物体构成的运动图象的画面上，用户仅用鼠标器指定所希望的物体就能够取得与该物体相关联的相关数据，在取得物体的相关数据时，就不需要把运动图象的显示画面切换到文本文件的显示画面的操作。
由于物体相关数据的所在信息一体地附加在物体的编码数据上，所以只要不损失编码数据，也就不会丢失相关数据的所在信息。
另外，如上所述，即使在由所取得的运动图象的编辑在该运动图象上追加新的物体的情况下，仅变更运动图象的图象编码信号，就能使构成运动图象的各物体的相关数据的所在信息也同时变更，也就简化了所在信息的管理。
在上述的实施例3、4中，虽然将上述多路编码信号MEg作为具有所在信息一览表信息RLT、合成信息以及相关数据的所在信息RL这三种附加信息的数据结构，但是，也可以使上述多路编码信号MEg包含上述三种附加信息中的任意一种。
在上述的实施例3、4中，虽然与物体相关联的相关数据作为有别于物体的其他数据，但是，与物体相关联的相关数据也可以作为用来对物体进行图象显示的显示用信息。
另外，在上述的实施例中，作为编码信号举例说明了对对应于构成运动图象的物体的数字图象信号编码所得到的图象编码信号，但是，编码信号并不局限于此，也可以是对包含印象和语言的音频信号等编码所得到的音频编码信号。
把用来实现上述各实施例中所表示的图象传送方法和图象译码装置的构成的程序记录在软盘等的数据记录媒体上，就能在独立的计算机系统中简单地实现上述各实施例中所表示的处理。
图8是用存储了对应于按照上述各实施例的图象传送方法的传送处理或由上述图象译码装置进行的图象译码处理的程序的软盘来由计算机系统实现这些信号处理的情况的说明图。
图8(a)表示的是从软盘FD的正面看的外观、端面结构以及记录没体即软盘主体，图8(b)表示软盘主体D的物理格式的例子。软盘主体D被装在外壳F内，在该软盘主体D的表面上从外圆周到内圆周以同心园形式形成有多条轨迹，各轨迹沿角度方向被分割为16个扇区。因此，在存储着上述程序的软盘主体D上，在分配到上述软盘主体D上的区域内记录着作为上述程序的数据。
图8(c)表示用来进行对上述软盘FD的上述程序的记录重放的构成。在把上述程序记录在软盘FD上的情况下，计算机系统Cs经软盘驱动器FDD把作为上述程序的数据写入到软盘FD上。在用软盘FD内的程序把上述图象传送方法或图象译码装置构筑在计算机系统Cs中的情况下，由软盘驱动器FDD把程序从软盘FD上读出来，并传送给计算机系统Cs。
在上述的说明中，作为记录媒体，例举了存储用来进行上述各实施例中的传送处理或译码处理的程序的记录媒体，还例举了存储上述第一或第二实施例中的数据结构的图象编码信号(编码比特列或多路编码比特列)的记录媒体。但是，在数据记录媒体上存储的编码信号不局限于图象编码信号，也可以是上述的音频编码信号。
在上述的说明中，进行的是用软盘作为数据记录媒体的计算机系统的图象处理，但是即使用光盘也可以同样进行这样的图象处理。而且，记录媒体不局限于此，IC卡、卡式ROM等只要能够记录程序同样能够实施上述的处理。
如上所述，按照本发明(方案1)的图象传送用数据结构，由于对应于构成运动图象的各个物体的图象编码信号包含在用来对各物体进行图象显示的显示用信息表示与各物体相关联的相关数据的所在位置的所在信息，所以仅由用户在上述运动图象的显示画面上指定所要的物体，就能够访问对应于该物体的相关数据。从而能够提高访问相关数据时的操作性。
因为各物体的显示用信息和相关数据的所在信息构成为一体，所以，通过管理物体的显示用信息也能够进行对应于物体的相关数据的所在信息的管理，相关数据的所在信息的管理就简单。但是，因为与物体的显示用信号传送的同时也传送物体的相关数据的所在信息，所以，能够大大地减低由于传送失误引起的相关数据的损失。
按照本发明(方案2)的图象传送方法，由于先对对应于构成运动图象的各个物体的数字图象信号进行编码，并生成图象编码信号；然后在该图象编码信号上附加表示与对应的物体相关联的相关数据的所在位置的所在信息，再进行传送对应于该各物体的图象编码信号，所以，与上述一样，能够提高访问对应于该物体的相关数据时的操作性，同时能够简化该相关数据的所在信息的管理，但是能够基本上回避由于传送失误引起的相关数据的损失。
按照本发明(方案3)的图象译码装置，由于设置有根据包含在对应于构成运动图象的各个物体的图象编码信号内的对应于各物体的相关数据的所在信息，把用来访问该相关数据的访问信号发送到上述相关数据的所在位置即信息源的发送装置，所以，能够提高访问对应于各物体的相关数据时的操作性，同时能够简化该相关数据的所在信息的管理，但是能够基本上回避由于传送失误引起的相关数据的损失。
按照本发明(方案4)的图象译码装置，在方案3记载的图象译码装置中，由于作为上述对应于各物体的图象编码信号的编码比特列的结构是把作为上述相关数据的所在信息的所在比特列分配在每一个作为对应于规定数的帧的显示用信息的显示比特列中，所以，能够根据物体的动作而由图象显示画面上的简单的操作得到不同的相关数据。
按照本发明(方案5)的图象译码装置，在方案3记载的图象译码装置中，由于作为上述对应于各物体的图象编码信号的编码比特列包含作为上述对应于各物体的相关数据的所在信息的所在比特列和作为对应于该各物体的显示用信息的显示比特列，该所在比特列被配置在上述编码比特列的开头，所以，在图象编码信号的传送时，就首先传送对应于物体的相关数据的所在信息，从而能够抑制由于传送失误引起的相关数据的所在信息的丢失。
按照本发明(方案6)的图象译码装置，由于接收包含由用来识别该各物体的物体识别符和对应于各物体的相关数据的所在位置的所在信息构成的一览表信息的图象编码信号，作为把对应于构成运动图象的各个物体的图象编码信号，并根据上述相关数据的所在信息访问该相关数据，所以，能够用上述一览表信息得到构成运动图象的全部物体相关数据的所在信息。
按照本发明(方案7)的图象译码装置，由于接收包含用于多个物体的合成处理的合成信息的图象编码信号，作为构成运动图象的各个物体的图象编码信号，并根据包含在该合成信息内的对应于各物体的相关数据的所在信息访问该相关数据，所以，能够根据上述合成信息得到上述各物体的相关数据。
按照本发明(方案8)的信号传送用数据结构，由于对应于构成一个信息组的各个个别信息的编码信号包含用来重放各个个别信息的重放用信号和表示与各个个别信息关联的相关数据的所在位置的所在信息，所以，提高访问对应于各个个别信息的相关数据时的操作性的同时，能够简化该相关数据的所在信息的管理，但是能够基本上回避由于传送失误引起的相关数据的损失。
按照本发明(方案9)的数据记录媒体，由于用来由计算机进行的图象信号的传送处理的程序的构成是计算机进行按照方案2记载的图象传送方法的图象信号的传送处理，所以，提高访问物体的相关数据时的操作性的同时，能够简化该相关数据的所在信息的管理，但是能够由计算机实现几乎没有由于传送失误引起的相关数据的所在信息的损失的图象传送处理。
按照本发明(方案10)的数据记录媒体，由于用来由计算机进行的图象信号的译码处理的程序的构成是计算机进行按照方案3记载的图象译码装置的图象译码处理，所以，能够用计算机实现访问构成运动图象的各物体的相关数据时的操作性好的图象译码装置。
按照本发明(方案11)的图象传送用数据结构，由于对应于构成运动图象的各个物体的图象编码信号包含用来对各物体进行图象显示的显示用信息和表示该显示用信息的所在位置的所在信息，所以，如果在接收侧至少接收各个物体的显示用信息的所在信息，就能够在该信息源内访问各物体的显示用信息，即使没有物体的显示用信息，也能够进行各物体的图象显示。
按照本发明(方案12)的图象传送方法，由于先对对应于构成运动图象的各个物体的数字图象信号进行编码，并生成图象编码信号，然后把该图象编码信号上附加各物体的显示信息的所在信息，并传送对应于该各物体的图象编码信号，所以，与上述一样，如果在接收侧至少接收各个物体的显示用信息的所在信息，就能够在该信息源内访问各物体的显示用信息，即使没有物体的显示用信息，也能够进行各物体的图象显示。
按照本发明(方案13)的图象译码装置，由于设置有根据包含在对应于构成运动图象的各个物体的图象编码信号内的各物体的显示用信息的所在信息把用来访问上述显示用信息的访问信号发送到上述显示用信息的所在位置即信息源的发送装置，所以，能够根据上述物体的显示用信息的所在信息按照需要对其信息源访问特定物体的显示用信息，从而能够在接收侧简单地进行运动图象的编辑。
按照本发明(方案14)的图象译码装置，在方案13记载的图象译码装置中，由于作为上述对应于各物体的图象编码信号的编码比特列的构成是在作为对应于规定数的帧的显示用信息的每一个显示比特列中配置了作为上述显示用信息的所在信息的所在比特列，所以，能够确实地接收物体的显示用信息的相关数据。
按照本发明(方案15)的图象译码装置，在方案13记载的图象译码装置中，由于作为上述对应于各物体的图象编码信号的编码比特列包含作为上述对应于各物体的显示用信息的所在信息的显示比特列和作为该各物体的显示用信息的所在信息的所在比特列，该所在比特列配置在上述编码比特列的开头，所以，在图象编码信号的传送时，就首先传送对应于物体的显示用信息的所在信息，从而能够抑制由于传送失误引起的相关数据的所在信息的丢失。
按照本发明(方案16)的图象译码装置，由于接收包含该各物体的显示用信息且包含由用来识别该各物体的物体识别符和上述各物体的显示用信息的所在信息构成的一览表信息的图象编码信号，作为对应于构成运动图象的该各个物体的图象编码信号，并根据该显示用信息的所在信息来访问显示用信息，所以，能够用上述一览表信息得到构成运送图象的全部物体显示用信息的所在信息。因此，在接收侧能够仅根据上述一览表信息在其信息源内访问各物体的显示用信息并进行由多个物体构成的运动图象的显示。
按照本发明(方案17)的图象译码装置，由于接收用于多个物体的合成处理的合成信息的图象编码信号，作为对应于构成运动图象的各个物体的图象编码信号；并根据该合成信息所包含的该各物体的显示用信息所在信息访问该显示用信息，所以，在接收侧仅根据上述合成信息就能够从其信息源得到所希望的物体的显示用信息。
因此，例如在经过中继局把从人造卫星发送来的运动图象的图象编码信号传送到本地局的情况下，中继局把包含在该图象编码信号的合成信息内的规定物体(商用的)的显示用信息的所在信息换写为对应于各本地局的显示用所在信息，就能够由各本地局重放包含适宜于该地方的商用信息的运动图象。
按照本发明(方案18)的信号传送用数据结构，由于对应于构成一个信息组的多个个别信息的编码信号包含用来重放对应的个别信息的重放用信号和各个个别信息的重放用信号的所在信息，所以，如果在接收侧至少接收各个个别信息的重放用信号的所在信息，能够在其信息源内访问各个个别信息的重放用信号，即使没有个别信息的重放信号，也能够进行各个个别信息的重放。
按照本发明(方案19)的数据记录媒体，由于能在计算机上进行图象信号的传送处理的程序由计算机进行按方案12记载的图象传送方法的图象信号的传送处理，所以，如果在接收侧至少接收各物体的显示用信息，能够在其信息源内访问各物体的显示用信息，即使没有物体的显示用信息，也能够用计算机来实现能够进行各物体的图象显示的图象传送处理。
按照本发明(方案20)的数据记录媒体，由于能在计算机上进行图象信号的译码处理的程序由计算机进行按方案13记载的图象译码装置的图象译码处理，所以，能够根据上述物体的显示用信息的所在信息，按需要对其信息源访问特定物体的显示用信息。并能够由计算机来实现能够在接收侧简单地进行运动图象的编辑的图象译码处理。
如上所述，按照本发明，由于在图象的编码数据内隐含其图象的相关数据的所在信息，所以能够提高访问该相关数据时的操作性，这就使由多个物体构成的图象中的各个物体的相关数据的所在信息的管理简化，而得到几乎没有由于传送失误引起的相关数据的损失的效果。

Claims (10)

1.一种图象传送方法，该方法用于传送对应于构成运动图象的各个物体的数字图象信号，其特征在于：包括步骤，
对对应于上述各物体的图象信号进行编码，生成图象编码信号；
在对应于该各物体的图象编码信号中包含表示与该物体相关联的相关数据的所在位置的所在信息，将对应于该各物体的图象编码信号与所在信息一体地进行传送。
2.按照权利要求1的图象传送方法，其特征在于：上述对应于物体的所在信息是表示用来图象显示该物体的显示用信息的所在位置的所在信息，或者，表示与该显示用信息不同的与该物体相关联的图象信息或文本信息的所在信息。
3.一种图象译码装置，该装置将包含对应于构成运动图象的各物体的、用来对各物体进行图象显示的显示用信息和表示与该各物体相关联的相关数据的所在位置的所在信息的图象编码信号进行译码，其特征在于：所述图象译码装置包括，
分离装置，从上述图象编码信号中分离出与上述各物体对应的显示用信息以及与上述各物体对应并与上述显示用信息一体地传送的所在信息；
译码单元，将上述分离出的显示用信息译码；
发送装置，基于上述分离出的所在信息，将用于访问上述相关数据的访问信息，发送到该相关数据所在位置即信息源。
4.按照权利要求3的图象译码装置，其特征在于：构成上述对应于各物体的图象编码信号的编码比特列的结构是将构成上述相关数据的所在信息的所在比特列分配在每一个构成对应于规定数的帧的显示用信息的显示比特列中。
5.按照权利要求3的图象译码装置，其特征在于：上述图象编码信号包含用来对物体进行图象显示的显示用信息且包含由用来识别物体的物体识别符和与物体相对应的所在信息构成的一览表信息，
上述发送装置根据包含在上述一览表信息中的所在信息把用来访问上述相关数据的访问信号发送到该相关数据的所在位置即信息源。
6.按照权利要求3的图象译码装置，其特征在于：上述图象编码信号包含用来对物体进行图象显示的显示用信息和用于多个物体的合成处理的合成信息，
上述合成信息包含用来识别物体的物体识别符和与物体对应的所在信息，
上述发送装置基于包含在上述合成信息中的所在信息把用来访问上述相关数据的访问信号发送到上述相关数据的所在位置即信息源。
7.按权利要求3的图象传送方法，其特征在于：上述所在信息是表示用来图象显示物体的显示用信息的所在位置的所在信息，或者，表示与该显示用信息不同的与该物体相关联的图象信息或文本信息的所在信息。
8.按照权利要求7的图象译码装置，其特征在于：构成上述对应于各物体的图象编码信号的编码比特列的结构是将构成上述显示用信息或者图象信息或文本信息的所在信息的所在比特列分配在每一个构成对应于规定数的帧的显示用信息的显示比特列中。
9.按照权利要求7的图象译码装置，上述图象编码信号包含用来对物体进行图象显示的显示用信息且包含由用来识别物体的物体识别符和对应于物体的所在信息构成的一览表信息，
上述发送装置根据上述一览表信息中包含的所在信息，把用来访问上述显示用信息的访问信号、或用来访问上述图象信息或文本信息的访问信号发送到上述显示用信息的所在位置或者上述图象信息或文本信息的所在位置即信息源。
10.按照权利要求7的图象译码装置，上述图象编码信号包含用来显示物体的显示用信息和用于多个物体的合成处理的合成信息，
上述合成信息包含用来识别物体的物体识别符和对应于物体的所在信息，
上述发送装置，基于上述合成信息中包含的所在信息，将把用来访问上述显示用信息的访问信号、或用来访问上述图象信息或文本信息的访问信号，发送到上述显示用信息的所在位置或者上述图象信息或文本信息的所在位置即信息源。
CNB981064515A 1997-02-07 1998-02-06 图象传送方法和图象译码装置 Expired - Fee Related CN1148976C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP024916/97 1997-02-07
JP2491697 1997-02-07
JP024916/1997 1997-02-07

Publications (2)

Publication Number Publication Date
CN1202073A CN1202073A (zh) 1998-12-16
CN1148976C true CN1148976C (zh) 2004-05-05

Family

ID=12151495

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB981064515A Expired - Fee Related CN1148976C (zh) 1997-02-07 1998-02-06 图象传送方法和图象译码装置

Country Status (5)

Country Link
US (1) US6351565B1 (zh)
EP (1) EP0858220A1 (zh)
KR (1) KR100294769B1 (zh)
CN (1) CN1148976C (zh)
TW (1) TW412910B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1684517A3 (en) * 1998-08-24 2010-05-26 Sharp Kabushiki Kaisha Information presenting system
EP1018840A3 (en) 1998-12-08 2005-12-21 Canon Kabushiki Kaisha Digital receiving apparatus and method
KR100390115B1 (ko) * 1999-04-12 2003-07-04 마츠시타 덴끼 산교 가부시키가이샤 화상 처리 방법, 화상 처리 장치 및 데이터 기억 매체
US8341662B1 (en) * 1999-09-30 2012-12-25 International Business Machine Corporation User-controlled selective overlay in a streaming media
AU2233801A (en) * 1999-12-22 2001-07-16 Neomtel Co., Ltd. A system for moving image data using wireless communication and the method of the same
US7441014B1 (en) * 2000-02-09 2008-10-21 Tvworks, Llc Broadcast distribution using low-level objects and locator tables
JP2002091652A (ja) * 2000-03-21 2002-03-29 Sony Corp 情報表示装置並びに情報提供装置
EP1306762A4 (en) * 2000-07-31 2007-04-18 Sony Corp INFORMATION PICTURE USE SYSTEM WITH INFORMATION PICTURE
WO2002019079A1 (fr) * 2000-08-31 2002-03-07 Sony Corporation Dispositif de memorisation d'information, affichage d'information, dispositif fournissant des information et systeme fournissant des informations
WO2003077096A1 (fr) * 2002-03-08 2003-09-18 Mitsubishi Denki Kabushiki Kaisha Dispositif de communication mobile, son procede de commande d'affichage, et programme associe

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4606069A (en) * 1983-06-10 1986-08-12 At&T Bell Laboratories Apparatus and method for compression of facsimile information by pattern matching
GB2190560B (en) * 1986-05-08 1990-06-20 Gen Electric Plc Data compression
US4969049A (en) * 1987-06-30 1990-11-06 Fuji Photo Film Co., Ltd. Radiation image information processing system
US5136659A (en) * 1987-06-30 1992-08-04 Kokusai Denshin Denwa Kabushiki Kaisha Intelligent coding system for picture signal
JP2874871B2 (ja) * 1987-12-01 1999-03-24 キヤノン株式会社 画像処理装置
US4888812A (en) * 1987-12-18 1989-12-19 International Business Machines Corporation Document image processing system
US5058185A (en) * 1988-06-27 1991-10-15 International Business Machines Corporation Object management and delivery system having multiple object-resolution capability
JP2953712B2 (ja) * 1989-09-27 1999-09-27 株式会社東芝 移動物体検知装置
US5206915A (en) * 1989-10-10 1993-04-27 Unisys Corporation Image-based document processing system providing lost image recovery
JPH03125585A (ja) * 1989-10-11 1991-05-28 Mitsubishi Electric Corp 画像信号の符号復号化器
US4996714A (en) * 1990-05-23 1991-02-26 Frisco Bay Industries Of Canada Limited Computerized filing and retrieval system for signature and pictorial documentation
US5109439A (en) * 1990-06-12 1992-04-28 Horst Froessl Mass document storage and retrieval system
US5262856A (en) * 1992-06-04 1993-11-16 Massachusetts Institute Of Technology Video image compositing techniques
JPH06195880A (ja) 1992-12-22 1994-07-15 Fujitsu Ltd 画像ファイルの管理方法
JPH0728689A (ja) * 1993-07-09 1995-01-31 Hitachi Ltd 情報処理装置
JP3149303B2 (ja) * 1993-12-29 2001-03-26 松下電器産業株式会社 デジタル画像符号化方法及びデジタル画像復号化方法
US5512939A (en) * 1994-04-06 1996-04-30 At&T Corp. Low bit rate audio-visual communication system having integrated perceptual speech and video coding
US5708473A (en) * 1994-08-30 1998-01-13 Hughes Aircraft Company Two stage video film compression method and system
JPH0877755A (ja) 1994-09-02 1996-03-22 Matsushita Electric Ind Co Ltd 圧縮画像情報の再生装置
EP0719049B1 (en) * 1994-12-20 2003-05-28 Matsushita Electric Industries Co., Ltd. Method and apparatus for image coding
US5680512A (en) * 1994-12-21 1997-10-21 Hughes Aircraft Company Personalized low bit rate audio encoder and decoder using special libraries
US5635929A (en) * 1995-02-13 1997-06-03 Hughes Aircraft Company Low bit rate video encoder and decoder
JP3086396B2 (ja) * 1995-03-10 2000-09-11 シャープ株式会社 画像符号化装置及び画像復号装置
US5671156A (en) * 1995-03-31 1997-09-23 Lucent Technologies Inc. Transmission method and system for JPEG images
US5825830A (en) * 1995-08-17 1998-10-20 Kopf; David A. Method and apparatus for the compression of audio, video or other data
US5864862A (en) * 1996-09-30 1999-01-26 Telefonaktiebolaget Lm Ericsson (Publ) System and method for creating reusable components in an object-oriented programming environment
US5764808A (en) * 1995-10-26 1998-06-09 Motorola, Inc. Method and device for compact representation of a discrete region contour
JPH09135447A (ja) * 1995-11-07 1997-05-20 Tsushin Hoso Kiko 知的符号化／復号方法、特徴点表示方法およびインタラクティブ知的符号化支援装置
US5748789A (en) * 1996-10-31 1998-05-05 Microsoft Corporation Transparent block skipping in object-based video coding systems
US5861920A (en) * 1996-11-08 1999-01-19 Hughes Electronics Corporation Hierarchical low latency video compression

Also Published As

Publication number Publication date
KR19980071176A (ko) 1998-10-26
CN1202073A (zh) 1998-12-16
US6351565B1 (en) 2002-02-26
EP0858220A1 (en) 1998-08-12
KR100294769B1 (ko) 2001-07-12
TW412910B (en) 2000-11-21

Similar Documents

Publication Publication Date Title
CN1164120C (zh) 图像编码装置和图像解码装置
CN1284370C (zh) 发送系统和发送方法,接收系统和接收方法
CN1279757C (zh) 图像信号复用装置和方法、分解装置和方法
CN1107408C (zh) 从数字移动图像产生数字静止图像文件的装置和方法
CN1134992C (zh) 图像预测解码方法
CN1249614A (zh) 验证设备、验证方法、验证系统、以及存储介质
CN1650627A (zh) 用于在mp4中支持avc的方法和设备
CN1496105A (zh) 处理、录制和复现图象和方法及采用其的电视机
CN1738438A (zh) 使静止图像与运动图像流同步的方法
CN1620803A (zh) 图像处理设备
CN1148976C (zh) 图象传送方法和图象译码装置
CN1481643A (zh) 音频和/或视频资料的传输和接收
CN1236523A (zh) 信息传送方法和电视广播接收装置
CN1622092A (zh) 内容观看支持装置和内容观看支持方法以及计算机程序
CN1650628A (zh) 用于支持mp4中的avc的方法和设备
CN1653818A (zh) 用于在mp4中支持avc的方法和设备
CN1153967A (zh) 记录/重现装置
CN1469645A (zh) 用于再现图像的方法和装置以及图像记录装置
CN1166202C (zh) 由视频重放系统从压缩数字视频信号中动态地提取特征
CN1881452A (zh) 记录设备、记录方法、程序、记录介质、及数据记录介质
CN1656798A (zh) 内容记录和再现设备、方法以及计算机程序
CN1106082C (zh) 译码方法及其装置
CN1708120A (zh) 动画编辑系统
CN1421859A (zh) 后期录音装置
CN1173512C (zh) 多数据译码的译码装置及译码方法

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
C19 Lapse of patent right due to non-payment of the annual fee
CF01 Termination of patent right due to non-payment of annual fee