CN1317197A - 图像显示控制方法、图像显示处理系统、图像显示处理装置和画面显示装置 - Google Patents

图像显示控制方法、图像显示处理系统、图像显示处理装置和画面显示装置 Download PDF

Info

Publication number
CN1317197A
CN1317197A CN00801362A CN00801362A CN1317197A CN 1317197 A CN1317197 A CN 1317197A CN 00801362 A CN00801362 A CN 00801362A CN 00801362 A CN00801362 A CN 00801362A CN 1317197 A CN1317197 A CN 1317197A
Authority
CN
China
Prior art keywords
image
mentioned
resolution
picture
virtual plane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN00801362A
Other languages
English (en)
Other versions
CN1212008C (zh
Inventor
小林秀明
津田贤治郎
锦织义久
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP11194000A external-priority patent/JP2001022335A/ja
Priority claimed from JP34219399A external-priority patent/JP2001160933A/ja
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1317197A publication Critical patent/CN1317197A/zh
Application granted granted Critical
Publication of CN1212008C publication Critical patent/CN1212008C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明的图像显示处理系统，在图像显示部中根据在上述画面上显示的各图像的显示状态决定各图像的显示优先度，并根据上述显示优先度决定各图像的解像度变换的解像度和各图像的合成方法，通过传输线路向图像输入部传输上述决定的解像度和合成方法信息；在图像输入部中根据上述决定的解像度变换各图像的解像度，并根据上述决定的合成方法将上述进行了解像度变换的图像合成为一副图像，通过传输线路传输上述合成的图像；在上述图像显示部中将上述传输来的合成图像分离。

Description

图像显示控制方法、图像显示处理系统、 图像显示处理装置和画面显示装置
本发明涉及通过1个传输线路传输多个输入图像并在同一显示画面上混合输出显示的图像显示处理系统、图像显示控制方法和图像显示处理装置，此外，还涉及在1个显示器上同时显示多个频道画面图像等的图像显示装置。
在称为多媒体社会的现在，处理DVD、CATV、STB、数字电视(TV)等各种各样的图像信号的机会越来越多。并且，正在开发将这些多个图像信号向电脑(以下，简称为PC)等图像显示装置传输而用于与PC的图形系统统一进行处理的环境。
这样，在需要将不特定的多个图像信号同时向图像显示装置传输时，为了可以与各个图像信号对应而预先设置多个传输线路是不现实的。因此，大多是采用将这些多个图像信号重叠或分时进行传输的方法。但是，在所传输的多个图像信号的最数据量增大时，传输线路的传输能力不足就成了问题。因此，以往如特开平6-324662号公报所提案的那样，是通过对其关心度高的图像进行高画质的图像压缩而对关心度低的图像进行低画质的图像压缩而进行传输，来减少图像信号的总数据量，从而可以得到高效的画质。
但是，在上述先有技术中，需要多个压缩和解压电路。另外，在PC上或应用PC的图形系统的图像显示装置上，通常只准备了1个图形芯片的图像输入端口，对于这一点人们并未加以考虑。
另外，还有以迄今的数字图像信号处理技术的性能提高和低成本化为背景将多个缩小的频道画面图像在2维平面上配置为矩阵状显示在一画面上的多频道画面显示。这样，便可方便地看到多个频道的情况，所以，也可以应用于频道的选择。另一方面，使用电脑等的三维图象处理技术最近也飞速地提高了性能和降低了成本，可以获得更具有现实感的图像，可以实现使自己产生宛如身临其境一样的错觉的三维虚拟空间等的视觉效果，作为更接近人的感觉的技术而受到关注。
现在，有线电视或数字卫星广播等已实现了可以收发先有的利用地面波的电视广播所不能比拟的大量的频道的电视广播系统，作为用户用于搜寻所希望的频道的手段之一，就是利用应用了上述2个技术的三维视觉效果的多频道画面显示系统。
图19是表示利用先有的三维视觉效果的多频道画面显示的三维处理的图像的图。
在利用先有的三维视觉效果的多频道画面显示中，如图19所示，在配置在虚拟三维空间内的虚拟平面701上粘贴多个频道画面，通过利用使对粘贴了多个频道画面的平面的视点702在虚拟三维空间内上下左右前后移动的三维视觉效果，可以在显示器画面上显示多频道全体或使特定的频道充满晰画面。
图20是表示在进行多频道画面显示的图像显示装置中进行频道选择所使用的遥控装置的输入键的结构的一例的图。用户按下遥控装置的“多画面显示”的输入键时，多个频道的节目画面如图21(a)所示的那样，图像显示装置就显示配置为4×4的矩阵状的多频道画面。设置在遥控装置上的“左上”、“右上”、“左下”、“右下”的输入键表示将显示器画面分割为“左上”、“右上”、“左下”、“右下”的4个区域时的各位置，如图21(a)所示，在显示多频道显示画面的状态按下“左上”的键时，就选择了显示器画面的左上部分(包含频道1、2、5、6的画面的部分)，在显示器画面上通过改变例如这部分的颜色表示选择了该部分。并且，在该状态按下遥控装置的“选择”键时，图19中所示的视点702在虚拟三维空间内就向虚拟平面701的左上前方移动，显示器画面切换为图21(b)所示的(包含频道1、2、5、6的画面的多频道画面显示)画面。此外，在显示图21(b)的多频道画面显示的状态按下“左下”的键时，就选择了显示器画面的左下部分(频道5的画面)，按下“选择”键时，图19中所示的视点702在虚拟三维空间内就向虚拟平面701的左下前方移动，从而显示画面切换为图21(c)所示的画面。
但是，在进行这样的多频道画面显示的图像显示装置中，在选择多频道画面的一部分区域进行显示时，通过使视点在虚拟三维空间内接近粘贴了多个频道画面的虚拟平面，来缩小在显示器画面上进行透视变换而显示的虚拟平面的区域，在选择后的显示器画面上仅显示所选择的画面，已不再显示多频道画面的全体图像，所以，所选择的画面是配置显示在多频道画面的哪个区域的多频道画面与选择画面的位置关系在显示器画面上就不能确认。另外，从正在观看特定的频道画面切换到显示多频道画面全体时，也不能很容易地识别出此前所观看的频道画面是显示在多频道画面的哪个位置。此外，在先有的图像显示装置中，只是视点在虚拟三维空间内移动，多频道画面实际上是2维平面，所以，很难说充分发挥了三维视觉效果。
本发明就是为了解决上述问题而提案的，目的旨在提供在PC上或应用PC的图形系统的图像显示装置上有效地利用传输线路的传输能力从而可以显示处理多个图像的图像控制方法、图像显示处理系统和图像处理装置，同时提供可以完全发挥三维视觉效果从而可以进行容易确认多频道画面与选择画面的位置关系的画面显示的图像显示装置。
本发明(权利要求1)的图像显示控制方法是使多个图像信号源的图像混合在统一画面上显示的图像显示控制方法，其特征在于：在图像显示部根据显示在上述画面上的各图像的显示状态决定各图像的显示优先度，并根据上述显示优先度决定各图像的解像度变换的解像度和各图像的合成方法，通过传输线路向图像输入部传输上述决定的解像度和合成方法信息，在图像输入部根据上述决定的解像度变换各图像的解像度，并根据上述决定的合成方法将进行了上述解像度变换的图像合成为一副图像，通过传输线路传输上述合成的图像，在上述图像显示部根据上述决定的解像度和合成方法将上述传输来的合成图像分离，并显示上述分离后的各图像。
按照这样的图像显示控制方法，由于将多个图像合成为一副图像，所以，可以削减所传输的图像数据量。另外，可以自动地决定显示优先度，从而可以将用户的关心度高的图像显示为高画质。
本发明(权利要求2)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中各图像的显示尺寸的大小来决定。
按照这样的图像显示控制方法，通过将显示尺寸大的图像变换为高解像度而将显示尺寸小的图像变换为低解像度而进行成分，可以将用户的关心度高的显示尺寸大的图像显示为高画质。
本发明(权利要求3)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中各图像的显示重叠的深度来决定。
按照这样的图像显示控制方法，通过将显示的重叠位于前面的图像变换为高解像度而将显示的重叠位于后面的图像变换为低解像度而进行合成，可以将用户的关心度高的显示的重叠位于前面的图像显示为高画质。
本发明(权利要求4)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中的各图像显示的可视面积的大小来决定。
按照这样的图像显示控制方法，通过将显示的可视面积大的图像变换为高解像度而将显示的可视面积小的图像变换为低解像度而进行合成，可以将用户的关心度高的显示的可视面积大的图像显示为高画质。
本发明(权利要求5)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中各图像的显示是否为已聚焦的状态来决定。
按照这样的图像显示控制方法，通过将已聚焦的图像变换为高解像度而将除此以外的图像变换为低解像度进行合成，可以将用户的关心度高的已聚焦的图像显示高画质。
本发明(权利要求6)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中的各图像的显示时间的长度来决定。
按照这样的图像显示控制方法，通过将显示时间长的图像变换为高解像度而将显示时间短的图像变换为低解像度进行合成，可以将用户的关心度高的显示时间长的图像显示为高画质。
本发明(权利要求7)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中各图像的显示的顺序来决定。
按照这样的图像显示控制方法，通过将最近显示的图像变换为高解像度而将以前显示的图像变换为低解像度进行合成，可以将用户的关心度高的新显示的图像显示为高画质。
本发明(权利要求8)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，上述显示优先度根据上述各图像的显示状态中各图像的显示形式来决定。
按照这样的图像显示控制方法，通过使纵横的解像度变换和合成方法与图像的显示形式一致，可以将用户的关心度高的图像显示为高画质。
本发明(权利要求9)的图像显示控制方法是使多个图像信号源的图像混合在统一画面上显示的图像显示控制方法，其特征在于：在图像显示部根据外部的用户操作决定各图像的显示优先度，并根据上述显示优先度决定各图像的解像度变换的解像度和各图像的合成方法，通过传输线路向图像输入部传输上述决定的解像度和合成方法信息，在图像输入部根据上述决定的解像度变换各图像的解像度，并根据上述决定的合成方法将进行了上述解像度变换的图像合成为一副图像，通过传输线路传输上述合成后的图像，在上述图像显示部，根据上述决定的解像度和合成方法将上述传输来的合成图像分离，并显示上述分离后的各图像。
按照这样的图像显示控制方法，通过用户操作输入使所希望的图像显示为高画质，可以成为与用户的希望对应的显示画面。
本发明(权利要求10)的图像显示控制方法的特征在于：在权利要求1～权利要求9的任一权项所述的图像显示控制方法中，上述合成方法根据上述显示优先度将进行了解像度变换的各图像的纵横比固定而进行合成。
按照这样的图像显示控制方法，在进行分离或显示时不必进行纵横比修正，可以直接使用所分离的图像。
本发明(权利要求11)的图像显示控制方法的特征在于：在权利要求1～权利要求9的任一权项所述的图像显示控制方法中，上述合成方法根据上述显示优先度改变进行了解像度变换的各图像的纵横比而进行合成。
按照这样的图像显示控制方法，可以不浪费地传输并显示各图像。
本发明(权利要求12)的图像显示控制方法的特征在于：在权利要求1所述的图像显示控制方法中，在上述图像显示部计算多个各图像在画面上进行虚拟三维显示所需要的参量，并使上述分离后的各图像按照上述计算的参量进行三维处理和显示。
按照这样的图像显示控制方法，可以有效地传输图像并进行虚拟三维显示。
本发明(权利要求13)的图像显示控制方法的特征在于：在权利要求1～权利要求12的任一权项所述的图像显示控制方法中，在上述图像输入部将上述合成的图像压缩，在上述图像显示部将上述压缩的合成图像解压。
按照这样的图像显示控制方法，可以削减所传输的图像数据量。
本发明(权利要求14)的图像显示控制方法的特征在于：在权利要求1～权利要求13的任一权项所述的图像显示控制方法中，在上述图像输入部将解像度变换和合成方法信息作为标题附加到上述合成后的图像数据中，在上述图像显示部解读附加了上述标题的合成图像的标题，并根据上述解读的信息将上述合成图像分离。
按照这样的图像显示控制方法，即使发生了传输延迟，在进行分离时也可以按可靠的时刻传输解像度变换和合成方法信息，所以，不会发生图像混乱。
本发明(权利要求15)的图像显示处理系统是使多个图像信号源的图像在同一画面上混合显示的图像显示处理系统，其特征在于：设置有接收多个图像信号源的图像的输入的图像输入部、向显示画面进行应显示的图像的输出的图像显示部和将上述图像输入部和上述图像显示部连接的传输线路；上述图像输入部具有根据通过上述传输线路从上述图像显示部接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部指定的方法合成为一副图像的合成部；上述图像显示部具有将从上述图像输入部接收的合成图像分离为原来的多个各图像的分离部、将上述分离后的多个图像同时显示在上述画面上的显示控制部、取得多个各图像的显示状态的状态取得部和根据取得的显示状态决定解像度和合成方法信息信号并向上述分离部和上述图像输入部输出的解像度和合成方法决定部。
按照这种结构的图像显示处理系统，在1系统的图像传输线路上将多个图像合成而进行传输，所以，可以削减所传输的图像数据量。此外，根据需要还根据显示优先度决定各图像的解像度和合成方法，所以，可以成为与用户的希望对应的显示画面。
本发明(权利要求16)的图像显示处理系统是使多个图像信号源的图像在同一画面上混合显示的图像显示处理系统，其特征在于：设置有接收多个图像信号源的图像的输入的图像输入部、向显示画面进行应显示的图像的输出的图像显示部和将上述图像输入部和上述图像显示部连接的传输线路；上述图像输入部具有根据通过上述传输线路从上述图像显示部接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部指定的方法合成为一副图像的合成部；上述图像显示部具有将从上述图像输入部接收的合成图像分离为原来的多个各图像的分离部、用户进行操作输入的操作输入部、使上述分离后的多个图像同时显示在上述画面上的显示控制部和利用上述输入的操作决定解像度和合成方法信息信号并向上述分离部和上述图像输入部输出的解像度和合成方法决定部。
按照这种结构的图像显示处理系统，在1系统的图像传输线路上将多个图像合成而进行传输，所以，可以削减所传输的图像数据量。此外，由于用户输入用于使所希望的图像成为高画质的操作，所以，可以成为与用户的希望对应的显示画面。
本发明(权利要求17)的图像显示处理系统的特征在于：在权利要求15所述的图像显示处理系统中，上述图像显示部进而具有计算多个各图像在画面上进行虚拟三维显示所需要的参量的三维计算部和按照由三维计算部计算的参量将上述分离的多个各图像进行三维处理和显示的三维显示部，上述状态取得部从上述三维计算部取得多个各图像的显示状态。
按照这种结构的图像显示处理系统，即使使用传输能力有限的传输线路，也可以进行有效的图像传输和虚拟三维显示。
本发明(权利要求18)的图像显示处理系统的特征在于：在权利要求15～权利要求17的任一权项所述的图像显示处理系统中，上述图像输入部进而具有压缩上述合成图像的压缩部，上述图像显示部进而具有将从上述图像输入部接收的压缩过的合成图像进行解压的解压部。
按照这种结构的图像显示处理系统，可以进一步削减传输的图像数据量，所以，可以有效地利用传输线路。
本发明(权利要求19)的图像显示处理系统的特征在于：在权利要求15～权利要求18的任一权项所述的图像显示处理系统中，上述图像输入部进而具有根据上述解像度和合成方法信息信号生成特定的格式并附加到合成后的图像信号中的标题附加部，上述图像显示部进而具有从附加到从上述图像输入部接收的合成图像信号中的标题中取出解像度和合成方法信息的标题分析部。
按照这种结构的图像显示处理系统，在从图像输入部到图像显示部的传输线路中，即使发生了传输延迟，也可以按可靠的时刻向分离部传输解像度变换和合成方法信息，所以，图像不会发生混乱。
本发明(权利要求20)的图像显示处理装置是在使多个图像信号源的图像在同一画面上混合显示的图像显示系统中使用的可以将上述多个图像信号源连接的图像显示处理装置，其特征在于：具有根据从上述图像显示部通过传输线路接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要利用由上述解像度变换和合成方法控制部指定的方法将上述解像度变换后的多个图像合成为一副图像的合成部。
按照这种结构的图像显示处理装置，通过装配PC的扩展卡，可以实现与PC组合。
本发明(权利要求21)的图像显示装置的特征在于：包括显示单元和图像配置单元，显示单元将配置了粘贴图像的单个或多个虚拟平面的虚拟三维空间相对于配置在上述虚拟三维空间内的视点进行透视变换后显示在显示画面上，图像配置单元将图像粘贴到第1虚拟平面上，配置到上述虚拟三维空间内以使该第1虚拟平面的正面对着上述视点，同时在选择了上述第1虚拟平面的一部分区域时将粘贴在上述第1虚拟平面的所选择的区域上的图像粘贴到与上述第1虚拟平面不同的第2虚拟平面上，使该第2虚拟平面在上述虚拟三维空间内是比上述第1虚拟平面更靠近上述视点的位置，在将配置了上述第1、第2虚拟平面的上述虚拟三维空间进行透视变换时，上述第2虚拟平面小于上述第1虚拟平面，并配置在上述显示画面上显示的位置，以使其正面对着上述视点。
按照这种结构的图像显示装置，可以实现能够进行很容易地确认全体画面与选择画面的位置关系的画面显示的图像显示装置。
本发明(权利要求22)的图像显示装置的特征在于：包括图像配置单元、眺望视点位置计算单元和眺望显示单元，图像配置单元将图像粘贴到第1虚拟平面上，并将该第1虚拟平面配置到虚拟三维空间内，同时，在选择了上述第1虚拟平面的一部分区域时，将粘贴在上述第1虚拟平面的选择的区域上的图像粘贴到与上述第1虚拟平面不同的第2虚拟平面上，并将该第2虚拟平面在上述虚拟三维空间内配置为其正面对着基本上和上述第1虚拟平面的正面相同的方向；眺望视点位置计算单元计算在上述虚拟三维空间内可以看到上述第1和第2虚拟平面的全体的眺望视点位置；眺望显示单元将配置了多个虚拟平面的虚拟三维空间相对于配置在上述眺望视点位置的视点进行透视变换后进行显示。
按照这种结构的图像显示装置，可以俯瞰全体画面和选择画面的全体，从而可以实现能够很容易地确认全体画面与选择画面的位置关系的图像显示装置。
本发明(权利要求23)的图像显示装置的特征在于：在权利要求21所述的图像显示装置中，上述图像配置单元对粘贴在上述第2虚拟平面上的图像进行获得透视效果的处理。
按照这种结构的图像显示装置，可以更容易地确认在选择画面的背后显示的全体画面。
本发明(权利要求24)的图像显示装置的特征在于：在权利要求21～权利要求23的任一权项所述的图像显示装置中，粘贴在上述第1虚拟平面上的图像是包含多个频道画面图像的多频道显示图像，在上述第1虚拟平面中选择粘贴上述多个频道画面图像中的1个或多个频道画面图像的图像的区域。
按照这种结构的图像显示装置，可以充分发挥三维视觉效果，从而可以实现能够进行很容易确认多频道画面与选择画面的位置关系的画面显示的图像显示装置。
本发明(权利要求25)的图像显示装置的特征在于：在权利要求24所述的图像显示装置中，具有存储在多频道显示画面上显示的多个频道的选择频度的频道选择频度存储单元和根据在多频道显示画面上显示的多个频道的选择频度决定粘贴在上述第1虚拟平面上的多频道显示画面的多个频道画面图像的配置的配置决定单元。
按照这种结构的图像显示装置，可以按与选择频度相应的频道图像配置进行多频道画面显示，从而可以实现在使用多频道显示的频道选择操作中非常方便的图像显示装置。
本发明(权利要求26)的图像显示装置的特征在于：在权利要求21所述的图像显示装置中，具有存储上述第1和第2虚拟平面在虚拟三维空间内的配置信息和粘贴在各虚拟平面上的图像在虚拟平面上的配置信息的配置信息存储单元和使用该配置信息存储单元存储的配置信息再现上述第1和第2虚拟平面在虚拟三维空间内的配置和粘贴在各虚拟平面上的图像在虚拟平面上的配置的图像配置再现单元。
按照这种结构的图像显示装置，可以再现以前的显示，从而可以确认全体图像与选择图像的关系。
本发明(权利要求27)的图像显示装置的特征在于：在权利要求21所述的图像显示装置中，具有按指定的时间间隔顺序硅区域而选择上述第1虚拟平面的一部分区域和解除选择的区域选择单元。
按照这种结构的图像显示装置，可以实现能够顺序自动地放大全体画面的一部分的图像显示装置。
本发明(权利要求28)的图像显示装置的特征在于：在权利要求21所述的图像显示装置中，上述图像配置单元将上述第2虚拟平面配置到上述虚拟三维空间内的上述位置时，根据粘贴在上述第2虚拟平面上的图像在使上述第2虚拟平面进行特定的动画动作后配置到上述虚拟三维空间内的上述位置。
按照这种结构的图像显示装置，利用选择画面显示时的画面的动画动作，可以实现用户能够识别关于选择画面的附加的信息的图像显示装置。
图1是本发明实施例1的图像显示处理系统的结构图。
图2是表示本发明实施例1的图像显示处理系统的解像度变换和合成方法的例子的图。图2(a)是解像度变换和合成前的原来的图像，图2(b)是表示维持图2(a)的各图像的纵横比的进行间抽合成时的例子的图，图2(c)是改变图2(a)的各图像的纵横比而进行间抽合成时的例子的图。
图3是表示本发明实施例1的图像显示处理系统的画面显示的和与各画面显示对应的解像度变换和合成方法的例子的图。图3(a)是表示用户不注意画面上的特定的图像而均等地观看时的画面显示例的图，图3(b)是表示在画面上的1～4的图像中1为最大的视窗尺寸时的画面显示例的图，图3(c)是表示在画面上的1～4的图像中1的图像的重叠位于最前面时的画面显示例图，图3(d)是表示图3(a)时的解像度变换和合成方法的例子的图，图3(e)是表示图3(b)或图3(c)时的解像度变换和合成方法的例子的图。
图4是本发明实施例2的图像显示处理系统的结构图。
图5是本发明实施例3的图像显示处理系统的结构图。
图6是表示本发明实施例3的图像显示处理系统附加的标题的例子的图。
图7是本发明实施例4的图像显示处理系统的结构图。
图8是本发明实施例5的图像显示处理系统的结构图。
图9是表示本发明实施例5的图像显示处理系统的画面显示的例子和与各画面显示对应的解像度变换和合成方法的例子的图，图9(a)是在画面上的图像1～4中图像1、4大而均等、图像2、3小而均等时的画面显示例，图9(b)是在画面上的图像1～4中图像1大、图像2、4小而均等、图像3位于背后时的画面显示例，图9(c)是表示图9(a)时的各图像的解像度变换和合成方法的例子的图，图9(d)是表示图9(b)时的各图像的解像度变换和合成方法的例子的图。
图10是表示本发明实施例6的图像显示装置的结构的图。
图11是表示本发明实施例6的图像显示装置中多频道画面显示的三维处理的图像的图。
图12是表示本发明实施例6的图像显示装置中虚拟三维空间内的图像配置和显示画面的具体例的图，图12(a)是表示在多频道画面显示中多频道显示频道1～16的节目画面时的虚拟平面与视点的关系的图，图12(b)是表示图12(a)的情况在显示器画面上显示的多频道画面显示的图。
图13是表示本发明实施例6的图像显示装置中虚拟三维空间内的图像配置和显示画面的具体例的图，图13(a)是表示在多频道画面显示中选择“左上”的区域(包含频道1、2、5、6的画面的区域)进行显示时的虚拟平面601及602与视点604的关系的图，图13(b)是表示成在显示器画面上显示的多频道画面显示的图。
图14是表示本发明实施例6的图像显示装置中虚拟三维空间内的图像配置和显示画面的具体例的图，图14(a)是表示在图13(b)所示的多频道画面显示中选择“左下”的区域(包含频道5的画面的区域)进行显示时的虚拟平面601、602及603与视点604的关系的图，图14(b)是表示在显示器画面上显示的画面显示的图。
图15是表示对配置在眺望视点位置的视点进行透视变换的本发明的图像显示装置的显示画面的一例的图。
图16是表示本发明实施例7的图像显示装置的结构的图。
图17是表示本发明实施例8的图像显示装置的结构的图。
图18是表示本发明实施例8的图像显示装置中带动画动作的意义的例子的图。
图19是用于说明先有的利用三维视觉效果的图像显示装置中的多频道画面显示的三维处理的图。
图20是表示为了使用多频道画面显示进行频道选择而使用的遥控装置的输入键的结构的一例的图。
图21是表示先有的利用三维视觉效果的图像显示装置的显示图像的一例的图，图21(a)是表示配置为4×4的矩阵状的多频道画面的显示的图，图21(b)是表示如图21(a)所示的那样在显示多频道显示画面的状态顺序按下“左上”和“选择”键时氢的显示器画面的图，图21(c)是表示在显示图21(b)的多频道画面显示的状态按下“左下”的键时切换的显示画面的例子的图。
下面，参照附图说明本发明的实施例。这里所示的实施例仅仅是一例，不一定必须限定该实施例。
实施例1．
下面，参照附图说明本发明实施例1的图像显示处理系统。
图1是本发明实施例1的图像显示处理系统的全体结构图。在图1中，本实施例的图像显示处理系统是设置了接收多个图像信号源101(在本实施例中，是2个模拟系统、2个数字系统，共计4个系统)的图像输入的图像输入部100、向显示画面201进行应显示的图像的输出的图像显示部200和将图像输入部100与图像显示部200连接的传输线路的图像显示处理系统。
将多个图像合成为一副而输出的图像输入部100由将模拟图像信号变换为数字图像信号的A/D变换器102、对数字图像信号根据需要将多个个图像变换为由解像度变换和合成方法控制部106指定的解像度的解像度变换部103、根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部106指定的方法合成为一副图像的合成部104、通过传输线路300向图像显示部200发送合成后的数字图像信号并通过传输线路300从图像显示部200接收解像度和合成方法信息信号的收发部105和根据从图像显示部200接收的解像度和合成方法信息信号控制解像度变换和合成方法的解像度变换和合成方法控制部106构成。
将所接收的合成图像分离为各图像进行显示的图像显示部200由通过传输线路300从图像输入部100接收合成图像的数字图像信号并通过传输线路300向图像输入部100发送解像度和合成方法信息信号的收发部202、根据从图像输入部100接收的合成图像分离为原来的4个系统的图像的分离部203、在用户独立地对4个系统的图像进行的显示操作的任意的显示状态将上述分离后的4个系统的各图像同时显示在上述画面201上的显示控制部204、取得多个各图像的显示状态的状态取得部205和根据从状态取得部205取得的显示状态决定解像度和合成方法信息信号的解像度和合成方法决定部206构成。作为这种结构的图像显示部200的例子，有视窗系统库的OS执行的PC的图形系统。画面201是与PC连接的显示器，作为例子，有CRT、LCD、仰视显示器等。
传输线路300连接在图像输入部100与图像显示部200之间，传输合成图像的图像信号与解像度和合成方法信息信号。
下面，说明实施例1的图像显示处理系统的动作。
首先，图像信号源101向图像输入部100发送模拟信号或数字信号。作为模拟的图像信号源的例子，有NTSC制式的录像机、DVD播放机、光盘、电视调谐器等，作为数字的图像信号源的例子，有PC用数字TV接收端口、PC用MPEG译码器端口、PC用视频接收端口等。
在从图像信号源101接收的信号是模拟图像信号时，A/D变换器102将模拟图像信号采样并向解像度变换部103传送数字的图像信号。如果图像信号源101是NTSC或PAL等制式的格式时，就进而进行NTSC/PAL译码处理等。作为输出的数字的图像信号形式的例子，有8位Y/C、16位Y/C、24位RGB等。
并且，解像度变换部103发送所接收的数字图像信号。合成部104将所接收的4个系统的数字图像信号数据分别进行帧同步处理，同时合成为一副图像，并将合成的数字图像信号向收发部105发送。收发部105将由合成部104合成后的数字图像信号数据通过传输线路300向收发部202传送。收发部202将所接收的数字图像信号数据向分离部203传送，分离部203将所接收的数字图像信号分离为原来的4个图像。并且，显示控制部204独立地将这4个图像进行重叠到通常的PC的电脑图像上的处理，并驱动用于显示该图像的画面201。
状态取得部205是由PC执行的OS的功能，从显示控制部204取得在画面201上显示的各图像的视窗的尺寸、重叠及显示时间等的显示状态，并根据上述显示状态决定各图像的显示优先度。并且，解像度和合成方法决定部206根据所决定的上述显示优先度，利用软件计算并决定各图像的解像度变换中的解像度和各图像的合成方法，并将解像度和合成方法信息信号向收发部202和分离部203传送。收发部202通过传输线路300向收发部105传送所接收的解像度和合成方法信息信号。收发部105接收解像度和合成方法信息信号，并向解像度变换和合成方法控制部106传输。解像度变换和合成方法控制部106将所接收的解像度变换和合成方法信息信号中的4个系统的图像的解像度变换信息分别向解像度变换部103传输，同时，将指示4个图像的图像的合成模式的合成方法信息信号向合成部104传输。
解像度变换部103对所接收的数字图像信号根据解像度变换和合成方法控制部106的解像度变换信号进行解像度的变换，并发送解像度变换后的数字图像信号。制式，也进行用于防止图像畸变的滤波处理。作为解像度变换的例子，预先准备了将纵横分别间抽为1/2、1/4、3/4的变换、将纵维持为1/1而将横间抽为1/2、1/4、3/4的变换、将横维持为1/1而将纵间抽为1/2、1/4、3/4的变换等多个变换模式，对于滤波处理，使用分配给各变换模式的适当的滤波系数。
并且，合成部104使由解像度变换部103进行了解像度变换的4个系统的图像分别首先帧同步、按由解像度变换和合成方法控制部106的合成方法信号指定的模式合成为一副图像，并向收发部105传送，从而通过传输线路300向收发部202传输。
收发部105是将由合成部104合成后的数字图像信号数据向传输线路300发送或将从传输线路300接收的解像度和合成方法信息信号向解像度变换和合成方法控制部106传输的通信接口，作为例子，有作为PC的图形系统的图像输入端口的标准规格的VIP(VideoInterface Port)或PC内部的PCI/AGP总线、LAN/因特网等网络的接口等。
收发部202接收从传输线路300传输来的数字图像信号数据，并向分离部203传输。分离部203将从收发部202输入的合成数字图像信号分离为原来的4个图像。这时，根据解像度和合成方法决定部206的解像度和合成方法信息决定在合成图像上的各图像的坐标等，从而进行适当的分离动作。显示控制部204将这4个图像独立地叠加到通常的PC的电脑图像上，为了显示该图像而驱动画面201。分离部203和显示控制部204起PC的图形芯片内部的功能。
在本发明的图像处理系统中，根据在画面上显示的各图像的显示优先度来决定显示优先度，并变换各图像的解像度，但是，各图像的显示优先度根据各图像的显示尺寸、显示的重叠状态、显示的可视面积、显示是否已聚焦的状态、显示时间的长度、显示的顺序以及显示的形式来决定。
这里，所谓显示优先度，就是用户对各图像的关心度，即根据用户想看各图像的程度而决定的应显示的图像的顺序，按照该顺序来调整显示图像的品质(大小、画质等)。
下面，参照图2说明在本发明实施例1的图像显示处理系统中根据上述解像度变换而得到的合成方法的例子。
在图2中，图2(a)是在显示画面上显示的原来的图像，图2(b)是将图2(a)的各图像的纵横比固定而进行间抽合成时的例子，图2(c)是改变图2(a)的各图像的纵横比而进行间抽合成时的例子。
如图2(b)所示，维持图2(a)的各图像的纵横比进行间抽而合成时，在图像显示部200中可以直接使用所分离的各图像，但是，用于在合成画面上将形成间隙，所以，传输线路300的使用效率将降低。另一方面，如图2(c)所示，进行不维持图2(a)的各图像的纵横比的间抽合成时，传输线路300的使用效率良好，但是，在图像显示部200中进行各图像的分离处理或显示控制处理时必须进行纵横比的修正。
下面，使用图3说明在本发明实施例1的图像显示处理系统中解像度和合成方法决定部206根据在画面201上的显示和取得该显示状态的状态取得部205的信息计算各图像的解像度和合成方法的例子。
图3(a)、图3(b)、图3(c)是在画面上1～4的各图像的显示例。图3(d)、图3(e)是与图3(a)、图3(b)、图3(c)对应的图像的解像度变换和合成方法的例子。
在图3(a)中，是判定用户不注意特定的图像而均等地观看从而如图3(d)所示的那样决定解像度和合成方法的例子。在图3(b)中，是判定最大视窗尺寸的1的图像最受用户注目从而如图3(e)所示的那样维持纵横比不变来决定解像度和合成方法的例子。在图3(c)中，是判定重叠在最前面的视窗1的图像最受用户注目同样如图3(e)所示的那样来决定解像度和合成方法的例子。
下面，说明在上述结构的图像显示处理系统中如图3(a)和图3(b)所示的那样用户操作在画面上显示的图像时的动作的例子。
为了简单起见，这里假定4个系统的输入图像和合成后的图像的尺寸相同。现在，显示控制部204动作以使在画面201上各图像成为图3(a)所示的那样的显示状态。状态取得部205取得各图像的显示尺寸相等并且不重叠的状态，所以，解像度和合成方法决定部206指示将各图像的解像度维持着纵横比而分别将纵横缩小为1/2，并如图3(d)所示的那样合成为一副图像。该指示向图像输入部100的解像度变换和合成方法控制部106传输。各图像的解像度变换部103指示将各图像的解像度维持着纵横比而将纵横分别缩小为1/2，所以，在使用1/2间抽用的滤波系数进行滤波处理后，进行间抽处理。在合成部104中，将憎恨均等地缩小为1/2的图像按照图3(d)的模式进行合成并输出。在图像显示部200的分离部203中，由于通过解像度和合成方法决定部205已知道通过传输线路300传送来的图像是如图3(d)所示的那样合成的，所以，可以将各图像在适当的区域进行分离处理，并向显示控制部204输出。
这里，假定用户操作显示控制部204使各图像在画面201上成为图3(b)所示的那样的显示状态。状态取得部205取得图3(b)的1的图像用比其他3个图像大的视窗进行显示的状态。解像度和合成方法假定部206根据由状态取得部205取得的各图像的视窗尺寸信息，指示图3(b)的1的图像的解像度维持着纵横比而将纵横分别缩小为3/4，而其他3个图像的解像度维持着纵横比而将纵横分别缩小为1/4，从而如图3(e)所示的那样合成为一副图像。该指示向图像输入部100的解像度变换和合成方法控制部106。各图像的解像度变换部103中与图3(b)的1的图像对应的图像的解像度变换部103指示将图像的解像度维持着纵横比而将纵横分别缩小为3/4，所以，在使用3/4间抽用的滤波系数进行滤波处理后，进行间抽处理。另外，与其他3个图像对应的解像度变换部103指示将各自的图像的解像度维持着纵横比而将纵横分别缩小为1/4，所以，在使用1/4间抽用的滤波系数进行滤波处理后，进行间抽处理。在合成部104中，将变换为不同的解像度的图像按图3(e)所示的那样进行合成并输出。在图像显示部20的分离部203中，由于通过解像度和合成方法决定部205已知道通过传输线路300传送来的图像是如图3(e)所示的那样合成的，所以，可以将各图像在适当的区域进行分离处理，并向显示控制部204输出。
如上所述，按照本发明实施例1的图像显示处理系统，在使多个图像信号源的图像在同一画面上混合显示的图像显示处理系统中，设置有接收多个图像信号源的图像的输入的图像输入部、向显示画面进行应显示的图像的输出的图像显示部和将上述图像输入部和上述图像显示部连接的传输线路；上述图像输入部具有根据通过上述传输线路从上述图像显示部接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部指定的方法合成为一副图像的合成部；上述图像显示部具有将从上述图像输入部接收的合成图像分离为原来的多个各图像的分离部、将上述分离后的多个图像同时显示在上述画面上的显示控制部、取得多个各图像的显示状态的状态取得部和根据取得的显示状态决定解像度和合成方法信息信号并向上述分离部和上述图像输入部输出的解像度和合成方法决定部，利用这样的结构来决定各图像的显示优先度，根据上述显示优先度变换各图像的解像度变换中的解像度，同时使传输的图像数据的总量维持为与传输线路的能力一致而进行显示，所以，使用传输能力有限的传输线路也可以进行有效的图像传输和显示。另外，由于是将多个图像合成为一副图像后进行传输的，所以，与通常只具有1个图像输入端口的PC的图形系统的亲和性高。
实施例2．
下面，说明实施例2的图像显示处理系统。
图4是本发明实施例2的图像显示处理系统的全体结构图。在图4中，207是操作输入部，由用户进行操作输入。
在图4中，对于和图1相同或相当的结构要素使用相同的符号，并省略其说明。
下面，说明实施例2的图像显示处理系统的动作。
在图像显示部200中，在画面上显示的多个图像中用户想使所希望的图像成为高画质时，就将用于变换各图像的解像度的操作输入操作输入部207。并且，解像度和合成方法决定部206根据输入的操作决定解像度和合成方法，并将解像度和合成方法信息信号向分离部203和收发部202传输。
用于实施例2与实施例1几乎相同，所以，省略其共同部分的说明。
如上所述，按照实施例2的图像显示处理系统，在使多个图像信号源的图像在同一画面上混合显示的图像显示处理系统中，设置有接收多个图像信号源的图像的输入的图像输入部、向显示画面进行应显示的图像的输出的图像显示部和将上述图像输入部和上述图像显示部连接的传输线路；上述图像输入部具有根据通过上述传输线路从上述图像显示部接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部指定的方法合成为一副图像的合成部；上述图像显示部具有将从上述图像输入部接收的合成图像分离为原来的多个各图像的分离部、用户进行操作输入的操作输入部、使上述分离后的多个图像同时显示在上述画面上的显示控制部和利用上述输入的操作决定解像度和合成方法信息信号并向上述分离部和上述图像输入部输出的解像度和合成方法决定部，通过利用这样的结构，用户输入用于使所希望的图像显示为高画质的操作，可以成为与用户的希望相应的显示画面。
实施例3．
下面，说明实施例3的图像显示处理系统。图5是本发明实施例3的图像显示处理系统的全体结构图。在图5中，107是标题附加部，根据所接收的解像度和合成方法信息信号按一定的格式生成解像度和合成方法信号，并附加到所接收的数字图像信号的消隐数据部分。208是标题分析部，从所接收的带标题的数字图像信号中仅解释标题部分，从而取出合成的图像的各图像的解像度和合成方法信息。
在图5中，对于和图1相同或相当的结构要素使用相同的符号，并省略其说明。
图6是本发明实施例3的图像显示处理系统的标题附加部107附加的标题400的一例。如图6所示，在标题400中包含了各图像的纵横尺寸、在合成后的图像上各图像的最左上的点坐标信息，与各图像连续地排列在一起。
下面，说明实施例3的图像显示处理系统的动作。
在图像输入部100中，标题附加部107根据从解像度变换和合成方法控制部106通过合成部104接收的解像度和合成方法信息信号按一定的格式生成解像度和合成方法信号，并将标题400附加到从合成部104接收的数字图像信号的消隐数据部分，并向收发部105输出。
在图像显示部200中，标题分析部208从所接收的带标题400的数字图像信号中仅解释标题400部分，取出合成的图像的各图像的解像度和合成方法信息，并向分离部203输出。分离部203根据所接收的解像度和合成方法信息进行各图像的适当的分离动作，另一方面，接收带标题的数字图像信号，但是，用于标题附加在消隐数据部分，所以，不会对原来的图像有任何影响。
与实施例1不同的是，在图像显示部200中取消了从解像度和合成方法决定部206向分离部203输出的解像度和合成方法信息信号、在图像输入部100中将从图像显示部200通过传输线路300接收的解像度变换和合成方法信息信号向标题附加部107传输以及在图像显示部200中将收发部202的合成的图像的数字图像信号向标题分析部208输出并将分析结果向分离部203输出等。
本实施例3以附加到实施例1上的形式实施的，所以，对于和实施例1共同的部分省略其说明。
如上所述，按照本发明实施例3的图像显示处理系统，在实施例1所述的图像显示处理系统中，在上述图像输入部中将解像度变换和合成方法信息作为标题附加到上述合成后的图像数据上，在上述图像显示部中解读附加了上述标题的合成图像的标题，并根据上述解读的信息分离上述合成图像，所以，图像输入部在变更多个图像的解像度和合成方法的同时将该解像度和合成方法信息附加到合成后的数字图像信号上并向图像显示部传输，在图像显示部解读所附加的解像度和合成方法信息的同时可以进行适当的各图像的切换区域控制，所以，解释在传输线路这发生图像数据的传输延迟，也可以按可靠的时刻进行图像输入部和图像显示部的控制。
实施例4．
下面，说明实施例4的图像显示处理系统。
图7是本发明实施例4的图像显示处理系统的全体结构图。在图7中，108是压缩部，压缩合成的图像。209是解压部，将压缩的合成图像解压。
在图7中，对于和图1相同或相当的结构要素使用相同的符号，并省略其说明。
下面，说明实施例4的图像显示处理系统的动作。
在图像输入部100中，压缩部108使用MPEG这样的图像数据压缩技术将从合成部104接收的合成图像的数字图像信号压缩，并将压缩数据向收发部105输出。在图像显示部200中，解压部209将从收发部202接收的压缩数据解压，并向分离部203输出。本实施例4是以附加到实施例1上的形式进行实施的，所以，对于和实施例1共同的部分省略其说明。
如上所述，按照本发明实施例4的图像显示处理系统，在实施例1～实施例3的任一实施例所述的图像显示处理系统中，上述图像输入部进而具有将上述合成图像压缩的压缩部，上述图像显示部进而具有将从上述图像输入部接收的压缩过的合成图像解压的解压部，利用这样的结构，对一副图像将合成图像进行压缩、传输和解压，所以，如果合成图像的纵横尺寸相同，就可以削减合成图像的总数据量，从而可以进行有效的传输，另外，如果合成图像的总数据量相同，在进行解像度变换时就可以维持高的解像度，从而可以传输解像度更高的图像。
实施例5．
下面，说明实施例5的图像显示处理系统。
图8是本发明实施例5的图像显示处理系统的全体结构图。在图8中，210是三维计算部，计算在画面201上进行各图像的虚拟三维显示所需要的参量。211是三维显示处理部，按照三维计算部210计算的参量对各图像进行三维处理。
在图8中，对于和图1相同或相当的结构要素使用相同的符号，并省略其说明。
下面，说明实施例5的图像显示处理系统的动作。
在图像显示部200中，三维(3D)计算部210计算各图像在画面210上的虚拟3D显示所需要的参量，从分离部203接收的各图像的图像数据由3D显示处理部211按照上述3D计算部210计算的测量进行3D处理，并向显示控制部203输出。状态取得部205从3D计算部210取得各图像的显示状态，并向解像度和合成方法决定部206传输。
图9是在本发明实施例5的图像显示处理系统中各图像在画面201上的虚拟三维显示和解像度和合成方法决定部206根据取得其显示状态的状态取得部205的信息计算各图像的解像度和合成方法的例子。在图9中，图9(a)、图9(b)是画面显示的例子，图9(c)、图9(d)分别是与图9(a)、图9(b)对应的各图像的解像度变换和合成方法的例子。
图9(a)是各图像在虚拟三维空间内自动地围绕着中心旋转时某一瞬间的画面201的例子。图像“1”、“4”大，并以相等的大小显示，图像“2”、“3”小，并以相等的大小显示。解像度和合成方法决定部206在状态取得部205取得该显示状态时，就推断图像“1”、“4”比图像“2”、“3”的注目度高，从而决定图像“1”、“4”如图9(c)所示的那样变换为比较高的解像度进行合成，而图像“2”、“3”变换为比较低的解像度进行合成。
在该画面显示中，各图像的显示状态是纵长横短，所以，在纵方向就不进行间抽，而仅在横方向进行间抽。
其次，假定各图像在虚拟三维空间内围绕轴中心旋转而如图9(b)所示的那样在画面201上显示。图像“1”大而图像“2”、“4”小并以相等的大小显示。图像“3”隐藏在背后不显示。解像度和合成方法决定部206在状态取得部205取得该显示状态时就推断图像“1”的注目度比图像“2”、“4”高，由于图像“3”不在画面201上显示，所以，判定图像“3”的数据不需要，从而决定图像“1”变换为高解像度进行合成，而图像“2”、“4”变换为比较低的解像度进行合成。
本实施例5是以附加到实施例1上的形式实施的，所以，对于和实施例1共同的部分省略其说明。
如上所述，按照本发明实施例5的图像显示处理系统，在实施例1～实施例4的任一实施例所述的图像显示处理系统中，上述图像显示部进而具有计算多个各图像在画面上的虚拟三维显示所需要的参量的三维计算部和对上述分离的多个各图像按照由三维计算部计算的参量进行三维处理和显示的三维显示部，上述状态取得部从上述三维计算部取得多个各图像的显示状态，所以，使用传输能力有限的传输线路也可以进行有效的图像传输和虚拟三维显示。另外，由于将多个图像合成为一副图像后进行传输，所以，在PC的图形系统通常只具有1个图像输入端口的图形芯片进行3D显示处理时，将结构组织从任意的区域分离并粘贴到虚拟三维画面上的方式与PC的图形系统的亲和性高。
实施例6．
下面，说明实施例6的图像显示装置。
图10是表示实施例6的图像显示装置的结构的图。
实施例6的图像显示装置构成可以进行多频道显示的电视接收装置，和先有例所示的一样，可以将多个频道的节目画面并列在显示器显示画面上进行显示。
在图10中，501是接收用户的操作的操作部、502是显示图像的显示部、503是进行多个频道显示画面的配置控制的多频道配置控制部、504是多频道调谐器控制部、505是具有多个调谐器并按照多频道调谐器控制部504的指示选择各频道的调谐部、506是根据多频道配置控制部503的信息将各频道显示画面配置到虚拟三维空间内进行阴影处理和视点移动处理等从而进行用于可在2维的显示部502上进行显示的透视变换的三维处理部。
下面，说明实施例6的图像显示装置的各部分的动作。
操作部501由例如图20所示的遥控装置和遥控装置的操作信号接收单元构成，接收在多频道画面显示中的块的选择、解除操作、从别的角度向视点的切换操作、或在不使用多频道画面的画面上的频道选择操作等用户对图像显示装置的操作，并向多频道配置控制部503传输。
显示部502将由三维处理部506处理过的图像在画面上显示。
多频道配置控制部503根据操作部501接收的操作输入选择影在显示部502内显示的频道并将选择频道信息通知多频道调谐器控制部504，同时向三维处理部506输出多个频道显示图像在虚拟三维空间内的配置信息和视点位置信息。
多频道调谐器控制部504从多频道配置控制部503接收选择频道信息，并进行调谐部505的控制，用以接收由选择频道信息表示的频道。
调谐部505具有多个调谐器，按照多频道调谐器控制部504的指示选择各频道。
三维处理部506根据从多频道配置控制部503传输来的频道画面配置信息将各频道画面配置到虚拟三维空间内，在进行阴影处理和视点移动处理等后进行用于可以在2维的显示部502上进行显示的透视变换。
图11是表示实施例6的图像显示装置中多频道画面显示的三维处理的图像的图，在图11中，601是第1虚拟平面、602是第2虚拟平面、603是第3虚拟平面、604是视点。三维处理部506在本实施例的图像显示装置中选择在画面上显示的图像的一部分进行放大显示时，如在先有例中所示的三维处理那样不是使视点相对于配置在虚拟三维空间内的虚拟平面的位置学虚拟三维空间内移动，而是如图11所示的那样作成仅粘贴了粘贴到第1虚拟平面中所选择的区域上的图像的第2虚拟平面，不使该第2虚拟平面在虚拟三维空间内比第1虚拟平面更靠近视点的位置，这样，便只有所选择的图像才利用在虚拟三维空间内靠近视点而进行显示的三维视觉效果进行图像显示。
下面，说明实施例6的图像显示装置的具体的画面显示动作。
在用户按下图20所示的遥控装置的“多画面显示”的输入键时，作为应在显示部502内显示的频道，多频道配置控制部503就选择例如频道1～频道16，并将选择的频道通知多频道调谐器控制部504。多频道调谐器控制部504就从多频道配置控制部503接收选择频道信息，进行调谐部505的控制，用以接收由选择频道信息表示的频道(频道1～频道16)。三维处理部506根据从多频道配置控制部503供给的频道画面配置信息将从调谐部505输入的各频道画面以4×4的矩阵状粘贴到第1虚拟平面601上，配置到虚拟三维空间内，相对于配置在虚拟平面601的正面的视点604进行透视变换。显示部502将由三维处理部506进行了透视变换的图像显示在显示器画面上。图12(a)是表示在多频道画面显示中进行多频道显示频道1～频道16的节目画面时虚拟平面601与视点604的关系的图，图12(b)是表示这时显示在显示器画面上的多频道画面显示的图。设置在图20的遥控装置上的“左上”、“右上”、“左下”、“右下”的输入键是表示将显示器画面分割为“左上”、“右上”、“左下”、“右下”的4个区域时的各位置，在显示图12(b)所示的多频道显示画面的状态按下“左上”的键时，就选择显示器画面的左上部分(包含频道1、2、5、6的画面的部分)，在显示器画面上就使例如该部分的颜色改变等，来表示选择了该部分。并且，在该状态按下了遥控装置的“选择”键时，三维处理部506就根据从多频道配置控制部503供给的频道画面配置信息将粘贴在第1虚拟平面601中选择的区域上的图像(频道1、2、5、6的节目画面)以2×2的矩阵状粘贴到新的第2虚拟平面602上，视点604的位置保持不变，使第2虚拟平面602在虚拟三维空间内位于比第1虚拟平面601更靠近视点604的位置，将配置了第1、第2虚拟平面的虚拟三维空间进行透视变换时，第2虚拟平面602配置在比第1虚拟平面601全体的大小小的显示位置，其正面(粘贴了图像的面)对着视点604，在该状态将虚拟三维空间全体相对于视点604进行透视变换。在第1虚拟平面601的选择的区域粘贴了图像的地方采用拔白、涂黑或背景色显示等。显示部502将由三维处理部506进行了透视变换的图像显示在显示器画面上。图13(a)是表示在多频道画面显示中选择“左上”的区域(包含频道1、2、5、6的画面的区域)进行显示时的虚拟平面601、602与视点604的关系的图，图13(b)是表示在显示器画面上显示的多频道画面显示的图。通过将第2虚拟平面602在虚拟三维空间内如上述那样配置并进行透视变换，在显示器画面上，粘贴在第1虚拟平面601中选择的区域上的图像就放大显示在第1虚拟平面601的前面，另外，在第2虚拟平面602的周围显示配置在后面的第1虚拟平面601的一部分。这样，在放大显示所选择的画面时，通过在显示器画面上显示多频道画面的全体像的一部分，用户便可很容易地确认多频道画面与选择画面的位置关系。此外，如图13(b)所示，在显示多频道显示画面的状态按下了“左下”的键时，就选择在显示器画面中显示在前面的2×2的矩阵状的多频道画面显示的左下部分(频道5的画面)，在按下“选择”键时，三维处理部506就根据从多频道配置控制部503供给的频道画面配置信息将粘贴在第2虚拟平面602中选择的区域上的图像(频道5的节目画面)粘贴到新的第3虚拟平面603上，视点604的位置保持不变，使第3虚拟平面603在虚拟三维空间内位于比第2虚拟平面602更靠近视点604的位置，在将配置了第1、第2、第3虚拟平面的虚拟三维空间进行透视变换时，第3虚拟平面603配置到显示在比第2虚拟平面602全体的带小的显示画面上的位置，其正面(粘贴了图像的面)对着视点604，在该状态将虚拟三维空间全体相对于视点604进行透视变换。第2虚拟平面602的选择的区域粘贴了图像的地方进行拔白、涂黑或背景色显示等。显示部502将由三维处理部506进行了透视变换的图像显示在显示器画面上。图14(a)是表示在图13(b)所示的多频道画面显示中选择“左下”的区域(包含频道5的画面的区域)进行显示时的虚拟平面601、602、603与视点604的关系的图，图14(b)是表示这时显示在显示器画面上的画面显示的图。
这样，在实施例6的图像显示装置中，包括显示单元和图像配置单元，显示单元将配置了粘贴图像的单个或多个虚拟平面的虚拟三维空间相对于配置在上述虚拟三维空间内的视点进行透视变换后显示在显示画面上，图像配置单元将图像粘贴到第1虚拟平面上，配置到上述虚拟三维空间内以使该第1虚拟平面的正面对着上述视点，同时在选择了上述第1虚拟平面的一部分区域时将粘贴在上述第1虚拟平面的所选择的区域上的图像粘贴到与上述第1虚拟平面不同的第2虚拟平面上，使该第2虚拟平面在上述虚拟三维空间内是比上述第1虚拟平面更靠近上述视点的位置，在将配置了上述第1、第2虚拟平面的上述虚拟三维空间进行透视变换时，上述第2虚拟平面小于上述第1虚拟平面，并配置在上述显示画面上显示的位置，以使其正面对着上述视点，所以，可以充分发挥三维视觉效果，从而可以进行容易确认多频道画面与选择画面的位置关系的画面显示。
在实施例6中，如果对粘贴到配置在靠近视点侧的虚拟平面上的图像进行获得透过效果的处理，也可以很容易确认显示在选择画面的背后的全体画面。
另外，在实施例6～实施例8中，是将第2虚拟平面在虚拟三维空间内配置在比第1虚拟平面更靠近视点的位置，使其正面(粘贴了图像的面)对着视点，显示将配置了第1、第2虚拟平面的虚拟三维空间相对于配置在这些虚拟平面的正面的视点进行了透视变换的图像，但是，也可以将第2虚拟平面在虚拟三维空间内配置为其正面对着与第1虚拟平面的正面基本上相同的方向，求出在上述虚拟三维空间内可以看到上述第1、第2虚拟平面的全体的眺望视点位置，而显示将配置了第1、第2虚拟平面的虚拟三维空间相对于配置在该眺望视点位置的视点进行了透视变换的图像。
图15是表示相对于配置在该眺望视点位置的视点进行透视变换的图像显示装置的显示图像的一例的图。在图15所示的例子中，和实施例6的配置一样，将第2虚拟平面在虚拟三维空间内配置在比第1虚拟平面更靠近视点的位置，使其正面(粘贴了图像的面)对着视点，并将配置了第1、第2、第3虚拟平面的虚拟三维空间相对于不是配置在虚拟平面的正面而是配置虚拟平面的斜前方的眺望视点位置的视点进行透视变换后显示在显示器画面上。通过采用进行这样的显示的结构，用户可以俯瞰多频道显示画面和选择画面的全体，从而可以很容易地确认多频道画面与选择画面的位置关系。
实施例7．
下面，说明实施例7的图像显示装置。
图16是表示实施例7的图像显示装置的结构的图。
在图16中，501是接收用户的操作的操作部、502是显示图像的显示部、503是进行多个频道显示图像的配置控制的多频道配置控制部、504是多频道调谐器控制部、505是具有多个调谐器并按照多频道调谐器控制部504的指示选择各频道的调谐部、506是根据多频道配置控制部503的信息将各频道显示图像配置到虚拟三维空间内并在进行阴影处理和视点移动处理等后进行用于可以在2维的显示部502上进行显示的透视变换的三维处理部、507是多频道配置控制存储部。
下面，说明实施例7的图像显示装置的动作。实施例7的图像显示装置的多频道画面显示动作和选择区域的放大显示动作等基本的动作与实施例6的图像显示装置的多频道画面显示动作和选择区域的放大显示动作相同。
多频道配置控制部503根据操作部501接收的操作输入选择影在显示部502内显示的频道，并将选择频道信息通知多频道调谐器控制部504，同时向三维处理部506输出多个频道显示图像在虚拟三维空间内的配置信息和视点位置信息。多频道调谐器控制部504从多频道配置控制部503接收选择频道信息，进行调谐部505的控制，以便接收用选择频道信息表示的频道。调谐部505按照多频道调谐器控制部504的指示选择各频道。三维处理部506根据从多频道配置控制部503供给的频道画面配置信息(虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息)将粘贴了图像的虚拟平面如在实施例6的说明中所述的那样配置到虚拟三维空间内，并将其相对于指定的视点进行透视变换，显示部502将其显示在显示器画面上。
多频道配置控制存储部507由即使切断系统的电源也保持存储内容的存储单元构成，存储关于多频道配置控制部503的多频道配置控制的信息。具体而言，就是存储进行选择区域的放大显示动作时的选择频道信息、虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息等。
在实施例7的图像显示装置中，在用户使用多频道画面显示进行频道选择时，在例如像图14(b)所示的那样进行放大显示后，通过用户的操作(再按下“选择”键等)或自动地将显示器显示切换为选择频道的全画面显示，但是，在选择频道的全画面显示之后再次使用多频道画面显示进行频道选择时，如果通过按下遥控装置的“多画面显示”的输入键进行多频道画面显示时，就不能很容易地识别迄今所看到的频道画面显示在多频道画面的何处。
在实施例7的图像显示装置中，在多频道配置控制存储部507中存储了进行选择区域的放大显示动作时的选择频道信息、虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息等。另外，遥控装置具有“返回”等键，相应于该“返回”等键的按下，多频道配置控制部503就从多频道配置控制存储部507中读出此前的选择频道信息、虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息，并将选择频道信息向多频道调谐器控制部504输出，将虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息向三维处理部506输出。多频道调谐器控制部504从多频道配置控制部503接收选择频道信息，进行调谐部505的控制，以便接收用选择频道信息表示的频道。调谐部505按照多频道调谐器控制部504的指示选择各频道。三维处理部506根据从多频道配置控制部503供给的频道画面配置信息(虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息)将粘贴了图像的虚拟平面配置到虚拟三维空间内，并将其相对于指定的视点进行透视变换，显示部502将其显示在显示器画面上。这样，便可再现显示切换到选择频道的全画面显示以前的选择区域的放大显示画面，从而用户可以很容易地识别迄今所看到的频道画面显示在多频道画面的何处。
这样，在实施例7的图像显示装置，除了实施例6的图像显示装置的结构外，还具有存储虚拟平面在虚拟三维空间内的配置信息和粘贴到虚拟平面上的图像在虚拟平面上的配置信息的多频道配置库存储部，使用该多频道配置控制存储部存储的配置信息，可以再现上述虚拟平面在虚拟三维空间内的配置和粘贴到虚拟平面上的图像在虚拟平面上的配置，所以，可以实现能够再现以前的显示从而可以确认全体图像与选择图像的关系的图像显示装置。
在上述说明中，在选择频道的全画面显示之后，用户再次使用多频道画面显示进行频道选择时，就再现显示切换为选择频道的全画面显示以前的选择区域的放大显示画面，但是，也可以是多频道配置控制存储部507存储切断图像显示装置的电源之前的选择频道信息、虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息等，而在再次接通电源时多频道配置控制部503自动地或根据用户的操作从多频道配置控制存储部507中读出电源切断之前的选择频道信息、虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息，从而再现显示电源切断之前的显示画面。
另外，在实施例7的图像显示装置中，是将选择频道信息和视点位置信息存储到多频道配置控制存储部中，但是，在视点位置固定时就不必存储视点位置信息，另外，在多频道画面显示中的选择频道固定时，就不必存储选择频道信息。
另外，在实施例7的图像显示装置中，是多频道配置控制存储部存储选择频道信息、虚拟平面在虚拟三维空间内的配置信息、粘贴到虚拟平面上的图像在虚拟平面上的配置信息和视点位置信息等，并使用多频道配置控制存储部存储的配置信息再现上述虚拟平面在虚拟三维空间内的配置和粘贴在虚拟平面上的图像在虚拟平面上的配置，但是，也可以是多频道配置控制存储部存储在多频道显示图像中显示的多个频道的选择频度，并根据在多频道显示图像中显示的多个频道的选择频度来决定粘贴在第1虚拟平面上的多频道显示。12(b)所示的4×4的矩阵状配置的图像，就由多频道配置控制部控制将选择频度最高的频道在图12(b)中配置到显示频道1的位置，而将选择频度其次的频道配置到显示频道2、5、6的位置，从而用以集中配置选择频度高的频道。这样，通过采用可以用与选择频道相应的频道图像配置进行多频道画面显示的结构，在使用多频道显示的频道选择操作中可以实现能够提高用户使用方便性的图像显示装置。
实施例8．
下面，说明实施例8的图像显示装置。
图17是表示实施例8的图像显示装置的结构的图。
在图17中，501是操作部、502是显示部、503是多频道配置控制部、504是多频道调谐器控制部、505是调谐部、506是三维处理部、507是多频道配置控制存储部、508是动画控制部、509动画存储部。
在由调谐部505接收的广播信号中包含关于广播节目的各种信息，例如地面波广播/卫星广播的广播种别、单声道广播/立体声广播/双语广播的广播种别、免费节目/收费节目的节目种别、新节目/重播节目的节目种别、视听限制(原始锁定)电平等信息，这些特殊信息供给动画控制部508。另外，从多频道配置控制存储部507向动画控制部508供给过去看过的频道或频道选择频度等统计信息。
动画存储部509存储实现与关于所选择的频道影在画面上表现的意义对应的动画动作的方式及坐标等数据。图18是表示与影在画面上表现的意义对应的动画动作的例子的图。有从操作部501选择在多频道显示画面上显示的频道中的某一频道的操作输入时，动画控制部508就根据从调谐部505和多频道配置控制存储部507接收的信息判断影表现的意义(“选择的节目是卫星广播”这样的信息或“选择的频道是当天已选择了2次以上的频道”这样信息等)，读出用于进行与在动画存储部509中登录的应表现的意义对应的动画动作的方式及坐标等数据，并将其向三维处理部506传输。三维处理部506在使用动画控制部508的数据进行动画动作后，将粘贴了所选择的频道的图像的虚拟平面配置到由从多频道配置控制部503供给的配置信息所示的虚拟三维空间内的位置。
这样，在实施例8的图像显示装置中，将第2虚拟平面配置到虚拟三维空间内的指定位置时，在根据粘贴到第2虚拟平面上的图像使第2虚拟平面进行特定的动画动作后，就配置到虚拟三维空间内的指定位置，所以，根据选择画面显示时的画面的动画动作，用户便可识别关于选择画面的附加的信息。
在实施例6～实施例8中，操作部由遥控装置和遥控装置的操作信号接收单元构成，但是，作为操作部，不限于遥控装置，也可以使用本体的操作按钮、鼠标等。另外，造显示部，也可以是内藏的CRT(Cathode Ray Tube)、液晶监视器、PDP(Plasma Display Panel)等任何一种显示装置。或者，也可以变换为NTSC信号等而与外加的显示装置连接。另外，作为调谐部，可以准备与多频道画面上的多个频道1对1地对应的多个调谐器，也可以将1个调谐器分时切换给多个频道，而调谐器现在选择的频道以外的频道用静止画面显示，通过将多个频道画面显示分配给1个调谐器，便可显示比调谐器数多的频道画面。
另外，在实施例6～实施例8中，是放大显示通过用户的操作输入所选择的画面的，但是，也可以采用具有按指定的时间间隔顺序改变区域来选择上述第1虚拟平面的一部分区域和解除选择的区域选择单元的结构，从而可以按例如频道的选择频度的顺序选择多个频道并自动地进行放大显示。图像选择的顺序不限于频道的选择频度的顺序，可以使用随机数发生单元来决定选择顺序，也可以单纯按频道号码顺序进行选择。
另外，作为在本发明的实施例6～实施例8的图像显示装置中处理的图像源，不限于由上述实施例所示的由调谐器接收的电视节目等广播信号，也可以使用外部图像加的图像输出或电脑的VGA输出等。
本发明的图像显示控制方法、图像显示处理系统、图像显示处理装置可以将各种多个图像信号向图像显示装置传输，而用于与电脑的图形系统等的综合处理，可以削减传输的图像数据量而实现与用户的关心度相应的图像显示。
本发明的图像显示装置在收发像有线电视或数字广播等那样大量的频道而搜索用户所希望的频道的多频道图像显示系统中，可以实现用户容易确认全体画面与选择画面的位置关系的利用了三维视觉效果的画面显示。

Claims (28)

1．一种使多个图像信号源的图像混合在统一画面上显示的图像显示控制方法，其特征在于：在图像显示部根据显示在上述画面上的各图像的显示状态决定各图像的显示优先度，并根据上述显示优先度决定各图像的解像度变换的解像度和各图像的合成方法，通过传输线路向图像输入部传输上述决定的解像度和合成方法信息，在图像输入部根据上述决定的解像度变换各图像的解像度，并根据上述决定的合成方法将进行了上述解像度变换的图像合成为一副图像，通过传输线路传输上述合成的图像，在上述图像显示部根据上述决定的解像度和合成方法将上述传输来的合成图像分离，并显示上述分离后的各图像。
2．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中各图像的显示尺寸的大小来决定。
3．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中各图像的显示重叠的深度来决定。
4．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中的各图像显示的可视面积的大小来决定。
5．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中各图像的显示是否为已聚焦的状态来决定。
6．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中的各图像的显示时间的长度来决定。
7．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中各图像的显示的顺序来决定。
8．按权利要求1所述的图像显示控制方法，其特征在于：上述显示优先度根据上述各图像的显示状态中各图像的显示形式来决定。
9．一种使多个图像信号源的图像混合在统一画面上显示的图像显示控制方法，其特征在于：在图像显示部根据外部的用户操作决定各图像的显示优先度，并根据上述显示优先度决定各图像的解像度变换的解像度和各图像的合成方法，通过传输线路向图像输入部传输上述决定的解像度并合成方法信息，在图像输入部根据上述决定的解像度变换各图像的解像度，并根据上述决定的合成方法将进行了上述解像度变换的图像合成为一副图像，通过传输线路传输上述合成后的图像，在上述图像显示部，根据上述决定的解像度和合成方法将上述传输来的合成图像分离，并显示上述分离后的各图像。
10．按权利要求1～权利要求9的任一权项所述的图像显示控制方法，其特征在于：上述合成方法根据上述显示优先度将进行了解像度变换的各图像的纵横比固定而进行合成。
11．按权利要求1～权利要求9的任一权项所述的图像显示控制方法，其特征在于：上述合成方法根据上述显示优先度改变进行了解像度变换的各图像的纵横比而进行合成。
12．按权利要求1所述的图像显示控制方法，其特征在于：在上述图像显示部计算多个各图像在画面上进行虚拟三维显示所需要的参量，并使上述分离后的各图像按照上述计算的参量进行三维处理和显示。
13．按权利要求1～权利要求12的任一权项所述的图像显示控制方法，其特征在于：在上述图像输入部将上述合成的图像压缩，在上述图像显示部将上述压缩的合成图像解压。
14．按权利要求1～权利要求13的任一权项所述的图像显示控制方法，其特征在于：在上述图像输入部将解像度变换和合成方法信息作为标题附加到上述合成后的图像数据中，在上述图像显示部解读附加了上述标题的合成图像的标题，并根据上述解读的信息将上述合成图像分离。
15．一种使多个图像信号源的图像在同一画面上混合显示的图像显示处理系统，其特征在于：设置有接收多个图像信号源的图像的输入的图像输入部、向显示画面进行应显示的图像的输出的图像显示部和将上述图像输入部和上述图像显示部连接的传输线路；上述图像输入部具有根据通过上述传输线路从上述图像显示部接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部指定的方法合成为一副图像的合成部；上述图像显示部具有将从上述图像输入部接收的合成图像分离为原来的多个各图像的分离部、将上述分离后的多个图像同时显示在上述画面上的显示控制部、取得多个各图像的显示状态的状态取得部和根据取得的显示状态决定解像度和合成方法信息信号并向上述分离部和上述图像输入部输出的解像度和合成方法决定部。
16．一种使多个图像信号源的图像在同一画面上混合显示的图像显示处理系统，其特征在于：设置有接收多个图像信号源的图像的输入的图像输入部、向显示画面进行应显示的图像的输出的图像显示部和将上述图像输入部和上述图像显示部连接的传输线路；上述图像输入部具有根据通过上述传输线路从上述图像显示部接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要将上述解像度变换后的多个图像利用由上述解像度变换和合成方法控制部指定的方法合成为一副图像的合成部；上述图像显示部具有将从上述图像输入部接收的合成图像分离为原来的多个各图像的分离部、用户进行操作输入的操作输入部、使上述分离后的多个图像同时显示在上述画面上的显示控制部和利用上述输入的操作决定解像度和合成方法信息信号并向上述分离部和上述图像输入部输出的解像度和合成方法决定部。
17．按权利要求15所述的图像显示处理系统，其特征在于：上述图像显示部进而具有计算多个各图像在画面上进行虚拟三维显示所需要的参量的三维计算部和按照由三维计算部计算的参量将上述分离的多个各图像进行三维处理和显示的三维显示部，上述状态取得部从上述三维计算部取得多个各图像的显示状态。
18．按权利要求15～权利要求17的任一权项所述的图像显示处理系统，其特征在于：上述图像输入部进而具有压缩上述合成图像的压缩部，上述图像显示部进而具有将从上述图像输入部接收的压缩过的合成图像进行解压的解压部。
19．按权利要求15～权利要求18的任一权项所述的图像显示处理系统，其特征在于：上述图像输入部进而具有根据上述解像度和合成方法信息信号生成特定的格式并附加到合成后的图像信号中的标题附加部，上述图像显示部进而具有从附加到从上述图像输入部接收的合成图像信号中的标题中取出解像度和合成方法信息的标题分析部。
20．一种在使多个图像信号源的图像在同一画面上混合显示的图像显示系统中使用的可以将上述多个图像信号源连接的图像显示处理装置，其特征在于：具有根据从上述图像显示部通过传输线路接收的解像度和合成方法信息信号控制上述多个图像信号源的各图像的解像度变换和合成方法的解像度变换和合成方法控制部、根据需要将多个各图像变换为由上述解像度变换和合成方法控制部指定的解像度的解像度变换部和根据需要利用由上述解像度变换和合成方法控制部指定的方法将上述解像度变换后的多个图像合成为一副图像的合成部。
21．图像显示装置的特征在于：包括显示单元和图像配置单元，显示单元将配置了粘贴图像的单个或多个虚拟平面的虚拟三维空间相对于配置在上述虚拟三维空间内的视点进行透视变换后显示在显示画面上，图像配置单元将图像粘贴到第1虚拟平面上，配置到上述虚拟三维空间内以使该第1虚拟平面的正面对着上述视点，同时在选择了上述第1虚拟平面的一部分区域时将粘贴在上述第1虚拟平面的所选择的区域上的图像粘贴到与上述第1虚拟平面不同的第2虚拟平面上，使该第2虚拟平面在上述虚拟三维空间内是比上述第1虚拟平面更靠近上述视点的位置，在将配置了上述第1、第2虚拟平面的上述虚拟三维空间进行透视变换时，上述第2虚拟平面小于上述第1虚拟平面，并配置在上述显示画面上显示的位置，以使其正面对着上述视点。
22．图像显示装置的特征在于：包括图像配置单元、眺望视点位置计算单元和眺望显示单元，图像配置单元将图像粘贴到第1虚拟平面上，并将该第1虚拟平面配置到虚拟三维空间内，同时，在选择了上述第1虚拟平面的一部分区域时，将粘贴在上述第1虚拟平面的选择的区域上的图像粘贴到与上述第1虚拟平面不同的第2虚拟平面上，并将该第2虚拟平面在上述虚拟三维空间内配置为其正面对着基本上和上述第1虚拟平面的正面相同的方向；眺望视点位置计算单元计算在上述虚拟三维空间内可以看到上述第1和第2虚拟平面的全体的眺望视点位置；眺望显示单元将配置了多个虚拟平面的虚拟三维空间相对于配置在上述眺望视点位置的视点进行透视变换后进行显示。
23．按权利要求21所述的图像显示装置，其特征在于：上述图像配置单元对粘贴在上述第2虚拟平面上的图像进行获得透视效果的处理。
24．按权利要求21～权利要求23的任一权项所述的图像显示装置，其特征在于：粘贴在上述第1虚拟平面上的图像是包含多个频道画面图像的多频道显示图像，在上述第1虚拟平面中选择粘贴上述多个频道画面图像中的1个或多个频道画面图像的图像的区域。
25．按权利要求24所述的图像显示装置，其特征在于：具有存储在多频道显示画面上显示的多个频道的选择频度的频道选择频度存储单元和根据在多频道显示画面上显示的多个频道的选择频度决定粘贴在上述第1虚拟平面上的多频道显示画面的多个频道画面图像的配置的配置决定单元。
26．按权利要求21所述的图像显示装置，其特征在于：具有存储上述第1和第2虚拟平面在虚拟三维空间内的配置信息和粘贴在各虚拟平面上的图像在虚拟平面上的配置信息的配置信息存储单元和使用该配置信息存储单元存储的配置信息再现上述第1和第2虚拟平面在虚拟三维空间内的配置和粘贴在各虚拟平面上的图像在虚拟平面上的配置的图像配置再现单元。
27．按权利要求21所述的图像显示装置，其特征在于：具有按指定的时间间隔顺序变换区域而选择上述第1虚拟平面的一部分区域和解除选择的区域选择单元。
28．按权利要求21所述的图像显示装置，其特征在于：上述图像配置单元将上述第2虚拟平面配置到上述虚拟三维空间内的上述位置时，根据粘贴在上述第2虚拟平面上的图像在使上述第2虚拟平面进行特定的动画动作后配置到上述虚拟三维空间内的上述位置。
CNB008013624A 1999-07-08 2000-07-10 图像显示控制方法、图像显示处理系统及装置和图像显示装置 Expired - Fee Related CN1212008C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP194000/1999 1999-07-08
JP11194000A JP2001022335A (ja) 1999-07-08 1999-07-08 映像表示制御方法、映像表示処理システム、映像表示処理装置
JP34219399A JP2001160933A (ja) 1999-12-01 1999-12-01 画像表示装置
JP342193/1999 1999-12-01

Publications (2)

Publication Number Publication Date
CN1317197A true CN1317197A (zh) 2001-10-10
CN1212008C CN1212008C (zh) 2005-07-20

Family

ID=26508234

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB008013624A Expired - Fee Related CN1212008C (zh) 1999-07-08 2000-07-10 图像显示控制方法、图像显示处理系统及装置和图像显示装置

Country Status (2)

Country Link
CN (1) CN1212008C (zh)
WO (1) WO2001005144A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100466720C (zh) * 2005-01-17 2009-03-04 株式会社东芝 视频合成设备及视频合成方法
CN1685711B (zh) * 2002-09-26 2010-06-16 皇家飞利浦电子股份有限公司 用于接收数字信息信号的装置
CN102414640A (zh) * 2009-04-28 2012-04-11 索尼公司 信息处理装置、信息处理方法和程序
CN102498714A (zh) * 2009-07-06 2012-06-13 夏普株式会社 Av装置
CN102547465A (zh) * 2010-12-13 2012-07-04 汤姆森特许公司 呈现方法、输入输出设备、以及服务设备
CN103226452A (zh) * 2013-02-28 2013-07-31 天脉聚源(北京)传媒科技有限公司 一种多媒体文件的展示方法及装置
CN104219515A (zh) * 2010-02-26 2014-12-17 日立民用电子株式会社 图像处理装置
US11446113B2 (en) 2018-09-11 2022-09-20 Sony Corporation Surgery support system, display control device, and display control method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101968955B (zh) * 2009-07-28 2012-08-22 慧帝科技(深圳)有限公司 图像处理系统及其图像处理方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06105226A (ja) * 1992-09-17 1994-04-15 Nec Corp 画像合成装置
JP3298029B2 (ja) * 1993-03-16 2002-07-02 株式会社日立製作所 映像表示制御方法、映像表示処理システム
JP3484531B2 (ja) * 1997-04-16 2004-01-06 オムロン株式会社 画像出力制御装置、監視用システム、画像出力制御方法および記憶媒体
JP3775455B2 (ja) * 1997-12-12 2006-05-17 富士ゼロックス株式会社 会議端末装置および会議関連情報の送信方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1685711B (zh) * 2002-09-26 2010-06-16 皇家飞利浦电子股份有限公司 用于接收数字信息信号的装置
CN100466720C (zh) * 2005-01-17 2009-03-04 株式会社东芝 视频合成设备及视频合成方法
CN102414640A (zh) * 2009-04-28 2012-04-11 索尼公司 信息处理装置、信息处理方法和程序
CN102414640B (zh) * 2009-04-28 2016-01-20 索尼公司 信息处理装置、信息处理方法和程序
CN102498714A (zh) * 2009-07-06 2012-06-13 夏普株式会社 Av装置
CN102498714B (zh) * 2009-07-06 2015-06-24 夏普株式会社 Av装置
CN104219515A (zh) * 2010-02-26 2014-12-17 日立民用电子株式会社 图像处理装置
CN104219515B (zh) * 2010-02-26 2017-04-12 日立麦克赛尔株式会社 图像处理装置
CN102547465A (zh) * 2010-12-13 2012-07-04 汤姆森特许公司 呈现方法、输入输出设备、以及服务设备
CN103226452A (zh) * 2013-02-28 2013-07-31 天脉聚源(北京)传媒科技有限公司 一种多媒体文件的展示方法及装置
CN103226452B (zh) * 2013-02-28 2016-03-30 天脉聚源(北京)传媒科技有限公司 一种多媒体文件的展示方法及装置
US11446113B2 (en) 2018-09-11 2022-09-20 Sony Corporation Surgery support system, display control device, and display control method

Also Published As

Publication number Publication date
WO2001005144A1 (fr) 2001-01-18
CN1212008C (zh) 2005-07-20

Similar Documents

Publication Publication Date Title
CN1220350C (zh) 广播接收装置以及数据广播方法
CN1206848C (zh) 数字广播信号接收机
CN1190073C (zh) Epg信息显示方法、装置、记录器和/或再现器
CN1150752C (zh) 用于改变节目导引格式的系统和方法
CN1183778C (zh) 图象解码装置及记录媒体
CN1682539A (zh) 用于适配2d和3d立体视频信号的装置和方法
CN1812298A (zh) 用于自动传送内容的系统
CN1701601A (zh) Osd合成图像译码装置和译码方法以及程序和记录媒体
CN1747536A (zh) 图像处理装置及方法
CN1922879A (zh) 显示处理装置
CN101047777A (zh) 视频和音频处理系统、视频处理装置、音频处理装置、输出装置以及控制该系统的方法
CN1758755A (zh) 收发机系统、发送机和接收机以及信息处理方法
CN101043596A (zh) 电视接收机、图像处理装置以及高画质图像显示系统
CN1212008C (zh) 图像显示控制方法、图像显示处理系统及装置和图像显示装置
CN1933604A (zh) 图像声音输出系统、装置、声音处理程序和记录介质
CN1620121A (zh) 显示装置、双向通信系统和显示信息使用方法
CN101079989A (zh) 视频处理装置，及添加时间代码和准备编辑列表的方法
KR20090054828A (ko) Ｆｒｃ된 비디오에 ｇｕｉ를 부가하는 비디오 기기 및 그의ｇｕｉ 제공방법
CN1756321A (zh) 图像显示设备
CN1825928A (zh) 信息处理设备和在其中使用的可拆卸基底
CN1461151A (zh) 色彩重现方法和系统及使用它的视频显示方法和设备
CN1160947C (zh) 视频显示器
CN1756322A (zh) 图像显示设备
KR20160084655A (ko) 영상표시장치
CN1173563C (zh) 图像处理装置和图像处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20050720