CN104956681A - 手持显示器缩放特征 - Google Patents

手持显示器缩放特征 Download PDF

Info

Publication number
CN104956681A
CN104956681A CN201280076965.8A CN201280076965A CN104956681A CN 104956681 A CN104956681 A CN 104956681A CN 201280076965 A CN201280076965 A CN 201280076965A CN 104956681 A CN104956681 A CN 104956681A
Authority
CN
China
Prior art keywords
view data
frame
display
image
control appliance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280076965.8A
Other languages
English (en)
Inventor
罗纳德·道格拉斯·约翰逊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN104956681A publication Critical patent/CN104956681A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4092—Image resolution transcoding, e.g. client/server architecture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H04N21/42209—Display device provided on the remote control for displaying non-command information, e.g. electronic program guide [EPG], e-mail, messages or a second television channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards

Abstract

使用控制设备(116)来选择第一显示器(114d)上的一部分(350)，控制设备具有第二显示器(116d)，第一显示器(114d)逐帧显示根据包括至少一个帧的第一图像数据生成的图像；确定第一图像数据中的帧中与第一显示器(114d)上的所选部分(350)相对应的第一部分；根据第一图像数据生成与第一图像数据中的帧中的第一部分相对应的第二图像数据；以及向控制设备(116)提供第二图像数据，以在第二显示器(114d)上作为第二图像(350′)显示，同时维持第一显示器(114d)上显示的图像完整无缺。所生成的第二图像数据可以是由扩大因子扩大的与第一图像数据中的帧中的第一部分相对应的第一图像数据。

Description

手持显示器缩放特征
技术领域
本发明大体上涉及数字图像显示方法和视频接收机(108)。
背景技术
当查看在显示设备(例如电视机)的屏幕上显示的静止图像或运动图像时，用户可能希望对屏幕的所选择部分进行放大。缩放特征在数字视频碟(DVD)播放器上很常见。在典型的实现中，DVD缩放特征通过显示屏幕的一部分的扩大版本来对该部分进行放大。该特征允许放大所选择的内容，但以移除或遮蔽已被显示的其他内容作为代价。类似地，各种众所周知的计算机操作系统具有缩放或放大镜特征，但同样从视图中移除了屏幕内容的某些其他部分。
发明内容
公开了示例性方法和装置，其限定：使用控制设备来选择第一显示器上的一部分，控制设备具有第二显示器，第一显示器逐帧显示根据包括至少一个帧的第一图像数据生成的图像；确定第一图像数据中的帧中与第一显示器上的所选部分相对应的第一部分；根据第一图像数据生成与第一图像数据中的帧中的第一部分相对应的第二图像数据；以及向控制设备提供第二图像数据，以在第二显示器上作为第二图像显示。
在一个实施例中，选择第一显示器上的一部分包括：从控制设备的相机接收第三图像数据，第三图像数据表示在第一显示器上显示的图像的一部分，以及确定第一图像数据中的帧中的第一部分包括：在第一图像数据中搜索与第三图像数据相对应的部分。
在另一实施例中，选择第一显示器上的一部分包括：从控制设备的相机接收第三图像数据，第三图像数据的第一部分表示第一显示器的图像，根据第三图像数据的第一部分在所述第三图像数据中的相对位置以及第三图像数据的第一部分在所述第三图像数据中的大小，确定第一图像数据中的帧中的第一部分。在另一实施例中，如果第一图像数据的分辨率是AXB个单位且第三图像数据的分辨率是WXH个单位，则确定第一图像数据中的帧中的第一部分包括：在第三图像数据中定位第三图像数据的第一部分，并确定第三图像数据中对在所述第三图像数据中的第三图像数据的第一部分的点(例如，中心或者一个角)进行表示的位置(p，q)；以及将第一图像数据中的帧中的第一部分中的对应点确定为(a，b)，其中a＝(A/W)*p且b＝(B/H)*q。如果第三图像数据的第一部分的大小包括w个单位的宽度和h个单位的深度，可以将第一图像数据中的帧中的第一部分的宽度和深度分别确定为d个单位和e个单位，其中，d＝(A/W)*w且e＝(B/H)*h。
在一个示例性实施例中，所生成的第二图像数据可以是由扩大因子扩大的与第一图像数据中的帧中的第一部分相对应的第一图像数据。可以根据w或h来确定扩大因子。例如，扩大因子可以是W/w或H/h。还可以从用户设立的设置数据库中取得扩大因子。
第一图像数据可以表示静止图像或视频帧。
由此，本发明的示例性实施例允许第二显示器在不丢失分辨率的情况下示出所选部分的扩大版本，同时维持第一显示器上显示的图像完整无缺。
考虑到以上所述，根据详细描述将变得显而易见的是：其他实施例和特征也是可能的，并落在本发明的原理之内。
附图说明
现在仅通过示例的方式并参考附图来描述根据本发明的实施例的装置和/或方法的一些实施例，在附图中：
图1是可在其中使用本发明的一个或多个实施例的示意性环境的框图。
图2是根据本发明的视听内容传送设备的示例性实施例的框图。
图3A是根据本发明的原理的视听内容传送设备、显示设备和控制设备之间的交互的示意性表示；图3B是控制设备的相机所捕捉到的图像的示意性表示，在该图中示出了显示设备；以及图3C是显示设备所显示的图像的示意性表示。
图4是根据本发明的原理的示例性方法的流程图。
图5是根据本发明的原理的控制设备所执行的示例性方法的流程图。
图6是根据本发明的原理的视频接收机所执行的示例性方法的流程图。
具体实施方式
图1是可在其中使用本发明的一个或多个实施例的示意性环境100的框图。在环境100中，经由传送网络106向视频接收机传送源自于内容源102(例如，服务器、头端等)的视听内容，该视频接收机被示出为耦合到显示设备114的AV传送设备(AVDD)108。AV传送设备108处理该内容(在下面进行更详细的描述)，并向显示设备114提供已处理内容。显示设备114可包括例如一个或多个2D或3D标清(SD)或高清(HD)显示器、监视器或电视接收机。
传送网络106可包括有线和无线要素，并且可包括例如从国家中心至一个或多个地区或地方中心的卫星链路传输。传送网络106还可以包括使用本地传送系统(例如，空中、卫星或线缆广播)的本地内容传送。传送网络106可包括光纤、以太网、电话线网络、以及高速宽带互联网类型的通信系统。
可通过各种方式实现AV传送设备108，且AV传送设备108可包括网络连接的实施例(例如具有或不具有数字视频录制器(DVR)、网关、调制解调器等的机顶盒(STB))、孤立实施例(例如DVD播放器、视频服务器等)、或其任意组合。可选地，AV传送设备108可担当家庭网络系统的入口点或网关，家庭网络系统包括被配置为家庭网络中的客户端或对等设备的附加设备。还可以将设备108并入到包括视听设备(例如，显示设备114)的其他系统或设备中。
还将AV传送设备108接口连接(优选地，无线连接)到控制设备116，控制设备116优选是手持的或便携的。控制设备116可适于为AV传送设备108和/或显示设备114提供用户界面。控制设备116包括能够显示图形和图像、并优选地还能显示运动图像或视频的显示器。控制设备116包括相机(未示出)、按键以及用于接收用户输入、控制相机和接收从相机捕捉到的图像的控制器(未示出)，控制器可以是微处理器、处理器、微控制器。所显示的视频可包括向显示设备114传送的视频内容的全部或一部分，以及图形可包括图标、用户界面窗口配件等。在示例性实施例中，控制设备116包括允许用户输入且显示图像和图形的触摸屏。当然，还可以经由专用按钮提供用户输入，屏幕仅执行显示功能，或其任意组合。
控制设备116可以使用任何周知的信号传输系统(例如红外(IR)或射频(RF)通信)接口连接到AV传送设备108，并且可以遵守任何适合的所有权协议或标准协议，例如，红外数据协会(IRDA)标准、Wi-Fi、蓝牙等。可例如使用在市场上可购买到的设备(例如配备有适当软件的平板计算机或智能电话)来实现控制设备116，或在其他可能性中，使用专用于控制设备108和/或114的定制设备来实现控制设备116。如上所述，控制设备116包括用于对控制设备116的操作进行控制的控制器(未示出)。下面将更详细地描述控制设备116的操作。
现在转向图2，示出了AV传送设备108的实施例的框图。为了简洁，并未示出对于设备的完整操作可能必需的所有组件，因为这些组件可能是众所周知的。AV传送设备108是基于处理器的系统，并包括由控制器210和存储器215表示的一个或多个处理器和相关联的存储器。控制器210是一个或多个存储程序的控制处理器的代表，其可以专用于或可以不专用于本文中描述的功能，即控制器210也可以控制AV传送设备108的其他功能。此外，如果设备108是较大设备或系统的一部分，控制器210也可以控制该设备或系统的其他功能。
控制器210管理将输入流信号变换为用于存储或用于显示的信号的过程。控制器210还管理所存储内容的获取和回放。此外，控制器210执行内容搜索以及对该内容进行表示的栅格显示的创建和调整。可利用微处理器等来实现控制器210。
控制器210与存储器215互连，存储器215为控制器210存储信息和指令代码。可例如使用易失性或非易失性存储器来实现存储器215，包括RAM、SRAM、DRAM、ROM、可编程ROM(PROM)、闪存、电子可编程ROM(EPROM)、电子可擦除可编程ROM(EEPROM)等。此外，存储器215的实现可以包括若干可能的实施例，例如单存储设备，或备选地，通信连接或耦合在一起形成共享或公共存储器的一个以上的存储电路。此外，在其他可能性中，可以将存储器215与其他电路(例如，控制器210和/或总线通信电路的一部分)进行集成。
存储器215还可以存储要素(例如包含内容的图形要素)数据库。可将数据库存储为图形要素的图样。备选地，存储器215可以在所标识或分组的存储器位置存储图形要素，并使用访问表或位置表来标识与图形要素有关的信息的各个部分的存储器位置。
除了存储器215之外，控制器210(例如经由总线或其他适合的布置)与AV传送设备108的其他组件互连，该其他组件包括输入信号接收机202、输入流处理器204、音频/视频处理器206、存储器212、无线接口216和用户接口222。
在操作中，输入信号接收机202接收传递视听内容的信号。输入信号接收机202可包括被用于对从若干可能的网络(106)中的一个或多个网络接收到的信号进行接收、调谐、下变换、选择、解调和/或解码的若干已知接收机电路中的任何一个或多个电路，如上所述，可通过网络(106)分发内容。例如，可在控制器210的控制之下(例如根据用户输入或编程指令)由输入信号接收机202选择和捕捉想要的输入信号。
输入信号接收机202向输入流处理器204提供已解码的输入信号。输入流处理器204执行信号处理，并向音频/视频处理器206提供已处理的接收信号，以从接收格式(例如，压缩数字信号)变换到可向显示设备(114)提供从而向用户呈现的格式。音频/视频处理器206还执行对于在存储器212中存储和取回视听内容而言所必需的任何处理。
向接口208提供来自音频/视频处理器206的已变换信号(由输入信号接收机202接收到或从存储器212取回)，以提供给上述类型的显示设备(14)。接口208可以包括模拟信号接口(例如，红-绿-蓝(RGB)接口)和/或数字接口(如高清多媒体接口(HDMI))。数字内容包括至少一个帧，且规定了分辨率。
存储器212存储设备108接收到的视听内容，以供之后基于经由无线接口216从控制设备(116)或从用户接口222接收到的命令(例如导航指令，如快进或倒带)在控制器210的控制下取回和回放该内容。存储器212可以包括硬盘驱动器、一个或多个大容量集成电子存储器(例如，静态RAM(SRAM)或动态RAM(DRAM))和/或可互换的光碟存储系统(例如，光盘(CD)驱动器或DVD驱动器)。
用户接口222可包括各种用户输入和输出设备(例如，按键、按钮、显示器、指示器)，用户可通过这些用户输入和输出设备与AV传送设备108交互。在示例性实施例中，在通过经由无线接口216与AV传送设备108接口连接的控制设备(116)来发生全部用户交互的情况下，可消除用户接口222。
可以使用控制设备116来表达各种功能，例如放大、缩小、播放、停止、快进、倒带、节目选择等。在利用触摸板来实现时，控制设备116允许AV传送设备108的操作基于手移动(或手势)和通过触摸板转换为命令的动作。取决于控制设备116的实现，例如也可以使用其他技术(例如语音识别)来输入命令。
在示例性实施例中，控制设备116还包括至少一个相机单元。相机单元优选安装在设备的与用户输入控制和显示(例如，触摸屏)相反的一侧上，并可被如下所述地使用。
参考图3A，现在将描述AV传送设备108、显示设备114和控制设备116之间的交互。在操作中，希望对在显示设备114上显示的图像310的区域350进行放大的用户将把控制设备116的相机116c指向该区域，并在控制设备116的显示器116d上查看区域350。优选地，随着图像310变化和/或随着用户移动控制设备并使相机116c改变方向，实时地或接近实时地更新控制设备116上显示的放大图像。还优选地，例如通过按压控制设备116上的按键，向用户提供用于查看和/或捕捉区域350的静止图像的选项。由第三图像数据表示所捕捉的图像，第三图像数据优选地具有控制设备116的显示器(第二显示器)的分辨率。此外，区域350的纵横比和/或定向优选地与显示器116d的纵横比和/或定向一致。
如下面更详细地描述的，AV传送设备108使用由第三图像数据表示的、由控制设备116的相机116c捕捉到的图像来定位源内容(包括至少一帧的第一图像数据)中的帧中与图像310中的区域350相对应的第一部分，图像310是根据第一图像数据中的帧来生成的。然后，根据第一图像数据中的帧中的第一部分来生成第二图像数据(优选地，以其自身的分辨率)，对其进行处理并向控制设备116发送，以在显示器116d(第二显示器)上作为第二图像显示。在操作中，对于用户而言，看起来将会是控制设备116的相机116c仿佛正在放大感兴趣的区域350，而没有在对相机实际捕捉到的图像进行数字放大时将会发生的不精确和分辨率丢失。例如在源素材是高清摄影图像时，这种分辨率丢失将会特别引人注目。例如，考虑将在典型的720p电视监视器上以仅1百万像素的分辨率显示2千万像素的图像，从而丢失了大量的细节。
上述实施例适于表示静止图像的图像源(第一图像数据)。可以从用户设立的用户设置数据库找到用于缩放的扩大因子。在实施例中，如果捕捉到的第三图像数据的分辨率是WXH个像素且第一图像数据中的帧中的第一部分的大小是aXb个像素，则扩大因子被自动生成为W/a以填满第二显示器116d的宽度或自动生成为H/b以填满第二显示器116d的深度。虽然使用“像素”作为单位，也可以其他单位，例如“块”，例如“宏块”。
在示例性实施例中，控制设备116向AV传送设备108发送由相机116c捕捉的所捕捉到的第三图像数据，AV传送设备108通过以下方式使用第三图像数据来定位第一图像数据的与区域350相对应的第一部分：在第三图像数据中搜索显示设备114的显示器114d的全部或一部分，以及使用显示器114d在第三图像数据中的相对位置来导出第一图像数据中的帧中的第一部分的位置。优选地，相机116c捕捉到的第三图像数据包括占据第三图像数据的第一部分的整个显示器114d。感兴趣的区域350可具有预定大小或可变大小。可以由显示设备114的显示器114d的图像中占据第三图像数据的第一部分的对应点的位置来决定第一图像数据中的帧中与区域350相对应的第一部分的位置(可以由第一图像数据中的帧中的第一部分的点的位置来表示)。该两个对应点可以分别是第三图像数据的第一部分以及第一图像数据中的帧中的第一部分的中心或角落之一。图像310是根据第一图像数据中的帧生成的。由于图像310中的位置在第一图像数据中的对应帧中具有对应位置，感兴趣区域(AOI)350决定第一图像数据中的帧中的第一部分。当在第三图像数据内搜索显示器114d时，AV传送设备108例如可以搜索显示设备114的框114f，框114f围绕并勾画出显示器114d。可以将用于执行图像搜索的各种周知的技术中的任何技术用于该目的。如果在图像内没有捕捉到整个显示器114d，可以禁用放大功能，直到用户改变相机116c的位置使得满足这些条件。
基于显示器114d在相机116c捕捉到的第三图像数据中的相对位置，AV传送设备108可以确定第一图像数据中的帧中的第一部分对应于第一显示器114d中的图像310中的区域350。给定显示器114d在第三图像数据350中的大小，可以容易地确定并存取第一图像数据(例如MPEG宏块)中的帧中与区域350相关联的第一部分的大小。使用第一图像数据的与区域350相对应的第一部分，AV传送设备108可以将第一图像数据中的帧中的第一部分重新生成为第二图像数据，并向控制设备116提供第二图像数据以由显示器116d显示为第二图像，该第二图像在显示器116d上示出为区域350′。可以响应用户命令来扩大区域350′。当改变区域350′时，控制设备可以手动地或自动地调整根据接收到的第二图像数据生成的图像的大小。如果以固定大小(例如，占据显示器116d的整个屏幕)在显示器116d上显示区域350′，扩大率可根据显示器114d在第三图像数据中的大小而变化。例如，如果区域350′的大小具有RXS个像素的大小且显示器116d在第三图像数据中的大小是wXh个像素，则AV传送头可使用因子R/w来自动扩大第一图像数据中的帧中的第一部分，以适合区域350′的宽度，或使用因子S/h来自动扩大第一图像数据中的帧中的第一部分，以适合区域350′的深度。本实施例在第一图像数据的分辨率与第二显示器116d的分辨率相同时工作良好。
在备选中，如果第一图像数据中的帧中的第一部分具有aXb个像素的大小，AV传送设备108可以使用因子R/a来扩大第一图像数据中的帧中的第一部分，以填满区域350′的宽度，或使用因子S/b来扩大第一图像数据中的帧中的第一部分，以填满区域350′的深度。本实施例在第一图像数据的分辨率与第二显示器116d的分辨率不同时工作良好。
使用控制设备116的用户可以指示AV传送设备108自动地或使用指定的扩大因子来扩大第一图像数据中的帧中与AOI 350相对应的第一部分。当用户改变区域350′的大小时，用户可以配置控制设备116，以改变控制设备116处的扩大因子，而不改变AV传送设备108处的扩大因子。在一个实施例中，用户还可以将控制设备116配置为向AV传送设备108发送区域350′的已更新大小，使得AV传送设备108可以根据该已更新大小自动改变扩大率。
现在将参考图3B和3C描述对第一图像数据中的帧中与感兴趣区域350相对应的第一部分的确定。图3B提供了根据相机116c捕捉到的第三图像数据生成的图像316的示意性表示，在图中示出了显示设备114。将图像316的对显示设备114的显示器114d进行表示的部分指派为114d’。如图所示，图像316和图像部分114d′是矩形，在第三图像数据中宽度分别是W和w个像素，以及在第三图像数据中高度分别是H和h个像素。如之前指出的，虽然使用“像素”作为单位，也可以使用其他单位，例如“块”，如“宏块”。可以将图像316认为是第三图像数据中点或像素的栅格(x，y)，为了示出的简单，其原点在左下角。也可以选择其他位置作为原点，例如，可以使用其他三个角落中的任何一个以及第三图像数据的中心作为原点。图像部分114d′可被认为是顶点在点(x0，y0)、(x0+w，y0)、(x0+w，y0+h)和(x0，y0+h)处的矩形，其中心在第三图像数据中的(xc，yc)处，其中xc＝x0+w/2且yc＝y0+h/2。可通过适合的图像搜索技术(例如上述技术)来确定这些点。
如上所述，可基于图像部分114d′在第三图像数据316中的相对位置来确定第一图像数据中的帧中与图像310中的AOI 350相对应的第一部分，图像310是根据第一图像数据中的帧生成的。更具体地，可以将图像部分114d′的中心在第三图像数据316中的位置映射到图像单元(例如块，如MPEG宏块)的栅格中，图像单元共同形成第一图像数据。在图3C中示意性地描绘了这种栅格，该栅格从第一图像数据中的左下角中的块(1，1)开始，在第一图像数据中具有M个块的宽度和N个块的高度，每个块表示为(m，n)。
可意识到的是，可根据以下表达式来确定第一图像数据中的帧中的第一部分的中心块所对应的块(mc，nc)，该第一部分与AOC 350相对应：
mC＝ceil[(M/W)*(W-xC)]  (1a)
nC＝ceil[(N/H)*(H-yC)]   (1b)
随着块(mc，nc)被这样确定，可以将第一图像数据中的帧中的第一部分选择为块(mc，nc)，或选择为包括块(mc，nc)以及围绕块(mc，nc)的附加块在内的块集合。例如，如图3C中示意性地描绘的，第一图像数据中的帧中与AOI 350相对应的第一部分由块(mc，nc)以及直接围绕块(mc，nc)的8个块组成。对第一图像数据中的帧中的第一部分进行表示的块的数目可以是预定的，或可根据图像部分114d′的大小来确定。例如，第一图像数据中的帧中的第一部分的宽度是ceil[M*w/W]个宏块，以及AOI 350的深度是ceil[N*h/H]。随着第一图像数据中的帧中的第一部分的大小和位置被这样确定，AV传送设备108可以生成对应的第二图像数据，以用于在区域350′上作为显示器116d上的第二图像来显示。
如上所述，用户可以使用例如控制设备116向AV传送设备108通知控制设备116的显示器116d中的区域350’的分辨率(大小)，和/或控制设备116可以在区域350’的大小已发生改变时向AV传送设备108自动发送已更新大小。通过这种方式，如果扩大因子在AV传送设备108处不可用，或者AV传送设备108被指示自动缩放第一图像中的帧中的第一部分，则AV传送设备108可以自动缩放AOI 350以适合区域350′的宽度或区域350′的深度。在本文中使用的显示器的宽度比显示器的深度长，虽然显示器可被纵向或横向地安置。MXN个单元的大小或分辨率指的是宽度为M个单位且深度为N个单位。
在本实施例中，相对于被显示为图像316的第三图像数据中图像部分114d′的位置，第三图像数据中与图像316中的AOI 350相对应的部分的位置位于对称反向的象限中。例如，当相机116c向右移动时，第一图像数据中的帧中与AOI 350相对应的第一部分也向右移动，但第三图像数据中图像部分114d′向左移动。
在另一实施例中，图像中与图像316中的AOI 350相对应的部分的位置与被显示为图像316的第三图像数据中图像部分114d′的位置一致，且用户根据被显示为图像316的第三图像数据中图像部分114d′的位置来确定AOI 350的位置。在本实施例中，可根据以下表达式来确定第一图像数据中的帧中的第一部分的中心块：
mC＝ceil[(M/W)*xC]  (2a)
nC＝ceil[(N/H)*yC]  (2b)
应该注意到，虽然等式(1a)、(1b)、(2a)和(2b)使用“块”为单位，如果使用“像素”为单位，也同等可应用本发明的原理。在该情况下，(mc，nc)指示第一图像数据中的帧中的第一部分中的中心像素的位置。
在示例性实施例中，一旦AV传送设备108已定位第一图像数据中的帧中的第一部分，其可以使显示设备114显示用于指示对应区域350的图形(例如，矩形、十字丝或其他适合的形状)，由此向用户提供控制设备116的相机116c指向图像310中的何处的视觉反馈。此外，当在显示器116d上以固定大小(例如，全屏)显示区域350时，图形的大小(例如，矩形描述的区域350)可随着扩大率改变而改变。
在其他示例性实施例中，控制设备116不需要使相机单元或使用相机单元来选择用户希望对其进行放大的感兴趣区域350。通过在显示设备114的屏幕上和/或在控制设备自身的屏幕上显示图形(例如，矩形、十字丝或其他适合的形状)并允许用户移动该图形来选择感兴趣区域350，可以提供这种指示。可例如通过手势、按压软按键或实际按键、语音命令或其他周知的用户接口技术(可能使用控制设备116)来进行图形的移动和/或对感兴趣区域350的选择。
在示例性实施例中，相机116c捕捉到的第三图像数据是640x480像素。在典型使用中，其表示显示器114d的部分可例如是200x120像素，或所捕捉到的图像区域的大约8％。在示意性的操作场景中，用户将相机116c指向显示设备114，并看到在显示器116d上(优选地，实况)显示由此捕捉到的第三图像数据，显示器114d通常出现在控制设备116的显示器116d的中心处或接近该中心处。例如，参考图3B，(x0，y0)＝(220，180)，W＝640，H＝480，w＝200以及h＝120。然后，例如通过输入命令，用户指示控制设备116进行放大。然后，控制设备116向AV传送设备108发送相机116c捕捉到的第三图像数据，AV传送设备108在第三图像数据中搜索对占据了第三图像数据中的第一部分的显示器114d进行描绘的部分，根据第三图像数据中第一部分的大小和位置来确定第一图像数据中的帧中的第一部分，并在然后向控制设备116发回根据第一图像数据中的帧中的第一部分生成的第二图像数据，以在显示器116d上作为第二图像显示，第一图像数据中的帧中的第一部分表示显示器114d上显示的图像的区域350的放大图像。参考图3C，例如假设M＝64且N＝48，并根据等式(1a)和(1b)，mc＝32且nc＝24。
当在显示器114d上显示视频时，AV传送设备108持续向控制设备116发送已更新的第二图像数据，该已更新的第二图像数据可以是第一图像数据中的不同帧中与显示器114d上显示的视频中的区域350相对应的第一部分的放大版本。由此，显示设备116d显示在显示器114d上显示的视频的被选择来扩大的区域350的放大视频。如果用户想要靠近观看显示器114d的左侧处新的感兴趣区域，他们会将相机116c指向左，使得可指向该新的感兴趣区域。在相机116c在该位置捕捉到的新图像中，如果等式(1a)和(1b)被用于定位第一图像数据中的帧中的第一部分，显示器114d将会向右偏移其原始宽度(例如，200像素)的某个比例(例如，25％)。AV传送设备108处理新图像，并确定显示器114d已经例如向右移动了50像素。假设已经确定显示器114d占据图像中200x120像素的区域，如果等式(1a)和(1b)被用于定位第一图像数据中的帧中的第一部分，AV传送设备108现在将放大的流视频向左偏移显示大小的25％。在相同的场景中，如果使用等式(2a)和(2b)来定位第一图像数据中的帧中的第一部分，AV传送设备108现在将放大的流视频向右偏移显示大小的25％。
图4示出了对本发明的示例性实施例的操作进行示出的流程图。在本示例中，为了简化，假设区域350′是第二显示器116d的全屏。
如图4中所示，操作开始于410，在410处，控制设备116选择第一显示器114d上由用户选择的部分。第一(主)显示器114d可以逐帧显示根据包括至少一个帧的第一图像数据(源内容)生成的图像。在选择第一显示器114d上的部分时，用户可以激活放大功能(例如，如通过启动控制设备116上相关联的应用，做出触摸屏手势和/或按压软按键或实际按键)，并将控制设备116的相机116c指向第一显示器上的感兴趣区域(AOI)350。可交换激活放大功能和将相机指向显示器114d的顺序。第三图像数据由相机116c捕捉到，并指示第一显示器114d上的所选部分。
在步骤420处，确定第一图像数据中的帧中与第一显示器114d上的所选部分相对应的第一部分。可由AV传送设备108来执行该确定步骤。如上所述，AV传送设备108可根据指示第一显示器114d上的所选部分的第三图像数据来确定第一图像数据中的帧中的第一部分。在更适合于第一图像数据表示静止图像的情况的一个实施例中，第三图像数据表示第一显示器114d上的图像310的一部分350，以及AV传送设备108搜索第一图像数据以找到第一图像数据中的帧中与第三图像数据所表示的图像相对应的第一部分。在适合于第一图像数据表示静止图像或运动图像的情况的另一实施例中，第三图像数据包括表示第一显示器114d的图像的第一部分，以及AV传送设备108根据该第三图像数据的第一部分在第三图像数据中的相对位置以及该第三图像数据的第一部分的大小来确定第一图像数据中的帧中的第一部分。例如，假设第一图像数据的分辨率是AXB个单位以及第三图像数据的分辨率是WXH个单位，AV传送设备108可以定位第三图像数据的第一部分，并确定第三图像数据中对在第三图像数据中的第三图像数据的第一部分的中心进行表示的位置(p，q)；以及将第一图像数据中的帧中的第一部分的中心确定为(a，b)，其中，a＝(A/W)*p且b＝(B/H)*q。在该示意中，中心的位置指示第一图像数据中的帧中的第一部分的位置。还假设第三图像数据的第一部分的大小包括w个单位的宽度和h个单位的深度，AV传送设备108可以将第一图像数据中的帧中的第一部分的宽度和深度分别确定为d个单位和e个单位，其中，d＝(A/W)*w且e＝(B/H)*h。
一旦已经确定第一图像数据中的帧中的第一部分，在步骤430处，AV传送设备108可以对应于第一图像数据中的帧中的第一部分，根据第一图像数据生成第二图像数据。AV传送设备108可以通过对应于第一图像数据中的帧中的第一部分，根据扩大因子扩大第一图像数据，来生成第二图像数据。AV传送设备108可使用第三图像数据的第一部分的大小的宽度w和高度h来自动导出扩大因子。例如，扩大因子是W/w，以填充第二显示器116d的宽度，或是H/h，以填充第二显示器116d的深度。假设第一图像数据中的帧中的第一部分的大小是aXb个单位，如前所述，可以将扩大因子自动确定为W/a以填充第二显示器116d的宽度，或自动确定为H/b以填充第二显示器116d的深度。第二显示设备116d上的显示不影响第一显示设备114d上的显示。例如，第二显示设备116d可能正在显示第一帧的一部分(其可能被缩放了)，然而第二显示设备继续显示第一帧的整个帧。因此，用户可以在第一显示设备114d上查看第一帧的整个帧，且还在第二显示设备116d上看到相同帧的放大部分。
然后，只要放大功能是激活的，操作循环回到步骤410。优选地，以足够的频率来重复包括步骤410-440的循环，使得可在用户移动相机时实时或接近实时地更新控制设备116上放大图像的显示。优选地，AV传送设备108向控制设备116实况发送表示放大视频的第二图像数据。然而可以通过可能滞后的某个其他速率来更新感兴趣区域350的位置。因此，例如可以以30-60fps在控制设备116上显示放大视频，而控制设备116捕捉并向AV传送设备108发送第三图像数据的速率可以是5fps或更高。
图5示出了控制设备116可执行的操作。在步骤510处，控制设备116接收控制设备116的相机捕捉到的第三图像数据，第三图像包括对根据包括至少一个帧的第一图像数据(源内容)生成的图像进行逐帧显示的第一显示器114d的至少一部分，其中，第三图像被用于导出第一图像数据中的帧中与用户选择的区域350相对应的第一部分的信息。
在步骤520处，控制设备向AV传送设备108发送用于定位第一图像中的帧中的第一部分的信息。用于定位第一图像中的帧中的第一部分的信息可以是第三图像数据自身，或者如果第三图像数据在其第一部分中包括整个显示器114d，则该信息可以包括第三图像数据的第一部分的大小以及该第三图像数据的第一部分在第三图像数据中的位置。不发送第三图像数据自身的好处在于节省传输带宽。在该两个实施例中，该信息还可以包括第二显示器116d的分辨率。当在第二显示器116d中未使用全屏的情况下，还应发送区域350′的大小。
在步骤530处，控制设备116接收根据第一图像数据生成的与第一图像数据中的帧中的第一部分相对应的第二图像数据。第二图像数据可以是第一图像数据的与第一图像数据中的帧中的第一部分相对应的放大版本。在步骤540处，控制设备116在第二显示器(116d)上显示根据第二图像数据生成的第二图像，其中，第一显示器继续逐帧显示根据第一图像数据生成的图像。
图6示出了可在AV传送设备108处执行的示例性操作。在步骤610处，AV传送设备108在第一显示设备114d上逐帧显示根据第一图像数据生成的第一图像。
在步骤620处，AV传送设备108从控制设备116接收用于定位第一图像数据中的帧中的第一部分的信息。如上关于图5讨论的，控制设备可以捕捉到至少包括第一显示器的一部分的第三图像数据。第三图像数据可以包括在第一显示设备114d上显示的图像310的一部分或包括整个显示器114d。用于定位第一图像数据中的帧中的第一部分的信息可以是第三图像数据自身，或者是第一设备114d在第三图像数据中的大小和相对位置。
在步骤630处，AV传送设备108定位第一图像数据中的帧中的第一部分。在定位信息是第三图像数据自身且第三图像数据包括在第一显示设备114上显示的图像316的一部分350的场景中，AV传送设备108在第一图像数据中搜索与第三图像数据相对应的第一部分。
如果第三图像数据包括对第一显示器116d的图像进行表示的第一部分，AV传送设备108确定第三图像数据的分辨率WXH、第三图像数据的第一部分的大小wXh、以及该第一部分在第三图像数据中的位置。该位置可以是任何预定位置，例如，中心位置(p，q)。假设第一图像数据的分辨率是AXB，AV传送设备108例如使用等式(1a)、(1b)、(2a)和(2b)将第一图像数据中的帧中的第一部分的对应位置确定为(a，b)。例如，如果应用(2a)和(2b)，则a＝(A/W)*p且b＝(B/H)*q，以及如果应用(1a)和(1b)，则a＝(A/W)*(W-p)且b＝(B/H)*(H-q)。第一图像数据中的帧中的第一部分的宽度d和深度e可被确定为d＝(A/W)*w和e＝(B/H)*h。
在第三图像数据包括对整个第一显示器114d的图像进行表示的第一部分的实施例中，用于定位第一图像数据中的帧中的第一部分的信息可以不是第三图像数据自身。相反，其包括第三图像中的第一部分的位置(p，q)、第三图像数据的第一部分的大小wXh、以及第三图像数据的分辨率WXH。如上所述，AV传送设备108可以根据p、q、w、h、W和H来定位第一图像数据中的帧中的第一部分。对于从控制设备116到AV传送设备108的无线链路的带宽不能支持传输相机116c捕捉到的图像的实现和/或AV传送设备108不具有足够的处理能力来搜索和定位相机116c捕捉到的图像中的AOI 350的情况而言，这样的实施例可能是所希望的。
在其他实施例中，在向AV传送设备108发送第三图像数据之前，控制设备116可以对相机116c捕捉到的第三图像数据进行预处理(例如压缩或简化图像)，以使得可降低前述的带宽要求和/或AV传送设备108上的处理负担。
在步骤640处，AV传送设备108对应于第一图像数据中的帧中的第一部分，根据第一图像数据生成第二图像数据。第二图像数据可以是第一图像数据的与第一图像数据中的帧中的第一部分相对应的放大版本。扩大因子被存储在存储器212中，并被AV传送设备108使用来产生第二图像数据。
AV传送设备108具有在存储器212中或存储器215中存储的设置数据库。用户使用用户接口222或控制设备116输入设置。该设置可包括针对扩大的设置，其值可以是自动的或是指示扩大因子的数。另一设置可指示区域350′的分辨率WXH，区域350′可以是显示器116d的全屏。在自动设置中，AV传送设备108将扩大因子计算为W/w以填充区域350′的宽度或将扩大因子计算为H/h以填充区域350′的深度。在第一图像数据的分辨率AXB不同于第二显示器的分辨率WXH且第一图像数据中的帧中的第一部分的大小是aXb的情况下，AV传送设备108还可以将扩大因子计算为W/a以填充区域350′的宽度或将扩大因子计算为H/b以填充区域350′的深度。
在步骤650处，AV传送设备108向控制设备发送第二图像数据，以在第二显示器116d上作为第二图像显示。如前所述，第二显示设备116d上的显示不影响第一显示设备114d上的显示。例如，第二显示设备116d可能正在显示第一帧的一部分，然而第一显示设备持续显示第一帧的整个帧。因此，用户可以在第一显示设备114d上查看第一帧的整个帧，且还在第二显示设备116d上看到相同帧的放大部分。
如前所述，我们假设区域350′的大小覆盖第二显示器116d的全屏。如果区域350′没有覆盖第二显示器116d的全屏，应该向AV传送设备108发送区域350′的大小，以用于计算扩大因子。如上所述，控制设备116还可以通过调整区域350′的大小来扩大或缩小在第二显示器上显示的、根据第二图像数据生成的图像。
如上所述，当在显示器116d上显示第二图像时，第二图像的分辨率不受显示设备114的分辨率的限制，而是基于根据AV传送设备108接收到或取回的承载信号的内容(第一图像数据)可得到的分辨率。因此，例如，如果AOI 350表示2千万像素图像的区域的5％，在显示器116d上显示的与AOI 350相对应的第二图像数据(即，区域350′)的分辨率优选地为1百万像素，即使在720p电视监视器上显示的AOI 350的分辨率仅是5万像素。
有鉴于此，之前所述仅示出了本发明的原理，且将因此意识到的是，本领域技术人员将能够设计出众多备选布置，该各种备选布置在本文中虽然没有明确描述，但体现了本发明的原理并在其精神和范围内。例如，虽然以分离的功能单元的背景进行示出，这些功能单元可体现在一个或多个集成电路(IC)中。类似地，虽然被示出为分离的单元，该单元中的一些或全部可通过所存储程序控制的处理器(例如，数字信号处理器或通用处理器)来实现，所存储程序控制的处理器执行相关联的软件，例如对应于一个或多个步骤，该软件可通过各种适合的存储介质中的任何存储介质来体现。此外，本发明的原理可应用于各种类型的设备和系统，包括个人计算系统。因此要理解的是，可对所示出的实施例做出众多修改，且可在不背离本发明的精神和范围的情况下设计其他布置。

Claims (36)

1.一种方法，包括：
使用控制设备(116)选择(410)第一显示器(114d)上的一部分，所述控制设备具有第二显示器(116d)，所述第一显示器逐帧显示根据包括至少一个帧的第一图像数据生成的图像；
确定(420)所述第一图像数据中的帧中与所述第一显示器上的所选部分相对应的第一部分；
根据所述第一图像数据生成(430)与所述第一图像数据中的帧中的第一部分相对应的第二图像数据；以及
向所述控制设备(116)提供(440)所述第二图像数据，以在所述第二显示器上作为第二图像显示(480)。
2.根据权利要求1所述的方法，其中，选择步骤包括：从所述控制设备(116)的相机(116c)接收第三图像数据，所述第三图像数据的第一部分表示所述第一显示器(114d)的图像，其中，确定步骤包括：根据所述第三图像数据的第一部分在所述第三图像数据中的相对位置和所述第三图像数据的第一部分的大小，确定所述第一图像数据中的帧中的第一部分。
3.根据权利要求2所述的方法，其中，所述第一图像数据的分辨率是AXB个单位，且所述第三图像数据的分辨率是WXH个单位，以及所述方法还包括：
定位所述第三图像数据的第一部分，且确定所述第三图像数据中对在所述第三图像数据中的所述第三图像数据的第一部分的中心进行表示的位置(p，q)；以及
将所述第一图像数据中的帧中的第一部分的中心确定为(a，b)，其中a＝(A/W)*p且b＝(B/H)*q。
4.根据权利要求3所述的方法，其中，所述第三图像数据的第一部分的大小包括w个单位的宽度和h个单位的深度，以及确定步骤还包括：将所述第一图像数据中的帧中的第一部分的宽度和深度分别确定为d个单位和e个单位，其中，d＝(A/W)*w且e＝(B/H)*h。
5.根据权利要求4所述的方法，其中，生成所述第二图像数据的步骤包括：对应于第一图像数据中的帧中的第一部分，根据扩大因子扩大所述第一图像数据。
6.根据权利要求5所述的方法，还包括：
根据w和h之一确定所述扩大因子。
7.根据权利要求6所述的方法，其中，所述扩大因子等于W/w。
8.根据权利要求6所述的方法，其中，所述扩大因子等于H/h。
9.根据权利要求1所述的方法，其中，所述第一图像数据表示静止图像或视频帧。
10.根据权利要求1所述的方法，其中，选择步骤包括：从所述控制设备(116)的相机(116c)接收第三图像数据，所述第三图像数据表示所述第一显示器(114d)上显示的图像的一部分，其中，确定步骤包括：在所述第一图像数据中搜索与所述第三图像数据相对应的部分。
11.一种视频接收机(108)，包括：
控制器(210)；
存储器(215)，用于存储表示至少一个帧的第一图像数据，其中，所述存储器存储在执行时使所述控制器(210)控制所述视频接收机执行至少以下操作的逻辑：
使第一显示器(114d)逐帧显示由所述第一图像数据表示的图像；
与控制设备(116)交互，以选择所述第一显示器上的一部分(350)；
确定所述第一图像数据中的帧中与所选部分相对应的第一部分；
根据所述第一图像数据生成与所述第一图像数据中的帧中的第一部分相对应的第二图像数据；以及
向所述控制设备(116)提供所述第二图像数据，以在第二显示器(116d)上作为第二图像显示(480)。
12.根据权利要求11所述的视频接收机(108)，其中，所述视频接收机(108)：
从所述控制设备(116)的相机(116c)接收第三图像数据，所述第三图像数据的第一部分表示所述第一显示器(114d)的图像，其中，确定步骤包括：根据所述第三图像数据的第一部分在所述第三图像数据中的相对位置和所述第三图像数据的第一部分的大小，确定所述第一图像数据中的帧中的第一部分。
13.根据权利要求12所述的视频接收机(108)，其中，所述第一图像数据的分辨率是AXB个单位，且所述第三图像数据的分辨率是WXH个单位，以及所述视频接收机(108)：
定位所述第二图像数据的第二部分，且确定所述第二图像数据中对所述第二图像数据的第二部分的中心进行表示的位置(p，q)；以及
将所述第一图像数据中的帧中的第一部分的中心确定为(a，b)，其中a＝(A/W)*p且b＝(B/H)*q。
14.根据权利要求13所述的视频接收机(108)，其中，所述第三图像数据的第一部分的大小包括w个单位的宽度和h个单位的深度，以及所述视频接收机(108)：
将所述第一图像数据中的帧中的第一部分的宽度和深度分别确定为d个单位和e个单位，其中，d＝(A/W)*w且e＝(B/H)*h。
15.根据权利要求14所述的视频接收机(108)，其中，所述视频接收机(108)通过以下方式生成所述第二图像数据：对应于第一图像数据中的帧中的第一部分，根据扩大因子缩放所述第一图像数据。
16.根据权利要求15所述的视频接收机(108)，其中，所述视频接收机(108)根据w和h之一确定所述扩大因子。
17.根据权利要求16所述的视频接收机(108)，其中，所述扩大因子等于W/w。
18.根据权利要求16所述的视频接收机(108)，其中，所述扩大因子等于H/h。
19.根据权利要求11所述的视频接收机(108)，其中，所述第一图像数据表示静止图像或视频帧。
20.一种在控制设备中使用的方法，所述方法控制视频接收机接收包括至少一个帧的第一图像数据，并在第一显示器上逐帧显示根据所述第一图像数据生成的图像，所述方法包括：
接收(510)所述控制设备的相机捕捉到的第三图像数据，所述第三图像包括所述第一显示器的至少一部分，所述第一显示器逐帧显示根据包括至少一个帧的第一图像数据生成的图像，其中，所述第三图像被用于定位所述第一图像数据中的帧中由用户选择的第一部分；
向视频接收机发送(520)用于定位所述第一图像中的帧中的第一部分的信息；
接收(530)根据所述第一图像数据生成的与所述第一图像数据中的帧中的第一部分相对应的第二图像数据；以及
在第二显示器(116d)上显示(480)表示所述第二图像数据的第二图像(540)，其中，所述第一显示器继续(540)逐帧显示根据所述第一图像数据生成的图像。
21.根据权利要求20所述的方法，其中，所述第三图像数据的第一部分表示所述第一显示器的图像，用于定位所述第一图像中的帧中的第一部分的信息包括所述第三图像数据的第一部分的大小以及所述第三图像数据的第一部分在所述第三图像数据中的位置。
22.根据权利要求21所述的方法，其中，用于定位所述第一图像中的帧中的第一部分的信息还包括所述第二显示器的分辨率。
23.根据权利要求20所述的方法，其中，用于定位所述第一图像中的帧中的第一部分的信息是所述第三图像数据。
24.根据权利要求20所述的方法，其中，所述第二图像数据表示所述第一图像数据的与所述第一图像数据中的帧中的第一部分相对应的缩放版本。
25.根据权利要求20所述的方法，其中，所述第一图像数据表示静止图像或视频帧。
26.一种方法，包括：
在第一显示设备上逐帧显示(610)根据第一图像数据生成的图像；
从控制设备接收(620)用于定位所述第一图像数据中的帧中的第一部分的信息；
定位(630)所述第一图像数据中的帧中的第一部分；
根据所述第一图像数据生成(640)与所述第一图像数据中的帧中的第一部分相对应的第二图像数据；
向所述控制设备发送(650)所述第二图像数据，以在第二显示器上作为第二图像显示。
27.根据权利要求26所述的方法，其中，所述第二图像数据表示所述第一图像数据的与所述第一图像数据中的帧中的第一部分相对应的缩放版本。
28.根据权利要求27所述的方法，其中，所述缩放版本是通过利用扩大因子扩大所述第一图像数据中的帧中的第一部分来生成的。
29.根据权利要求28所述的方法，其中，所述扩大因子存储在存储器中。
30.根据权利要求26所述的方法，其中，由所述控制设备的相机捕捉第三图像数据，所述第三图像包括所述第一显示器的至少一部分，用于定位所述第一图像数据中的帧中的第一部分的信息包括所述第三图像数据的第一部分的大小以及所述第三图像数据的第一部分在所述第三图像数据中的位置，其中，所述第三图像数据的第一部分的大小是wXh个单位。
31.根据权利要求30所述的方法，其中，所述第三图像数据的第一部分在所述第三图像数据中的位置是所述第三图像数据的所述部分在所述第三图像数据中的中心位置，所述中心位置是(p，q)，所述第一图像数据的分辨率是AXB个单位，以及所述方法还包括：确定所述第三图像数据的分辨率，所述第三图像数据的分辨率是WXH个单位，以及将所述第一图像数据中的帧中的第一部分的中心确定为(a，b)，其中，a＝(A/W)*p且b＝(B/H)*q。
32.根据权利要求31所述的方法，还包括：将所述第一图像数据中的帧中的第一部分的宽度和深度分别确定为d个单位和e个单位，其中，d＝(A/W)*w且e＝(B/H)*h。
33.根据权利要求32所述的方法，其中，根据所述大小确定所述扩大因子。
34.根据权利要求33所述的方法，其中，将所述扩大因子计算为W/w。
35.根据权利要求33所述的方法，其中，将所述扩大因子计算为H/h。
36.根据权利要求26所述的方法，其中，所述第一图像数据表示静止图像或视频帧。
CN201280076965.8A 2012-11-09 2012-11-09 手持显示器缩放特征 Pending CN104956681A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2012/064385 WO2014074111A1 (en) 2012-11-09 2012-11-09 Handheld display zoom feature

Publications (1)

Publication Number Publication Date
CN104956681A true CN104956681A (zh) 2015-09-30

Family

ID=47179024

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280076965.8A Pending CN104956681A (zh) 2012-11-09 2012-11-09 手持显示器缩放特征

Country Status (5)

Country Link
US (1) US9635425B2 (zh)
EP (1) EP2918079A1 (zh)
JP (1) JP6341924B2 (zh)
CN (1) CN104956681A (zh)
WO (1) WO2014074111A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107045431A (zh) * 2016-02-05 2017-08-15 溥美公司 处于数字协作环境中的工作空间资产的本地缩放

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2530751A (en) * 2014-09-30 2016-04-06 Sony Corp Video data encoding and decoding
GB2533569B (en) * 2014-12-19 2019-06-26 Displaylink Uk Ltd A display system and method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090228841A1 (en) * 2008-03-04 2009-09-10 Gesture Tek, Inc. Enhanced Gesture-Based Image Manipulation
US20100269152A1 (en) * 2009-04-15 2010-10-21 Wyse Technology Inc. Method and system for rendering composite view of an application
US20110221664A1 (en) * 2010-03-11 2011-09-15 Microsoft Corporation View navigation on mobile device
US20120017236A1 (en) * 2010-07-13 2012-01-19 Sony Computer Entertainment Inc. Supplemental video content on a mobile device
US8160564B1 (en) * 2008-06-10 2012-04-17 Sprint Communications Company L.P. Remote control of computing device applications using mobile device
CN102460364A (zh) * 2009-06-10 2012-05-16 高通股份有限公司 提供连续缩放功能性的用户接口方法
CN102483666A (zh) * 2009-08-31 2012-05-30 高通股份有限公司 用于移动装置的压敏用户接口

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060052684A1 (en) 2002-05-07 2006-03-09 Takashi Takahashi Medical cockpit system
WO2004066632A1 (ja) 2003-01-17 2004-08-05 Nippon Telegraph And Telephone Corporation 遠隔映像表示方法、映像取得装置及びその方法とそのプログラム
JP4366452B2 (ja) 2003-04-15 2009-11-18 トムソン ライセンシング 表示制御装置および表示制御方法
KR100699091B1 (ko) 2005-03-09 2007-03-23 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR101368713B1 (ko) 2006-11-20 2014-03-04 삼성전자주식회사 Ａ/ｖ기기 및 그 표시방법
EP1950957A2 (en) 2007-01-23 2008-07-30 Funai Electric Co., Ltd. Image display system
JP2008181199A (ja) 2007-01-23 2008-08-07 Funai Electric Co Ltd 画像表示システム
JP2008298684A (ja) 2007-06-01 2008-12-11 Ntn Corp 流体軸受装置の検査方法
KR101557353B1 (ko) 2008-12-16 2015-10-06 엘지전자 주식회사 투명디스플레이를 구비한 이동단말기 및 그의 화면 캡쳐 방법
EP2207342B1 (en) 2009-01-07 2017-12-06 LG Electronics Inc. Mobile terminal and camera image control method thereof
US9241062B2 (en) * 2009-05-20 2016-01-19 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
JP5549220B2 (ja) * 2009-12-25 2014-07-16 ソニー株式会社 連携表示システム、連携表示方法およびプログラム
EP2359915B1 (en) * 2009-12-31 2017-04-19 Sony Computer Entertainment Europe Limited Media viewing
US9009219B2 (en) * 2010-01-27 2015-04-14 Vmware, Inc. Native viewer use for service results from a remote desktop
US20110316888A1 (en) * 2010-06-28 2011-12-29 Invensense, Inc. Mobile device user interface combining input from motion sensors and other controls
US20120046071A1 (en) * 2010-08-20 2012-02-23 Robert Craig Brandis Smartphone-based user interfaces, such as for browsing print media
US8966376B2 (en) * 2010-12-10 2015-02-24 Wyse Technology L.L.C. Methods and systems for remote desktop session redrawing via HTTP headers
US9930225B2 (en) * 2011-02-10 2018-03-27 Villmer Llc Omni-directional camera and related viewing software
EP2501143A3 (en) * 2011-03-15 2016-12-28 LG Electronics Inc. Method of controlling electronic device and portable terminal thereof
US20120311487A1 (en) * 2011-05-31 2012-12-06 George Ross Staikos Automatically wrapping zoomed content
US9250854B2 (en) * 2011-08-25 2016-02-02 Vmware, Inc. User interface virtualization for remote devices
WO2013133478A1 (en) * 2012-03-04 2013-09-12 Lg Electronics Inc. Portable device and control method thereof
US9098163B2 (en) * 2012-07-20 2015-08-04 Sony Corporation Internet TV module for enabling presentation and navigation of non-native user interface on TV having native user interface using either TV remote control or module remote control

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090228841A1 (en) * 2008-03-04 2009-09-10 Gesture Tek, Inc. Enhanced Gesture-Based Image Manipulation
US8160564B1 (en) * 2008-06-10 2012-04-17 Sprint Communications Company L.P. Remote control of computing device applications using mobile device
US20100269152A1 (en) * 2009-04-15 2010-10-21 Wyse Technology Inc. Method and system for rendering composite view of an application
CN102460364A (zh) * 2009-06-10 2012-05-16 高通股份有限公司 提供连续缩放功能性的用户接口方法
CN102483666A (zh) * 2009-08-31 2012-05-30 高通股份有限公司 用于移动装置的压敏用户接口
US20110221664A1 (en) * 2010-03-11 2011-09-15 Microsoft Corporation View navigation on mobile device
US20120017236A1 (en) * 2010-07-13 2012-01-19 Sony Computer Entertainment Inc. Supplemental video content on a mobile device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107045431A (zh) * 2016-02-05 2017-08-15 溥美公司 处于数字协作环境中的工作空间资产的本地缩放

Also Published As

Publication number Publication date
US20150256886A1 (en) 2015-09-10
JP2016504802A (ja) 2016-02-12
EP2918079A1 (en) 2015-09-16
WO2014074111A1 (en) 2014-05-15
JP6341924B2 (ja) 2018-06-13
US9635425B2 (en) 2017-04-25

Similar Documents

Publication Publication Date Title
US20170199715A1 (en) Image display apparatus
US20170286047A1 (en) Image display apparatus
US9733718B2 (en) Display apparatus and display method thereof
EP2753075A1 (en) Display apparatus and method for video calling thereof
US10114523B2 (en) Display apparatus and method for controlling thereof
CN109661809B (zh) 显示设备
KR20120105346A (ko) 오브젝트 정보 검색 방법 및 그를 이용한 영상 표시 장치
KR20150117938A (ko) 복수 개의 디스플레이 장치를 이용하여 영상을 표시하는 방법 및, 복수 개의 디스플레이 장치를 제어하는 전자 장치
KR102147214B1 (ko) 영상표시장치, 및 그 동작방법
CA2838878C (en) Method and apparatus for controlling contents in electronic device
KR102287510B1 (ko) 서버, 영상제공장치, 및 이를 포함하는 영상 제공 시스템
KR102269277B1 (ko) 서버, 홈 디바이스 접속 서버, 단말기, 및 이를 포함하는 홈 디바이스 원격제어시스템
CN104956681A (zh) 手持显示器缩放特征
KR102187745B1 (ko) 영상제공장치, 및 그 동작방법
CN107071561A (zh) 显示装置以及显示方法
US20190286318A1 (en) Display device
CN113196791B (zh) 用于显示各种类型的内容的显示设备
KR20150073573A (ko) 미러링 화면에 관련된 콘텐츠 출력 방법 및 그 장치
WO2013118197A1 (ja) 通信装置、通信方法および通信プログラム
KR102267194B1 (ko) 단말기 및 그의 동작 방법
JP4595322B2 (ja) 画像処理システム、リモートコントローラおよび方法、画像処理装置および方法、記録媒体、並びにプログラム
WO2017029798A1 (en) Wide view image display system, information processing apparatus, and image display method
US20230247247A1 (en) Image display apparatus
JP2018092261A (ja) 表示装置、テレビジョン受像機、表示装置の制御方法、制御プログラム、および記録媒体
KR20230116662A (ko) 영상표시장치

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150930