CN103988166A - 媒体输出的选择性镜射 - Google Patents

媒体输出的选择性镜射 Download PDF

Info

Publication number
CN103988166A
CN103988166A CN201280060922.0A CN201280060922A CN103988166A CN 103988166 A CN103988166 A CN 103988166A CN 201280060922 A CN201280060922 A CN 201280060922A CN 103988166 A CN103988166 A CN 103988166A
Authority
CN
China
Prior art keywords
media
mirror
destination device
media elements
source apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280060922.0A
Other languages
English (en)
Other versions
CN103988166B (zh
Inventor
科斯罗·M·拉比
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN103988166A publication Critical patent/CN103988166A/zh
Application granted granted Critical
Publication of CN103988166B publication Critical patent/CN103988166B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/542Event management; Broadcasting; Multicasting; Notifications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/545Gui
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/04Display device controller operating with a plurality of display units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

根据一些方面,本发明描述用于经由不同目的地装置镜射源装置的本地媒体输出的技术。所述源装置可控制所述目的地装置以经由与所述目的地装置相关联的输出接口镜射所述媒体。所述源装置可接收所述本地媒体的媒体元素,且响应于此,基于与所述媒体元素相关联的至少一个参数来确定是否输出(镜射)包含所述媒体元素的所述本地媒体。根据其它方面,本发明描述用于防止经由操作以镜射其它本地媒体的目的地装置镜射至少一个媒体元素的技术。作为一个实例,所述源装置可改变所述源装置对与所述媒体元素相关联的至少一个区进行编码的方式,以便冻结与所述至少一个区相关联的媒体输出。

Description

媒体输出的选择性镜射
技术领域
本发明一股来说涉及经配置以将媒体输出(例如,音频和/或视觉输出)提供给一或多个用户的装置。
背景技术
近年来,计算装置已稳定地演进以向用户提供越来越多的功能性。举例来说,智能手机、平板计算机、膝上型计算机或其它计算装置可经配置以执行各自向用户提供功能性的多个不同软件应用程序。在一些实例中,此计算装置可包含至少一个本地输出接口,例如计算装置的显示器和/或音频扬声器。
在一些实例中,此计算装置可包含一或多个通信应用程序(例如,语音呼叫、文字消息传递、电子邮件、视频电话、社交网络连接),所述通信应用程序致使计算装置经由计算装置的本地输出接口(例如,显示器、扬声器)将包括一或多个消息的一或多个媒体元素输出给用户。举例来说,文字消息传递应用程序可接收文字消息,且产生待经由计算装置的本地输出接口输出以向用户警告/告知传入的文字消息的媒体元素(例如,弹出通知和/或相关联的可听声音)。
作为另一实例,此计算装置可包含一或多个媒体应用程序,所述一或多个媒体应用程序经配置以经由计算装置的本地输出接口输出一或多个媒体元素,例如声音(例如,mp3播放器、数字无线电台、云端音乐网络)和/或视频(例如,数字视频播放器、流式传输视频应用程序)。根据其它实例,计算装置可包含一或多个游戏、照片观察、日历、闹钟或其它应用程序,其经配置以致使计算装置经由计算装置的本地输出接口输出包括一或多个媒体元素的本地媒体。
发明内容
本发明涉及用于经由目的地装置镜射源装置的例如音频和/或视觉媒体输出等本地媒体输出的技术。根据这些技术,所述源装置可在镜射模式中操作,使得经由所述目的地装置输出所述媒体的实质上类似于所述源装置的所述本地媒体输出的媒体元素的一或多个媒体元素。而且,根据这些技术,所述源装置可接收所述媒体的另一媒体元素。响应于接收到所述所接收媒体元素,所述源装置可比较所述所接收媒体元素的至少一个特性与至少一个参数,且基于所述比较来确定是否致使所述目的地装置镜射所述至少一个所接收媒体元素。
在一些实例中,所述源装置可致使所述目的地装置输出所述源装置的其它本地媒体,同时防止经由所述目的地装置输出所述所接收媒体元素,直到分辨出所述媒体元素的镜射状态为止(例如,基于所述至少一个参数)。
根据一个实例,本文中描述一种用于经由目的地装置镜射源装置的本地媒体的方法。所述方法包含接收所述源装置的所述本地媒体的第一媒体元素。所述方法进一步包含致使所述目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体。所述方法进一步包含接收所述源装置的所述本地媒体的第二媒体元素。所述方法进一步包含基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体。
根据另一实例,本文中描述一种源装置,其经配置以经由目的地装置镜射所述源装置的本地媒体。所述源装置包含经配置以进行以下操作的镜射模块:接收所述源装置的所述本地媒体的第一媒体元素;致使目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体;接收所述本地媒体的第二媒体元素;以及基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体。
根据另一实例,本文中描述一种存储指令的计算机可读存储媒体。所述指令经配置以致使计算装置接收源装置的本地媒体的第一媒体元素。所述指令经进一步配置以致使所述计算装置致使目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体。所述指令经进一步配置以致使所述计算装置接收所述本地媒体的第二媒体元素。所述指令经进一步配置以致使所述计算装置基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体。
根据另一实例,本文中描述一种源装置,其经配置以经由目的地装置镜射所述源装置的本地媒体。所述装置包含用于接收所述源装置的所述本地媒体的第一媒体元素的装置。所述装置进一步包含用于致使目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体的装置。所述装置进一步包含用于接收所述本地媒体的第二媒体元素的装置。所述装置进一步包含用于基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体的装置。
根据另一实例,本文中描述一种编码视频数据帧的方法。所述方法包含识别视频数据帧的至少一个区以进行冻结。所述方法进一步包含将多个预测模式中的一者指配给所述视频帧中的驻留在所述所识别的至少一个区外部的多个视频数据块中的每一块。所述方法进一步包含将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者。所述方法进一步包含将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时,所述所识别的至少一个区在所述帧中在视觉上冻结。
根据另一实例,本文中描述一种经配置以编码视频数据帧的装置。所述装置包含经配置以进行以下操作的镜射模块:识别视频数据帧的至少一个区以进行冻结。所述装置进一步包含经配置以进行以下操作的视频编码器:将多个预测模式中的一者指配给在所述所识别的至少一个区外部的多个视频数据块中的每一块;将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者;以及将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时,所述所识别的至少一个区在所述帧中在视觉上冻结。
根据另一实例,本文中描述一种存储指令的计算机可读存储媒体。所述指令经配置以致使计算装置识别视频数据帧的至少一个区以进行冻结。所述指令经进一步配置以致使所述计算装置将多个预测模式中的一者指配给在所述所识别的至少一个区外部的多个视频数据块中的每一块。所述指令经进一步配置以致使所述计算装置将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者。所述指令经进一步配置以致使所述计算装置将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时,所述所识别的至少一个区在所述帧中在视觉上冻结。
根据另一实例,本文中描述一种经配置以编码视频数据帧的装置。所述装置包含用于识别视频数据帧的至少一个区以进行冻结的装置。所述装置进一步包含用于将多个预测模式中的一者指配给在所述所识别的至少一个区外部的多个视频数据块中的每一块的装置。所述装置进一步包含用于将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者的装置。所述装置进一步包含用于将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时所述所识别的至少一个区在所述帧中在视觉上冻结的装置。
本发明的一或多个实施例的细节阐述于附图及以下描述中。从描述和图式以及从权利要求书将显而易见本发明的其它特征、目标和优势。
附图说明
图1为描绘与本发明的一或多个方面一致的源装置的一个实例的概念图,所述源装置经配置以经由至少一个目的地装置镜射源装置的本地媒体输出。
图2为说明与本发明的一或多个方面一致的由源装置及目的地装置输出的媒体的屏幕截图实例的概念图。
图3为说明与本发明的一或多个方面一致的源装置的一个实例的框图,所述源装置经配置以经由至少一个目的地装置镜射源装置的本地媒体输出。
图4为说明与本发明的一或多个方面一致的控制目的地装置以镜射本地媒体输出的至少一个媒体元素的方法的一个实例的流程图。
图5为说明与本发明的一或多个方面一致的可提供给用户的用户接口的一个实例的概念图。
图6为说明与本发明的一或多个方面一致的可提供给用户的用户接口的另一实例的概念图。
图7为描绘与本发明的一或多个方面一致的控制目的地装置以镜射本地媒体输出的方法的一个实例的流程图。
图8为说明与本发明的一或多个方面一致的包含视频编码器的源装置与包含视频解码器的目的地装置的一个实例的框图。
图9和10为说明与本发明的一或多个方面一致的用于在视觉上冻结由目的地装置输出的帧媒体中的至少一个所识别区的技术的一个实例的概念图。
图11为说明与本发明的一或多个方面一致的在视觉上冻结由目的地装置输出的帧媒体中的至少一个所识别区的方法的一个实例的流程图。
图12为说明与本发明的一或多个方面一致的经由目的地装置镜射媒体的方法的一个实例的流程图。
具体实施方式
图1为说明与本发明的一或多个方面一致的源计算装置110的一个实例的概念图,所述源计算装置110经配置以控制至少一个目的地装置114以输出源装置110的本地媒体。源装置110可包括包含至少一个本地输出接口的任何装置,所述至少一个本地输出接口经配置以输出媒体,例如音频和/或视觉媒体。举例来说,描绘于图1中的源装置110包括智能手机或平板计算机,其包含包括显示屏112的第一输出接口,及包括对于源装置为本地的一或多个扬声器(图1中未描绘)的第二输出接口。在其它实例中,源装置110可包括膝上型计算机、台式计算机、游戏控制器,或包含源装置110的至少一个本地输出接口或经配置以控制源装置110的至少一个本地输出接口的任何其它装置。
如图1的实例中所展示,源装置110的屏幕112可经配置以输出本地图形输出130。本地图形输出130可包括(例如)一或多个静态或视频图像。在图1的实例中,源装置110的扬声器经配置以提供本地音频输出131。本地音频输出131可包括一或多个可听声音。此音频输出131可与图形输出130相关联(例如,经配置以结合图形输出130而输出)。举例来说,在本地图形输出130包括视频或图像内容的情况下,音频输出131可包括与视频或图像相关联的可听声音。
如图1中所展示,源装置110通信地耦合到至少一个目的地装置114(在下文中为“目的地装置114”)。目的地装置114可供源装置110使用以操作与目的地装置114相关联的一或多个输出接口120、124以镜射源装置110的本地媒体输出。如本文中所描述的术语“镜射”可指由源装置110控制至少一个目的地装置114以输出本地媒体的至少一部分,例如源装置110的本地音频、视频和/或图像媒体输出。
源装置110可控制目的地装置114以经由与目的地装置114相关联的一或多个输出接口120、124来镜射源装置110的媒体输出。举例来说,如图1中所展示,源装置110可控制外部显示接口120以输出经镜射的图形输出132,所述经镜射的图形输出132可包括实质上类似于源装置110的本地图形输出130的图形输出。经镜射的图形输出132可包括与本地图形输出130相同的一或多个图像,但此类图像可经处理、设定大小、格式化及/或以其它方式进行修改以用于经由外部显示接口120呈现。
还如图1中所展示,源装置110可控制外部音频接口124以输出经镜射的音频输出136,所述经镜射的音频输出136可包括实质上类似于描绘于图1中的音频输出131的音频输出。经镜射的音频输出136可包括与本地图形输出130相同的可听声音,但经处理、格式化及/或以其它方式进行修改以用于经由外部音频接口124输出。在一些实例中,源装置110可控制目的地装置114以输出包括源装置310的本地图形输出130以及本地音频输出136的媒体。
在例如图1中所展示的一些实例中,目的地装置114可包括耦合到外部显示接口120(例如,电视显示器、计算机监视器或其类似者)中的一者或一者以上的装置,所述装置包含经配置以将图像呈现给观察者的屏幕122,和/或例如扬声器或立体声系统等外部音频接口124。举例来说,目的地装置110可包括机顶盒(例如,谷歌TV(GOOGLE TV)、苹果TV(APPLE TV)、洛库(ROKU))、游戏控制台(例如,任天堂WII(NINTENDO WII)、索尼游戏机3(SONY PLAYSTATION3)、微软XBOX(MICROSOFT XBOX))、数字影音光盘(DVD)播放器、蓝光(BLURAY)播放器,或耦合到如图1的实例中所展示的外部显示装置和/或外部音频装置的其它分离单元。在图1中未描绘的其它实例中,可将目的地装置114、外部显示接口120和/或外部音频接口124中的一者或一者以上组合为单个装置。举例来说,例如电视或计算机监视器等显示装置可包含屏幕122和一或多个扬声器两者。在其它实施例中,相同或不同的目的地装置114可控制与一或多个目的地装置114分离的一或多个音频或视频输出接口。根据再其它实例,如本文中所描述的由目的地装置114执行的功能性可由外部显示装置和/或外部音频装置中的一者或一者以上来执行。举例来说,电视显示器和/或立体声接收器可包含硬件和/或软件,所述硬件和/或软件经配置以通信地耦合电视和/或立体声与源装置110,使得可将源装置110的本地媒体镜射到电视显示器或立体声接收器。
在一些实例中,源装置110可通信地耦合到目的地装置114以经由例如以下各者中的一者或一者以上等有线连接来镜射源装置110的媒体输出:高清晰度多媒体接口(HDMI)、数字视频接口(DVI)或其它有线连接。在其它实例中,源装置110可耦合到目的地装置114以无线地镜射媒体输出。举例来说,目的地装置114可包含一或多个通信组件,所述一或多个通信组件经配置以使得源装置能够经由例如WI-FI、蓝牙、蜂窝式网络或任何其它形式的无线通信等一或多个无线通信协议将本地媒体输出发送到目的地装置。
如上文所描述,源装置110可配置以经由目的地装置114镜射源装置110的媒体输出。举例来说,源装置110可向用户提供用户可选择选项以启动或撤销启动镜射模式,在所述镜射模式中,经由目的地装置114输出本地音频媒体、视觉媒体或两者。在标准操作模式中,源装置110可接收呈多个媒体元素的形式的媒体,且控制源装置110的一或多个本地输出接口112、131以输出包括多个媒体元素的媒体。在此镜射模式中,目的地装置114,源装置110可控制目的地装置114以输出实质上与源装置110原本在标准操作模式中使用一或多个本地输出接口112、131输出的本地图形输出130和/或本地音频输出131相同的媒体。举例来说,在此镜射模式中,当源装置110从一或多个源(例如,从在源装置上执行的一或多个软件应用程序)接收到媒体元素时,源装置110可处理所接收媒体元素以用于经由目的地装置输出,且将经处理媒体元素中的每一者发送到目的地装置114以供输出。当正操作以镜射媒体输出时,源装置110可能或可能不会自身继续经由本地输出接口130、131输出本地媒体130、131。
本发明涉及用于经由一或多个目的地装置114控制源装置110的媒体输出的镜射的技术。根据这些技术,当在镜射模式中操作时,源装置110可选择性地防止经由目的地装置114镜射一或多个所接收媒体元素。举例来说,源装置110可接收本地媒体的第一媒体元素,且控制目的地装置114以经由目的地装置114来镜射包含本地媒体的第一媒体元素的本地媒体。源装置110还可接收本地媒体的第二媒体元素。响应于接收到第二媒体元素,源装置110可比较第二媒体元素的至少一个特性与至少一个参数。基于比较,源装置110可确定是否经由一或多个目的地装置114来镜射第二媒体元素。在一些实例中,源装置110可控制目的地装置114以继续镜射媒体而不镜射第二媒体元素,同时源装置110确定是否镜射第二媒体元素。举例来说,源装置110可致使目的地装置114继续输出本地媒体的第一媒体元素的视频和/或音频,而不输出与第二媒体元素相关联的视频和/或音频。
作为一个非限制性实例,第一媒体元素可包括在源装置110上执行的数字视频播放器应用程序的输出,其输出第一媒体元素。响应于第一媒体元素,源装置110可控制目的地装置114以输出与第一媒体元素相关联的视频和/或音频。源装置可接着接收第二媒体元素。根据此实例,第二媒体元素可包括来自在源装置110上执行的通信应用程序的消息。举例来说,第二媒体元素可包括关于已从一或多个消息传递、电话、社交网络连接或其它应用程序接收到电子邮件、文字消息、语音呼叫、语音邮件或其它消息的指示。根据本发明的技术,在接收到第二媒体元素后,源装置110便可比较第二媒体元素的至少一个特性与至少一个参数,以基于比较来确定是否控制目的地装置114以呈现第二媒体元素。根据本文中所描述的技术,用户或其它观察者可继续观察包括第一媒体元素的视频媒体(经播放视频)以及与第一媒体元素相关联的音频媒体(与视频相关联的音轨),而不镜射与所接收的第二媒体元素相关联的音频或视频媒体(其对于用户来说可为私人的和/或个人的),或另外不需要经由目的地装置114进行共享。替代地,第二媒体元素可仅经由源装置110的本地输出接口来显示。因而,可能不对能够存取(例如,观察及/或听取)目的地装置114的一或多个输出接口的另一用户给予能够存取第一媒体元素的权利。以此方式,源装置110的用户可能能够在选择性基础上共享源装置110的一些本地媒体(例如,上文所描述的视频及相关联音频播放),同时维持其它媒体的保密性或以其它方式防止用户不希望与其它用户共享的媒体(例如,传入消息)的镜射。
在一些实例中,源装置110可基于包括存储在存储器中的预定参数的至少一个参数来确定是否镜射所接收媒体元素(如本文中所描述,媒体元素的“镜射状态”)。举例来说,源装置110可操作以提供用户接口,用户可使用所述用户接口来预先选择关于经由一或多个目的地装置114进行的媒体的镜射(如本文中所描述)的一或多个选项。举例来说,源装置110可提供用户接口,所述用户接口允许用户选择关于媒体的镜射的应用程序特定选项。作为从通信应用程序接收到第二媒体元素的一个特定实例,源装置110可提供用户接口,所述用户接口使得用户能够指示:应镜射从通信应用程序接收的所有媒体,不应镜射从通信应用程序接收的任何媒体,及/或应镜射或不应镜射与来自一或多个特定用户的消息相关联的媒体。在其它实例中,此用户接口还可使得用户能够指示:源装置110应请求用户输入并接收用户输入以授权从一或多个应用程序或用户接收的媒体。
基于存储在存储器中的此一或多个预定参数,源装置110可确定是否经由目的地装置114镜射所接收的第二媒体元素。举例来说,如果此预定参数指示:应防止镜射来自用户“约翰史密斯”的所有消息,那么源装置110可能不会经由目的地装置输出包括来自用户“约翰史密斯”的文字消息或语音呼叫的所接收的第二媒体元素。
根据与本文中所描述的技术一致的其它实例,源装置110可基于一或多个动态确定的参数来确定是否经由目的地装置114来镜射第二多媒体元素。举例来说,响应于接收到第二媒体元素,源装置110可提供用户接口,所述用户接口允许用户选择是否镜射所接收的第二媒体元素。在一些此类实例中,除非分辨出第二媒体元素的镜射状态,否则源装置110可能不会操作以经由目的地装置114镜射第二媒体元素。举例来说,除非源装置110基于至少一个参数确定应镜射第二媒体元素,否则源装置110可能不会镜射第二媒体元素。在一些实例中,在源装置110确定第二媒体元素的镜射状态时,源装置110可继续经由目的地装置114镜射源装置110的其它本地媒体输出,而不镜射第二媒体元素。举例来说,源装置110可继续经由目的地装置114镜射与第一媒体元素相关联的音频输出,而不镜射与第二媒体元素相关联的音频输出。作为另一实例,源装置110可致使目的地装置114镜射包括源装置114的本地图形媒体的媒体,其中经镜射的图形媒体的对应于第二媒体元素的至少一个区被冻结或从经镜射的媒体输出去除。
本文中所描述的技术可为有利的,这是因为当源装置110在镜射模式中操作以经由目的地装置114镜射源装置110的本地媒体时,源装置110可向用户提供控制是否经由目的地装置114镜射本地媒体的一或多个所接收媒体元素的能力。此控制对于用户来说可为所要的,这是因为用户可能希望镜射源装置110的一些而非全部本地媒体,以便维持对于源装置110来说为本地的一些媒体的保密性及/或避免镜射对于源装置110来说为本地的一些媒体的至少一些非相关元素。本文中所描述的技术可进一步有利地使得用户能够控制新近所接收的本地媒体元素的镜射,同时仍允许用户和/或另一观察者继续享受用户确实希望经由目的地装置114镜射的源装置110的其它本地媒体。以此方式,可改善在使用源装置110来经由目的地装置114镜射媒体时的用户体验。
图2为描绘与本发明的一或多个方面一致的以下两者的概念图:源装置210的本地图形输出230的一个实例的屏幕截图,以及与目的地装置214相关联的外部显示接口220的经镜射的图形输出232的一个实例的萤幕截图。如图2中所展示,源装置210操作以输出包括多个媒体元素235、236、237及239的本地媒体输出(图2的实例中的图形输出230)。源装置210还可操作以经由与源装置210相关联的一或多个本地扬声器(包含在源装置210中或耦合到源装置210)输出音频媒体。可从任何源接收所述多个媒体元素235、236、237及239,例如在源装置210上执行的一或多个软件应用程序。
举例来说,如图2中所展示,媒体第一元素236为狗的图像。第一媒体元素236可包括从例如视频播放器或照片观察应用程序等媒体显示应用程序接收的视频或静态图像。还如图2中所展示,媒体元素235包括数字时钟,且媒体元素239包括闹钟。媒体元素235及237可从在源装置210上执行的时钟和/或闹钟应用程序而接收。还如图2中所展示,媒体元素237包括当前日期。媒体元素237可从在源装置210上执行的日历应用程序而接收。尽管在图2中未描绘,但在一些实例中,源装置210还可输出与媒体元素235、236、237及239中的一者或一者以上相关联的音频媒体。
还如图2中所展示,源装置210可操作以控制目的地装置214以镜射源装置210的媒体输出(例如,图2的实例中的本地图形输出230,以及图2中未描绘的本地音频输出)。举例来说,如图2中所展示,显示接口220操作以呈现包括实质上与本地图形输出230类似的媒体的经镜射的图形输出232。举例来说,如图2中所展示,虽然经处理(例如,经重新格式化、经重新设定大小、经重新整形、经重新布置、经重新定向及/或以其它方式进行修改)以用于经由外部显示接口220呈现,但媒体元素235、236、237及239可以实质上类似于本地图形输出230的方式输出。
还如图2的实例中所描绘,虽然源装置210操作以呈现包括媒体元素235、236、237及239的本地图形输出230(且目的地装置214操作以镜射媒体元素235、236、237及239),但源装置210可接收第二媒体元素238。在图2的实例中,第二媒体元素238包括关于源装置210已从名为“约翰史密斯”的用户接收到文字消息的图形通知,然而,第二媒体元素可包括任何形式的媒体,包含任何可见和/或可听媒体。根据本文中所描述的技术,在源装置210控制目的地装置214以输出第二媒体元素238之前,源装置210分辨第二媒体元素238的镜射状态。举例来说,源装置210可比较第二媒体元素238的一或多个特性与至少一个参数,且基于比较确定是否经由目的地装置214镜射第二媒体元素238。在一些实例中,在分辨第二媒体元素238的镜射状态时,源装置210可经由对于源装置310来说为本地的一或多个本地音频或显示接口输出第二媒体元素238,如图2的实例中所展示。
在一些实例中,源装置210可基于存储在存储器中的至少一个预定参数分辨第二媒体元素238的镜射状态。举例来说,源装置210可提供用户接口,用户可使用所述用户接口预先选择关于(例如)特定媒体元素的镜射、媒体元素的类型或媒体元素的类别的一或多个选项。源装置210可将关于一或多个此类所选择选项的指示存储在存储器中作为参数,以供稍后用以确定是否镜射由源装置210接收的媒体元素且借此分辨一或多个所接收媒体元素的显示状态。
作为一个实例,此用户接口可使得用户能够基于从其接收到媒体元素的源的类型来选择一或多个选项。举例来说,此用户接口可使得用户能够指示:应经由目的地装置镜射或不镜射从通信应用程序(例如,电子邮件、文字消息传递、视频电话、社交网络连接应用程序)或所有视频应用程序接收的所有媒体元素。作为另一实例,源装置110可提供用户接口,所述用户接口允许用户选择关于媒体的镜射的应用程序特定选项。举例来说,此用户接口可使得用户能够指示:应或不应经由目的地装置镜射从例如特定文字消息传递或特定视频应用程序等一或多个特定应用程序接收的媒体。根据再其它实例,此用户接口可使得用户能够选择关于媒体的镜射的用户特定选项。举例来说,此用户接口可使得用户能够指示:应或不应经由目的地装置镜射与特定用户相关联的所有媒体或来自一或多个特定类型的应用程序或与特定用户相关联的特定应用程序的媒体。作为一个特定实例,此用户接口可使得用户能够指示:应或不应经由目的地装置镜射所有媒体或由一或多个类型的应用程序或特定应用程序接收的媒体。在一些实例中,源装置210可基于经由如上文所描述的一或多个用户接口接收到的用户输入,通过比较所接收媒体元素的至少一个特性与至少一个预定参数来分辨所接收媒体元素(例如,描绘于图2中的第二媒体元素238)的显示状态。
在其它实施例中,源装置210可基于一或多个动态确定的参数来分辨所接收媒体元素的显示状态。举例来说,响应于接收到第二媒体元素238,源装置210可向用户呈现用户接口,所述用户接口使得用户能够选择是否经由目的地装置214镜射所接收的第二媒体元素238。举例来说,源装置210可经由源装置210的一或多个本地媒体接口(例如,描绘于图2中的屏幕212和/或与源装置210相关联的扬声器)连同相关联用户接口一起输出第二媒体元素238,所述相关联用户接口允许用户选择:1)经由目的地装置214镜射第二媒体元素238,还是2)防止镜射第二媒体元素238(同时经由源装置210的一或多个本地媒体接口继续输出第二媒体元素238)。作为一个特定实例,此用户接口可陈述“允许在外部显示器上镜射来自约翰史密斯的文字消息?”,且可使得用户能够选择是或否。在一些实例中,源装置210可基于一或多个动态确定的参数来分辨显示状态,所述一或多个动态确定的参数是基于响应于此用户接口而接收到的用户输入来定义。在一些实例中,源装置210还可分辨所接收显示元素用户接口输入的镜射状态,所述用户接口输入完全解除所接收的第二媒体元素238。根据这些实例,用户可与源装置210相互作用以致使将第二媒体元素238从源装置210的本地媒体输出中去除。
如上文所描述,在一些实例中,在源装置210分辨出第二媒体元素238的镜射状态之前,源装置210可能不控制目的地装置214以镜射第二媒体元素238。举例来说,除非源装置210基于与至少一个预定或动态确定的参数的比较确定应镜射第二媒体元素238,否则源装置210可致使目的地装置214不镜射第二媒体元素238,如上文所描述。
在一些实例中,在分辨出所接收媒体元素的镜射状态之前,源装置210可致使目的地装置214主动停止镜射本地图形输出230的媒体的至少一部分。举例来说,源装置210可致使目的地装置214镜射与第一媒体元素236相关联的音频媒体(即,与相关联于第一媒体元素的图像相关联的音轨),而不镜射与第二媒体元素238相关联的音频媒体。
源装置210可致使目的地装置214镜射与第一媒体元素236相关联的视频媒体,而不镜射与第二媒体元素238相关联的视频媒体。举例来说,在分辨出第二媒体元素238的镜射状态之前,源装置210可通过致使目的地装置的图形输出的至少一部分在视觉上“冻结”,例如,通过重复视频、图像或图形数据的给定帧,或者通过使目的地装置214完全停止输出音频和/或视觉媒体,而防止目的地装置214输出第二媒体元素。
举例来说,源装置210可通过以下操作冻结经镜射的图形输出232的整个帧:通过连续不断地发送表示不包含第二媒体元素238的先前呈现的帧的目的地装置214的数据,或通过将一或多个命令发送到目的地装置214,所述一或多个命令指导目的地装置214修改所接收媒体的处理以输出“经冻结”帧。根据另一实例,源装置210可停止将音频和/或视觉媒体发送到目的地装置214,且借此使目的地装置214完全停止输出音频和/或视觉媒体。
根据本发明的一些方面,源装置210可继续控制目的地装置214以镜射源装置210的一些本地媒体输出,而不镜射源装置210的其它本地媒体输出。参看图2的实例,源装置210可通过去除及/或冻结与第二媒体元素238相关联的经镜射的图形媒体的至少一个区而继续致使目的地装置214镜射包括第一媒体元素236(和/或媒体元素235、237及239)的本地图形媒体输出,而不镜射包括第二媒体元素238的本地图形媒体输出。在一些实例中,源装置210还可镜射与第一媒体元素236(和/或媒体元素235、237及239)相关联的源装置210的本地音频媒体输出,而不镜射与第二媒体元素238相关联的本地音频媒体输出。
参看图2,第一媒体元素236包括狗的图像(与视频序列形成对比的图片)。如图2的实例中所展示,第一媒体元素236的最左下部分(即,狗的图像的前腿,未展示于图2中)并未显示以便防止显示第二媒体元素238。
在一些实例中,在分辨出第二媒体元素238的镜射状态之前,源装置210可能不致使将区233从经镜射的图形输出232去除,如图2的实例中所展示。替代地,源装置210可致使经镜射的图形输出232的区233包含来自不包含第二媒体元素238的至少一个先前帧的图像。以此方式,源装置210可在视觉上“冻结”对应于区233的先前图像数据,此情形可使其它媒体(例如,描绘于图2中的经镜射的图形输出232的媒体元素235、236、237及239)的显示的中断最小化。因此,如果用户使用源装置210来经由目的地装置214镜射狗的静态照片(如图2的实例中所展示),那么第一媒体元素的最左下部分(对应于狗图像的前腿,在图2的实例中不可见)仍可显示并可供用户观察。
在一些实例中,为了基于先前显示的图像数据致使与第二媒体元素238相关联的区233在视觉上“冻结”(如上文所描述),源装置210可将一或多个命令发送到目的地装置214,同时使用所接收图像数据来镜射源装置210的其它本地媒体,所述一或多个命令致使目的地装置214修改其操作以重复地读取图像数据以输出与区233相关联的图像。
在一些实例中,此命令可包括在源装置310与用以镜射媒体的目的地装置之间的通信链路的频带内传达的带内信号。举例来说,在通信链路包括WI-FI通信链路的情况下,可在WI-FI信号的频带内传达此命令。
根据其它实例,此命令可包括带外信号。举例来说,在通信链路包括WI-FI通信链路的情况下,可使用不同于针对WI-FI信号定义的频带的频带及/或使用不同无线协议来传达此命令。举例来说,可使用例如蓝牙通信协议等一或多个低功率通信协议来传达此命令。
举例来说,源装置210可将一或多个带外信号传达到目的地装置214,以致使目的地装置214修改其操作以按不同于经镜射的图形数据的显示于区233外部的数个部分的方式处理与区233相关联的图像。
根据其它实例,源装置210可修改由源装置210处理本地媒体(例如,本地图形输出230)以产生经镜射的图形输出232的方式,以使得在经由目的地装置214输出时,第二媒体元素238不包含在经镜射的图形输出232中。举例来说,如下文参看图8到11进一步详细描述,源装置210可修改源装置210编码图形数据的方式,使得当由目的地装置214解码图形数据时,呈现经镜射的图形媒体,其中区233在视觉上冻结,如上文所描述。
根据本文中所描述的技术,当在镜射模式中操作时,源装置210可向用户提供保持例如第二媒体元素238等某些媒体对与目的地装置214相关联的输出接口的其它观察者保密的能力。此外,根据本文中所描述的技术,源装置210可能能够防止经由目的地装置镜射对于源装置210来说为本地的所接收媒体,同时使用户的享受经由目的地装置214镜射的源装置210的其它本地媒体的能力的中断最小化。
图3为说明与本发明的一或多个方面一致的源装置310的一个实例的框图,所述源装置310经配置以经由至少一个目的地装置(例如,分别描绘于图1和2中的目的地装置114、214)镜射本地媒体输出。如图3中所展示,装置210包含传感器模块340、用户输入模块345、存储器341、通信模块342、图形处理模块343、处理器344、本地显示屏幕312及电源349。处理器344可包含装置310的经配置以执行指令的一或多个组件。举例来说,处理器344可包括一或多个中央处理单元(CPU)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑组件,或经配置以执行控制装置310的操作的指令的其它组件。
存储器341包括装置310的经配置以存储数据和/或指令的一或多个组件,例如一或多个磁性存储组件、光学存储组件、随机存取存储器(RAM)存储组件、快闪存储器存储组件,或经配置以存储指令和/或数据的任何其它组件。举例来说,存储器341可存储操作装置310以输出媒体的一或多个软件程序。存储器341还可或替代地经配置以存储表示可由装置310输出的媒体的数据。举例来说,存储器310可存储可由装置310输出的可听声音、静态图像、视频或其它媒体的一或多个数字表示。
通信模块342可包括装置310的经配置以使得装置310能够与一或多个其它装置通信的一或多个硬件和/或软件组件。举例来说,通信模块342可包括实现无线通信(例如,WI-FI、蓝牙以及例如3G和4G蜂窝式网络等蜂窝式网络)或有线通信(例如,以太网)中的一者或一者以上的一或多个组件。在一些实例中,通信模块342可由装置310使用以控制另一装置(例如,描绘于图1中的目的地装置114)以镜射装置310的本地媒体输出。举例来说,源装置310可经由通信模块342耦合到目的地装置,使得源装置310可传达致使目的地装置根据本文中所描述的技术镜射数据的数据和/或指令。
传感器模块340可包括装置310的操作装置310的一或多个传感器(图2中未描绘)的一或多个硬件和/或软件组件。举例来说,传感器模块340可包括装置310的一或多个硬件和/或软件组件,所述一或多个硬件和/或软件组件经配置以操作一或多个麦克风、图像传感器(例如,摄像机传感器)、加速度计传感器、回转仪传感器、经配置以检测在屏幕312处或装置310的另一部分处执行的用户示意动作的单点或多点触控显示器传感器,或装置310可包含的任何其它类型的传感器。
图形处理模块343可包括装置310的一或多个硬件和/或软件组件,所述一或多个硬件和/或软件组件经配置以处理图形指令(例如,较高阶图形指令,例如根据开放图形库(OPENGL)标准的一或多个指令),且产生可用以经由屏幕312呈现图像的图像数据。举例来说,图形处理模块343可包括图形处理单元(GPU)和/或经配置以处理图形的其它组件。在一些实例中,图形模块343可基于从在处理器344上执行的一或多个软件应用程序接收的图形指令来处理图形。在其它实例中,图形模块343可基于从存储器341和/或通信模块342接收的图形指令来处理图形。
电源349可包括装置的经配置以存储例如电能等能量的一或多个组件,所述一或多个组件可用以向装置310的一或多个组件供电。举例来说,电源349可包括在装置310内部的一或多个电池,所述一或多个电池可用以在装置210未连接到例如壁式插座等外部电源时向装置310供电。在一些实例中,电源349可为有限电源。在一些实例中,可能需要减少由电源349存储的用以操作装置310的能量的量,使得装置310在被充电之间可使用历时较长时间段(例如,通过连接到外部电源)。
还如图3中所展示,装置310包含用户输入模块345。用户输入模块345可包括装置310的一或多个硬件和/或软件组件,所述一或多个硬件和/或软件组件经配置以接收及/或处理关于来自传感器模块440的所感测信息的一或多个指示,且将关于所感测信息的一或多个指示传达到装置310的一或多个其它组件。举例来说,用户输入模块345可接收关于用户与屏幕312相互作用的一或多个指示,且基于关于所检测的用户相互作用的指示来确定用户已在屏幕312(和/或装置的另一表面)处执行一或多个单点和/或多点触碰示意动作。根据此实例,用户输入模块345可将关于所确定的单点或多点触碰示意动作的指示发送到装置310的一或多个其它组件。举例来说,用户输入模块可将此指示发送到在处理器344上执行的一或多个软件应用程序。所述一或多个软件应用程序可响应于此所接收指示而控制装置310。
如图3中所描绘,装置310还可包含显示处理模块347和音频处理模块350。显示处理模块347可经配置以从一或多个源(例如,存储器341、通信模块342、图形处理模块343和/或在处理器344上执行的一或多个软件应用程序)接收表示一或多个媒体元素的图像数据,所述一或多个媒体元素表示用于显示的一或多个图像。显示处理模块347可经配置以处理此所接收数据以用于经由一或多个显示器呈现。举例来说,如图3中所描绘,显示处理模块347可处理图像数据以控制源装置310的本地显示器312。
显示处理模块346还可指导及/或处理所接收图像数据以控制在源装置310外部的一或多个显示器。举例来说,显示处理模块346可经由外部显示接口348控制在源装置310外部的至少一个显示器(例如,通信地耦合到描绘于图1中的目的地装置114的外部显示接口120)。作为一个实例,显示处理模块346可处理图像数据以按适合一或多个外部显示器的操作的格式发送到一或多个外部显示器,以便以视觉上令人满意的方式镜射源装置310的图形输出媒体。举例来说,显示处理模块346可处理图像数据以镜射本地图形输出以修改分辨率或对比度、重新设定大小、重新整形、重新定向、重新配置或以其它方式修改图像数据,从而以视觉上令人满意的方式供在源装置310外部的一或多个显示器输出。
还如图3中所描绘,源装置包含音频处理模块350。音频处理模块350可处理所接收图像数据以控制在源装置310外部的一或多个扬声器。举例来说,音频处理模块350可经由外部音频接口354控制通信地耦合到另一装置(例如,描绘于图1中的目的地装置114)并由所述另一装置控制的至少一个扬声器(例如,描绘于图1中的外部音频接口130)。音频处理模块350可处理音频数据以发送到一或多个外部音频接口,以镜射源装置310的本地音频媒体输出。举例来说,音频处理模块350可通过修改位速率、音量、音频编码技术或音频数据的其它特性来处理图像数据以用于经由在源装置310外部的一或多个扬声器输出。
还如图3中所描绘,源装置310包含与本发明的一或多个方面一致的镜射模块360。一股来说,镜射模块360可包括硬件和/或软件组件的任何组合,所述硬件和/或软件组件经配置以控制由显示处理模块347和/或音频处理模块350接收的一或多个媒体元素是否经由与本发明的一或多个方面一致的目的地装置进行镜射。举例来说,响应于从一或多个源(例如,存储器341、通信模块342、图形处理模块343和/或在处理器344上执行的一或多个软件应用程序)接收到新媒体元素,镜射模块360可比较所接收媒体元素的至少一个特性与至少一个参数。基于比较,镜射模块360可基于确定是否镜射媒体元素来分辨媒体元素的显示状态。在一些实例中,镜射模块360可防止镜射此所接收媒体元素,直到分辨出媒体元素的显示状态为止(例如,直到与至少一个参数的比较完成且镜射经确认或被拒绝为止)。
在图3的实例中,出于描述本发明的技术的目的,将显示处理模块347、音频处理模块350和镜射模块360描绘为分离的功能硬件和/或软件组件。在其它实施例中,本文中关于显示处理模块347、音频处理模块350和/或镜射模块360描述的功能性可由整体硬件和/或软件组件来执行。在其它实例中,显示处理模块347、音频处理模块350和/或镜射模块360中的任一者可包括多个硬件和/或软件组件,所述多个硬件和/或软件组件根据归功于如本文中所描述的显示处理模块347、音频处理模块350和/或镜射模块360的功能性组合地操作。此外,即使本文中所描述的一或多个显示处理模块347、音频处理模块350和/或镜射模块360以软件来实施,如本文中所描述的此类软件模块也可包括硬件,这是因为软件模块在功能上通过在硬件处理组件上执行而操作。
根据本发明的一或多个方面,当源装置310在镜射模式中操作时,镜射模块360可选择性地防止或允许经由目的地装置(例如,描绘于图1中的目的地装置114)镜射一或多个所接收媒体元素。举例来说,如图3中所展示,显示处理模块347、音频处理模块350和/或镜射模块360可接收第一媒体元素336。显示处理模块347和/或音频处理模块350可致使经由目的地装置(例如,描绘于图1中的目的地装置114)镜射源装置的本地媒体,以包含第一媒体元素336。
如图3中所展示,显示处理模块347、音频处理模块350和/或镜射模块360还可接收第二媒体元素338。镜射模块360可比较第二媒体元素的至少一个特性与至少一个参数。基于比较,镜射模块360可确定是否经由至少一个目的地装置镜射第二媒体元素338。
在一些实例中,镜射模块360可基于存储在存储器中的至少一个预定参数来确定是否镜射第二媒体元素336。举例来说,镜射模块360可经由显示处理模块347、图形处理模块343和/或在处理器344上执行的一或多个软件应用程序提供用户接口,用户可使用所述用户接口来预先选择关于经由一或多个目的地装置镜射媒体(如本文中所描述)的一或多个选项。举例来说,镜射模块360可提供允许用户选择关于媒体的镜射的应用程序特定选项的用户接口,所述应用程序特定选项可存储在存储器中作为一或多个预定参数以供稍后用于在确定所接收媒体元素的镜射状态中使用。基于存储在存储器中的此一或多个预定参数,镜射模块360可确认是否镜射所接收的第二媒体元素338,此情形可借此分辨出第二媒体元素338的显示状态。
根据其它实例,镜射模块360可基于一或多个动态确定的参数确定是否输出第二多媒体元素338。举例来说,响应于接收到第二媒体元素338,镜射模块360可经由显示处理模块347、图形处理模块343和/或在处理器344上执行的一或多个软件应用程序提供用户接口,所述用户接口允许用户选择是否镜射第二媒体元素338。在一些实例中,此用户接口可向用户提供选项以简单地允许或拒绝所接收的第二媒体元素338的镜射。在其它实例中,此用户接口还可或替代地使得用户能够选择一或多个预定参数,所述一或多个预定参数可应用于由镜射模块(和/或显示处理模块、音频处理模块350)接收的其它媒体元素。
在一些实例中,除非镜射模块基于如上文所描述的至少一个预定或动态确定的参数确定经由目的地装置314输出第二媒体元素338(即,分辨出第二媒体元素338的镜射状态),否则镜射模块360可致使不经由目的地装置314镜射第二媒体元素338。举例来说,在参数为预定参数的情况下,除非第二媒体元素338的至少一个特性与至少一个预定参数的比较确认指示应镜射第二媒体元素338,否则镜射模块360可致使不经由目的地装置输出第二媒体元素338。作为另一实例,在参数为动态确定的参数的情况下,在镜射模块360向源装置320的用户提供用户接口之前,镜射模块360可能不会致使经由目的地装置输出第二媒体元素337,所述用户接口使得用户能够确认是否镜射第二媒体元素338,且源装置310从用户接收关于应镜射第二媒体元素的此确认。
在一些实例中,在镜射模块360分辨出第二媒体元素338的镜射状态时,镜射模块360可修改由目的地装置进行的媒体的镜射,使得目的地装置不输出第二媒体元素338。举例来说,镜射模块360可致使显示处理模块347和/或音频处理模块350停止将任何媒体镜射到目的地装置(例如,经由外部显示接口348、外部音频接口354)。根据其它实例,镜射模块360可致使将所有经镜射的媒体冻结,直到镜射模块360分辨出第二媒体元素338的镜射状态为止。
根据其它实例,镜射模块360可致使目的地装置继续镜射源装置310的其它本地媒体(例如,包含第一媒体元素336的图形媒体,如图3中所展示),而不镜射第二媒体元素338,直到分辨出第二媒体元素338的镜射状态为止。举例来说,镜射模块360可识别经镜射的媒体中的对应于第二媒体元素338的至少一个区。根据这些实例,镜射模块可致使将经镜射的媒体中的此所识别区去除或冻结,此情形可防止镜射第二媒体元素338。
在一些实例中,镜射模块360还可致使目的地装置继续镜射源装置310的包含与第一媒体元素336相关联的本地音频媒体的本地音频媒体,直到分辨出第二媒体元素338的镜射状态为止,而不镜射与第二媒体元素338相关联的任何本地音讯媒体与经镜射的媒体。举例来说,音频处理模块350可能不会处理与第二媒体元素338相关联的任何音频媒体及/或将与第二媒体元素338相关联的任何音频媒体发送到目的地装置,直到分辨出第二媒体元素338的镜射状态为止。
在一些实例中,镜射模块360可致使经镜射的图形媒体的与第二媒体元素338相关联的至少一个区在经由目的地装置镜射的媒体中在视觉上冻结。举例来说,镜射模块360可发送一或多个带内或带外信号,所述一或多个带内或带外信号向目的地装置指示:目的地装置应修改其操作以处理所接收的图像数据,以便冻结经镜射的图形媒体的对应于第二媒体元素338的一或多个区。
根据其它实例,镜射模块360可致使源装置310自身在将图像数据发送到目的地装置之前处理图像数据,使得经镜射的媒体中的所识别区在视觉上冻结。根据一个此实例,在显示处理模块347包含视频编码模块且目的地装置包含对应视频解码模块的情况下,镜射模块360可将一或多个预测模式指配给与所识别区相关联的图像数据,所述一或多个预测模式通过致使视频解码模块使用来自至少一个先前显示的图像数据帧的图像数据呈现至少一个图像而致使图像数据一旦由解码器解码便冻结。作为一个特定实例,镜射模块360可致使显示处理模块347的视频编码模块将跳过预测模式指配给所识别区内的每一视频数据块,使得所述块中的每一者使用未改变的至少一个先前经解码帧的图像数据输出所识别区中的图像,如下文参看图8到12进一步详细描述。
图4为说明与本发明的一或多个方面一致的可由源装置320的镜射模块360执行的方法的一个实例的流程图。描绘于图4中的方法经描述为由源装置320的镜射模块360执行,然而,图4的方法可由原装置320的任何组件和/或任何其它装置来执行。
如图4中所展示,当源装置320在镜射模式中操作使得经由目的地装置镜射源装置320的本地媒体输出时,镜射模块380可接收本地媒体输出的媒体元素(401)。媒体元素可包括(例如)从在源装置320的处理器上执行的软件应用程序和/或任何其它源接收的音频和/或视觉数据。
还如图4中所描绘,镜射模块360可确定镜射模块360是否已知所接收媒体元素(402)。举例来说,镜射模块360可确定是否存在存储在存储器中的可由镜射模块360使用以确认是否应经由目的地装置114镜射所接收媒体元素的任何预定参数。
还如图4中所展示,如果镜射模块360确定存在存储在存储器中的确认应经由目的地装置镜射所接收媒体元素的预定参数,那么镜射模块360可比较所接收媒体元素的至少一个特性与一或多个预定参数(405)。基于比较,镜射模块360可确定是否致使经由目的地装置镜射所接收媒体元素(406)。
还如图4中所展示,如果镜射模块360确定不知道所接收媒体元素(例如,不存在存储在存储器中的可用以确认是否应镜射所接收媒体元素的任何预定参数),那么镜射模块360可向用户请求关于是否镜射所接收媒体元素的确认(403)。举例来说,响应于接收到第二媒体元素338,镜射模块360可经由显示处理模块347、图形处理模块343和/或在处理器344上执行的一或多个软件应用程序提供用户接口,所述用户接口允许用户特别地指示是否镜射所接收媒体元素。还如图4中所展示,镜射模块360可基于响应于所请求的确认而接收到的用户输入来确定镜射所接收媒体元素的授权(404)。
如上文所描述,在一些实例中,镜射模块360可基于存储在存储器中的一或多个预定参数来确定所接收媒体元素的镜射状态。还如上文所描述,镜射模块360可操作以向用户提供使得用户能够指定此类预定参数的用户接口。图5为说明与本发明的一或多个方面一致的使得用户能够识别一或多个此类预定参数的此用户接口501的一个实例的概念图。
根据图5的实例,描绘用户接口501,所述用户接口501可使得用户能够指定与应用程序(可由源装置320的处理器执行的“应用程序1”)相关联的一或多个镜射参数。如图5的实例中所展示,用户接口500使得用户能够选择一或多个应用程序特定参数。举例来说,描绘于图5中的按钮501可使得用户能够授权经由一或多个目的地装置镜射来自应用程序1的所有媒体输出。作为另一实例,还如图5中所描绘,按钮502可使得用户能够替代地指示:镜射模块360应在镜射从应用程序1接收的任何特定媒体元素之前向用户(和/或其它用户)请求授权。
还如图5中所展示,用户接口500在一些实例中还可使得用户能够识别与应用程序1相关联的一或多个用户特定设置。举例来说,描绘于图5中的按钮504可将用户带到另一用户接口(图中未描绘),所述另一用户接口可使得用户能够选择对于应用程序1的一或多个其它用户来说特定的一或多个镜射选项。举例来说,在应用程序1包括消息传递应用程序(例如,文字消息传递、电话、社交网络连接或其它信息传递应用程序)的情况下,描绘于图5中的按钮504可使得源装置310的用户能够识别一或多个其它用户或用户群,且在请求并接收到用户确认的情况下,指示应全部镜射来自应用程序1的媒体元素、全部防止镜射来自应用程序1的媒体元素,或应仅镜射来自应用程序1的媒体元素。
还如图5中所描绘,在源装置310经配置以经由一个以上目的地装置镜射源装置310的本地媒体输出的情况下,用户接口500可使得用户能够经由用户接口500将由用户指示的一或多个设置应用于一或多个特定目的地装置。举例来说,如图5中所展示,按钮504可使得用户能够选择以下各者中的一者或一者以上:耦合到位于用户的卧室中的显示器和/或相关联音频输出装置的目的地装置、位于用户的起居室中的显示器和/或相关联音频输出装置,和/或位于用户的汽车中的显示器和/或相关联音频输出装置。
如上文所描述,在一些实例中,镜射模块360可基于一或多个动态确定的参数来确定所接收媒体元素的镜射状态。举例来说,响应于接收到媒体元素,镜射模块360可提供使得用户能够确认或拒绝经由一或多个目的地装置镜射所接收信息元素的用户接口。在一个实例中,此用户接口可呈现使得用户能够确认或拒绝特定媒体元素的镜射的一或多个用户可选择按钮。此外,如果源装置310经配置以将媒体镜射到一个以上目的地装置且用户确认媒体元素的镜射,那么此用户接口还可使得用户能够识别经由其镜射媒体元素的一或多个目的地装置。
在其它实施例中,响应于此所接收媒体元素提供的此用户接口还可使得用户能够选择一或多个参数,所述一或多个参数可稍后由镜射模块360使用以确定由镜射模块接收的一或多个其它媒体元素的镜射状态。图6为描绘可响应于所接收媒体元素而呈现的此用户接口的一个实例的概念图。如图6中所描绘,用户接口600包含所接收媒体元素的识别610。举例来说,如图6中所展示,识别610指示:媒体元素包括经由应用程序“应用程序1”的来自用户约翰史密斯的消息的通知。
还如图6的实例中所描绘,用户接口600使得用户能够选择关于所接收媒体元素的镜射的一或多个用户和/或应用程序特定选项。举例来说,按钮606可使得用户能够指示:应镜射通过识别610识别的特定消息;然而,镜射模块应继续请求对镜射从应用程序1接收的其它媒体元素的授权。作为另一实例,按钮607可使得用户能够指示:应经由一或多个目的地装置镜射经由应用程序1接收的所有媒体输出。作为另一实例,按钮608可使得用户能够指示:不应镜射从应用程序1接收的任何媒体输出。作为另一实例,按钮609可使得用户能够指示:应镜射经由应用程序1接收的来自用户约翰史密斯的所有媒体输出。作为另一实例,按钮611可使得用户能够指示:不应镜射应用程序1的来自用户约翰史密斯的任何输出。作为另一实例,按钮612可使得用户能够指示:不应镜射来自与用户约翰史密斯相关联的任何应用程序的任何媒体输出。
还如图6中所描绘,在源装置310经配置以经由一个以上目的地装置镜射媒体输出的情况下,用户接口600可使得用户能够将由用户经由用户接口600指示的一或多个设置应用于一或多个特定目的地装置。举例来说,如图6中所展示,按钮604可使得用户能够选择以下各者中的一者或一者以上:耦合到位于用户的卧室中的显示器和/或相关联音频输出装置的目的地装置、位于用户的起居室中的显示器和/或相关联音频输出装置,和/或位于用户的汽车中的显示器和/或相关联音频输出装置。
图7为说明与本发明的一或多个方面一致的操作源装置以经由至少一个目的地装置镜射源装置的媒体输出的方法的一个实例的流程图。描绘于图7中的方法被描述为由图3中描绘的源装置310执行,然而,图7的方法可由任何装置来执行。
如图7中所描绘,源装置310可控制目的地装置(例如,描绘于图1中的目的地装置114)以经由输出接口(例如,外部显示接口120、与目的地装置相关联的外部音频接口)输出媒体(701)。举例来说,源装置310可控制目的地装置以镜射对于源装置来说为本地的媒体。还如图7中所描绘,源装置310可接收媒体的第一媒体元素(例如,描绘于图2中的第一媒体元素236、描绘于图3中的第一媒体元素336)(602)。举例来说,源装置310可接收来自在源装置310上执行的至少一个软件应用程序的媒体的第一媒体元素。
还如图7中所描绘,源装置310可将包括第一媒体元素的媒体输出到目的地装置(703)。还如图7中所描绘,源装置310可接收媒体的第二媒体元素(例如,描绘于图2中的第二媒体元素238、描绘于图3中的第二媒体元素338)(704)。还如图7中所展示,源装置310可基于与第二媒体元素相关联的至少一个参数来确定是否输出包含第二媒体元素的媒体(705)。举例来说,源装置310可比较第二媒体元素的至少一个特性与至少一个参数,且确定是否将包含第二媒体元素的媒体输出到目的地装置。在一些实例中,至少一个参数可包括存储在存储器中的先前所确定的参数,所述先前所确定的参数可基于先前所接收的用户接口输入。在其它实例中,可由源装置310来动态地确定至少一个参数。举例来说,响应于接收到第二媒体元素,源装置310可给用户提供用户接口,所述用户接口使得用户能够指定是否将包括第二媒体元素的媒体镜射到目的地装置。
在一些实例中,除非源装置分辨出第二媒体元素的镜射状态,否则源装置310可能不输出包括第二媒体元素的媒体。举例来说,除非源装置310从用户接收到经由用户接口镜射包括第二媒体的媒体的确认,否则源装置310可能不输出包括第二媒体元素的媒体。在一些实例中,在源装置310分辨出第二媒体元素的镜射状态时,源装置310可能或可能不控制目的地装置以输出其它媒体,例如包含第一媒体元素的媒体。
图8为描绘与本发明的一或多个方面一致的源装置810的一个实例的框图,所述源装置810经配置以经由至少一个目的地装置814镜射源装置810的媒体输出。如图8中所描绘,源装置810包含显示处理模块847。显示处理模块847可接收包括视频数据的媒体数据,且处理所接收媒体数据以供一或多个显示器输出,例如,源装置810的本地显示器(在图8的实例中未描绘)和/或目的地装置814或通信地耦合到目的地装置814的外部显示接口821。还如图8中所展示,目的地装置814可进一步包含显示处理模块882。显示处理模块882可操作以接收媒体数据的一或多个表示(例如,来自源装置810的视频数据),且操作外部显示接口821以呈现与所接收媒体数据一致的图像。
根据图8的实例,显示处理模块847可包含视频编码器820。一股来说,视频编码器820可经配置以在将媒体数据传送到另一装置以供播放之前编码媒体数据以压缩媒体数据或减小媒体数据的大小。举例来说,视频编码器820可在源装置810将媒体数据发送到目的地装置814之前压缩包括视频数据的媒体数据。作为一个实例,视频编码器820可压缩所接收媒体以产生经编码位流。在一些实例中,可将此经编码位流发送到另一装置,例如目的地装置814。
如图8中所展示,目的地装置814的显示处理模块882还可包含对应视频解码器830。一股来说,视频解码器830可经由通信链路816和/或存储媒体832(描绘于图8中)从源装置810接收经压缩数据(例如,经编码位流),且解压缩或解码经压缩数据以按一种格式重建视频数据以经由一或多个显示器输出。
还如图8中所展示、上文所描述,根据本发明的一些方面,源装置810控制目的地装置814以经由目的地装置814镜射源装置810的媒体输出。举例来说,源装置810可接收第一媒体元素836,且致使目的地装置814经由外部显示器821输出包括第一媒体元素836的视频媒体。
源装置810还可接收第二媒体元素838。如上文关于描绘于图3中的源装置310所描述,源装置810可防止在分辨出第二媒体元素838的镜射状态之前,经由目的地装置814镜射第二媒体元素838。举例来说,除非源装置810基于至少一个预定或动态确定的参数确认应镜射第二媒体元素838,否则源装置810可防止输出第二媒体元素838,如上文所描述。
还如上文所描述,在一些实例中,源装置810可通过致使目的地装置814暂停输出所有媒体而防止镜射第二媒体元素838。举例来说,源装置810可停止发送其它媒体到目的地装置814,直到源装置810分辨出第二媒体元素838的镜射状态为止。
在其它实例中,源装置810可防止镜射第二媒体元素838,从而致使目的地装置814将当前由目的地装置814输出的并不包含第二媒体元素838的媒体帧冻结。举例来说,源装置810可将一或多个带内或带外命令传达到目的地装置814以致使目的地装置814继续从存储器读取先前所显示的图像数据帧,直到源装置810分辨出第二媒体元素838的显示状态为止。作为另一实例,源装置810可重复地发送表示先前所显示的视频媒体帧的数据到目的地装置814。
根据再其它实例,源装置810可继续经由目的地装置814主动地镜射媒体,同时防止经由目的地装置814镜射第二媒体元素838。举例来说,如上文关于图2所描述,源装置810可识别媒体中待经由目的地装置814呈现的至少一个区(例如,描绘于图2中的区233),所述至少一个区对应于源装置810的本地媒体输出中的第二媒体元素838。
还如上文所描述,源装置810可操作以冻结及/或去除与第二媒体元素838相关联的此所识别区的媒体输出(例如,视频输出),以便防止第二媒体元素838包含于由目的地装置814镜射的媒体中,同时仍输出其它经镜射的媒体。
根据一些此类实例,源装置810可如上文所描述传达一或多个带内或带外命令信号到目的地装置814,所述一或多个带内或带外命令信号指导目的地装置814冻结及/或去除对应于第二媒体元素838的此所识别区的媒体输出。根据这些实例,目的地装置814可经配置以解译此命令信号,且响应于此所接收命令信号而操作。举例来说,响应于此命令信号,目的地装置814可通过不处理及/或输出对应于所识别区的所接收媒体数据而去除对应于此所识别区的媒体输出。根据另一实例,响应于此命令信号,目的地装置可经配置以通过重复地从存储器读取先前所显示帧的媒体数据来冻结对应于所识别区的媒体输出,直到源装置810分辨出第二媒体元素838的镜射状态为止。根据此实例,目的地装置814继续正常地接收及/或处理数据以显示在所识别区外部的经镜射的媒体。
根据其它实例,源装置810可能不传达致使改变目的地装置814的操作以便防止将第二媒体元素838连同其它媒体一起镜射的一或多个此类命令信号。根据这些实例,源装置810可自身处理待发送到目的地装置814的图像数据,使得第二媒体元素838并不包含于经由目的地装置814镜射的其它媒体中。举例来说,为了防止输出第二媒体元素838与其它经镜射的媒体,源装置810的镜射模块860可修改显示处理模块847的操作。
作为一个实例,镜射模块860可修改显示处理模块847的视频编码器820的操作以防止经由目的地装置814输出第二媒体元素838与其它经镜射的媒体。举例来说,镜射模块860可致使视频编码器820以不同于编码表示所识别区外部的媒体的数据的方式编码表示对应于第二媒体元素838的至少一个所识别区的媒体的数据。
作为一个实例,镜射模块860可致使视频编码器820编码指导解码器解码位流的一或多个语法元素作为表示待经由目的地装置814镜射的媒体的经编码位流的部分。举例来说,根据本文中所描述的技术,视频编码器920可用信号发出此类语法元素,所述语法元素指示:解码器应使用至少一个先前图像数据帧的数据,而无对在至少一个所识别区中显示图像的任何修改。以此方式,通过改变视频编码器830操作以编码与第二媒体元素838相关联的至少一个所识别区的方式,镜射模块860可致使继续经由目的地装置814主动地镜射源装置810的本地媒体,同时防止在经镜射的媒体中输出第二媒体元素838。
根据一些实例,视频编码器820和视频解码器830可根据例如目前在开发中的高效率视频译码(HEVC)标准等视频压缩标准操作,且可符合HEVC测试模型(HM)。替代地,视频编码器820和视频解码器830可根据例如或者被称作MPEG-4第10部分高级视频译码(AVC)的ITU-T H.264标准等其它专属或行业标准或者此类标准的扩展操作。然而,本发明的技术不限于任何特定译码标准。视频压缩标准的其它实例包含MPEG-2及ITU-T H.263。
在编码过程期间,视频编码器820可执行数种译码技术或操作。一股来说,视频编码器820对个别视频帧(或其它经独立译码单元,例如切片)内的视频块操作以便编码视频块。帧、切片、帧的多个部分、图片群(即,帧)或其它数据结构可经定义为包含多个视频块的独立数据单元,且可包含与此类不同的独立数据单元相关联的语法元素。独立数据单元内的视频块可具有固定或变化的大小,且大小可根据指定译码标准而不同。在一些情况下,每一视频帧可包含一系列可独立解码切片,且每一切片可包含一或多个宏块或LCU。
宏块为通过ITU H.264标准及其它标准定义的一种类型的视频块。宏块通常指16×16的数据块。ITU-T H.264标准支持各种块大小的帧内预测(例如,用于明度分量的16乘16、8乘8或4乘4,以及用于色度分量的8乘8),以及各种块大小的帧间预测(例如,用于明度分量的16乘16、16乘8、8乘16、8乘8、8乘4、4乘8和4乘4,以及用于色度分量的对应按比例缩放大小)。
新兴HEVC标准定义用于视频块的新术语。明确地说,在HEVC的情况下,视频块(或其分割区)可被称作“经译码单元”。在HEVC标准的情况下,可根据四叉树分割方案将最大译码单元(LCU)划分成越来越小的经译码单元(CU),且可将在所述方案中定义的不同CU进一步分割成所谓的预测单元(PU)和/或变换单元(TU)。LCU、CU和PU以及TU皆为在本发明的含义内的视频块。还可使用与HEVC标准或其它视频译码标准一致的其它类型的视频块。因此,短语“块”是指任何大小的视频块。此外,视频块有时可指像素域中的视频数据块,或例如离散余弦变换(DCT)域、类似于DCT的域、小波域或其类似者等变换域中的数据块。
再次参看图8,视频编码器820可执行预测性译码以便识别预测性块,在所述预测性译码中,将经译码的视频块与另一视频数据块相比较。跨越数个帧的此预测性译码过程常常被称作运动估计和运动补偿。运动估计相对于一或多个预测性帧(或其它经译码单元)的一或多个预测性视频块来估计视频块运动。运动补偿根据一或多个预测性帧或其它经译码单元产生所要预测性视频块。运动补偿可包含内插过程,在所述内插过程中,执行内插滤波以按分数像素精度产生预测性数据。还可在帧内执行此预测译码过程,其中同一帧内空间上相邻于当前块的像素用以产生预测性块。
在产生预测性块之后,将经译码的当前视频块与预测性块之间的差异译码为残余块,且使用预测语法(例如,运动向量)来识别预测性块。举例来说,视频编码器820可使用若干预测模式中的一者来译码每一块(即,根据HEVC的每一CU)。举例来说,根据HEVC,预测模式可包含(例如)用于Inter_2N×2N、Inter_N×2N、Inter_2N×N、Inter_N×N、Inter_2N×nU、Inter_2N×nD、Inter_nL×2N、Inter_nR×2N、Intra_2N×2N以及Intra_N×N的分裂模式、跳过模式、直接模式以及额外模式,其中此类模式提及PU的大小,及模式为帧内预测性模式还是帧间预测性模式。根据跳过模式,在无残余数据的情况下基于参考帧中的处于相同位置的块来重建当前CU(例如,当前PU),从而导致当前CU与参考帧中的处于相同位置的块相同。在直接模式中,在有残余数据的情况下基于参考帧中的处于相同位置的块来重建当前CU,从而导致当前PU对应于参考块加上残余数据。在一些实例中,此类预测模式一股可彼此排外,此情形意味着可使用模式中的仅一者来译码任何给定CU。
本发明描述用于进行以下操作的技术:由源装置(例如,描绘于图8中的源装置810)识别视频内待由另一目的地装置814显示的区(视频输出的至少一个区)以进行冻结,以及修改编码器820的操作以致使视频输出的所识别的至少一个区在媒体输出中在视觉上冻结。在一些实例中,视频输出的进行冻结的至少一个区可由描绘于图8中的镜射模块860来确定。根据这些实例,镜射模块860可基于源装置810的本地视频输出中与第二媒体元素838相关联的对应区来识别至少一个区,以便防止将第二媒体元素838与例如包含第一媒体元素836的媒体等其它经镜射的媒体(例如,其它经镜射的视频)一起输出。如上文所描述,镜射模块860可修改视频编码器820的操作以防止显示第二媒体元素838,直到分辨出第二媒体元素838的镜射状态为止。
为了编码视频数据,视频编码器820可将视频数据帧或切片划分成多个视频数据块(例如,根据HEVC的多个CU)。作为编码过程的部分,视频编码器820可将一或多个预测模式指配给解码视频数据的解码器,所述一或多个预测模式用信号发出相对于相同或不同视频数据帧或切片中的其它块预测每一特定块的内容的方式。
根据本发明的一些方面,响应于识别经镜射的视频中应冻结的至少一个区,源装置810可致使视频编码器820将跳过预测模式指配给所识别区内的每一块。图9为说明视频数据的帧901的一个实例的概念图。在一些实例中,帧901可对应于待显示的整个视频数据帧。根据其它实例,帧901可包括视频数据帧的子集,例如视频数据的切片或较大块(例如,宏块或较高层级CU,例如如上文所描述的LCU)。如图9的实例中所展示,视频编码器820可将帧901编码为多个视频数据块903。
如上文所描述,在正常操作下,当视频编码器820编码块903时,视频编码器820可将预测模式指配给帧901的每一块903。可将用于多个块中的每一者的预测模式作为与每一相应块相关联的一或多个语法元素用信号发出到解码器,作为表示帧901的视频数据的经编码位流的部分。举例来说,如图9中所展示,作为编码的结果,对帧901的每一块903指配分裂模式、跳过模式、直接模式或者帧内模式或帧间模式中的一者。仅出于示范性目的而提供描绘于图9中的帧901。在其它实施例中,视频编码器820可将图9的实例中未展示的一或多个其它预测模式指配给帧901的一或多个块903。举例来说,根据H.264视频译码标准,视频编码器820可将九个不同预测模式中的一者指配给帧901的每一块903。作为另一实例,根据用于视频译码的所提议的HEVC标准,视频编码器820可将33个预测模式中的一者指配给帧901的每一块903。
还如图9中所描绘,源装置810可识别帧901中将进行冻结的区905。举例来说,如上文所描述,源装置810的镜射模块860可识别区905为对应于描绘于图8中的第二媒体元素838的区,以便防止经由目的地装置814镜射第二媒体元素838。
如图9中所描绘,在正常操作下,视频编码器820可将多个预测模式中的一者指配给帧901的所有视频数据块903。举例来说,在正常操作下,视频编码器820可对帧的不会改变的一部分中的视频数据块指配跳过预测模式,使得解码块的解码器不会将任何残余块应用于经编码块以重建帧。替代地,解码器可单独使用预测块来重建块。作为另一实例,在正常操作下,视频编码器820可对图像改变的一或多个块指配指导解码器将残余块应用于预测块以重建经编码帧的多个其它预测模式中的预测模式。
根据本发明的一些方面,不是视频编码器820将例如分裂、跳过、直接或多个帧内和/或帧间预测模式中的一者等不同预测模式指配给所识别区的块,而是视频编码器可替代地将同一预测模式指配给所识别区905的所有块,而无关于帧与先前帧之间的差异,如图10的实例中所展示。举例来说,如图10中所展示,视频编码器820可对帧911的所识别区905内的每一视频数据块指配跳过预测模式。以此方式,视频编码器820可以不同于标准预测模式中的方式编码区内的块,其中区内的块中的至少一些块将被指配而具有一或多个其它预测模式,所述一或多个其它预测模式致使解码器将残余数据块应用于预测性块以便重建块。
在一些实例中,响应于识别帧901中将进行冻结的区905,视频编码器820可产生表示帧911的经编码位流(展示于图10中),所述经编码位流包含用信号发出指配给所识别区905的每一块的跳过预测模式的一或多个语法元素。视频编码器820可将经编码位流发送到视频解码器,例如描绘于图8中的目的地装置814的视频解码器830。视频解码器830可经由直接通信链路816或经由存储媒体(例如,描绘于图8中的存储装置832)从编码器820接收经编码位流。视频解码器830可解码所接收的经编码位流,以重建帧911以便经由外部显示器821输出帧911。
为了解码所接收的经编码位流,视频解码器830可正常地操作,且应用视频编码器820指配给所识别区905内的每一块的用信号发出的跳过预测模式,所述跳过预测模式可致使视频解码器830不应用例如残余块等任何改变来重建视频数据帧911。以此方式,源装置810的编码器820可使用至少一个先前所呈现帧的未改变的数据来输出(显示)与至少一个区905相关联的媒体,此情形可致使至少一个区对于观察者显现为在视觉上冻结。在一些实例中,源装置810(例如,镜射模块860)可致使编码器820冻结视频输出的对应于如上文所描述的所识别区905的此部分,以便防止经由目的地装置814镜射与所识别区905相关联的如图8中所描绘的第二媒体元素838。
图11为说明与本发明的一或多个方面一致的编码视频数据的方法的一个实例的流程图。图11的实例经描述为由描绘于图8的实例中的源装置810执行,然而,可使用任何装置来执行图11的方法。
如图11中所展示,源装置810可识别视频数据帧的至少一个区(903)以在经由目的地装置输出时进行冻结(1101)。还如图11中所展示,源装置810(例如,视频编码器820)可对帧的在所识别区外部的多个块中的每一者指配多个预测模式中的一者(1102)。举例来说,源装置810可对多个块中的每一者指配分裂模式、跳过模式、直接模式或者帧内模式或帧间模式或者其它预测模式中的一者。在一些实例中,源装置810可基于所述块中的每一者与可用以重建所述块的至少一个预测性块之间的一或多个差异,对在所识别区外部的多个块中的至少一些块指配预测模式。举例来说,如果在所识别区外部的块之间存在差异,那么源装置810可对块指配直接、帧内或帧间预测模式中的一者,所述预测模式可供解码器使用以确定可应用于预测性块以重建块的残余块。在其它实例中,如果在所识别区外部的块与可用以重建块的预测性块之间不存在差异,那么源装置810可对块指配跳过预测模式。
还如图11中所展示,源装置810可对帧的在所识别区内的全部多个块指配相同预测模式。举例来说,源装置810可对所识别区内的多个块中的每一者指配跳过预测模式(1103)。在一些实例中,源装置810可对所识别区内的多个块中的每一者指配跳过预测模式,而无关于在块与可供解码器使用以重建块的预测性块之间是否存在任何差异。
还如图11中所展示,源装置810可将视频数据帧输出到目的地装置(例如,描绘于图8中的目的地装置814),以致使在经由目的地装置输出帧时所识别的至少一个区在帧内在视觉上冻结(1104)。举例来说,目的地装置可包含视频解码器830,且视频数据帧可由视频解码器接收作为经编码位流。视频解码器可使用与在经编码位流中用信号发出的视频数据块相关联的一或多个预测模式解码所接收的经编码位流。根据此实例,因为所识别区内的视频数据块皆被指配跳过模式(如上文所描述),所以当视频解码器正常地操作以解码块时,先前输出(例如,显示)的图像数据可供视频解码器用于所识别的至少一个区。以此方式,所显示图像中的所识别的至少一个区对于观察者可显现为在视觉上冻结。
返回参看图3的实例,根据本发明的一些方面,源装置310可在镜射模式中操作以经由目的地装置314镜射源装置的本地媒体,包含音频和/或视频媒体。如上文所描述,源装置310可接收经由目的地装置314而镜射的媒体的媒体元素(例如,描绘于图3中的第二媒体元素336),且基于与媒体元素相关联的至少一个参数确定是否镜射所接收媒体元素。所接收媒体元素可能或可能不通过源装置310的本地音频或显示接口输出。还如上文所描述,源装置310可操作以防止经由目的地装置314输出媒体元素(例如,通过冻结或去除与经镜射的媒体中对于源装置310来说为本地的媒体中的媒体元素相关联的一或多个区),直到源装置310分辨出媒体元素的镜射状态为止。为了进行此操作,源装置310可继续镜射源装置的其它本地媒体输出,进行修改以使得不经由目的地装置314输出所接收媒体元素。在一些实例中,一旦源装置310分辨出媒体元素的镜射状态(例如,确定是否镜射媒体元素与其它媒体),源装置310便可暂停修改镜射到源装置310的本地媒体输出,使得不经由目的地装置314输出所接收媒体。替代地,源装置310可按照惯例返回到镜射其它本地媒体输出。
根据一些实例,视频序列可包含一系列视频帧或图片。可将帧或图片布置成多个图片群(GOP),其一股包括一系列的一或多个视频图片。GOP可在GOP的标头、图片中的一者或一者以上的标头中或在别处包含语法数据,所述语法数据描述包含在GOP中的图片。在一些实例中,GOP的标头中的语法数据可识别GOP的图片,这是因为存取点可用作播放视频序列的开始点。在一些实例中,此存取点可包括视频序列的可独立解码的帧。可独立解码的帧可能不依赖于来自任何其它帧的待由解码器解码的数据。
如上文所描述,源装置310可从在正常模式中操作以经由目的地装置314镜射源装置310的本地媒体输出转变到在修改模式中操作,以防止经由目的地装置镜射本地媒体的一或多个媒体元素。根据本发明的一些方面,当源装置310在如上文所描述的数个模式之间转变时,源装置310可控制目的地装置814以在新GOP处(例如,在新GOP的所识别存取点处)开始输出经镜射的媒体(例如,经镜射的视频媒体)。在一些实例中,当源装置310转变到在修改模式中操作时,源装置可使用较长GOP来开始输出媒体。在一些实例中,当源装置310转变回到正常操作模式时,源装置310可使用较短GOP来开始输出媒体。
图12为描绘与本发明的一或多个方面一致的用于经由目的地装置314镜射本地媒体的技术的一个实例的流程图。如图12中所展示,源装置310可操作以致使经由目的地装置314镜射源装置310的包含视频媒体的本地媒体(1201)。还如图12中所展示,源装置310可识别经镜射的媒体的至少一个部分以进行冻结(1202)。举例来说,源装置310可识别经镜射的媒体的至少一个部分以进行冻结,以防止经由目的地装置镜射源装置310的至少一个所接收本地媒体元素,如本文中所描述。还如图12中所展示,响应于识别出经镜射的媒体的至少一个区冻结(例如,响应于接收到媒体的新媒体元素),源装置310可致使目的地装置314使用第一GOP起始媒体的镜射来镜射具有经冻结的所识别区的媒体(1203)。举例来说,源装置310可致使目的地装置在第一GOP的所识别存取点图片处开始镜射具有经冻结的所识别区的媒体。还如图12中所展示,源装置310可确定:至少一个冻结区将在经镜射的媒体中解冻(1204)。还如图12中所描绘,源装置310可致使目的地装置使用不同于第一GOP的第二GOP镜射具有经解冻的所识别区的媒体(1205)。举例来说,源装置310可致使目的地装置在第二GOP的所识别存取点图片处开始镜射媒体。在一些实例中,源装置310可选择第一GOP以具有相较于第二GOP来说较长的长度。
在一或多个实例中,所描述的功能可以硬件、软件、固件或其任何组合来实施。如果以软件来实施,那么可将所述功能作为一或多个指令或代码存储在计算机可读媒体上或经由计算机可读媒体而发射,且由基于硬件的处理单元来执行。计算机可读媒体可包含计算机可读存储媒体(其对应于例如数据存储媒体等有形媒体)或通信媒体,通信媒体包含(例如)根据通信协议促进计算机程序从一处传送到另一处的任何媒体。以此方式,计算机可读媒体一股可对应于(1)非暂时性的有形计算机可读存储媒体,或(2)例如信号或载波等通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索指令、代码和/或数据结构以用于实施本发明中所描述的技术的任何可用媒体。计算机程序产品可包含计算机可读媒体。
以实例说明且非限制,此类计算机可读存储媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、快闪存储器,或可用以存储呈指令或数据结构形式的所要程序代码且可由计算机存取的任何其它媒体。而且,恰当地将任何连接称作计算机可读媒体。举例来说,如果使用同轴电缆、光缆、双绞线、数字订户线(DSL)或例如红外线、无线电及微波等无线技术从网站、服务器或其它远程源传输指令,那么同轴电缆、光缆、双绞线、DSL或例如红外线、无线电及微波等无线技术包含在媒体的定义中。然而,应理解,计算机可读存储媒体和数据存储媒体并不包含连接、载波、信号或其它暂时性媒体,而是替代地针对非暂时性有形存储媒体。如本文中所使用,磁盘及光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字影音光盘(DVD)、软磁盘及蓝光光盘,其中磁盘通常磁性地复制数据,而光盘使用激光光学地复制数据。上述各者的组合也应包含在计算机可读媒体的范围内。
可由例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路等一或多个处理器来执行指令。因此,如本文中所使用的术语“处理器”可指上述结构或适合于实施本文中所描述的技术的任何其它结构中的任一者。此外,在一些方面,可将本文中所描述的功能性提供于经配置以用于编码及解码的专用硬件和/或软件模块内,或并入于组合式编码译码器中。并且,可将所述技术完全实施于一或多个电路或逻辑元件中。
本发明的技术可在广泛多种装置或设备中予以实施,所述装置或设备包含无线手机、集成电路(IC)或一组IC(例如,芯片组)。在本发明中描述各种组件、模块或单元以强调经配置以执行所揭示技术的装置的功能方面,但未必需要通过不同硬件单元来实现。确切地说,如上文所描述,可将各种单元组合在编码译码器硬件单元中,或通过互操作性硬件单元(包括如上文所描述的一或多个处理器)的集合结合合适软件和/或固件来提供所述单元。
已描述了本发明的各种实施例。这些和其它实施例在所附权利要求书的范围内。

Claims (56)

1.一种用于经由目的地装置镜射源装置的本地媒体的方法,所述方法包括:
接收所述源装置的所述本地媒体的第一媒体元素;
致使所述目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体;
接收所述源装置的所述本地媒体的第二媒体元素;以及
基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体。
2.根据权利要求1所述的方法,其中所述至少一个参数是基于用户输入。
3.根据权利要求2所述的方法,其中所述至少一个参数是基于存储在存储器中的先前所接收的用户输入。
4.根据权利要求2所述的方法,其中所述至少一个参数是基于响应于接收到所述第二媒体元素而接收到的动态确定的用户输入。
5.根据权利要求4所述的方法,其进一步包括:
响应于从至少一个软件应用程序接收到所述第二媒体元素,给用户提供用户接口,所述用户接口使得所述用户能够指示是否控制所述目的地装置以镜射所述第二输出元素。
6.根据权利要求1所述的方法,其进一步包括:
致使所述目的地装置不镜射所述第二媒体元素,直到基于所述至少一个参数确定是否镜射所述第二媒体元素为止。
7.根据权利要求6所述的方法,其进一步包括:
致使所述目的地装置镜射包含所述第一媒体元素的其它本地媒体,同时致使所述目的地装置不镜射所述第二媒体元素。
8.根据权利要求7所述的方法,其中致使所述目的地装置镜射包含所述第一媒体元素的其它本地媒体同时致使所述目的地装置不镜射所述第二媒体元素包括:
致使所述目的地装置镜射所述第一媒体元素,包含读取存储在存储器中的至少一些先前输出的媒体。
9.根据权利要求7所述的方法,其中致使所述目的地装置镜射包含所述第一媒体元素的其它本地媒体同时致使所述目的地装置不镜射所述第二媒体元素包括:
将包含所述第一输出元素且并不包含所述第二输出元素的所述媒体发送到所述目的地装置。
10.根据权利要求9所述的方法,其中所述媒体包括视频媒体,且
其中致使所述目的地装置镜射包含所述第一媒体元素的其它本地媒体同时致使所述目的地装置不镜射所述第二媒体元素包括:
识别所述媒体的对应于所述第二媒体元素的区;以及
编码所述本地媒体以产生经镜射的媒体以通过所述目的地装置镜射,其中编码所述本地媒体包括:
将多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块;以及
将跳过预测模式指配给所述媒体的所述所识别区内的所述多个块中的每一者;以及
将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区。
11.根据权利要求10所述的方法,其中将多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块包括指配选自由以下各者组成的组群的一或多个预测模式:
分裂模式;
所述跳过模式;
直接模式;
帧内模式;以及
帧间模式。
12.根据权利要求1所述的方法,其中接收所述第一媒体元素及接收所述第二媒体元素包括从在至少一个计算装置上执行的一或多个软件应用程序接收所述第一媒体元素和所述第二媒体元素。
13.根据权利要求12所述的方法,其中所述至少一个软件应用程序包括选自由以下各者组成的组群的一或多个软件应用程序:
视频播放应用程序;
照片观察应用程序;
音频播放应用程序;
电话应用程序;
文字消息传递应用程序;
电子邮件应用程序;以及
游戏应用程序。
14.一种源装置,其经配置以经由目的地装置镜射所述源装置的本地媒体,所述源装置包括:
镜射模块,其经配置以:
接收所述源装置的所述本地媒体的第一媒体元素;
致使目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体;
接收所述本地媒体的第二媒体元素;以及
基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体。
15.根据权利要求14所述的装置,其中所述至少一个参数是基于用户输入。
16.根据权利要求15所述的装置,其中所述至少一个参数是基于存储在存储器中的先前所接收的用户输入。
17.根据权利要求15所述的装置,其中所述至少一个参数是基于响应于接收到所述第二媒体元素而接收到的动态确定的用户输入。
18.根据权利要求17所述的装置,其中所述镜射模块经进一步配置以:
响应于从至少一个软件应用程序接收到所述第二媒体元素,给用户提供用户接口,所述用户接口使得所述用户能够指示是否控制所述目的地装置以镜射所述第二输出元素。
19.根据权利要求14所述的装置,其中所述镜射模块经进一步配置以:
致使所述目的地装置不镜射所述第二媒体元素,直到基于所述至少一个参数确定是否镜射所述第二媒体元素为止。
20.根据权利要求19所述的装置,其中所述镜射模块经进一步配置以:
致使所述目的地装置镜射包含所述第一媒体元素的其它本地媒体,同时致使所述目的地装置不镜射所述第二媒体元素。
21.根据权利要求20所述的装置,其中所述镜射模块经进一步配置以:
基于读取存储在存储器中的至少一些先前输出的媒体而致使所述目的地装置镜射所述第一媒体元素。
22.根据权利要求19所述的装置,其中所述镜射模块经进一步配置以:
将包含所述第一输出元素且并不包含所述第二输出元素的所述媒体发送到所述目的地装置。
23.根据权利要求22所述的装置,其中所述媒体包括视频媒体,且其中所述镜射模块经进一步配置以:
识别所述媒体的对应于所述第二媒体元素的区;以及
编码所述本地媒体以产生经镜射的媒体以通过所述目的地装置镜射,包含:
将多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块;以及
将跳过预测模式指配给所述媒体的所述所识别区内的所述多个块中的每一者;以及
将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区。
24.根据权利要求23所述的装置,其中所述镜射模块经进一步配置以:
将选自由以下各者组成的组群的多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块中的每一者:
分裂模式;
所述跳过模式;
直接模式;
帧内模式;以及
帧间模式。
25.根据权利要求14所述的装置,其中接收所述第一媒体元素及接收所述第二媒体元素包括从在至少一个计算装置上执行的一或多个软件应用程序接收所述第一媒体元素和所述第二媒体元素,且其中所述至少一个软件应用程序包括选自由以下各者组成的组群的一或多个软件应用程序:
视频播放应用程序;
照片观察应用程序;
音频播放应用程序;
电话应用程序;
文字消息传递应用程序;
电子邮件应用程序;以及
游戏应用程序。
26.一种存储指令的计算机可读存储媒体,所述指令经配置以致使计算装置进行以下操作:
接收源装置的本地媒体的第一媒体元素;
致使目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体;
接收所述本地媒体的第二媒体元素;以及
基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体。
27.根据权利要求26所述的计算机可读存储媒体,其中所述至少一个参数是基于用户输入。
28.根据权利要求27所述的计算机可读存储媒体,其中所述至少一个参数是基于存储在存储器中的先前所接收的用户输入。
29.根据权利要求27所述的计算机可读存储媒体,其中所述至少一个参数是基于响应于接收到所述第二媒体元素而接收到的动态确定的用户输入。
30.根据权利要求29所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
响应于从至少一个软件应用程序接收到所述第二媒体元素,给用户提供用户接口,所述用户接口使得所述用户能够指示是否控制所述目的地装置以镜射所述第二输出元素。
31.根据权利要求26所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
致使所述目的地装置不镜射所述第二媒体元素,直到基于所述至少一个参数确定是否镜射所述第二媒体元素为止。
32.根据权利要求31所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
致使所述目的地装置镜射包含所述第一媒体元素的其它本地媒体,同时致使所述目的地装置不镜射所述第二媒体元素。
33.根据权利要求32所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
基于读取存储在存储器中的至少一些先前输出的媒体而致使所述目的地装置镜射所述第一媒体元素。
34.根据权利要求32所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
将包含所述第一输出元素且并不包含所述第二输出元素的所述媒体发送到所述目的地装置。
35.根据权利要求34所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
识别所述媒体的对应于所述第二媒体元素的区;以及
编码所述本地媒体以产生经镜射的媒体以通过所述目的地装置镜射,包含:
将多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块;以及
将跳过预测模式指配给所述媒体的所述所识别区内的所述多个块中的每一者;以及
将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区。
36.根据权利要求35所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置指配选自由以下各者组成的组群的所述多个预测模式中的所述一者:
分裂模式;
所述跳过模式;
直接模式;
帧内模式;以及
帧间模式。
37.根据权利要求26所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置从在至少一个计算装置上执行的一或多个软件应用程序接收所述第一媒体元素和所述第二媒体元素包括,且其中所述至少一个软件应用程序包括选自由以下各者组成的组群的一或多个软件应用程序:
视频播放应用程序;
照片观察应用程序;
音频播放应用程序;
电话应用程序;
文字消息传递应用程序;
电子邮件应用程序;以及
游戏应用程序。
38.一种源装置,其经配置以经由目的地装置镜射所述源装置的本地媒体,所述源装置包括:
用于接收所述源装置的所述本地媒体的第一媒体元素的装置;
用于致使目的地装置经由与所述目的地装置相关联的输出接口来镜射包括所述第一媒体元素的所述本地媒体的装置;
用于接收所述本地媒体的第二媒体元素的装置;以及
用于基于与所述第二媒体元素相关联的至少一个参数确定是否致使所述目的地装置镜射包含所述第二媒体元素的所述本地媒体的装置。
39.根据权利要求38所述的装置,其进一步包括:
用于确定所述至少一个参数是基于用户输入的装置。
40.根据权利要求39所述的装置,其进一步包括:
用于基于存储在存储器中的先前所接收的用户输入确定所述至少一个参数的装置。
41.根据权利要求39所述的装置,其进一步包括:
用于响应于接收到所述第二媒体元素而动态地确定所接收用户输入的装置。
42.根据权利要求41所述的装置,其进一步包括:
用于响应于从至少一个软件应用程序接收到所述第二媒体元素而给用户提供用户接口的装置,所述用户接口使得所述用户能够指示是否控制所述目的地装置以镜射所述第二输出元素。
43.根据权利要求41所述的装置,其进一步包括:
用于致使所述目的地装置不镜射所述第二媒体元素直到基于所述至少一个参数确定是否镜射所述第二媒体元素为止的装置。
44.一种编码视频数据帧的方法,其包括:
识别视频数据帧的至少一个区以进行冻结;
将多个预测模式中的一者指配给所述视频帧中的驻留于所述所识别的至少一个区外部的多个视频数据块中的每一块;以及
将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者;以及
将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区。
45.根据权利要求44所述的方法,将多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块指配选自由以下各者组成的组群的一或多个预测模式:
分裂模式;
所述跳过模式;
直接模式;
帧内模式;以及
帧间模式。
46.根据权利要求44所述的方法,其中识别视频数据帧的所述至少一个区以进行冻结包括识别所述至少一个区以防止经由所述目的地装置将对于源装置来说为本地的媒体的所接收媒体元素连同对于所述源装置来说为本地的其它媒体一起镜射。
47.根据权利要求44所述的方法,其进一步包括:
将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者包括将所述跳过预测模式指配给所述块中的每一者,无论在相应块与可供解码器使用以重建所述相应块的预测性块之间是否存在任何差异。
48.一种经配置以编码视频数据帧的装置,其包括:
镜射模块,其经配置以:
识别视频数据帧的至少一个区以进行冻结;以及
视频编码器,其经配置以:
将多个预测模式中的一者指配给在所述所识别的至少一个区外部的多个视频数据块中的每一块;以及
将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者;以及
将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区。
49.根据权利要求48所述的装置,其中所述视频编码器经配置以将选自由以下各者组成的组群的多个预测模式中的一者指配给在所述所识别区外部的多个视频数据块:
分裂模式;
所述跳过模式;
直接模式;
帧内模式;以及
帧间模式。
50.根据权利要求48所述的装置,其中所述镜射模块经进一步配置以基于以下操作识别视频数据帧的所述至少一个区以进行冻结:识别所述至少一个区,以防止经由所述目的地装置将对于源装置来说为本地的媒体的所接收媒体元素连同对于所述源装置来说为本地的其它媒体一起镜射。
51.根据权利要求48所述的装置,其中所述视频编码器经进一步配置以:
将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者包括将所述跳过预测模式指配给所述块中的每一者,无论在相应块与可供解码器使用以重建所述相应块的预测性块之间是否存在任何差异。
52.一种存储指令的计算机可读存储媒体,所述指令经配置以致使计算装置进行以下操作:
识别视频数据帧的至少一个区以进行冻结;
将多个预测模式中的一者指配给在所述所识别的至少一个区外部的多个视频数据块中的每一块;
将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者;以及
将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区。
53.根据权利要求52所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
将选自由以下各者组成的组群的多个预测模式中的一者指配给在所述所识别区外部的所述多个视频数据块中的每一者:
分裂模式;
所述跳过模式;
直接模式;
帧内模式;以及
帧间模式。
54.根据权利要求52所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
识别视频数据帧的所述至少一个区以进行冻结,以防止经由所述目的地装置将对于源装置来说为本地的媒体的所接收媒体元素连同对于所述源装置来说为本地的其它媒体一起镜射。
55.根据权利要求52所述的计算机可读存储媒体,其中所述指令进一步致使所述计算装置:
将所述跳过预测模式指配给所述所识别的至少一个区内的所述块中的每一者,无论在相应块与可供解码器使用以重建所述相应块的预测性块之间是否存在任何差异。
56.一种经配置以编码视频数据帧的装置,其包括:
用于识别视频数据帧的至少一个区以进行冻结的装置;
用于将多个预测模式中的一者指配给在所述所识别的至少一个区外部的多个视频数据块中的每一块的装置;以及
用于将跳过预测模式指配给所述至少一个区内的所述多个块中的每一者的装置;以及
用于将所述视频数据帧输出到目的地装置以致使在经由所述目的地装置输出所述帧时在所述帧中在视觉上冻结所述所识别的至少一个区的装置。
CN201280060922.0A 2011-12-12 2012-11-13 媒体输出的选择性镜射 Active CN103988166B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/323,399 2011-12-12
US13/323,399 US9008177B2 (en) 2011-12-12 2011-12-12 Selective mirroring of media output
PCT/US2012/064830 WO2013089954A1 (en) 2011-12-12 2012-11-13 Selective mirroring of media output

Publications (2)

Publication Number Publication Date
CN103988166A true CN103988166A (zh) 2014-08-13
CN103988166B CN103988166B (zh) 2017-08-25

Family

ID=47297442

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280060922.0A Active CN103988166B (zh) 2011-12-12 2012-11-13 媒体输出的选择性镜射

Country Status (7)

Country Link
US (1) US9008177B2 (zh)
EP (1) EP2791777B1 (zh)
JP (2) JP5989797B2 (zh)
KR (1) KR101579025B1 (zh)
CN (1) CN103988166B (zh)
IN (1) IN2014CN04121A (zh)
WO (1) WO2013089954A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104683764A (zh) * 2015-02-03 2015-06-03 青岛大学 基于fpga图像压缩技术的3g远程传输网络摄像头
CN113342247A (zh) * 2021-08-04 2021-09-03 北京达佳互联信息技术有限公司 素材处理方法、装置、电子设备及存储介质

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5991742B2 (ja) * 2011-08-29 2016-09-14 キヤノン株式会社 情報処理装置、表示状態復元方法及びプログラム
US9277230B2 (en) 2011-11-23 2016-03-01 Qualcomm Incorporated Display mode-based video encoding in wireless display devices
US9665339B2 (en) 2011-12-28 2017-05-30 Sonos, Inc. Methods and systems to select an audio track
KR102027357B1 (ko) * 2012-04-24 2019-10-01 삼성전자주식회사 외부 기기의 스크린 상에 디스플레이된 정보를 탐색하는 터치 스크린을 가지는 휴대용 기기 및 그의 정보 탐색 방법
US9632648B2 (en) 2012-07-06 2017-04-25 Lg Electronics Inc. Mobile terminal, image display device and user interface provision method using the same
JP2014225863A (ja) * 2013-04-16 2014-12-04 株式会社リコー 情報処理装置、画像表示装置、情報処理システム及び情報処理方法
KR20140140957A (ko) * 2013-05-30 2014-12-10 삼성전자주식회사 화면 데이터의 미러링 방법, 저장 매체 및 전자 장치
EP2816761A1 (en) * 2013-06-17 2014-12-24 Thomson Licensing Wifi display compatible network gateway
US8819268B1 (en) * 2013-06-19 2014-08-26 Google Inc. Systems and methods for notification of device mirroring
KR102213490B1 (ko) 2013-09-03 2021-02-08 삼성전자주식회사 스크린을 제어하는 전자 장치 및 방법
KR102088384B1 (ko) * 2013-09-04 2020-05-28 삼성전자주식회사 디스플레이 기기의 제어 방법, 그에 따른 싱크 기기 및 그에 따른 미러링 시스템
KR102078867B1 (ko) * 2013-09-17 2020-02-18 삼성전자주식회사 제어권 관리 방법, 그에 따른 클라이언트 기기 및 그에 따른 마스터 기기
US9226137B2 (en) * 2013-09-30 2015-12-29 Qualcomm Incorporated Method and apparatus for real-time sharing of multimedia content between wireless devices
IN2013CH04818A (zh) * 2013-10-25 2015-08-07 Samsung India Software Operations Pvt Ltd
KR102227661B1 (ko) * 2014-01-08 2021-03-15 삼성전자주식회사 화면 미러링 방법 및 그에 따른 장치
JP6484914B2 (ja) * 2014-01-14 2019-03-20 船井電機株式会社 情報処理機器および操作システム
US9263000B2 (en) * 2014-01-23 2016-02-16 Nvidia Corporation Leveraging compression for display buffer blit in a graphics system having an integrated graphics processing unit and a discrete graphics processing unit
KR101510041B1 (ko) 2014-02-18 2015-04-07 현대자동차주식회사 자동차용 헤드유닛의 스마트기기 미러링 제어 시스템 및 방법
US9226072B2 (en) 2014-02-21 2015-12-29 Sonos, Inc. Media content based on playback zone awareness
US20150295973A1 (en) * 2014-04-10 2015-10-15 Screenovate Technologies Ltd. Method for real-time multimedia interface management
US9672213B2 (en) 2014-06-10 2017-06-06 Sonos, Inc. Providing media items from playback history
US20160062966A1 (en) * 2014-08-26 2016-03-03 Microsoft Corporation Full screen pop-out of objects in editable form
US20160092152A1 (en) * 2014-09-25 2016-03-31 Oracle International Corporation Extended screen experience
KR102273751B1 (ko) * 2015-07-24 2021-07-06 엘지전자 주식회사 디지털 디바이스 및 상기 디지털 디바이스에서 데이터 처리 방법
US11027199B2 (en) 2015-11-12 2021-06-08 Nvidia Corporation System and method for network coupled gaming
US10630773B2 (en) 2015-11-12 2020-04-21 Nvidia Corporation System and method for network coupled cloud gaming
EP3264802A1 (en) * 2016-06-30 2018-01-03 Nokia Technologies Oy Spatial audio processing for moving sound sources
US10284492B2 (en) 2016-08-10 2019-05-07 Microsoft Technology Licensing, Llc Control of casting to a media renderer
JP6356857B1 (ja) * 2017-03-30 2018-07-11 西日本電信電話株式会社 ログ記録装置、ログ記録方法及びログ記録プログラム
EP3617860B1 (en) * 2017-06-16 2023-05-17 Huawei Technologies Co., Ltd. Screen locking method and apparatus
KR102563314B1 (ko) 2018-08-30 2023-08-04 삼성전자주식회사 전자 장치 및 단축 명령어의 바로가기 생성 방법
US11636855B2 (en) 2019-11-11 2023-04-25 Sonos, Inc. Media content based on operational data
CN114556959A (zh) * 2020-04-01 2022-05-27 谷歌有限责任公司 允许第一屏幕设备上提供的媒体特征呈现在第二屏幕设备上
CN113542825B (zh) * 2020-04-20 2022-10-11 华为技术有限公司 投屏显示方法、系统、终端设备和存储介质
CN111338744B (zh) 2020-05-22 2020-08-14 北京小米移动软件有限公司 图像显示方法及装置、电子设备、存储介质
WO2023106463A1 (ko) * 2021-12-10 2023-06-15 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
KR20230102251A (ko) 2021-12-30 2023-07-07 현대자동차주식회사 자동차용 폐단면 부품의 제조 방법 및 자동차용 폐단면 부품
WO2024101552A1 (ko) * 2022-11-07 2024-05-16 삼성전자 주식회사 사용자에게 민감한 내용이 외부 디스플레이 장치를 통해 다른 사람에게 노출되지 않게 하는 휴대 전자 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1855028A (zh) * 2005-04-21 2006-11-01 微星科技股份有限公司 具有扩展视频输出功能的影音多媒体计算机系统
CN101556533A (zh) * 2005-04-21 2009-10-14 微星科技股份有限公司 具有扩展视频输出功能的影音多媒体计算机系统
WO2009137289A2 (en) * 2008-05-09 2009-11-12 Tap.Tv, Inc. System and method for controlling media at a plurality of output devices
US20110096230A1 (en) * 2008-06-30 2011-04-28 Daisaku Komiya Terminal device and method for processing data

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0475581A3 (en) * 1990-08-30 1993-06-23 Hewlett-Packard Company Method and apparatus for window sharing between computer displays
US6046750A (en) 1993-06-25 2000-04-04 International Business Machines Corporation Method and apparatus for controlling presentations of objects on a user interface of a data processing system
JP3753207B2 (ja) * 1997-08-11 2006-03-08 富士ゼロックス株式会社 共同作業支援システムおよび共同作業支援方法
US6385772B1 (en) 1998-04-30 2002-05-07 Texas Instruments Incorporated Monitoring system having wireless remote viewing and control
JP4573957B2 (ja) 2000-07-04 2010-11-04 キヤノン株式会社 画像制御装置、画像制御方法及びテレビ受信機
JP2002142226A (ja) 2000-10-31 2002-05-17 Toshiba Corp 画像符号化方法及び装置並びに携帯電話機
US20030017846A1 (en) 2001-06-12 2003-01-23 Estevez Leonardo W. Wireless display
WO2003027876A1 (en) 2001-09-26 2003-04-03 Jodie Lynn Reynolds System and method for communicating media signals
US7515634B2 (en) 2002-06-28 2009-04-07 Qualcomm Incorporated Computationally constrained video encoding
KR100534207B1 (ko) 2002-12-09 2005-12-08 삼성전자주식회사 비디오 부호화기의 움직임 추정기 및 그 방법
US7039247B2 (en) 2003-01-31 2006-05-02 Sony Corporation Graphic codec for network transmission
US20050091610A1 (en) 2003-10-22 2005-04-28 International Business Machines Corporation Selective display of windows on an auxiliary output device
WO2005104551A2 (en) 2004-04-16 2005-11-03 Modulus Video, Inc. High definition scalable array encoding system and method
TWI238651B (en) 2004-04-30 2005-08-21 Benq Corp Method and apparatus for determining frame status of video data
GB0413413D0 (en) 2004-06-16 2004-07-21 Ibm Apparatus,method,and program for controlling a presentation display
CN101156449A (zh) 2005-01-27 2008-04-02 松下电器产业株式会社 具有功耗影响编码/解码模式的便携式终端
JP4779435B2 (ja) 2005-05-17 2011-09-28 ソニー株式会社 画像処理装置、および画像処理方法、並びにコンピュータ・プログラム
JP4751647B2 (ja) * 2005-06-03 2011-08-17 株式会社リコー 画面共有装置、画面共有方法、画面共有プログラム及び記録媒体
EP1908303A4 (en) 2005-07-01 2011-04-06 Sonic Solutions METHOD, DEVICE AND SYSTEM FOR USE IN MULTIMEDIA SIGNAL CODING
US9113147B2 (en) 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
JP4925697B2 (ja) 2006-03-23 2012-05-09 ソニー株式会社 ネットワーク伝送用の映像信号符号化システム及び映像信号符号化方法,信号変換装置
US8826348B2 (en) 2006-12-04 2014-09-02 Samsung Electronics Co., Ltd. System and method for wireless communication of uncompressed video having a relay device for power saving
JP2008211379A (ja) 2007-02-23 2008-09-11 Fujitsu Ltd 表示制御プログラムおよび携帯端末装置
JP4636058B2 (ja) 2007-08-08 2011-02-23 コニカミノルタビジネステクノロジーズ株式会社 会議システム、データ処理装置、データ出力方法およびデータ出力プログラム
WO2009079754A1 (en) 2007-12-20 2009-07-02 Ati Technologies Ulc Adjusting video processing in a system having a video source device and a video sink device
US8602564B2 (en) 2008-06-17 2013-12-10 The Invention Science Fund I, Llc Methods and systems for projecting in response to position
KR20100045737A (ko) 2008-10-24 2010-05-04 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US8254704B2 (en) * 2008-10-30 2012-08-28 Microsoft Corporation Remote computing platforms providing high-fidelity display and interactivity for clients
US9083958B2 (en) 2009-08-06 2015-07-14 Qualcomm Incorporated Transforming video data in accordance with three dimensional input formats
JP5253328B2 (ja) * 2009-08-19 2013-07-31 キヤノン株式会社 画像補正装置及び画像補正方法
CN104967857B (zh) * 2010-01-19 2019-08-23 三星电子株式会社 对图像进行编码/解码的方法和设备
US8898577B2 (en) 2010-03-09 2014-11-25 Microsoft Corporation Application sharing with occlusion removal
TWI416961B (zh) 2010-04-02 2013-11-21 Univ Nat Chiao Tung 用於可調式視訊編碼系統之選擇性移動向量預測方法、移動估測方法及其裝置
JP5216810B2 (ja) * 2010-05-28 2013-06-19 株式会社オプティム 遠隔画面共有を実行する方法、ユーザ端末、プログラム及びシステム
US9398308B2 (en) * 2010-07-28 2016-07-19 Qualcomm Incorporated Coding motion prediction direction in video coding
US20120183039A1 (en) 2011-01-13 2012-07-19 Qualcomm Incorporated Coding static video data with a baseline encoder
US9277230B2 (en) 2011-11-23 2016-03-01 Qualcomm Incorporated Display mode-based video encoding in wireless display devices

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1855028A (zh) * 2005-04-21 2006-11-01 微星科技股份有限公司 具有扩展视频输出功能的影音多媒体计算机系统
CN101556533A (zh) * 2005-04-21 2009-10-14 微星科技股份有限公司 具有扩展视频输出功能的影音多媒体计算机系统
WO2009137289A2 (en) * 2008-05-09 2009-11-12 Tap.Tv, Inc. System and method for controlling media at a plurality of output devices
US20110096230A1 (en) * 2008-06-30 2011-04-28 Daisaku Komiya Terminal device and method for processing data

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104683764A (zh) * 2015-02-03 2015-06-03 青岛大学 基于fpga图像压缩技术的3g远程传输网络摄像头
CN113342247A (zh) * 2021-08-04 2021-09-03 北京达佳互联信息技术有限公司 素材处理方法、装置、电子设备及存储介质
CN113342247B (zh) * 2021-08-04 2021-11-02 北京达佳互联信息技术有限公司 素材处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
KR20140107425A (ko) 2014-09-04
WO2013089954A1 (en) 2013-06-20
CN103988166B (zh) 2017-08-25
JP2015505189A (ja) 2015-02-16
JP2016173830A (ja) 2016-09-29
EP2791777B1 (en) 2022-12-21
IN2014CN04121A (zh) 2015-07-10
KR101579025B1 (ko) 2015-12-18
EP2791777A1 (en) 2014-10-22
JP5989797B2 (ja) 2016-09-07
US9008177B2 (en) 2015-04-14
US20130148720A1 (en) 2013-06-13

Similar Documents

Publication Publication Date Title
CN103988166A (zh) 媒体输出的选择性镜射
CN106664458B (zh) 用于发射视频数据的方法、源装置以及存储媒体
KR101741940B1 (ko) 3d 비디오 코딩을 위한 예측 파라미터 상속
KR102133531B1 (ko) 컨텐츠 재생 방법 및 그에 따른 단말, 그에 따른 시스템
EP3477949B1 (en) Picture decoding method and device using division information of a coding tree unit
KR20150024398A (ko) 크기 기반 변환 유닛 컨텍스트 도출
WO2020017359A1 (ja) 画像処理装置および方法
US8730394B2 (en) Video display system, video display device, its control method, and information storage medium
CN113747160B (zh) 视频编码配置方法、装置、设备及计算机可读存储介质
CN113475091B (zh) 显示设备及其图像显示方法
US9088747B2 (en) Video display system, video display device, its control method, and information storage medium
JP5878295B2 (ja) 画像処理装置、画像処理方法およびプログラム
CN113596583A (zh) 视频流子弹时间数据处理方法及装置
KR102280170B1 (ko) 프레임의 특성에 따라 부하를 분배하는 방법 및 장치
WO2017027170A1 (en) Processing encoded bitstreams to improve memory utilization
JP2022063882A (ja) 情報処理装置および方法、並びに、再生装置および方法
KR102037161B1 (ko) 통신 시스템, 송신 장치, 수신 장치, 통신 시스템의 제어 방법 및 프로그램을 기록한 컴퓨터 판독가능 기록 매체
CN101816176B (zh) 一种用于服务器向客户端终端广播视频数据序列的方法
US8923689B2 (en) Image processing apparatus and method
CN115379251A (zh) 一种视频直播流的转码方法、装置、系统及可读存储介质
JP5860862B2 (ja) 映像表示システム、映像表示装置、その制御方法及びプログラム
CN114697664A (zh) 视频编码器、视频解码器及相关方法
KR101516996B1 (ko) 단말기에서 디스플레이장치로 영상데이터를 송신하는 영상송신방법 및 상기 영상송신방법에 의해 송신된 영상데이터를 수신 및 재생하는 영상수신 및 재생방법
Sereethavekul et al. The design of a wristband screen application for interface with android systems
CN105516702A (zh) 一种色彩空间的映射方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant