CN103999046A - 支持用于多媒体内容的浏览器的服务 - Google Patents
支持用于多媒体内容的浏览器的服务 Download PDFInfo
- Publication number
- CN103999046A CN103999046A CN201180076044.7A CN201180076044A CN103999046A CN 103999046 A CN103999046 A CN 103999046A CN 201180076044 A CN201180076044 A CN 201180076044A CN 103999046 A CN103999046 A CN 103999046A
- Authority
- CN
- China
- Prior art keywords
- multimedia
- content
- browser
- player
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 62
- 238000009877 rendering Methods 0.000 claims abstract description 32
- 230000008569 process Effects 0.000 claims description 21
- 230000004044 response Effects 0.000 claims description 8
- 230000003139 buffering effect Effects 0.000 claims description 7
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 238000005286 illumination Methods 0.000 claims description 4
- 230000008878 coupling Effects 0.000 claims description 3
- 238000010168 coupling process Methods 0.000 claims description 3
- 238000005859 coupling reaction Methods 0.000 claims description 3
- 230000002093 peripheral effect Effects 0.000 claims description 2
- 238000004891 communication Methods 0.000 claims 11
- 230000005540 biological transmission Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 4
- 230000006855 networking Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
- G06F16/986—Document structures and storage, e.g. HTML extensions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44521—Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
- G06F9/44526—Plug-ins; Add-ons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本文公开与多媒体服务关联的方法、设备和存储介质，该多媒体服务配置成支持用于渲染多媒体内容的浏览器。在各种实施例中，方法可包括由装置的多媒体服务通过浏览器的浏览器引擎从在该装置上操作的浏览器的渲染引擎接收与在装置的显示单元上渲染多媒体内容关联的多媒体渲染命令。多媒体服务可在浏览器外部操作。此外，方法可包括由多媒体服务连同装置的图形处理单元和/或媒体处理器处理多媒体渲染命令以在显示单元上渲染多媒体内容，并且通过浏览器引擎发出信号并且将其返回给渲染引擎。可公开或要求保护其它实施例。
Description
技术领域
本申请涉及数据处理的技术领域，更具体地涉及与支持用于多媒体内容的浏览器的服务关联的方法和设备。
背景技术
本文提供的背景描述是为了一般呈现本公开的上下文的目的。除非在本文另外指示，在该部分中描述的材料对于该申请中的权利要求来说不是现有技术并且不通过包括在该部分中而承认是现有技术。
集成电路、计算、连网和相关技术的进步已经导致计算装置（包括移动计算装置）上多媒体内容的消耗增加。通常，多媒体内容使用浏览器来消耗，并且日益增加的多媒体内容可以是高清晰度（HD）视频。
近来，超文本标记语言（HTML）5可作为用于传递在线多媒体内容流播服务的广泛接受的方法而出现。预期大部分平台可需要对视频解码和/或图形处理实现硬件加速，以便流畅地播放HD HTML5视频。然而，大部分现有技术的浏览器具有一般难以修改来对视频解码和/或图形处理实现硬件加速的高效利用的架构。
附图说明
本发明的实施例将通过附图中图示的示范性实施例而非限制的方式描述，其中类似的标号指代相似的元件，并且其中：
图1图示示例计算装置，所述计算装置配置成连同来自浏览器外部的图形处理单元和/或媒体处理器提供支持浏览器的多媒体服务，用于消耗多媒体内容；
图2进一步详细示出图1的多媒体服务和浏览器的示例架构；
图3图示浏览器和多媒体服务的操作方法；以及
图4图示示例非暂时性计算机可读存储介质，其具有配置成实践图3的方法的所有或选择方面的指令；全部根据本公开的实施例布置。
具体实施方式
公开了与多媒体服务关联的方法、设备和存储介质，该多媒体服务配置成支持用于多媒体内容的浏览器。在各种实施例中，方法可包括由装置的多媒体服务通过浏览器的浏览器引擎，从在该装置上操作的浏览器的渲染引擎接收与在显示单元上渲染多媒体内容关联的多媒体渲染命令。该多媒体服务可以在浏览器外部操作。此外，方法可包括由多媒体服务连同装置的图形处理单元和/或媒体处理器来处理多媒体渲染命令以在显示单元上渲染多媒体内容，并且通过浏览器引擎发出信号并且使信号返回到渲染引擎。
说明性实施例的各个方面将使用通常由本领域内技术人员采用的术语来描述以向本领域内其它技术人员传达他们的工作的实质。然而，备选实施例可仅用描述的方面中的一些来实践，这对于本领域内技术人员将是明显的。为了说明的目的，阐述具体数字、材料和配置以便提供对说明性实施例的全面理解。然而，备选实施例可在没有具体细节的情况下实践，这对于本领域内技术人员将是明显的。在其它实例中，省略或简化众所周知的特征以便不模糊说明性实施例。
各种操作将进而采用对于理解说明性实施例最有帮助的方式描述为多个分立操作；然而，描述的顺序不应该解释为暗示这些操作必定是顺序相关的。特别地，这些操作不需要按呈现的顺序执行。此外，作为独立操作的操作的描述不应解释为需要操作必须独立地和/或由独立实体执行。作为独立模块的实体和/或模块的描述应同样不解释为需要模块是独立的和/或执行独立操作。在各种实施例中，图示和/或公开的操作、实体、数据和/或模块可合并、分解成进一步的子部分和/或省略。
重复使用短语“在一个实施例中”或“在实施例中”。该短语一般不指相同的实施例；然而，它可指相同的实施例。术语“包括”、“具有”和“包含”是同义的，除非上下文另外指示。短语“A/B”意思是“A或B”。短语“A和/或B”意思是“（A）、（B）或（A和B）”。短语“A、B和C中的至少一个”意思是“（A）、（B）、（C）、（A和B）、（A和C）、（B和C）或（A、B和C）”。
图1图示根据本公开的各种实施例的示例计算装置，其配置成连同来自浏览器外部的图形处理单元和/或媒体处理器提供支持浏览器的多媒体服务，消耗多媒体内容。如示出的，对于图示的实施例，客户端计算装置（或简单地，客户端装置）102可通过网络134与多媒体服务器132耦合并且接收从多媒体服务器132流播的多媒体内容。客户端102可包括处理器和存储器布置104，其配置成具有操作系统（OS）122和在其中操作的浏览器120、图形处理单元106、媒体处理器112、显示单元108和连网接口110。另外，OS 122可包括多媒体服务124。如将在下文更详细描述的，本公开的教导可包含多媒体服务124以在消耗显示单元108上的多媒体内容（例如，从多媒体服务器132流播的）方面连同图形处理单元106和/或媒体处理器112并且从浏览器120外部支持浏览器120。因此，视频解码和/或图形处理的硬件加速可通过与图形处理单元和/或媒体处理器接口关联的多媒体服务124的部分的不同实现而更容易地对于具有不同图形处理器单元和/或媒体处理器设计的不同平台提供。
在各种实施例中，如早先描述的，处理器和存储器布置104可配置成启用OS 122，其包括多媒体服务124和要在其中操作的浏览器120。处理器和存储器布置104意在表示广泛范围的处理器和存储器布置，包括但不限于具有各种执行速度和功耗的单核或多核处理器以及具有一个或多个高速缓存级的各种架构的存储器和具有各种类型的存储器、动态随机存取存储器、闪速存储器等。
在各种实施例中，图形处理单元106和/或媒体处理器112可配置成通过多媒体服务124向浏览器120提供视频解码和/或图形处理，而显示单元108可配置成使多媒体内容（例如，HD视频）能够在其上渲染。多媒体服务124可调用图形处理单元106和/或媒体处理器112来帮助的图形处理功能的示例可包括但不限于，图形数据变换、照明处理、三角形设置/裁剪、多边形处理等。在备选实施例中，图形处理单元106和媒体处理器112可部分或全部组合。
OS 122和浏览器120（多媒体服务124除外，以及浏览器120与多媒体服务124互相合作的方式）意在代表广泛范围的这些已知元件。OS 122的示例可包括但不限于，从华盛顿州Redmond 的微软公司可获得的Windows®操作系统、从例如北卡罗来纳州Red Hat of Raleigh可获得的Linux、从开放手机联盟可获得的Android™或由Cupertino 的苹果电脑开发的iOS。在各种实施例中，浏览器120可以是web浏览器。浏览器120的示例可包括但不限于，从华盛顿州Redmond 的微软公司可获得的Internet
Explorer或从加利福尼亚州Mozilla of Mountain View可获得的Firefox。
相似地，多媒体服务器132和网络134意在代表广泛范围的这些已知元件。多媒体服务器132的示例可包括但不限于，来自加利福尼亚州Los Gatos的Netflix, Inc.的视频服务器，或来自佐治亚州Atlanta的CNN的视频服务器。网络134可包括有线或无线、局域网或广域网、专用或公用网络，包括因特网。
在各种实施例中，客户端装置102可以是台式计算机、膝上型计算机、平板计算机、智能电话、个人数字助理、游戏控制台或类似的其它装置。
现在参考图2，其图示根据本公开的各种实施例的图1的浏览器120和多媒体服务124的示例架构。如示出的，浏览器120可包括具有用户界面202和过程间通信（IPC）网桥的浏览器引擎204，以及具有媒体播放器212和各种其它部件208的渲染引擎206。各种其它部件208的示例可包括但不限于，扩展标记语言（XML）解析器、JavaScript解释器、显示接口模块、连网接口模块等。浏览器部件202-208（IPC网桥210除外，以及浏览器120和渲染引擎206与多媒体服务124互相合作的方式）意在代表本领域内已知的广泛范围的这些部件，其配置成执行它们的常规功能。
在各种实施例中，IPC网桥210可配置成使浏览器引擎204能够代表渲染引擎206将多媒体内容渲染相关的命令路由到多媒体服务124。此外，IPC网桥210可配置成使浏览器引擎204能够将发出的信号从多媒体服务124路由到渲染引擎206。
在各种实施例中，多媒体内容渲染相关的命令可包括：
Start #启动/起动多媒体服务的媒体播放器；
Stop #停止/卸载多媒体服务的媒体播放器；
Play #开始播放多媒体内容；
Pause #暂停播放多媒体内容；
SetUri #设置要播放的多媒体内容的统一资源标识符（uri）；
SetTarget #指示播放是直接渲染还是间接渲染；
SetPosition #寻找某个时间；
SetPlaybackRate #更快或更慢重放；
SetVolume #调整音量；
SetVideoSize #设置视频大小；
GetPosition #获得当前视频重放时间；
HasVideo #查询URI标识的资源是否包含视频；
HasAudio #查询URI标识的资源是否包含音频；
GetPlayerState #查询媒体播放器状态，暂停、初始化或正播放；
IsStreaming #查询媒体内容文件是否可以被寻找
SupportFullscreen #查询媒体播放器是否可以在全屏模式中；
GetVideosize #查询视频大小；
GetNaturalVideoSize #查询媒体内容文件的自然视频大小性质；
GetBufferedBytes #查询已经缓冲多少字节；
GetMediaSizeTime #查询媒体持续时间；
GetMediaSizeBytes #查询媒体内容文件大小；
GetBufferedTime #查询已经缓冲多少秒。
在各种实施例中，来自多媒体服务124的发出信号可包括：
E_SIGNAL_INITIALIZED #媒体管线在多媒体服务中准备好；
E_SIGNAL_EOF, #多媒体内容文件/流的结束；
E_SIGNAL_ERROR, #错误以错误id发生；
E_SIGNAL_BUFFERING, #媒体播放器缓冲到N%；
E_SIGNAL_BUFFERED, #媒体播放器完成缓冲；
E_SIGNAL_SEEKED, #在调用Seek之后，实际寻找完成；
E_SIGNAL_STOPPED, #在发出Stop之后，实际停止完成；
E_SIGNAL_PLAYSTATECHANGED, #播放状态改变；
E_SIGNAL_NEEDREPLY， #请发送回复以指示你活着。
仍参考图2，对于图示的实施例，多媒体服务124可包括多媒体播放器管理器222和多媒体播放器224。在各种实施例中，多媒体播放器管理器222可配置成管理多媒体播放器224的生命周期，包括多媒体播放器224的启动和卸载（例如，响应于“起动”和“停止”多媒体内容渲染相关的命令）。在各种实施例中，多媒体播放器管理器222可配置成同时管理多个多媒体播放器224，以并发地播放多个多媒体内容。在各种实施例中，多媒体播放器224可配置成连同图形处理单元106和/或媒体处理器112来支持播放多媒体内容。在各种实施例中，多媒体播放器224可包括IPC主机232和播放器控制234。IPC主机232可配置成从渲染引擎206接收多媒体内容渲染相关的命令，并且将由播放器控制234发出的信号传送到渲染引擎206，两者都通过浏览器引擎204的IPC网桥210。在各种实施例中，播放器控制234可配置成连同图形处理单元106和/或媒体处理器112来处理多媒体内容渲染相关的命令，并且渲染多媒体内容（利用在视频解码和/或图形处理（例如视频缩放、颜色转换等）中硬件的处理功率）。
图3图示根据本公开的各种实施例用于多媒体服务124连同图形处理单元106和/或媒体处理器112在渲染多媒体内容中支持浏览器120的操作方法。如示出的，方法300可在框302处开始。在框302处，渲染引擎206的媒体播放器212可通过用户界面202例如从用户接收播放媒体请求。方法300可从框302进行到框304。在框304处，渲染引擎206的媒体播放器212可响应于请求而生成并且发出各种多媒体内容渲染相关的服务命令，例如起动多媒体服务124的多媒体播放器224的“起动”、设置要播放的视频流的URI的“setURI”或开始播放视频流的“播放”，等。在各种实施例中，方法300可重复框304以在播放多媒体内容的过程中发出各种命令。
在发出多媒体内容渲染相关的命令（或在下文，简单地，“服务命令”）后，方法300还可从框304进行到框306。在框306处，渲染引擎206的媒体播放器212可将服务命令转发到浏览器引擎204的IPC网桥210。方法300可从框306进行到框308。在框308处，如果多媒体服务124的多媒体播放器224尚未被启动/起动或服务命令是多媒体播放器224生命周期管理相关命令，IPC网桥210可将服务命令转发到多媒体服务124的多媒体播放器管理器222，或如果多媒体服务124的多媒体播放器224已经被启动/起动则转发到多媒体服务124的多媒体播放器224，特别是IPC主机232。对于多媒体播放器224生命周期管理命令，方法300可从框308进行到框310。在框310处，多媒体服务124的多媒体播放器管理器222可相应地处理服务命令并且对其作出响应，例如启动/起动或停止/卸载多媒体播放器224。为了渲染相关服务命令，方法300可从框308进行到框312。在框312处，多媒体服务124的多媒体播放器224可相应地处理服务命令并且对其作出响应。对于图示的实施例，框312可包括通过浏览器引擎204的IPC网桥210，IPC主机232处理命令并且将命令路由到播放器控制234，并且接收由播放器控制234发出的信号用于路由回到渲染引擎206的媒体播放器212。框312可进一步包括播放器控制234向图形处理单元106和/或媒体播放器112发出对于视频解码和/或图形处理服务请求的请求以加速视频重放。
对于直接渲染（由渲染引擎206确定的），方法300可从框312进行到框318。在框318处，显示硬件（例如，具有显示单元108的图形处理单元106和/或媒体处理器112）可响应于由播放器控制234做出的请求而渲染多媒体内容。对于间接渲染（由渲染引擎206确定的）或对于简单地将发出的信号路由回到渲染引擎206的媒体播放器212，方法300可从框312进行到框314。在框314处，IPC网桥210在接收间接渲染相关服务命令或发出的信号时可通过IPC网桥210将间接渲染相关服务命令或发出的信号路由到渲染引擎206的媒体播放器212。方法300可从框314进行到框316。在框316处，渲染引擎206的媒体播放器212在接收时可处理间接渲染相关服务命令或发出的信号，并且进而可向图形处理单元106和/或媒体处理器112发出处理并且渲染多媒体内容的请求，例如与其它HTML元素混合、将视频渲染为纹理、对视频快照进行图像处理。
图4图示根据本公开的各种实施例的示例非暂时性计算机可读存储介质，其具有配置成实践图3的方法的所有或选择的方面的指令。如图示的，非暂时性计算机可读存储介质402可包括许多编程指令404。编程指令404可配置成使客户端计算装置102能够响应于编程指令的运行来执行早先参考图3描述的方法300的操作中的全部或一些。在备选实施例中，编程指令404可替代地布置在多个非暂时性计算机可读存储介质402上。如早先描述的，在各种实施例中，编程指令可配置成实现多媒体服务124或其部分。
重新参考图1，对于一个实施例，处理器和存储器布置104的处理器中的至少一个可与配置成实践图3的方法的计算逻辑全部或部分封装在一起。对于一个实施例，处理器和存储器布置104的处理器中的至少一个可与配置成实践图3的方法的计算逻辑封装在一起来形成系统级封装（SiP）。对于一个实施例，处理器和存储器布置104的处理器中的至少一个可在与配置成实践图3的方法的计算逻辑一起集成在相同的芯片上。对于一个实施例，处理器和存储器布置104的处理器中的至少一个可与配置成实践图3的方法的计算逻辑一起集成在相同的芯片上来形成片上系统（SoC）。对于至少一个实施例，SoC可在智能电话、蜂窝电话、平板电脑或其它移动装置中利用。
尽管已经在本文说明和描述具体实施例，本领域内普通技术人员将领会很多种备选和/或等同实现可代替示出和描述的具体实施例，而不偏离本公开的实施例的范围。该申请意在涵盖本文论述的实施例的任何修改或变化。因此，明显意图是本公开的实施例仅由权利要求和其等同物限制。
Claims (36)
1.一种方法，包括：
由装置的多媒体服务从在所述装置上操作的浏览器的渲染引擎接收多媒体渲染命令，其中所述多媒体服务在所述浏览器外部操作，其中所述多媒体服务通过所述浏览器的浏览器引擎从所述多媒体服务渲染引擎接收所述多媒体渲染命令，其中所述多媒体渲染命令与在所述装置的显示单元上渲染多媒体内容关联；
由所述多媒体服务处理所述多媒体渲染命令，其中所述处理连同所述装置的图形处理单元或媒体处理器来执行；以及
由所述多媒体服务将在所述显示单元上渲染多媒体内容的信号发出并且返回到所述浏览器的所述渲染引擎，其中返回到所述浏览器的所述渲染引擎通过所述浏览器的所述浏览器引擎。
2.如权利要求1所述的方法，其中接收包括由所述多媒体服务通过所述浏览器引擎的过程间通信网桥从所述渲染引擎接收所述多媒体渲染命令。
3.如前述权利要求中任一项所述的方法，其中发出并且返回包括由所述多媒体服务通过所述浏览器引擎的过程间通信网桥发出并且返回所述信号到所述渲染引擎。
4.如前述权利要求中任一项所述的方法，其中接收包括由所述多媒体服务的媒体播放器的过程间通信主机通过所述浏览器引擎从所述渲染引擎接收所述多媒体渲染命令。
5.如前述权利要求中任一项所述的方法，其中发出并且返回包括由所述多媒体服务的媒体播放器的过程间通信主机通过所述浏览器引擎发出并且返回所述信号到所述渲染引擎。
6.如前述权利要求中任一项所述的方法，其中处理包括由所述多媒体服务的媒体播放器的播放器控制连同所述图形处理单元来处理所述多媒体渲染命令。
7.如前述权利要求中任一项所述的方法，其中接收包括由所述多媒体服务的多媒体播放器管理器接收多媒体渲染起动或停止命令，并且所述方法进一步包括所述多媒体播放器管理器响应于所述多媒体渲染起动或停止命令而起动或停止所述多媒体服务的多媒体播放器。
8.如前述权利要求中任一项所述的方法，其中所述多媒体渲染命令包括以下中的一个或多个：
启动或起动所述多媒体播放器的起动命令；
停止或卸载所述多媒体播放器的停止命令；
播放所述多媒体内容的播放命令；或
暂停播放所述多媒体内容的暂停命令。
9.如前述权利要求中任一项所述的方法，其中所述多媒体渲染命令包括设置命令，用于设置要播放的多媒体内容的统一资源标识符、用于指示所述多媒体内容的播放是直接还是间接渲染、用于寻找所述多媒体内容的特定时间、用于使所述多媒体内容的重放速率增加或减小、用于使所述多媒体内容的音频音量增加或减小、用于设置用于播放所述多媒体内容的窗口大小或用于得到所述多媒体内容的当前视频重放时间。
10.如前述权利要求中任一项所述的方法，其中所述多媒体渲染命令包括查询命令，用于查询由统一资源指示符标识的资源是否包含视频、用于查询由统一资源指示符标识的资源是否包含音频、用于查询当前状态、用于查询所述多媒体内容是否可以被寻找、用于查询所述多媒体内容是否可以采用全屏模式渲染、用于查询所述多媒体内容的视频大小、用于查询所述多媒体内容有多少字节或秒已经被缓冲或用于查询所述多媒体内容的持续时间或大小。
11.如前述权利要求中任一项所述的方法，其中所述信号包括以下中的一个或多个：
指示所述多媒体服务的媒体管线准备好的信号；
指示所述多媒体内容的结束的信号；
指示在所述处理期间出现的错误的信号；
指示完成的多媒体内容的缓冲或缓冲百分比的信号；
指示在所述多媒体内容上执行的请求的寻找已经完成的信号；
指示所述多媒体内容的播放已经停止的信号；
指示所述多媒体内容的播放状态已经改变的信号；或
指示需要来自所述渲染引擎的答复的信号。
12.如前述权利要求中任一项所述的方法，其中处理包括所述多媒体服务调用所述图形处理单元或所述媒体处理器来帮助图形数据转换、照明处理、三角形设置/裁剪或多边形处理。
13.至少一种非暂时性计算机可读存储介质，其具有多个指令，所述多个指令配置成响应于所述指令由装置的安全控制器执行而使所述装置能够：
在渲染所述装置的显示单元上的多媒体内容中从所述浏览器外部用多媒体服务支持所述装置的浏览器，其中所述多媒体服务包括多媒体播放器管理服务和多媒体播放器；
其中所述多媒体播放器管理服务配置成从所述浏览器的渲染引擎接收多媒体渲染起动或停止命令，其中所述多媒体渲染起动或停止命令通过所述浏览器的浏览器引擎接收，其中所述多媒体播放器管理服务响应于所述多媒体渲染起动或停止命令而对应地起动或停止所述多媒体播放器；并且
其中所述多媒体播放器配置成连同所述装置的图形处理单元或媒体处理器来渲染所述多媒体内容。
14.如权利要求13所述的至少一种计算机可读存储介质，其中所述多媒体播放器配置成通过所述浏览器引擎的过程间通信网桥而从所述渲染引擎接收其它多媒体渲染命令。
15.如权利要求13-14中任一项所述的至少一种计算机可读存储介质，其中所述多媒体播放器配置成通过所述浏览器引擎的过间通信网桥来发出并且返回信号到所述渲染引擎。
16.如权利要求13-15中任一项所述的至少一种计算机可读存储介质，其中所述多媒体播放器包括过程间通信主机，其配置成通过所述浏览器引擎从所述渲染引擎接收其它多媒体渲染命令。
17.如权利要求13-16中任一项所述的至少一种计算机可读存储介质，其中所述多媒体播放器包括过程间通信主机，其配置成通过所述浏览器引擎发出并且返回信号到所述渲染引擎。
18.如权利要求13-17中任一项所述的至少一种计算机可读存储介质，其中所述多媒体播放器包括播放器控制，其配置成连同所述图形处理单元来处理所述其它多媒体命令以渲染所述多媒体内容。
19.如权利要求13-18中任一项所述的至少一种计算机可读存储介质，其中所述多媒体渲染命令包括以下中的一个或多个：
启动或起动所述多媒体播放器的起动命令；
停止或卸载所述多媒体播放器的停止命令；
播放所述多媒体内容的播放命令；或
暂停播放所述多媒体内容的暂停命令。
20.如权利要求13-19中任一项所述的至少一种计算机可读存储介质，其中所述多媒体渲染命令包括设置命令，用于设置要播放的多媒体内容的统一资源标识符、用于指示所述多媒体内容的播放是直接还是间接渲染、用于寻找所述多媒体内容的特定时间、用于使所述多媒体内容的重放速率增加或减小、用于使所述多媒体内容的音频音量增加或减小、用于设置用于播放所述多媒体内容的窗口大小或用于得到所述多媒体内容的当前视频重放时间。
21.如权利要求13-20中任一项所述的至少一种计算机可读存储介质，其中所述多媒体渲染命令包括查询命令，用于查询由统一资源指示符标识的资源是否包含视频、用于查询由统一资源指示符标识的资源是否包含音频、用于查询当前状态、用于查询所述多媒体内容是否可以被寻找、用于查询所述多媒体内容是否可以采用全屏模式渲染、用于查询所述多媒体内容的视频大小、用于查询所述多媒体内容有多少字节或秒已经被缓冲或用于查询所述多媒体内容的持续时间或大小。
22.如权利要求13-21中任一项所述的至少一种计算机可读存储介质，其中所述信号包括以下中的一个或多个：
指示所述多媒体服务的媒体管线准备好的信号；
指示所述多媒体内容的结束的信号；
指示在所述处理期间出现的错误的信号；
指示完成的多媒体内容的缓冲或缓冲百分比的信号；
指示在所述多媒体内容上执行的请求的寻找已经完成的信号；
指示所述多媒体内容的播放已经停止的信号；
指示所述多媒体内容的播放状态已经改变的信号；或
指示需要来自所述渲染引擎的答复的信号。
23.如权利要求13-22中任一项所述的至少一种计算机可读存储介质，其中渲染包括所述多媒体播放器调用所述图形处理单元或所述媒体处理器来帮助图形数据转换、照明处理、三角形设置/裁剪或多边形处理。
24.一种设备，包括：
处理器和存储器布置；
与所述处理器和存储器布置耦合的图形处理单元或媒体处理器中的至少一个；
显示单元，其与所述处理器和存储器布置耦合；以及
多媒体服务，其将由所述处理器和存储器布置操作以连同图形处理单元或媒体处理器中的至少一个在所述显示单元上渲染多媒体内容中从浏览器外部支持所述浏览器，其中所述支持包括从所述浏览器的渲染引擎接收多媒体渲染命令，所述多媒体渲染命令与渲染所述多媒体内容关联，所述多媒体渲染命令的处理以及发出和传送信号到所述渲染引擎，其中从所述渲染引擎接收所述多媒体渲染命令是通过所述浏览器的浏览器引擎，信号到所述渲染引擎的传送也通过所述浏览器引擎，并且所述浏览器也由所述处理器和存储器布置操作。
25.如权利要求24所述的设备，其中所述多媒体服务配置成通过所述浏览器引擎的过程间通信网桥从所述渲染引擎接收所述多媒体渲染命令。
26.如权利要求24-25中任一项所述的设备，其中所述多媒体服务配置成通过所述浏览器引擎的过程间通信网桥发出和传送所述信号到所述渲染引擎。
27.如权利要求24-26中任一项所述的设备，其中所述多媒体服务包括多媒体播放器，所述多媒体播放器具有过程间通信主机，其配置成通过所述浏览器引擎从所述渲染引擎接收所述多媒体渲染命令。
28.如权利要求24-27中任一项所述的设备，其中所述多媒体服务包括多媒体播放器，所述多媒体播放器具有过程间通信主机，其配置成通过所述浏览器引擎发出并且传送所述信号到所述渲染引擎。
29.如权利要求24-28中任一项所述的设备，其中所述多媒体服务包括多媒体播放器，所述多媒体播放器具有播放器控制，其配置成连同所述图形处理单元来处理所述多媒体渲染命令。
30.如权利要求24-29中任一项所述的设备，其中所述多媒体服务包括多媒体播放器管理器，其配置成接收多媒体渲染起动或停止命令，并且响应于所述起动或停止命令而对应地起动或停止所述多媒体服务的多媒体播放器。
31.如权利要求24-30中任一项所述的设备，其中所述多媒体渲染命令包括以下中的一个或多个：
启动或起动所述多媒体播放器的起动命令；
停止或卸载所述多媒体播放器的停止命令；
播放所述多媒体内容的播放命令；或
暂停播放所述多媒体内容的暂停命令。
32.如权利要求24-31中任一项所述的设备，其中所述多媒体渲染命令包括设置命令，用于设置要播放的多媒体内容的统一资源标识符、用于指示所述多媒体内容的播放是直接还是间接渲染、用于寻找所述多媒体内容的特定时间、用于使所述多媒体内容的重放速率增加或减小、用于使所述多媒体内容的音频音量增加或减小、用于设置用于播放所述多媒体内容的窗口大小或用于得到所述多媒体内容的当前视频重放时间。
33.如权利要求24-32中任一项所述的设备，其中所述多媒体渲染命令包括查询命令，用于查询由统一资源指示符标识的资源是否包含视频、用于查询由统一资源指示符标识的资源是否包含音频、用于查询当前状态、用于查询所述多媒体内容是否可以被寻找、用于查询所述多媒体内容是否可以采用全屏模式渲染、用于查询所述多媒体内容的视频大小、用于查询所述多媒体内容有多少字节或秒已经被缓冲或用于查询所述多媒体内容的持续时间或大小。
34.如权利要求24-33中任一项所述的设备，其中所述信号包括以下中的一个或多个：
指示所述多媒体服务的媒体管线准备好的信号；
指示所述多媒体内容的结束的信号；
指示在所述处理期间出现的错误的信号；
指示完成的多媒体内容的缓冲或缓冲百分比的信号；
指示在所述多媒体内容上执行的请求的寻找已经完成的信号；
指示所述多媒体内容的播放已经停止的信号；
指示所述多媒体内容的播放状态已经改变的信号；或
指示需要来自所述渲染引擎的答复的信号。
35.如权利要求24-34中任一项所述的设备，其中所述多媒体服务配置成调用所述图形处理单元或所述媒体处理器来帮助图形数据转换、照明处理、三角形设置/裁剪或多边形处理。
36.如权利要求24-35中任一项所述的设备，其中所述设备包括台式计算机、膝上型计算机、平板计算机、智能电话、个人数字助理或游戏控制台中的一个。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2011/084896 WO2013097136A1 (en) | 2011-12-29 | 2011-12-29 | Service in support of browser for multi-media content |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103999046A true CN103999046A (zh) | 2014-08-20 |
| CN103999046B CN103999046B (zh) | 2017-09-15 |
Family
ID=48696218
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201180076044.7A Active CN103999046B (zh) | 2011-12-29 | 2011-12-29 | 支持用于多媒体内容的浏览器的服务 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US9495082B2 (zh) |
| EP (1) | EP2798484A4 (zh) |
| CN (1) | CN103999046B (zh) |
| TW (1) | TWI493362B (zh) |
| WO (1) | WO2013097136A1 (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020052438A1 (en) * | 2018-09-12 | 2020-03-19 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Game rendering method and apparatus, terminal, and non-transitory computer-readable storage medium |
| CN112423111A (zh) * | 2020-11-05 | 2021-02-26 | 上海哔哩哔哩科技有限公司 | 图形引擎和适用于播放器的图形处理方法 |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111813969A (zh) * | 2019-11-08 | 2020-10-23 | 厦门雅基软件有限公司 | 多媒体数据处理方法、装置、电子设备及计算机存储介质 |
| CN115396721B (zh) * | 2022-08-26 | 2024-01-23 | 四川长虹电器股份有限公司 | 基于hbbtv宽带连接的视频播放方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020161797A1 (en) * | 2001-02-02 | 2002-10-31 | Gallo Kevin T. | Integration of media playback components with an independent timing specification |
| US20100013842A1 (en) * | 2008-07-16 | 2010-01-21 | Google Inc. | Web-based graphics rendering system |
| CN102246146A (zh) * | 2008-11-07 | 2011-11-16 | 谷歌公司 | 针对使用本地代码模块的web应用的硬件加速图形 |
| CN102254292A (zh) * | 2010-05-20 | 2011-11-23 | 盛乐信息技术（上海）有限公司 | 远程3d指令渲染系统及方法 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6745368B1 (en) | 1999-06-11 | 2004-06-01 | Liberate Technologies | Methods, apparatus, and systems for storing, retrieving and playing multimedia data |
| US7234113B1 (en) * | 1999-06-29 | 2007-06-19 | Intel Corporation | Portable user interface for presentation of information associated with audio/video data |
| US7904059B2 (en) * | 2004-02-25 | 2011-03-08 | Sk Telecom Co., Ltd. | Method and mobile terminal for implementing vector animation interactive service on mobile phone browser |
| KR20090060022A (ko) * | 2007-12-07 | 2009-06-11 | 삼성전자주식회사 | 내용 기반의 문서 브라우징 방법 및 장치 |
-
2011
- 2011-12-29 CN CN201180076044.7A patent/CN103999046B/zh active Active
- 2011-12-29 EP EP11878494.1A patent/EP2798484A4/en not_active Withdrawn
- 2011-12-29 WO PCT/CN2011/084896 patent/WO2013097136A1/en active Application Filing
- 2011-12-29 US US13/995,942 patent/US9495082B2/en active Active
-
2012
- 2012-11-22 TW TW101143674A patent/TWI493362B/zh not_active IP Right Cessation
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020161797A1 (en) * | 2001-02-02 | 2002-10-31 | Gallo Kevin T. | Integration of media playback components with an independent timing specification |
| US20100013842A1 (en) * | 2008-07-16 | 2010-01-21 | Google Inc. | Web-based graphics rendering system |
| CN102246146A (zh) * | 2008-11-07 | 2011-11-16 | 谷歌公司 | 针对使用本地代码模块的web应用的硬件加速图形 |
| CN102254292A (zh) * | 2010-05-20 | 2011-11-23 | 盛乐信息技术（上海）有限公司 | 远程3d指令渲染系统及方法 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020052438A1 (en) * | 2018-09-12 | 2020-03-19 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Game rendering method and apparatus, terminal, and non-transitory computer-readable storage medium |
| US10991151B2 (en) | 2018-09-12 | 2021-04-27 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Game rendering method, terminal, and non-transitory computer-readable storage medium |
| CN112423111A (zh) * | 2020-11-05 | 2021-02-26 | 上海哔哩哔哩科技有限公司 | 图形引擎和适用于播放器的图形处理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2798484A4 (en) | 2015-08-26 |
| CN103999046B (zh) | 2017-09-15 |
| TWI493362B (zh) | 2015-07-21 |
| EP2798484A1 (en) | 2014-11-05 |
| US9495082B2 (en) | 2016-11-15 |
| WO2013097136A1 (en) | 2013-07-04 |
| US20140143689A1 (en) | 2014-05-22 |
| TW201337596A (zh) | 2013-09-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11019119B2 (en) | Web-based live broadcast | |
| US10542106B2 (en) | Content pre-render and pre-fetch techniques | |
| EP3780637A1 (en) | Webpage video playback method and apparatus, electronic device and storage medium | |
| US10037363B2 (en) | Method and device for displaying search result on mobile terminal | |
| CN109068153B (zh) | 视频播放方法、装置和计算机可读存储介质 | |
| US9621477B2 (en) | System and method of offloading browser computations | |
| US20150026715A1 (en) | In-stream video advertising using a user-choice-based ad unit | |
| US11924298B2 (en) | Message pushing method for a virtual gift and electronic device | |
| CN108769816B (zh) | 一种视频播放方法、装置及存储介质 | |
| US20190141085A1 (en) | Streaming relay for digital signage | |
| JP2018517195A (ja) | マルチメディア情報処理方法、装置及びシステム、並びにコンピュータ記憶媒体 | |
| CN110968395B (zh) | 一种在模拟器中处理渲染指令的方法及移动终端 | |
| CN103999046A (zh) | 支持用于多媒体内容的浏览器的服务 | |
| CN104349177A (zh) | 一种在桌面云下转向播放多媒体文件的方法、虚拟机及系统 | |
| US10073688B2 (en) | Method and apparatus for executing application | |
| EP3125541A1 (en) | Data acquisition and interaction method, set top box, server and multimedia system | |
| CN112449250A (zh) | 一种视频资源的下载方法、装置、设备和介质 | |
| CN107241651B (zh) | 一种媒体数据播放方法和装置、智能终端 | |
| CN112732250A (zh) | 界面处理方法、装置及存储介质 | |
| WO2021217467A1 (zh) | 一种智能摄像头的测试方法及装置 | |
| CN110475141B (zh) | 基于rn的视频播放方法、系统及电子设备和存储介质 | |
| CN113316014A (zh) | 一种显示设备、服务器及第三方数据显示控制方法 | |
| KR101668284B1 (ko) | 클라우드 스트리밍 서비스 시스템, 클라우드 스트리밍 서비스 제공 방법 및 이를 위한 장치 | |
| CN114925272A (zh) | 一种呈现推送资讯信息的方法与设备 | |
| KR20210027340A (ko) | 클라우드 스트리밍 서비스 시스템, 애니메이션 메시지를 이용한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |