CN104935954A - 用于显示相关媒体文件的系统、设备和方法 - Google Patents
用于显示相关媒体文件的系统、设备和方法 Download PDFInfo
- Publication number
- CN104935954A CN104935954A CN201510036550.3A CN201510036550A CN104935954A CN 104935954 A CN104935954 A CN 104935954A CN 201510036550 A CN201510036550 A CN 201510036550A CN 104935954 A CN104935954 A CN 104935954A
- Authority
- CN
- China
- Prior art keywords
- display
- media file
- electronic equipment
- characteristic
- source media
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000012545 processing Methods 0.000 claims abstract description 42
- 230000001419 dependent effect Effects 0.000 claims description 30
- 230000005540 biological transmission Effects 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 25
- 238000012546 transfer Methods 0.000 claims description 14
- 230000003044 adaptive effect Effects 0.000 claims description 12
- 238000012800 visualization Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 5
- 230000003287 optical effect Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 238000011156 evaluation Methods 0.000 abstract 1
- 238000006243 chemical reaction Methods 0.000 description 12
- 230000000007 visual effect Effects 0.000 description 10
- 229920001621 AMOLED Polymers 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000006978 adaptation Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000012958 reprocessing Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/60—Memory management
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Geometry (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明公开了用于显示相关媒体文件的系统、设备和方法。该系统包括:显示特性评估单元,被配置为评估电子设备的显示器的显示特性;媒体存取单元,被配置为从媒体存储器接收源媒体文件;以及显示相关处理单元,被配置为基于显示特性执行源媒体文件的显示相关处理以获得显示相关媒体文件。
Description
技术领域
本公开内容一般涉及用于提供和/或查看显示相关媒体文件(display-dependent media file)的系统、设备和方法。
背景技术
现代显示技术在很大程度上依赖于数字处理。为了适合且匹配显示设备的特性,从基本流解码到先进的帧率转换,都需要大量的计算。
将要显示的大量内容可经由基于网络的服务,例如经由“云”服务获得。例如,该内容可以是第三方内容(电影、广告)或用户生成的内容(云存储器)。
当在客户端设备上观看此内容时,显示所需要的所有处理通常在客户端设备本身完成。每个设备必须通过自身运行所有相应的算法。这需要计算能力并且使用电池电力。此外,云平台可以将它的服务提供给大量的客户端设备,并且所有客户端设备必须分别独立地以相同的方式运行计算。
鉴于此,期望找到一种完成由显示设备所要求的处理的更好方法。
发明内容
根据第一方面,公开一种系统,包括:显示特性评估单元,被配置为评估电子设备的显示器(display)的显示特性(display characteristics);媒体存取单元,被配置为从媒体存储器接收源媒体文件;以及显示相关处理单元,被配置为基于显示特性进行源媒体文件的显示相关处理以获得显示相关媒体文件。
根据另一方面,公开了一种电子设备,包括:显示器,具有显示特性;传输单元,被配置为将显示特性传输至媒体服务器;以及接收单元,被配置为从媒体服务器接收显示相关媒体文件,该显示相关媒体文件已基于显示特性经过了处理。
根据又一方面,公开了一种方法,包括:评估电子设备显示器的显示特性,从媒体存储器接收源媒体文件,以及基于显示特性处理源媒体文件以获得显示相关媒体文件。
另外的方面在从属权利要求、以下描述和附图中阐述。
附图说明
参照附图通过示例方式说明实施方式,在附图中:
图1示意性地示出了包括作为云服务将媒体文件提供至显示设备的云平台的常规系统;
图2a示意性地示出了包括具有内容存储部和云处理部的云平台以及作为云平台的客户端的电子设备的系统的实施方式;
图2b示意性地示出了包括具有内容存储部和云处理部的云平台以及作为云平台的客户端的电子设备的系统的另一实施方式;
图3a示意性地示出了显示相关处理单元包括帧率转换单元的实施方式;
图3b示意性地示出了显示相关处理单元包括显示技术适配单元的另一实施方式;
图3c示意性地示出了显示相关处理单元包括动态范围转换单元的又一实施方式;
图4示意性地示出了用于提供显示相关媒体文件的方法的实施方式;
图5示意性地示出了用于提供显示相关媒体文件的方法的另一实施方式;以及
图6示意性地示出了用于提供显示相关媒体文件的方法的又一实施方式。
具体实施方式
在参考图1给出实施方式的详细说明之前,先进行一些概要说明。
一种用于提供显示相关媒体文件的系统可以包括:显示特性评估单元,被配置为评估电子设备显示器的显示特性;媒体存取单元,被配置为从媒体存储器接收源媒体文件;以及显示相关处理单元,被配置为基于显示特性对源媒体文件的执行显示相关处理以获得显示相关媒体文件。
例如,电子设备可以是移动客户端显示设备,诸如移动电话、数字相机、个人阅读器、笔记本电脑、平板PC等。替换地,电子设备也可以是固定设备,诸如,电视机、(家庭)影院投影仪、台式PC等。
媒体存储器可以存储一个或多个源媒体文件。例如,媒体存储器可以存储属于云服务的具体用户的一个或多个个人媒体文件。媒体存储器也可以存储大量的提供用于公共观看的媒体文件。源媒体文件可以包括记录的视频和/或音频内容。替换地,媒体存储器也可以是临时存储器,并且源媒体文件可以提供实时媒体内容,该实时媒体内容设置用于实时流传输(livestreaming)至一个或多个流客户端。媒体存储器可以存储完整的音频和视频内容或仅部分音频和视频内容。源媒体文件可以提供诸如电影、广告等的完整媒体内容。替换地,源媒体文件可以仅包括诸如电影、广告等的媒体内容的一部分。
根据公开的系统,由用于显示源媒体文件的电子设备需要的部分或全部处理可以在电子设备外部执行,例如,在云中执行。例如,云平台可以具有以非常高的质量进行处理的计算能力。例如,在电子设备外部执行部分或全部处理可进一步避免在充当云服务的显示客户端的多个电子设备中的功能性的重叠。
在一些实施方式中,从电子设备移除用于显示图像的处理的几乎所有硬件。因此,可以变得更具成本效益地生产电子设备。此外,硬件的移除可以导致在工业化设计方面更自由,以允许设计出更小的电子设备。此外,处理硬件的移除可以延长电子设备的电池寿命并且降低固定显示设备的功耗。
在一些实施方式中,电子设备可以视为具有可放缩图像质量的“云显示器”。可以降低硬件复杂性,并且电子设备可以被实现为仅一个呈现设备。
在一些实施方式中,图像形成的处理和后处理完全转移到电子设备的外部并且在电子设备的外部进行管理,例如,在云中。
例如,显示相关处理可以包括媒体源文件的转码。转码涉及将数据从原始编码转换至目标编码。例如,这类转码可以实现为两步处理,在该两步处理中,源媒体文件从诸如H.264的原始编码解码为中间格式,然后将其编码为目标格式。中间格式可以是诸如针对音频的PCM或针对视频的YUV的未压缩格式。目标编码可以是用于在电子设备上显示的最优化的编码。
显示特性评估单元可以被配置为接收电子设备显示器的显示特性。可显示特性的接收可以明确或隐含的形式出现。以明确的形式接收显示特性可以包括接收显示器的帧率或屏幕分辨率。以隐含的形式接收显示特性可以包括接收显示器型号标识。然后,系统可以从将显示参数归属于显示器型号标识的数据库中请求与此显示器型号标识相关联的显示参数。然后,系统可以将这些显示参数用作显示特性。
用于提供显示相关媒体文件的系统可以进一步包括传输单元,该传输单元被配置为将显示相关媒体文件传输到电子设备。例如,传输单元可以是流媒体服务器。
用于提供显示相关媒体文件的系统可以进一步包括媒体存储器,该媒体存储器被配置为存储媒体文件。媒体存储器可以是存储设备,诸如硬盘、或云存储器平台。
用于提供显示相关媒体文件的系统可以进一步包括预可视化处理单元(pre-visualization processing unit),预可视化处理单元被配置为执行源媒体文件的最小处理以获得预可视化媒体文件;以及预可视化传输单元,被配置为将预可视化媒体文件传输至电子设备。
显示特性评估单元、媒体存取单元、和显示相关处理单元可以是媒体服务器的一部分。此媒体服务器可以被配置为云服务或可以是云服务的一部分。
用于呈现显示相关媒体文件的电子设备可以包括具有显示特性的显示器;传输单元,被配置为将显示特性传输至媒体服务器;以及接收单元,被配置为从媒体服务器接收显示相关媒体文件,该显示相关媒体文件基于显示特性已被处理。显示器可以是诸如LCD显示器、等离子体显示器或AMOLED显示器的任何类型的显示器。
用于呈现显示相关媒体文件的电子设备可以进一步包括解码单元,被配置为解码显示相关媒体文件。
显示器可以被配置为在显示器上显示显示相关媒体文件。例如,这种显示可能涉及显示器驱动器。
用于提供显示相关媒体文件的方法可以包括评估电子设备显示器的显示特性,从媒体存储器接收源媒体文件,以及基于显示特性处理源媒体文件以获得显示相关媒体文件。
用于提供显示相关媒体文件的方法可以进一步包括从电子设备接收显示特性。
用于提供显示相关媒体文件的方法可以进一步包括将显示相关媒体文件传输至电子设备。
用于提供显示相关媒体文件的方法可以进一步包括执行源媒体文件的最小处理以获得预可视化媒体文件,以及将预可视化媒体文件传输至电子设备。
处理源媒体文件以获得显示相关媒体文件可以包括以下步骤中的至少一个:转换源媒体文件的帧率、将源媒体文件适配显示技术、适配源媒体文件的颜色动态范围、施加时间和/或空间抖动、适配显示器分辨率、适配源媒体文件的子像素图案、修改源媒体文件的3D立体内容、在源媒体文件中除去时间伪像、将隔行的源媒体文件(interlaced source media file)变换为非隔行的源媒体文件、修改源媒体文件的长宽比、以及根据环境光条件改变对比度特性。
根据实施例,显示器可以支持100/120Hz刷新率,但是源媒体文件的内容可以25/30Hz编码。在这种情况下,可以在云平台的服务器中直接地上变频源媒体文件,而不是传输25/30Hz并且在显示器中执行上变频。云平台的服务器可以具有更高的计算能力,使用其能够利用更高质量的算法执行上变频。因此,客户端电子设备可以利用较低的计算能力享受更好的质量。
根据另一实施例,电子设备的显示器属于具有RGB像素条纹的LCD类型,或其可能是具有笔瓦片布置的AMOLED等。为了适当地适合显示器类型的显示器像素图案,可以处理源媒体文件的内容。在将数据发送到客户端电子设备之前,这能够在服务器中完成。
根据又一实施例,显示器可以有效地支持6位每颜色动态范围。在具有8位每颜色动态范围的源媒体文件中,可能需要时间和/或空间抖动。这种时间和/或空间抖动可以在电子设备外部完成,例如,利用更好的算法再次直接在服务器中完成,因此增加质量并且降低客户端电子设备的计算成本。
根据又一实施例,电子设备的显示器分辨率可能完全不同于利用其编码源媒体文件的像素分辨率。同样在这种情况下,服务器能够适当地适合(fit)分辨率。再一次,可以预期更好的质量。
根据又一实施例,子像素图案能够是RGBY(在此,RGB是红色、绿色和蓝色,并且Y是黄色)或RGBW(在此,W是白色)。创造新的颜色成分,特别是黄色,可能是昂贵的计算任务。服务器可以更好的质量结果完成此项任务。
根据又一实施例,一些3D显示器为了在使用3D立体内容之前对其进行修改,需要特殊处理。类似于帧率转换,这种操作可以在服务器级来执行。再次,质量上升,客户端的处理下降。
根据又一实施例,类似于等离子体显示器的一些显示器能够遭受时间伪像(当显示具有运动的视频时),因此在使用内容之前要求对内容的特定时间处理。同样,也可以在服务器中预先完成。
另一个实施例涉及一个事实,即现代显示几乎都是逐行的。然而,源媒体文件的内容可能被隔行。通常,转换(I2P,隔行到逐行)发生在显示器本身中。根据实施方式,这种转换在电子设备外部完成。例如,就质量而言,与客户端电子设备相比,服务器可以具有更好的处理能力,使得其能够做更好的工作。
又一实施例涉及显示器具有的长宽比可不同于源媒体文件的长宽比的的事实。可以在电子设备外部应用线性缩放,或者完成内容的自适应重新编码(重新定向)。特别是在第二情况,可能需要大量的计算能力,并且可能难以在瘦客户端中实现。
又一实施例涉及一些显示器能够根据环境光条件改变(对比度)特性的事实。在将内容发送至客户端电子设备之前,可将这种信息发送至能够恰当地改变内容的服务器,因此避免在显示器自身中进行操作。这在受完全不同的环境条件(日光,黑暗等)的移动设备的情况下可能尤其有趣。
用于在显示器上显示媒体文件而执行的特定或非特定处理的其他情况可以在包含显示器的电子设备外部执行。
显示相关处理也可以考虑通信链路的参数,如传输带宽。因此,显示相关处理也可以包括带宽相关处理。例如,当通信链路的带宽变坏时,可以降低帧率和/或分辨率;并且当通信链路的带宽变好时,可以增加帧率和/或分辨率。
上述源媒体文件可以提供用于流传输至电子设备。例如,源媒体文件的显示相关处理可以包括将H.264编码的媒体文件或媒体流转换为多个较低分辨率/数据速率流。例如,转码器可根据电子设备的显示特性将720p的流转换为以848x4801000、640x360700、480x270500或320x180200Kbps配置的流。
此外,显示特性可以包括由电子设备的用户提供的设置。例如,电子设备的用户可提供显示参数的设置,诸如清晰度、亮度、对比度、颗粒、白平衡等。这类显示参数可作为显示特性的一部分传输到媒体服务器。然后,媒体服务器的显示相关处理单元可使用这些显示参数以根据由用户设定的显示参数调整源媒体文件。例如,清晰度滤波器可根据由用户提供的清晰度设置应用于源媒体文件,源媒体文件可被优化以高亮度地显示,源媒体文件的白平衡可基于用户设置等来改变。
以上所描述的处理可以将它们优化适配于可用的带宽和电子设备中使用的显示器的方式来进行配置。
这些过程可以在未来证明,因为,例如它们的基础算法可以很容易地在云中升级,使得客户将进步应用在对云中所存储的图像的图像处理开发中,使得它们始终以最优质量可视化在显示器上。
图1示意性地示出了包括作为云服务将媒体文件提供至显示设备120的云平台110的常规系统100。云平台110包括存储媒体文件的媒体存储器111。媒体存取单元113被配置为从媒体存储器111接收至少一个媒体文件。重新格式化、转码和传输单元115被配置为从媒体存取单元113接收媒体文件,重新格式化媒体文件,转码媒体文件并且将所重新格式化和转码的媒体文件传输至显示设备120。从云平台110传输至显示设备120的媒体文件不考虑显示设备120的显示特性。因此,在显示设备120中的图像的解压缩、显示预处理和查看单元121必须执行预处理。这种预处理可能是复杂的并且可能需要复杂的计算能力。
现在更详细地描述用于提供显示相关媒体文件的系统的实施方式。
图2a示意性地示出了包括内容存储部210和云处理部220的系统200a。内容存储部210和云处理部220是云平台的一部分。电子设备230用作云平台的客户端。
内容存储部210包括媒体存储器211和媒体存取单元213。
媒体存储器211可以是包括一个或多个存储器服务器的云存储器。媒体存储器211可以位于云平台供应商的中心局。为了将云服务提供给大量的客户端设备,媒体存储器211也可以分布在多个不同的位置。
媒体存取单元213被配置为从媒体存储器211获取一个或多个源媒体文件,并且将该源媒体文件传给云处理部220。例如,媒体存取单元213可以是位于存储器服务器或在网关服务器上的磁盘操作系统、通用因特网文件系统(CIFS)、FTP服务器软件、流服务器软件等。媒体存取单元213可以是单个服务器产品或分布在多个不同的位置上的软件。
云处理部220包括显示特性评估单元221、显示相关处理单元223和传输单元225。
显示特性评估单元221被配置为从用作云平台的客户端的电子设备230接收显示特性。
显示特性评估单元221进一步被配置为借助于媒体存取单元213从媒体存储器211接收源媒体文件。
显示特性评估单元221进一步被配置为评估从电子设备230接收的显示特性以产生一个或多个显示特性评估参数。
显示相关处理单元223从显示特性评估单元221接收源媒体文件和一个或多个显示特性评估参数。然后,显示相关处理单元223基于显示特性评估参数执行源媒体文件的处理以产生显示相关媒体文件。然后,显示相关处理单元223将显示相关媒体文件传给传输单元225。
传输单元225被配置为将显示相关媒体文件传输至电子设备230。
电子设备包括显示器231、显示特性传输单元233、以及接收和解码单元235。显示特性传输单元233被配置为将显示器231的显示特性传输至云处理部220。接收和解码单元235被配置为从云处理部220接收显示相关媒体文件,解码显示相关媒体文件的内容,并且在显示器231上显示显示相关媒体文件的内容。
虽然在图2a的示意图中仅示出了一个电子设备230,但是云平台可以将它的服务提供至多个电子设备或甚至非常大量的电子设备。
图2b示意性地示出了包括具有内容存储部210和云处理部220的云平台以及用作云平台的客户端的电子设备230的系统200b的另一实施方式。内容存储部210、云处理部220和电子设备230包括的元件与在图2a的实施方式中时所包括的元件相同。关于与在图2a中相同的这些元件参考以上相应的解释。此外,系统200b的云处理部220包括:用于预可视化的最小处理单元227和预可视化传输单元229。用于预可视化的最小处理单元227被配置为从显示特性评估单元221接收源媒体文件和一个或多个显示特性评估参数,并且基于显示特性评估参数进行预可视化处理以产生预可视化信息。预可视化传输单元229被配置为将预可视化信息传输至电子设备230。电子设备230的接收和解码单元235被配置为从云处理部220接收预可视化信息,并且被配置为在电子设备230的显示器231上显示预可视化信息。
在图2b的实施方式中,传输单元225和预可视化传输单元229被示出为两个单独的单元。在替换的实施方式中,这些两个单元的功能也可以通过单个传输单元执行。
类似地,尽管在图2a和图2b的实施方式中的功能被示出为位于特定单元。这样的功能可能会被重新定位。例如,参考单独的单元在图2a和2b中描述的功能可能通过单个物理实体执行,例如云平台的服务器计算机或者电子设备230内的处理器。作为典型的云平台,该功能甚至可以分布在位于不同位置的多个物理实体上。
图3a、图3b、和图3c更详细地描述显示特性评估单元221和显示相关处理单元223的实施方式。
在图3a中,描述了显示相关处理单元223包括帧率转换单元223a的实施方式。显示特性评估单元221接收利用30Hz的帧率编码的源媒体文件。显示特性评估单元221评估所接收的显示特性确定出电子设备的显示器能够以100Hz的帧率显示媒体内容。因此,显示特性评估单元221将100Hz的目标帧率确定为显示特性评估参数,并且将这个显示特性评估参数传输至显示相关处理单元223。显示相关处理单元223接收以30Hz编码的源媒体文件和100Hz的目标帧率。显示相关处理单元223的帧率转换单元223a将源媒体文件上变频至目标帧率100Hz,因此,以产生以100Hz编码的显示相关媒体文件。
在图3b中,描述了另一实施方式。在这个实施方式中,显示相关处理单元223包括显示技术适配单元223b。显示特性评估单元221接收编码为RGB数据的源媒体文件。显示特性评估单元221评估所接收的显示特性确定出电子设备的显示器属于AMOLED类型。因此,显示特性评估单元221将显示器类型信息AMOLED确定为显示特性评估参数,并且将这个显示特性评估参数传输至显示相关处理单元223。显示相关处理单元223接收编码为RGB的源媒体文件和显示器类型信息AMOLED。显示相关处理单元223的显示技术适配单元223b适配源媒体文件,使得可以针对AMOLED类型显示器优化源媒体文件,从而产生对AMOLED优化的显示相关媒体文件。
在图3c中,描述了又一实施方式。在这个实施方式中,显示相关处理单元223包括动态范围转换单元223c。显示特性评估单元221接收以每颜色8位动态范围编码的源媒体文件。显示特性评估单元221评估所接收的显示特性确定出电子设备的显示器能够仅以每颜色6位的动态范围显示媒体内容。因此,显示特性评估单元221将6位的目标动态范围确定为显示特性评估参数,并且将这个显示特性评估参数传输至显示相关处理单元223。显示相关处理单元223接收以8位的动态范围编码的源媒体文件和6位目标动态范围。显示相关处理单元223的动态范围转换单元223a将源媒体文件转换为目标动态范围6位,从而产生以6位动态范围编码的显示相关媒体文件。
图4示意性地示出了用于提供显示相关媒体文件的方法的实施方式。在S401,评估电子设备显示器的显示特性。在S403,从媒体存储器接收源媒体文件。在S405,基于显示特性处理源媒体文件以获得显示相关媒体文件。虽然在图4的实施方式中以具体顺序执行S401至S405,但是能够改变这个顺序。例如,能够改变顺序为在S401之前执行S403。
图5示意性地示出了用于提供显示相关媒体文件的方法的另一实施方式。在S501,从电子设备接收显示特性。在S503,评估显示特性。在S505,从媒体存储器接收源媒体文件。在S507,基于显示特性处理源媒体文件以获得显示相关媒体文件。在S509,将显示相关媒体文件传输至电子设备。虽然在图5的实施方式中以具体顺序执行S501至S509,但是能够改变这个顺序。例如,能够改变顺序为在S503之前执行S505。
图6示意性地示出了用于提供显示相关媒体文件的方法的另一实施方式。在S601,从电子设备接收显示特性。在S603,评估显示特性。在S605,从媒体存储器接收源媒体文件。在S607,基于显示特性处理源媒体文件以获得显示相关媒体文件。在S609,将显示相关媒体文件传输至电子设备。在S611,执行源媒体文件的最小处理以获得预可视化媒体文件。在S613,将预可视化媒体文件传输至电子设备。虽然在图6的实施方式中以具体顺序执行S601至S613,但是能够改变这个顺序。例如,能够改变顺序为在S603之前执行S605。另外,可以在S613和/或S611之后执行S609。
如果没有另外说明,本说明书中描述和权利要求中要求保护的所有设备和实体能够在,例如芯片上实现为集成电路逻辑,并且如果没有另外说明,由这些设备和实体提供的功能能够通过软件来实现。
本发明还可公开如下:
(1)一种系统,包括:
显示特性评估单元,被配置为评估电子设备的显示器的显示特性,
媒体存取单元,被配置为从媒体存储器接收源媒体文件,以及
显示相关处理单元,被配置为基于显示特性对源媒体文件执行显示相关处理以获得显示相关媒体文件。
(2)根据(1)的系统,其中,显示特性评估单元被配置为接收电子设备的显示器的显示特性。
(3)根据(1)或(2)任一项的系统,进一步包括:传输单元,被配置为将显示相关媒体文件传输至电子设备。
(4)根据(1)至(3)任一项的系统,进一步包括:媒体存储器,被配置为存储媒体文件。
(5)根据(1)至(4)任一项的系统,进一步包括:
预可视化处理单元,被配置为执行源媒体文件的最小处理以获得预可视化媒体文件,以及
预可视化传输单元,被配置为将预可视化媒体文件传输至电子设备。
(6)一种媒体服务器,包括:
显示特性评估单元,被配置为评估电子设备的显示器的显示特性,
媒体存取单元,被配置为从媒体存储器接收源媒体文件,以及
显示相关处理单元,被配置为基于显示特性对源媒体文件执行显示相关处理以获得显示相关媒体文件。
(7)根据(6)的媒体服务器,其中,媒体服务器被配置为云服务。
(8)一种电子设备,包括:
显示器,具有显示特性,
传输单元,被配置为将显示特性传输至媒体服务器,以及
接收单元,被配置为从媒体服务器接收显示相关媒体文件,显示相关媒体文件已基于显示特性进行处理。
(9)根据(8)的电子设备,进一步包括:解码单元,被配置为解码显示相关媒体文件。
(10)根据(8)或(9)任一项的电子设备,其中,显示器进一步被配置为显示该显示相关媒体文件。
(11)一种方法,包括:
评估电子设备显示器的显示特性,
从媒体存储器接收源媒体文件,以及
基于显示特性处理源媒体文件以获得显示相关媒体文件。
(12)根据(11)的方法,进一步包括:从电子设备接收显示特性。
(13)根据(11)或(12)任一项的方法,进一步包括:将显示相关媒体文件传输至电子设备。
(14)根据(11)至(13)任一项的方法,进一步包括:
执行源媒体文件的最小处理以获得预可视化媒体文件,以及
将预可视化媒体文件传输至电子设备。
(15)根据(11)至(14)任一项的方法,其中,处理源媒体文件以获得显示相关媒体文件包括以下各项中的至少一个转换源媒体文件的帧率,
将源媒体文件适配显示技术,
适配源媒体文件的颜色动态范围,
施加时间和/或空间抖动,
适配显示器分辨率,
适配源媒体文件的子像素图案,
修改源媒体文件的3D立体内容,
除去源媒体文件中的时间伪像,
将隔行的源媒体文件变换为非隔行的源媒体文件,
修改源媒体文件的长宽比,以及
根据环境光条件改变对比度特性。
Claims (15)
1.一种系统,包括:
显示特性评估单元,被配置为评估电子设备的显示器的显示特性,
媒体存取单元,被配置为从媒体存储器接收源媒体文件,以及
显示相关处理单元,被配置为基于所述显示特性执行所述源媒体文件的显示相关处理以获得显示相关媒体文件。
2.根据权利要求1所述的系统,其中,所述显示特性评估单元被配置为接收所述电子设备的所述显示器的所述显示特性。
3.根据权利要求1所述的系统,进一步包括传输单元,所述传输被配置为将所述显示相关媒体文件传输至所述电子设备。
4.根据权利要求1所述的系统,进一步包括媒体存储器,所述媒体存储器被配置为存储媒体文件。
5.根据权利要求1所述的系统,进一步包括:
预可视化处理单元,被配置为执行所述源媒体文件的最小处理以获得预可视化媒体文件,以及
预可视化传输单元,被配置为将所述预可视化媒体文件传输至电子设备。
6.一种媒体服务器,包括
显示特性评估单元,被配置为评估电子设备的显示器的显示特性,
媒体存取单元,被配置为从媒体存储器接收源媒体文件,以及
显示相关处理单元,被配置为基于所述显示特性执行所述源媒体文件的显示相关处理以获得显示相关媒体文件。
7.根据权利要求6所述的媒体服务器,其中,所述媒体服务器被配置为云服务。
8.一种电子设备,包括
显示器,具有显示特性,
传输单元,被配置为将所述显示特性传输至媒体服务器,以及
接收单元,被配置为从所述媒体服务器接收显示相关媒体文件,所述显示相关媒体文件已经过了基于所述显示特性的处理。
9.根据权利要求8所述的电子设备,进一步包括解码单元,所述解码单元被配置为解码所述显示相关媒体文件。
10.根据权利要求8所述的电子设备,其中,所述显示器进一步被配置为显示所述显示相关媒体文件。
11.一种方法,包括:
评估电子设备的显示器的显示特性,
从媒体存储器接收源媒体文件,以及
基于所述显示特性处理所述源媒体文件以获得显示相关媒体文件。
12.根据权利要求11所述的方法,进一步包括:从所述电子设备接收所述显示特性。
13.根据权利要求11所述的方法,进一步包括:将所述显示相关媒体文件传输至所述电子设备。
14.根据权利要求11所述的方法,进一步包括:
执行所述源媒体文件的最小处理以获得预可视化媒体文件,以及
将所述预可视化媒体文件传输至所述电子设备。
15.根据权利要求11所述的方法,其中,处理所述源媒体文件以获得显示相关媒体文件包括以下步骤中的至少一个:
转换所述源媒体文件的帧率,
将所述源媒体文件适配于显示技术,
适配所述源媒体文件的颜色动态范围,
施加时间抖动和/或空间抖动,
适配所述显示器的分辨率,
适配所述源媒体文件的子像素图案,
修改所述源媒体文件的3D立体内容,
除去所述源媒体文件中的时间伪像,
将隔行的源媒体文件变换为非隔行的源媒体文件,
修改所述源媒体文件的长宽比,以及
根据环境光条件改变对比度特性。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14160199.7 | 2014-03-17 | ||
EP14160199 | 2014-03-17 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104935954A true CN104935954A (zh) | 2015-09-23 |
Family
ID=50287949
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510036550.3A Pending CN104935954A (zh) | 2014-03-17 | 2015-01-23 | 用于显示相关媒体文件的系统、设备和方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US10965974B2 (zh) |
CN (1) | CN104935954A (zh) |
DE (1) | DE102015204827A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015174108A1 (ja) * | 2014-05-15 | 2015-11-19 | ソニー株式会社 | 通信装置及び通信方法、並びにコンピューター・プログラム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1717674A (zh) * | 2001-12-12 | 2006-01-04 | 索尼电子有限公司 | 对多媒体数据进行转换以将其传送到多个异种设备 |
WO2011143916A1 (zh) * | 2011-01-19 | 2011-11-24 | 华为技术有限公司 | 媒体适配的方法和装置 |
CN103051979A (zh) * | 2011-10-13 | 2013-04-17 | 中兴通讯股份有限公司 | 流媒体处理方法及系统 |
CN103220577A (zh) * | 2012-01-18 | 2013-07-24 | 腾讯科技(深圳)有限公司 | 一种视频播放方法、装置和系统 |
CN103379363A (zh) * | 2012-04-19 | 2013-10-30 | 腾讯科技(深圳)有限公司 | 视频处理方法及装置、移动终端和系统 |
CN103561279A (zh) * | 2013-10-10 | 2014-02-05 | 中兴通讯股份有限公司 | 一种多媒体文件播放的方法、系统及云转码服务设备 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8812300B2 (en) * | 1998-03-25 | 2014-08-19 | International Business Machines Corporation | Identifying related names |
US20050128192A1 (en) * | 2003-12-12 | 2005-06-16 | International Business Machines Corporation | Modifying visual presentations based on environmental context and user preferences |
US8248433B2 (en) * | 2004-03-08 | 2012-08-21 | Nvidia Corporation | Error accumulation dithering of image data |
EP1655966A3 (en) * | 2004-10-26 | 2011-04-27 | Samsung Electronics Co., Ltd. | Apparatus and method for processing an image signal in a digital broadcast receiver |
US8189472B2 (en) * | 2005-09-07 | 2012-05-29 | Mcdonald James F | Optimizing bandwidth utilization to a subscriber premises |
GB2443229B (en) * | 2006-08-23 | 2009-10-14 | Cramer Systems Ltd | Capacity management for data networks |
US8031164B2 (en) * | 2007-01-05 | 2011-10-04 | Apple Inc. | Backlight and ambient light sensor system |
US8094168B2 (en) * | 2007-10-03 | 2012-01-10 | Microsoft Corporation | Adding secondary content to underutilized space on a display device |
US8385971B2 (en) | 2008-08-19 | 2013-02-26 | Digimarc Corporation | Methods and systems for content processing |
US8725583B2 (en) * | 2009-12-14 | 2014-05-13 | Ebay Inc. | Determining use of a display characteristic |
JP5890318B2 (ja) * | 2010-01-07 | 2016-03-22 | トムソン ライセンシングThomson Licensing | ディスプレイにビデオ・コンテンツを供給する方法および装置 |
EP2408196B1 (en) * | 2010-07-14 | 2017-01-11 | Alcatel Lucent | A method, server and terminal for generating a composite view from multiple content items |
JP5050094B2 (ja) * | 2010-12-21 | 2012-10-17 | 株式会社東芝 | 映像処理装置及び映像処理方法 |
US20120212575A1 (en) | 2011-02-23 | 2012-08-23 | Broadcom Corporation | Gateway/stb interacting with cloud server that performs high end video processing |
US20130093774A1 (en) | 2011-10-13 | 2013-04-18 | Bharath Sridhar | Cloud-based animation tool |
TWI471841B (zh) * | 2011-11-11 | 2015-02-01 | Wintek Corp | 有機發光二極體畫素電路及其驅動電路與應用 |
KR101914478B1 (ko) * | 2012-01-10 | 2018-11-02 | 에스케이플래닛 주식회사 | 이미지 제공 시스템, 이를 위한 장치 및 이미지 제공 방법 |
US9318043B2 (en) * | 2012-07-09 | 2016-04-19 | Mobbers, Inc. | Systems and methods for coordinating portable display devices |
US9294889B2 (en) * | 2012-07-13 | 2016-03-22 | Telefonaktiebolaget Lm Ericsson (Publ) | System and method for offline voicemail deposit |
EP2688263A1 (en) * | 2012-07-17 | 2014-01-22 | Tele2 Sverige AB | System and method for delegated authentication and authorization |
US20140074843A1 (en) * | 2012-09-12 | 2014-03-13 | Zuess, Inc. | Systems and methods for dynamic analysis, sorting and active display of semantic-driven reports of communication repositories |
-
2015
- 2015-01-02 US US14/588,601 patent/US10965974B2/en active Active
- 2015-01-23 CN CN201510036550.3A patent/CN104935954A/zh active Pending
- 2015-03-17 DE DE102015204827.6A patent/DE102015204827A1/de active Pending
-
2021
- 2021-03-29 US US17/215,947 patent/US11659223B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1717674A (zh) * | 2001-12-12 | 2006-01-04 | 索尼电子有限公司 | 对多媒体数据进行转换以将其传送到多个异种设备 |
WO2011143916A1 (zh) * | 2011-01-19 | 2011-11-24 | 华为技术有限公司 | 媒体适配的方法和装置 |
CN103051979A (zh) * | 2011-10-13 | 2013-04-17 | 中兴通讯股份有限公司 | 流媒体处理方法及系统 |
CN103220577A (zh) * | 2012-01-18 | 2013-07-24 | 腾讯科技(深圳)有限公司 | 一种视频播放方法、装置和系统 |
CN103379363A (zh) * | 2012-04-19 | 2013-10-30 | 腾讯科技(深圳)有限公司 | 视频处理方法及装置、移动终端和系统 |
CN103561279A (zh) * | 2013-10-10 | 2014-02-05 | 中兴通讯股份有限公司 | 一种多媒体文件播放的方法、系统及云转码服务设备 |
Also Published As
Publication number | Publication date |
---|---|
DE102015204827A1 (de) | 2015-09-17 |
US20150262323A1 (en) | 2015-09-17 |
US20210219007A1 (en) | 2021-07-15 |
US10965974B2 (en) | 2021-03-30 |
US11659223B2 (en) | 2023-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3633995A1 (en) | Method and device for chroma prediction | |
US11381626B2 (en) | Segmented video codec for high resolution and high frame rate video | |
JP7359521B2 (ja) | 画像処理方法および装置 | |
TW200539705A (en) | Image transmitting device, image receiving device and image transceiving system | |
US10757416B2 (en) | Method and device for adaptively compressing image data | |
JP2017118492A (ja) | Luma値を決定するための方法、装置、およびシステム | |
CN103281539A (zh) | 一种图像编、解码处理的方法、装置及终端 | |
CN101690218A (zh) | 通过网络结构提供显示装置专用的内容的方法、设备及系统 | |
CN104769642A (zh) | 用于减少数字视频图像数据的方法和装置 | |
US11627281B2 (en) | Method and apparatus for video frame interpolation, and device and storage medium | |
GB2516124A (en) | Optimizing video transfer | |
CN106713922A (zh) | 图像处理方法和电子设备 | |
CN115022679A (zh) | 视频处理方法、装置、电子设备和介质 | |
US11659223B2 (en) | System, device and method for displaying display-dependent media files | |
US11323701B2 (en) | Systems and methods for group of pictures encoding | |
CN110891195B (zh) | 花屏图像的生成方法、装置、设备和存储介质 | |
WO2013081615A1 (en) | Motion estimation methods for residual prediction | |
CN106664387B (zh) | 一种对视频图像帧进行后处理的计算机装置和方法,以及计算机可读介质 | |
WO2021109846A1 (zh) | 码流数据的处理方法和装置 | |
CN115668273A (zh) | 电子装置、其控制方法和电子系统 | |
CN111669541A (zh) | 预监画面显示方法及显示系统 | |
CN114786037B (zh) | 一种面向vr投影的自适应编码压缩方法 | |
WO2024051299A1 (zh) | 一种编解码方法及装置 | |
Min et al. | Paper No S8. 1: Color Volume‐Based Wide Color Gamut Mapping for Rec. 2020 Contents in Digital Television | |
CN115063327A (zh) | 图像处理方法和装置、以及视频处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150923 |