CN105979286A - 一种复合分辨率的视频传输播放系统及方法 - Google Patents

一种复合分辨率的视频传输播放系统及方法 Download PDF

Info

Publication number
CN105979286A
CN105979286A CN201610518379.4A CN201610518379A CN105979286A CN 105979286 A CN105979286 A CN 105979286A CN 201610518379 A CN201610518379 A CN 201610518379A CN 105979286 A CN105979286 A CN 105979286A
Authority
CN
China
Prior art keywords
video
focal coordinates
local
resolution
local video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610518379.4A
Other languages
English (en)
Inventor
张程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201610518379.4A priority Critical patent/CN105979286A/zh
Publication of CN105979286A publication Critical patent/CN105979286A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution

Abstract

本发明公开了一种复合分辨率的视频传输播放系统及方法，捕捉眼球焦点落在显示屏上的焦点坐标，并将焦点坐标信息传送到远端服务器；根据焦点坐标输出局部视频和全范围视频；播放视频数据，同时根据焦点坐标信息将局部视频数据播放到焦点坐标对应的位置。优点在于，根据用户兴趣焦点，实时调整局部画面，将分辨率更高的画面展示到用户眼光所到之处。保证了用户的视觉焦点不管往哪里移动，都可以观赏到原高清视频在相应区域的细节画面。在视频传输和播放的过程中，远端服务器和用户端播放器对于分辨率更高的视频数据处理运算要成多倍于分辨率更低的视频数据运算，因此，局部传输高清视频非常有效降低硬件要求，减少设备成本。

Description

一种复合分辨率的视频传输播放系统及方法
技术领域
本发明涉及一种视频传输播放系统，尤其涉及一种有效减少高清视频占用带宽的复合分辨率视频传输播放系统。
同时本发明涉及一种视频传输播放方法，尤其涉及一种有效减少高清视频占用带宽的复合分辨率视频传输播放方法。
背景技术
目前高清视频以720P作为基本要求，实际应用中，高清视频已经高达1080P、1080I、720P，甚至达到4k、8k的超高分辨率。以1080P分辨率，时长两小时的高清视频为例，就算用高压缩的H.265压缩也高达4G的容量。但是为了提高传输效率而使用高压缩比的视频，无可避免的在播放端出现严重失真的情况。而直接传输原高清视频或低圧缩比的视频，就必须占用极大的网络带宽，这样对网络资源建设造成巨大成本。而且对于网络播放高清视频来说，网络传输速度始终是瓶颈。现在的视频压缩技术飞速发展，已经取得不小成果。但如果要保留整个画面的所有的清晰细节，视频文件仍然是非常大，很难在网络上传输高分辨率的视频。
发明内容
为了解决上述技术问题，本发明目的在于提供一种复合分辨率的视频传输播放系统及方法，可以在不降低用户体验的基础上，利用生物科技选择性局部传输高清视频。
本发明所述的一种复合分辨率的视频传输播放系统，其特征在于，包括：
焦点捕捉器，用于捕捉眼球焦点落在显示屏上的焦点坐标，并将焦点坐标信息传送到远端服务器；
远端服务器，用于将视频数据输出到播放器，同时将焦点坐标信息以及该焦点坐标对应的局部视频数据输出到播放器；
播放器，用于接收远端服务器发送的视频数据、局部视频数据和焦点坐标信息，将视频数据输入显示屏，同时根据焦点坐标信息将局部视频数据输入显示屏对应焦点坐标位置；
显示屏，用于接收播放器数据，播放视频和叠加播放局部视频；
所述的视频数据分辨率低于局部视频分辨率。
所述的局部视频中心点与焦点坐标重合。
所述的局部视频，视频帧形状是矩形或圆形或椭圆形。
所述的远端服务器，检测到焦点坐标到视频播放边界的距离小于局部视频中心点到局部视频边界的距离时，将局部视频超出视频播放范围的部分裁剪。
本发明所述的一种复合分辨率的视频传输播放方法，其特征在于，包括以下步骤：
S1、捕捉眼球焦点落在显示屏上的焦点坐标，并将焦点坐标信息传送到远端服务器；
S2、远端服务器根据焦点坐标输出对应的局部视频数据，同时输出相对局部视频分辨率更低的视频数据和焦点坐标；
S3、播放视频数据，同时根据焦点坐标信息将局部视频数据播放到焦点坐标对应的位置。
本发明优点在于，将视频以较低的分辨率整画面传输并播放，可以大大节省网络带宽资源。同时根据用户兴趣焦点，实时调整局部画面，将分辨率更高的画面展示到用户眼光所到之处。保证了用户的视觉焦点不管往哪里移动，都可以观赏到原高清视频在相应区域的细节画面。而用户视觉焦点以外的画面，生理原理是用余光获取，因此用较低分辨率的视频画面不会影响用户的体验效果。在视频传输和播放的过程中，远端服务器和用户端播放器对于分辨率更高的视频数据处理运算要成多倍于分辨率更低的视频数据运算，因此，局部传输高清视频非常有效降低硬件要求，减少设备成本，降低传输带宽的要求。
附图说明
图1是本发明的系统结构示意图。
图2是本发明的方法流程图。
具体实施方式
根据图1所示，本发明所述的一种复合分辨率的视频传输播放系统，由播放器、显示屏、远端服务器和焦点捕捉器组成，工作过程和传输播放方法如图2所示。
远端服务器将较低分辨率的视频，例如以480P作为分辨率传输，全画面地传输到播放器，然后播放器通过显示屏播放给用户观看。用户在显示屏前观看视频时，焦点捕捉器会根据人眼的移动，实时捕捉人眼焦点在显示屏上的位置，然后以显示屏一个定点作为坐标原点，得出焦点所在的坐标信息。以下均以显示屏左下角作为坐标原点，建立坐标系描述技术方案，但并不作为对权利要求的限定解析。焦点捕捉器捕捉到焦点落在距离原点上方第M个像素和右方第N个像素时，记录焦点坐标为J（N，M），然后将焦点坐标J（N，M）输入到远端服务器。
远端服务器将原高清视频调出，高清视频可以是1080P、2K或者是更高的4K、8K分辨率。在高清视频中以（N，M）为中心点O，截取一定范围的局部视频。所截取的局部视频的帧面形状可以是矩形、圆形或椭圆形。以矩形截取易于与显示屏成正交比例，容易截取。以圆形截取符合人眼视觉锥面的投影范围，视觉效果更佳。以椭圆形截取适合在检测到多个焦点时，以所有焦点的合集为基础，方便多人同时观看。然后将中心点为O（N，M）的高清局部视频传输到播放器，同时传输焦点坐标的坐标值。
播放器接收到局部视频数据和焦点坐标J（N，M）后，将高清的局部视频中心点校准在显示屏的第（N，M）个像素位置上，然后将局部视频覆盖播放，实现在焦点位置上播放对应局部视频的效果。
当人眼的焦点靠近视频播放边界时，焦点坐标到视频播放边界的距离小于局部视频中心点到局部视频边界的距离。远端服务器将局部视频超出视频播放范围的部分裁剪，优点在于人眼感觉清晰范围变小后，自动将焦点调整到视频更宽阔的位置，辅助用户调整观看视角。
本发明可以在较小的网络带宽下传输以往不能实现的高清视频，而且所看到的局部视频比原高清文件并没有降低。由人眼焦点带动高清范围的移动，给用户带来更多的主动性，和更好的体现效果。
对于本领域的技术人员来说，可根据以上描述的技术方案以及构思，做出其它各种相应的改变以及变形，而所有的这些改变以及变形都应该属于本发明权利要求的保护范围之内。

Claims (8)

1.一种复合分辨率的视频传输播放系统，其特征在于，包括：
焦点捕捉器，用于捕捉眼球焦点落在显示屏上的焦点坐标，并将焦点坐标信息传送到远端服务器；
远端服务器，用于将视频数据输出到播放器，同时将焦点坐标信息以及该焦点坐标对应的局部视频数据输出到播放器；
播放器，用于接收远端服务器发送的视频数据、局部视频数据和焦点坐标信息，将视频数据输入显示屏，同时根据焦点坐标信息将局部视频数据输入显示屏对应焦点坐标位置；
显示屏，用于接收播放器数据，播放视频和叠加播放局部视频；
所述的视频数据分辨率低于局部视频分辨率。
2. 根据权利要求1所述的系统，其特征在于，所述的局部视频中心点与焦点坐标重合。
3.根据权利要求2所述的系统，其特征在于，所述的远端服务器，检测到焦点坐标到视频播放边界的距离小于局部视频中心点到局部视频边界的距离时，将局部视频超出视频播放范围的部分裁剪。
4.根据权利要求1-3任一所述的系统，其特征在于，所述的局部视频，视频帧形状是矩形或圆形或椭圆形。
5.一种复合分辨率的视频传输播放方法，其特征在于，包括以下步骤：
S1、捕捉眼球焦点落在显示屏上的焦点坐标，并将焦点坐标信息传送到远端服务器；
S2、远端服务器根据焦点坐标输出对应的局部视频数据，同时输出相对局部视频分辨率更低的视频数据和焦点坐标；
S3、播放视频数据，同时根据焦点坐标信息将局部视频数据播放到焦点坐标对应的位置。
6. 根据权利要求6所述的方法，其特征在于，所述的局部视频中心点与焦点坐标重合。
7. 根据权利要求7所述的方法，其特征在于，当焦点坐标到视频播放边界的距离小于局部视频中心点到局部视频边界的距离时，将局部视频超出视频播放范围的部分裁剪。
8. 根据权利要求5-7任一所述的方法，其特征在于，所述的局部视频，视频帧形状是矩形或圆形或椭圆形。
CN201610518379.4A 2016-07-05 2016-07-05 一种复合分辨率的视频传输播放系统及方法 Pending CN105979286A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610518379.4A CN105979286A (zh) 2016-07-05 2016-07-05 一种复合分辨率的视频传输播放系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610518379.4A CN105979286A (zh) 2016-07-05 2016-07-05 一种复合分辨率的视频传输播放系统及方法

Publications (1)

Publication Number Publication Date
CN105979286A true CN105979286A (zh) 2016-09-28

Family

ID=56954919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610518379.4A Pending CN105979286A (zh) 2016-07-05 2016-07-05 一种复合分辨率的视频传输播放系统及方法

Country Status (1)

Country Link
CN (1) CN105979286A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107018386A (zh) * 2017-06-08 2017-08-04 柳州智视科技有限公司 一种视频流多分辨率观测系统
CN108924629A (zh) * 2018-08-28 2018-11-30 恒信东方文化股份有限公司 一种vr图像处理方法
CN109362242A (zh) * 2016-10-10 2019-02-19 华为技术有限公司 一种视频数据的处理方法及装置
CN110062172A (zh) * 2018-06-04 2019-07-26 成都依能科技股份有限公司 在动态图像预览下定义静态高清图像拍摄区域的方法
CN110324679A (zh) * 2018-03-29 2019-10-11 优酷网络技术（北京）有限公司 一种视频数据处理方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6078349A (en) * 1995-06-07 2000-06-20 Compaq Computer Corporation Process and system for increasing the display resolution of a point-to-point video transmission relative to the actual amount of video data sent
US20020141614A1 (en) * 2001-03-28 2002-10-03 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
US20100056274A1 (en) * 2008-08-28 2010-03-04 Nokia Corporation Visual cognition aware display and visual data transmission architecture
CN102801955A (zh) * 2011-08-17 2012-11-28 南京金柏图像技术有限公司 一种基于局部高清的数字视频传输方法
CN103249352A (zh) * 2010-12-08 2013-08-14 索尼电脑娱乐公司 利用视线跟踪的自适应显示
US20140099066A1 (en) * 2012-10-05 2014-04-10 Gangneung-Wonju National University Industry Academy Cooperation Group Content processing apparatus for processing high resolution content and content processing method thereof

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6078349A (en) * 1995-06-07 2000-06-20 Compaq Computer Corporation Process and system for increasing the display resolution of a point-to-point video transmission relative to the actual amount of video data sent
US20020141614A1 (en) * 2001-03-28 2002-10-03 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
US20100056274A1 (en) * 2008-08-28 2010-03-04 Nokia Corporation Visual cognition aware display and visual data transmission architecture
CN103249352A (zh) * 2010-12-08 2013-08-14 索尼电脑娱乐公司 利用视线跟踪的自适应显示
CN102801955A (zh) * 2011-08-17 2012-11-28 南京金柏图像技术有限公司 一种基于局部高清的数字视频传输方法
US20140099066A1 (en) * 2012-10-05 2014-04-10 Gangneung-Wonju National University Industry Academy Cooperation Group Content processing apparatus for processing high resolution content and content processing method thereof

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109362242A (zh) * 2016-10-10 2019-02-19 华为技术有限公司 一种视频数据的处理方法及装置
US10757162B2 (en) 2016-10-10 2020-08-25 Huawei Technologies Co., Ltd. Video data processing method and apparatus
US11075974B2 (en) 2016-10-10 2021-07-27 Huawei Technologies Co., Ltd. Video data processing method and apparatus
US11563793B2 (en) 2016-10-10 2023-01-24 Huawei Technologies Co., Ltd. Video data processing method and apparatus
CN107018386A (zh) * 2017-06-08 2017-08-04 柳州智视科技有限公司 一种视频流多分辨率观测系统
CN110324679A (zh) * 2018-03-29 2019-10-11 优酷网络技术（北京）有限公司 一种视频数据处理方法及装置
CN110324679B (zh) * 2018-03-29 2022-03-22 阿里巴巴（中国）有限公司 一种视频数据处理方法及装置
CN110062172A (zh) * 2018-06-04 2019-07-26 成都依能科技股份有限公司 在动态图像预览下定义静态高清图像拍摄区域的方法
CN110062172B (zh) * 2018-06-04 2020-12-01 成都依能科技股份有限公司 在动态图像预览下定义静态高清图像拍摄区域的方法
CN108924629A (zh) * 2018-08-28 2018-11-30 恒信东方文化股份有限公司 一种vr图像处理方法
CN108924629B (zh) * 2018-08-28 2021-01-05 恒信东方文化股份有限公司 一种vr图像处理方法

Similar Documents

Publication Publication Date Title
CN105979286A (zh) 一种复合分辨率的视频传输播放系统及方法
US10805593B2 (en) Methods and apparatus for receiving and/or using reduced resolution images
US9965026B2 (en) Interactive video display method, device, and system
WO2016065913A1 (zh) 视频图像的处理方法、设备及系统
US10613624B2 (en) Display driving circuit, driving method thereof and display device
CN102801963B (zh) 基于高清数字摄像头监控的电子ptz方法及装置
CN109417624A (zh) 用于提供和显示内容的装置和方法
CN105678693A (zh) 全景视频浏览播放方法
CN113301439A (zh) 视频数据的基于内容的流分割
CN106534789A (zh) 一种一体化智慧型安防视频监控系统
CN110419224A (zh) 用于封装和流传输虚拟现实媒体内容的方法和装置
CN103974115A (zh) 一种高分辨率显示方法和系统
EP3065413B1 (en) Media streaming system and control method thereof
CN107065197B (zh) 面向vr眼镜的人眼跟踪远程渲染实时显示方法及系统
CN106803984A (zh) 一种兼容vr和电视功能的方法和装置
CN106453913A (zh) 预览全景内容的方法及装置
CN107409239A (zh) 基于眼睛追踪的图像传输方法、图像传输设备及图像传输系统
WO2019109699A1 (zh) 图片处理方法和装置
CN106412617B (zh) 远程调试控制方法及装置
EP3941040A1 (en) Mapping method for fulldome display
JP2021530918A (ja) フォービエイションおよびｈｄｒ
CN106131693A (zh) 一种模块化的视频传输播放系统及方法
CN113132653A (zh) 一种可分割为任意播放数量屏幕的自动分屏实现方法
CN202818497U (zh) 基于高清数字摄像头监控的电子ptz装置
CN107678723B (zh) 一种用于远程教育的桌面共享系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160928

RJ01 Rejection of invention patent application after publication