CN110868623A - 视觉焦点区域的弹幕隐藏方法及处理装置 - Google Patents
视觉焦点区域的弹幕隐藏方法及处理装置 Download PDFInfo
- Publication number
- CN110868623A CN110868623A CN201810983424.2A CN201810983424A CN110868623A CN 110868623 A CN110868623 A CN 110868623A CN 201810983424 A CN201810983424 A CN 201810983424A CN 110868623 A CN110868623 A CN 110868623A
- Authority
- CN
- China
- Prior art keywords
- visual focus
- user
- bullet screen
- area
- monitoring equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4884—Data services, e.g. news ticker for displaying subtitles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明涉及一种视觉焦点区域的弹幕隐藏方法及处理装置,主要应用于互联网信息显示技术领域。本发明的目的是通过如下技术方案来完成的,视觉焦点区域的弹幕隐藏方法,包括:监视设备进行用户视觉焦点校正;视频播放时,监视设备监视用户视觉焦点并获取用户视觉焦点在显示装置上的位置;用户视觉焦点位置形成遮罩区域;遮罩区域的弹幕透明或隐藏或虚化或渐变形式透明化。透明度的大小,羽化的程度,以及遮罩的图形,遮罩移动的延迟,遮罩移动的惯性都可以进行调整。本发明能够将用户当前视觉焦点处的弹幕透明或隐藏或虚化,达到不遮挡视频的目的。
Description
技术领域
本发明涉及一种视觉焦点区域的弹幕隐藏方法及处理装置,主要应用于互联网信息显示技术领域。
背景技术
弹幕是指一种在观看视频时,大量以字幕形式呈现的评论与视频同在一个画面的现象。在视频上方大量飘过的评论如密集炮弹一般,故得名弹幕。弹幕会随着视频的播放实时在视频上呈现,这样观看者在观看该视频时能够看到其他观看者和自己发送的弹幕。
在视频播放至广大用户容易产生共鸣的阶段时,弹幕数量会爆炸式呈现,将视频主要部分遮挡,如何在弹幕与视频中平衡取舍是一个亟待解决的问题。
发明内容
本发明的目的在于克服上述存在的问题,提供一种视觉焦点区域的弹幕隐藏方法及处理装置,能够将用户当前视觉焦点处的弹幕透明或隐藏或虚化,达到不遮挡视频的目的。
本发明的目的是通过如下技术方案来完成的,
视觉焦点区域的弹幕隐藏方法,包括:
监视设备进行用户视觉焦点校正;
视频播放时,监视设备监视用户视觉焦点并获取用户视觉焦点在显示装置上的位置;
用户视觉焦点位置形成遮罩区域;
遮罩区域的弹幕透明或隐藏或虚化或渐变形式透明化。透明度的大小,羽化的程度,以及遮罩的图形,遮罩移动的延迟,遮罩移动的惯性都可以进行调整。
作为优选,当所述监视设备为普通的摄像机设备(WebCam)时,所述的视觉焦点校正为:
监视设备识别到人脸和眼睛;
提示用户将视觉焦点停留在显示装置的指定位置;
更换视觉焦点停留的位置至少4次。
当所述监视设备为眼动仪时,按照眼动仪说明书的校正流程即可。
作为优选,所述的监视设备获取用户视觉焦点在显示装置上的位置时,用户视觉焦点坐标的前后更新为平滑移动补间。
作为优选,所述平滑移动补间具体为:
每隔设定时间获取一次用户视觉焦点的坐标数组;
拟合后获取该设定时间区间内移动的路径,遮罩区域在该设定时间内沿所述路径匀速移动。
作为优选,所述拟合的函数关系式为:
通过监视设备获取有序的二维坐标给定点P0、P1、…、Pn,P0-Pn代表了从起点到各个控制点再到终点的各点与占比t的幂运算;对所有点进行遍历同时根据当前占比t的值,计算出当前在曲线上的点坐标x,y,0<=t<=1;t的取值分成了1000份,每次运算t+=0.01,计算出的x,y分成了1000份之后的某一点;当t值从0~1遍历1000次后生成1000个x,y对应坐标,依次描点画线模拟出拟合后的移动路径。
作为优选,所述的遮罩区域为圆形,半径是显示装置的1/4。
一种视觉焦点区域的弹幕处理装置,包括:
监视设备,用于用户视觉焦点校正;视频播放时,监视用户视觉焦点并获取用户视觉焦点在显示装置上的位置;
显示装置,用于视频播放和显示弹幕;配合监视设备进行用户视觉焦点校正;
处理单元,视频播放时,在监视设备所确定的用户当前视觉焦点位置形成遮罩区域,将遮罩区域内的弹幕透明或隐藏或虚化或渐变形式透明化。
作为优选,当所述监视设备为普通的摄像机设备(WebCam)时,所述的视觉焦点校正为:
监视设备识别到人脸和眼睛;
提示用户将视觉焦点停留在显示装置的指定位置;
更换视觉焦点停留的位置至少4次。
当所述监视设备为眼动仪时,按照眼动仪说明书的校正流程即可。
作为优选,所述的监视设备获取用户视觉焦点在显示装置上的位置时,用户视觉焦点坐标的前后更新为平滑移动补间。
作为优选,所述平滑移动补间具体为:
每隔设定时间获取一次用户视觉焦点的坐标数组;
拟合后获取该设定时间区间内移动的路径,遮罩区域在该设定时间内沿所述路径匀速移动。
作为优选,所述拟合的函数关系式为:
通过监视设备获取有序的二维坐标给定点P0、P1、…、Pn,P0-Pn代表了从起点到各个控制点再到终点的各点与占比t的幂运算;对所有点进行遍历同时根据当前占比t的值,计算出当前在曲线上的点坐标x,y,0<=t<=1;t的取值分成了1000份,每次运算t+=0.01,计算出的x,y分成了1000份之后的某一点;当t值从0~1遍历1000次后生成1000个x,y对应坐标,依次描点画线模拟出拟合后的移动路径。
作为优选,所述的遮罩区域为圆形,半径是显示装置的1/4。
本发明与现有技术相比有如下优点和效果:
本发明通过监视设备(眼动仪或摄像机)监视用户眼球,脸部与监视设备的关系,寻找用户的视觉焦点区域,并将视觉焦点为中心的圆形区域的弹幕隐藏或透明或虚化显示,从而达到不遮挡视频的目的,解决了用户观看视频过程中弹幕遮挡视频内容的问题。
附图说明
图1是本发明方法流程图。
图2是本发明处理装置结构框图。
具体实施方式
下面将结合附图对本发明做详细的介绍。
本发明通过监视设备(例如眼动仪或摄像机)监视用户眼球,脸部与监视设备之间的关系,寻找用户聚焦于显示装置上的视觉焦点区域,并将视觉焦点为中心的圆形区域的弹幕隐藏或透明或虚化显示。
如图1所示,本发明视觉焦点区域的弹幕隐藏方法,包括:
监视设备进行用户视觉焦点校正;当所述监视设备为普通的摄像机设备(WebCam)时,所述的视觉焦点校正为:a、监视设备识别到人脸和眼睛;b、提示用户将视觉焦点停留在显示装置的指定位置;c、更换视觉焦点停留的位置至少4次,监视设备根据上述若干次视觉焦点停留位置和人脸位置完成校正;具体为:用户根据提示,将视觉焦点分别聚焦于显示装置的四个角,即,监视设备获取显示装置上用户多个角度的视觉焦点;监视设备通过记录上一步操作中用户眼睛和脸部的位置进行校正;当所述监视设备为眼动仪时,按照眼动仪说明书的校正流程即可;
视频播放时,监视设备监视用户视觉焦点并获取用户视觉焦点在显示装置上的位置;获得位置过程中,用户视觉焦点坐标的前后更新为平滑移动补间;
在用户视觉焦点位置形成遮罩区域;
遮罩区域的弹幕透明或隐藏或虚化或渐变形式透明化,不影响视频播放,达到不遮挡视频的目的。透明度的大小,羽化的程度,以及遮罩的图形,遮罩移动的延迟,遮罩移动的惯性都可以进行调整。
作为优选,眼动监控(监视用户视觉焦点)获得的坐标是离散且不连续的,为了避免遮罩抖动,本发明每隔100ms(时间可自定义,时间越小越灵敏,但是抖动会越大)获取一次坐标数组;拟合(曲线拟合原理可参考脚本之家在线工具公开的在线多项式曲线及曲线函数拟合的实现方法,通过输入多组坐标值,拟合出曲线)后,可以获取这个时间区间内移动的路径,并在这100ms中让遮罩区域沿着该路径匀速移动。
作为优选,所述拟合具体为:通过眼动监控获取了有序的二维坐标给定点P0、P1、…、Pn,其贝塞尔曲线为(如果坐标点小于3个那么将使用直线连接):
公式中的P0-Pn代表了从起点到各个控制点再到终点的各点与占比t的各种幂运算。对所有点进行遍历同时根据当前占比t的值(0<=t<=1),计算出当前在贝塞尔曲线上的点坐标x,y。t的取值分成了1000份,即每次运算t+=0.01。此时算出的x,y即所求的贝塞尔曲线分成了1000份之后的某一点。当t值从0~1遍历1000次后生成1000个x,y对应坐标,依次描点画线即可模拟出高阶贝塞尔曲线,即拟合的后的移动曲线。
作为优选,所述遮罩区域的形成时间在用户将视觉焦点移动至某一位置后的10ms内。
作为优选,所述的遮罩区域为圆形,半径是显示装置的1/4。
实施例1:以眼动仪为例对本发明方法进行说明
首先配置眼动仪,配合显示装置进行用户视觉焦点校正;具体方式可以为:用户根据提示,将视觉焦点分别聚焦于显示装置的四个角,眼动仪通过记录上一步操作中用户眼睛和脸部的位置进行校正;也可以参考各眼动仪设备的使用说明书;
显示装置播放视频时,通过眼动仪实时监控用户视觉焦点,并获取用户视觉焦点相对于显示装置的位置(用户聚焦于显示装置上的视觉焦点位置);
在用户聚焦于显示装置上的视觉焦点位置形成遮罩区域;
遮罩区域的弹幕透明或隐藏或虚化或渐变形式透明化,达到不遮挡视频的目的。
如图2所示,本发明视觉焦点区域的弹幕处理装置,包括:
监视设备,用于用户视觉焦点校正;视频播放时,监视用户视觉焦点并获取用户视觉焦点相对于显示装置的位置;
显示装置,用于视频播放和显示弹幕;配合监视设备进行用户视觉焦点校正;
处理单元,视频播放时,在监视设备所确定的用户当前视觉焦点位置形成遮罩区域,将遮罩区域内的弹幕透明或隐藏或虚化或渐变形式透明化。
作为优选,所述的用户视觉焦点校正具体为:
当所述监视设备为普通的摄像机设备(WebCam)时,所述的视觉焦点校正为:a、监视设备识别到人脸和眼睛;b、提示用户将视觉焦点停留在显示装置的指定位置;c、更换视觉焦点停留的位置至少4次,监视设备根据上述若干次视觉焦点停留位置和人脸位置完成校正;具体为:用户根据提示,将视觉焦点分别聚焦于显示装置的四个角,即,监视设备获取显示装置上用户多个角度的视觉焦点;监视设备通过记录上一步操作中用户眼睛和脸部的位置进行校正;当所述监视设备为眼动仪时,按照眼动仪说明书的校正流程即可。
作为优选,所述的监视设备获取用户视觉焦点在显示装置上的位置时,用户视觉焦点坐标的前后更新为平滑移动补间。眼动监控(监视用户视觉焦点)获得的坐标是离散且不连续的,为了避免遮罩抖动,本发明每隔100ms(时间可自定义,时间越小越灵敏,但是抖动会越大)获取一次坐标数组;利用在线多项式曲线及曲线函数拟合工具(脚本之家在线工具)进行拟合(具体拟合方式同上)后,可以获取这个时间区间内移动的路径,并在这100ms中让遮罩区域沿着该路径匀速移动。
作为优选,处理单元实时检测进入遮罩区域内的弹幕,对其进行透明或隐藏或虚化或渐变形式透明化。
作为优选,所述的遮罩区域为圆形,半径是显示装置的1/4。
作为优选,所述的监视设备为眼动仪或监视眼球的摄像机。
Claims (10)
1.一种视觉焦点区域的弹幕隐藏方法,其特征在于包括:
监视设备进行用户视觉焦点校正;
视频播放时,监视设备监视用户视觉焦点并获取用户视觉焦点在显示装置上的位置;
用户视觉焦点位置形成遮罩区域;
遮罩区域的弹幕透明或隐藏或虚化或渐变形式透明化。
2.根据权利要求1所述的视觉焦点区域的弹幕隐藏方法,其特征在于,所述的视觉焦点校正为:
监视设备识别到人脸和眼睛;
提示用户将视觉焦点停留在显示装置的指定位置;
更换视觉焦点停留的位置至少4次。
3.根据权利要求1所述的视觉焦点区域的弹幕隐藏方法,其特征在于:所述的监视设备获取用户视觉焦点在显示装置上的位置时,用户视觉焦点坐标的前后更新为平滑移动补间。
4.根据权利要求3所述的视觉焦点区域的弹幕隐藏方法,其特征在于:所述平滑移动补间具体为:
每隔设定时间获取一次用户视觉焦点的坐标数组;
拟合后获取该设定时间区间内移动的路径,遮罩区域在该设定时间内沿所述路径匀速移动。
6.一种视觉焦点区域的弹幕处理装置,其特征在于包括:
监视设备,用于用户视觉焦点校正;视频播放时,监视用户视觉焦点并获取用户视觉焦点在显示装置上的位置;
显示装置,用于视频播放和显示弹幕;配合监视设备进行用户视觉焦点校正;
处理单元,视频播放时,在监视设备所确定的用户当前视觉焦点位置形成遮罩区域,将遮罩区域内的弹幕透明或隐藏或虚化或渐变形式透明化。
7.根据权利要求6所述的视觉焦点区域的弹幕处理装置,其特征在于,所述的用户视觉焦点校正具体为:
监视设备识别到人脸和眼睛;
提示用户将视觉焦点停留在显示装置的指定位置;
更换视觉焦点停留的位置至少4次。
8.根据权利要求6所述的视觉焦点区域的弹幕处理装置,其特征在于:所述的监视设备获取用户视觉焦点在显示装置上的位置时,用户视觉焦点坐标的前后更新为平滑移动补间。
9.根据权利要求8所述的视觉焦点区域的弹幕处理装置,其特征在于,所述平滑移动补间具体为:
每隔设定时间获取一次用户视觉焦点的坐标数组;
拟合后获取该设定时间区间内移动的路径,遮罩区域在该设定时间内沿所述路径匀速移动。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810983424.2A CN110868623A (zh) | 2018-08-27 | 2018-08-27 | 视觉焦点区域的弹幕隐藏方法及处理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810983424.2A CN110868623A (zh) | 2018-08-27 | 2018-08-27 | 视觉焦点区域的弹幕隐藏方法及处理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110868623A true CN110868623A (zh) | 2020-03-06 |
Family
ID=69651103
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810983424.2A Pending CN110868623A (zh) | 2018-08-27 | 2018-08-27 | 视觉焦点区域的弹幕隐藏方法及处理装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110868623A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111507212A (zh) * | 2020-04-03 | 2020-08-07 | 咪咕文化科技有限公司 | 视频焦点区域提取方法、装置、设备及存储介质 |
CN114005076A (zh) * | 2021-12-30 | 2022-02-01 | 北京搜狐新动力信息技术有限公司 | 一种图像防遮挡方法、系统及电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201548829U (zh) * | 2009-11-20 | 2010-08-11 | 王思远 | 视觉识别全自控擦板装置的控制系统 |
CN102769720A (zh) * | 2012-03-26 | 2012-11-07 | 新奥特(北京)视频技术有限公司 | 一种增强画面显示效果的方法 |
CN102830797A (zh) * | 2012-07-26 | 2012-12-19 | 深圳先进技术研究院 | 一种基于视线判断的人机交互方法及系统 |
US20130083025A1 (en) * | 2011-09-30 | 2013-04-04 | Microsoft Corporation | Visual focus-based control of coupled displays |
CN105635848A (zh) * | 2015-12-24 | 2016-06-01 | 深圳市金立通信设备有限公司 | 一种弹幕显示方法及终端 |
CN107809658A (zh) * | 2017-10-18 | 2018-03-16 | 维沃移动通信有限公司 | 一种弹幕内容显示方法和终端 |
-
2018
- 2018-08-27 CN CN201810983424.2A patent/CN110868623A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201548829U (zh) * | 2009-11-20 | 2010-08-11 | 王思远 | 视觉识别全自控擦板装置的控制系统 |
US20130083025A1 (en) * | 2011-09-30 | 2013-04-04 | Microsoft Corporation | Visual focus-based control of coupled displays |
CN102769720A (zh) * | 2012-03-26 | 2012-11-07 | 新奥特(北京)视频技术有限公司 | 一种增强画面显示效果的方法 |
CN102830797A (zh) * | 2012-07-26 | 2012-12-19 | 深圳先进技术研究院 | 一种基于视线判断的人机交互方法及系统 |
CN105635848A (zh) * | 2015-12-24 | 2016-06-01 | 深圳市金立通信设备有限公司 | 一种弹幕显示方法及终端 |
CN107809658A (zh) * | 2017-10-18 | 2018-03-16 | 维沃移动通信有限公司 | 一种弹幕内容显示方法和终端 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111507212A (zh) * | 2020-04-03 | 2020-08-07 | 咪咕文化科技有限公司 | 视频焦点区域提取方法、装置、设备及存储介质 |
CN114005076A (zh) * | 2021-12-30 | 2022-02-01 | 北京搜狐新动力信息技术有限公司 | 一种图像防遮挡方法、系统及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106162203B (zh) | 全景视频播放方法、播放器与头戴式虚拟现实设备 | |
CN104469179B (zh) | 一种将动态图片结合到手机视频中的方法 | |
WO2019041351A1 (zh) | 一种3d vr视频与虚拟三维场景实时混叠渲染的方法 | |
JP6454851B2 (ja) | 3次元上の注視点の位置特定アルゴリズム | |
US9070222B2 (en) | Techniques for automating stereo settings for stereoscopic computer animation | |
CN105894567B (zh) | 放缩三维场景中的用户控制的虚拟对象的像素深度值 | |
CN108292489A (zh) | 信息处理装置和图像生成方法 | |
US10104358B2 (en) | 3D image display method and head-mounted device | |
CN105898138A (zh) | 全景视频播放方法及装置 | |
CN105812768B (zh) | 一种3d视频在vr设备中的播放方法及系统 | |
CN108090880A (zh) | 一种图像的反畸变处理方法以及装置 | |
US20180374258A1 (en) | Image generating method, device and computer executable non-volatile storage medium | |
CN111522433A (zh) | 用于确定当前注视方向的方法和系统 | |
WO2018010677A1 (zh) | 一种信息处理方法、穿戴式电子设备、处理装置及系统 | |
CN110868623A (zh) | 视觉焦点区域的弹幕隐藏方法及处理装置 | |
CN108986232A (zh) | 一种在vr显示设备中呈现ar环境画面的方法 | |
CN108957742B (zh) | 一种实现画面虚拟透明动态调节的增强现实头盔及方法 | |
CN106888333A (zh) | 一种拍摄方法及装置 | |
WO2021227714A1 (zh) | 虚拟现实设备的控制方法及装置 | |
EP3679453A1 (en) | A method of modifying an image on a computational device | |
CN104216126A (zh) | 一种变焦3d显示技术 | |
US20180041749A1 (en) | Method and apparatus for stimulating stereoscopic depth perception of stereoscopic data inside head mounted displays when viewing panoramic immersive stereoscopic content | |
CN104777700B (zh) | 高沉浸投影多投影机优化部署方法 | |
CN108881892B (zh) | 用于桌面式虚拟现实系统的防眩晕方法、系统 | |
US11119313B1 (en) | Imaging systems and methods for expanding field of view of captured images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40017514 Country of ref document: HK |
|
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200306 |
|
RJ01 | Rejection of invention patent application after publication |