CN112019772A - 一种全景视频中纠正字幕桶状变形的方法 - Google Patents

一种全景视频中纠正字幕桶状变形的方法 Download PDF

Info

Publication number
CN112019772A
CN112019772A CN202010931009.XA CN202010931009A CN112019772A CN 112019772 A CN112019772 A CN 112019772A CN 202010931009 A CN202010931009 A CN 202010931009A CN 112019772 A CN112019772 A CN 112019772A
Authority
CN
China
Prior art keywords
subtitle
subtitles
frame
line
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010931009.XA
Other languages
English (en)
Inventor
陈国华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhongtu Yunchuang Intelligent Technology Beijing Co ltd
Original Assignee
Zhongtu Yunchuang Intelligent Technology Beijing Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhongtu Yunchuang Intelligent Technology Beijing Co ltd filed Critical Zhongtu Yunchuang Intelligent Technology Beijing Co ltd
Priority to CN202010931009.XA priority Critical patent/CN112019772A/zh
Publication of CN112019772A publication Critical patent/CN112019772A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278—Subtitling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

本发明公开了一种全景视频中纠正字幕桶状变形的方法，包括以下步骤：一、准备字幕文件，字幕文件需要包含字幕编号、起始时间、字幕内容，字幕预置的显示位置；二、分析每行字幕的出现时间，与帧率进行换算，将每行字幕的时间，换算成帧数表示；三、检测字幕出现的帧固定位置，分析出帧的扭曲数据；四、将字幕进行扭曲，以适应视频帧的扭曲，产生出字幕与视频帧融合在一起的硬字幕视频版本，本发明可以将字幕在全景视频内容中正确显示，全景视频字幕制作流程方便，支持外挂软字幕和硬字幕两种方式展示，在VR环境中的显示效果与2D平面视频的字幕效果一致，可以满足要求，解决字幕在全景视频内容下的正确显示。

Description

一种全景视频中纠正字幕桶状变形的方法
技术领域
本发明涉及全景视频中字幕显示技术领域，具体是一种全景视频中纠正字幕桶状变形的方法。
背景技术
字幕可以为听障人群提供信息传达的作用，即使在听不见配音的情况下，只要有字幕就不会影响内容的表达。因此在视频中显示字幕，基本属于标准配置。
在2D视频中添加字幕，已经有成熟的方案，但在全景视频内容中按照2D视频内容的方式添加字幕，却遇到了问题，在VR眼镜中看到的字幕是扭曲的，但画面是正常的比例。由于全景视频最终要渲染一个球形显示，2D平面的字幕在球形中，字幕会变形弯曲，形成桶状变形。本专利提出一种字幕显示方案，可自动适应全景视频的不同投影格式，从而将字幕按照正确的方式显示，使用2D视频加字幕的方式添加的全景视频字幕。
发明内容
本发明的目的在于提供一种全景视频中纠正字幕桶状变形的方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：
一种全景视频中纠正字幕桶状变形的方法，包括以下步骤：
一、准备字幕文件，字幕文件需要包含字幕编号、起始时间、字幕内容，字幕预置的显示位置。
二、分析每行字幕的出现时间，与帧率进行换算，将每行字幕的时间，换算成帧数表示。
三、检测字幕出现的帧固定位置，分析出帧的扭曲数据。
四、将字幕进行扭曲，以适应视频帧的扭曲，产生出字幕与视频帧融合在一起的硬字幕视频版本。
作为本发明进一步的方案：所述分析出帧的扭曲数据具体指计算一行字幕的字数，结合字号，算出字幕所占面积，再通过投影方法将字幕从平面投影到球面上。
作为本发明再进一步的方案：所述投影方法为建立起地面某点的地理坐标与投影后的笛卡尔平面直角坐标的函数关系。
作为本发明再进一步的方案：所述方法支持外挂软字幕和硬字幕两种方式展示。
与现有技术相比，本发明的有益效果是：
1、字幕在全景视频内容中正确显示。
2、全景视频字幕制作流程方便，支持外挂软字幕和硬字幕两种方式展示。
3、在VR环境中的显示效果与2D平面视频的字幕效果一致，可以满足要求。
4、解决字幕在全景视频内容下的正确显示。
具体实施方式
下面结合具体实施方式对本发明的技术方案作进一步详细地说明。
为了区别2D视频的字幕，本专利中将在全景视频内容中显示的字幕称为全景视频字幕。
本发明实施例中，一种全景视频中纠正字幕桶状变形的方法，包括以下步骤：
一、准备字幕文件，字幕文件需要包含字幕编号、起始时间、字幕内容，字幕预置的显示位置
二、分析每行字幕的出现时间，与帧率进行换算，将每行字幕的时间，换算成帧数表示。
例如：首先，取得视频的帧率，即一秒钟刷新多少张图片。常见帧率有29.97、30两种，一行字幕开始时间和结束时间是0:00:01.52-0:00:04.45，以30帧率/秒为例，换成开始帧率即是：45帧-133帧，是字幕出现的时间，(1.52*30)≈45，(4.45*30)≈133
三、检测字幕出现的帧固定位置，分析出帧的扭曲数据。
首先取得字幕的字号设置，比如字号是100像素；然后取得字幕距视频底部的距离。
计算一行字幕的字数，结合字号，算出字幕所占面积。将字幕从平面投影到球面上。投影是按照数学法则将三维地球表面投影转换到二维平面地图上去。对于字幕来说则是逆向，因此我们需要在三维地球和二维地图上各自建立坐标系去定量描述每一个点的坐标，即建立起地面某点的地理坐标与投影后的笛卡尔平面直角坐标的函数关系：
投影的一般公式为：
Figure BDA0002670241520000031
从公式中可以看出，计算平面直角坐标需要明确两个方面：地理坐标和投影函数F。地理坐标由大地测量坐标系决定，对于同一地理位置，在不同的地理坐标系中它的经纬度坐标也是不同的，而函数关系由地图投影方式决定。
四、将字幕进行扭曲，以适应视频帧的扭曲。产生出字幕与视频帧融合在一起的硬字幕视频版本，由于全景视频字幕是按照视频的投影格式进行适应，在VR眼镜中看到的字幕显示效果就是正常的。
上面对本发明的较佳实施方式作了详细说明，但是本发明并不限于上述实施方式，在本领域的普通技术人员所具备的知识范围内，还可以在不脱离本发明宗旨的前提下作出各种变化。

Claims (4)

1.一种全景视频中纠正字幕桶状变形的方法，包括以下步骤，其特征在于：
一、准备字幕文件，字幕文件需要包含字幕编号、起始时间、字幕内容，字幕预置的显示位置；
二、分析每行字幕的出现时间，与帧率进行换算，将每行字幕的时间，换算成帧数表示；
三、检测字幕出现的帧固定位置，分析出帧的扭曲数据；
四、将字幕进行扭曲，以适应视频帧的扭曲，产生出字幕与视频帧融合在一起的硬字幕视频版本。
2.根据权利要求1所述的一种全景视频中纠正字幕桶状变形的方法，其特征在于，所述分析出帧的扭曲数据具体指计算一行字幕的字数，结合字号，算出字幕所占面积，再通过投影方法将字幕从平面投影到球面上。
3.根据权利要求2所述的一种全景视频中纠正字幕桶状变形的方法，其特征在于，所述投影方法为建立起地面某点的地理坐标与投影后的笛卡尔平面直角坐标的函数关系。
4.根据权利要求1-3所述的一种全景视频中纠正字幕桶状变形的方法，其特征在于，所述方法支持外挂软字幕和硬字幕两种方式展示。
CN202010931009.XA 2020-09-07 2020-09-07 一种全景视频中纠正字幕桶状变形的方法 Pending CN112019772A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010931009.XA CN112019772A (zh) 2020-09-07 2020-09-07 一种全景视频中纠正字幕桶状变形的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010931009.XA CN112019772A (zh) 2020-09-07 2020-09-07 一种全景视频中纠正字幕桶状变形的方法

Publications (1)

Publication Number Publication Date
CN112019772A true CN112019772A (zh) 2020-12-01

Family

ID=73516998

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010931009.XA Pending CN112019772A (zh) 2020-09-07 2020-09-07 一种全景视频中纠正字幕桶状变形的方法

Country Status (1)

Country Link
CN (1) CN112019772A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023246302A1 (zh) * 2022-06-20 2023-12-28 北京字跳网络技术有限公司 字幕的显示方法、装置、设备及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1984274A (zh) * 2005-12-16 2007-06-20 乐金电子（沈阳）有限公司 图像显示器字幕处理装置及方法
US20140111688A1 (en) * 2011-06-22 2014-04-24 Denis Sergeyevich Suvorov Method and apparatus for processing and displaying multiple captions superimposed on video images
CN106658220A (zh) * 2016-11-11 2017-05-10 理光图像技术（上海）有限公司 字幕创建装置、展示模块以及字幕创建展示系统
CN106792088A (zh) * 2016-12-15 2017-05-31 北京奇艺世纪科技有限公司 一种外挂字幕的加密、解密方法及系统、外挂字幕系统
CN106954095A (zh) * 2017-04-17 2017-07-14 腾讯科技（深圳）有限公司 一种多媒体文件的播放方法及装置
CN107613405A (zh) * 2017-09-30 2018-01-19 福州瑞芯微电子股份有限公司 一种vr视频字幕显示方法和装置
CN108737907A (zh) * 2017-04-18 2018-11-02 杭州海康威视数字技术股份有限公司 一种生成字幕的方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1984274A (zh) * 2005-12-16 2007-06-20 乐金电子（沈阳）有限公司 图像显示器字幕处理装置及方法
US20140111688A1 (en) * 2011-06-22 2014-04-24 Denis Sergeyevich Suvorov Method and apparatus for processing and displaying multiple captions superimposed on video images
CN106658220A (zh) * 2016-11-11 2017-05-10 理光图像技术（上海）有限公司 字幕创建装置、展示模块以及字幕创建展示系统
CN106792088A (zh) * 2016-12-15 2017-05-31 北京奇艺世纪科技有限公司 一种外挂字幕的加密、解密方法及系统、外挂字幕系统
CN106954095A (zh) * 2017-04-17 2017-07-14 腾讯科技（深圳）有限公司 一种多媒体文件的播放方法及装置
CN108737907A (zh) * 2017-04-18 2018-11-02 杭州海康威视数字技术股份有限公司 一种生成字幕的方法及装置
CN107613405A (zh) * 2017-09-30 2018-01-19 福州瑞芯微电子股份有限公司 一种vr视频字幕显示方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023246302A1 (zh) * 2022-06-20 2023-12-28 北京字跳网络技术有限公司 字幕的显示方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN108235113B (zh) 一种全景视频渲染和呈现属性指示方法及系统
CN102036044B (zh) 发送器、发送方法、接收器和接收方法
CN107341832B (zh) 一种基于红外定位系统的多视角切换拍摄系统和方法
CN106875331B (zh) 一种全景图像的非对称映射方法
CN111443814B (zh) 一种基于云渲染的ar眼镜系统
CN112019772A (zh) 一种全景视频中纠正字幕桶状变形的方法
CN112233048A (zh) 一种球形视频图像校正方法
CN103096102B (zh) 影像形变方法
CN112995638A (zh) 自动调节视差的裸眼3d采集和显示系统及方法
CN109166178B (zh) 一种视觉特性与行为特性融合的全景图像显著图生成方法及系统
CN112017242B (zh) 显示方法及装置、设备、存储介质
WO2024022086A1 (zh) 基于三维显示的视频通信方法及系统
CN108012160A (zh) 一种基于全景视频的台标插入方法
CN108022204A (zh) 一种柱面全景视频转换为球面全景视频的方法
CN103533339A (zh) 裸眼3d显示设备及其显示方法
CN103067730A (zh) 视频处理装置、视频处理方法以及视频显示装置
US11974015B2 (en) Media processing method, device and system, and readable storage medium
CN115205752A (zh) 一种基于智能显示的液晶拼接lcd方法及系统
US7692646B2 (en) Method of and scaling unit for scaling a three-dimensional model
CN113099237B (zh) 视频处理方法和装置
CN112738625B (zh) 基于机顶盒的视频图像增强方法及装置
CN110662099B (zh) 用于显示弹幕的方法和装置
CN111179165B (zh) 一种全景图像生成方法及装置
CN111400234A (zh) 一种基于vr设备的多媒体阅读器及阅读方法
CN112712474B (zh) 一种视频流动态图像的透视矫正方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201201

RJ01 Rejection of invention patent application after publication