CN108495163B - 视频弹幕朗读装置、系统、方法及计算机可读存储介质 - Google Patents

视频弹幕朗读装置、系统、方法及计算机可读存储介质 Download PDF

Info

Publication number
CN108495163B
CN108495163B CN201810305071.0A CN201810305071A CN108495163B CN 108495163 B CN108495163 B CN 108495163B CN 201810305071 A CN201810305071 A CN 201810305071A CN 108495163 B CN108495163 B CN 108495163B
Authority
CN
China
Prior art keywords
barrage
video
bullet screen
audio
reading device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810305071.0A
Other languages
English (en)
Other versions
CN108495163A (zh
Inventor
汪宇星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Bilibili Technology Co Ltd
Original Assignee
Shanghai Bilibili Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Bilibili Technology Co Ltd filed Critical Shanghai Bilibili Technology Co Ltd
Priority to CN201810305071.0A priority Critical patent/CN108495163B/zh
Publication of CN108495163A publication Critical patent/CN108495163A/zh
Application granted granted Critical
Publication of CN108495163B publication Critical patent/CN108495163B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及一种视频弹幕朗读装置、系统、方法及计算机可读存储介质，属于互联网视频技术领域。采用了该发明的视频弹幕朗读装置、系统、方法及计算机可读存储介质，由于其可将利用弹幕生成对应的弹幕音频，进而播放该弹幕音频，从而使盲人可以使用弹幕，扩大了弹幕是使用人群，进一步地本发明利用不同的音源生成同步播放的多条弹幕音频，从而在同步播放多条弹幕音频可以相互区隔，便于盲人用户区分，同时也可使弹幕音频可以与视频原声有所区分，提升了盲人边听视频边听弹幕的清晰度，且本发明的视频弹幕朗读装置、系统其结构简单，便于在各类视频服务设备上实现，本发明的方法应用范围也相当广泛。

Description

视频弹幕朗读装置、系统、方法及计算机可读存储介质
技术领域
本发明涉及互联网视频技术领域，特别涉及视频弹幕技术领域，具体是指一种视频弹幕朗读装置、系统、方法及计算机可读存储介质。
背景技术
弹幕是指一种在观看视频时，大量以字幕形式呈现的评论，且将评论与视频呈现在同一个画面中的现象。在视频上方大量飘过的评论如密集炮弹一般，故得名弹幕。弹幕会随着视频的播放实时在视频上呈现，这样观看者在观看该视频时能够看到其他观看者和自己发送的弹幕。形成一种基于视频观看，围绕视频内容的新的网络社交形态。
在视频服务受众之中，盲人作为比较独特的群体，也有观看(听)视频的需求，也希望在通过“听”来了解视频信息的是，可以进一步了解弹幕信息，体验乃至参与到视频弹幕互动中去。然而，现有的弹幕播放机制无法满足盲人观众的这一需求。
因此，如何提供一种能够让盲人听到弹幕，甚至进一步参与到弹幕互动中的弹幕朗读方法成为本领域亟待解决的问题。
发明内容
本发明的目的是克服了上述现有技术中的缺点，提供能够将弹幕转换为语音并播放，从而使盲人可以使用弹幕，进而提升用户体验的视频弹幕朗读装置、系统、方法及计算机可读存储介质。
为了实现上述的目的，本发明的视频弹幕朗读装置具有如下构成：
该视频弹幕朗读装置包括：显示单元、音频输出单元和弹幕音频转换单元。
其中，显示单元用以播放视频图像及弹幕；音频输出单元用以播放视频声音；弹幕音频转换单元用以根据所述弹幕生成对应的弹幕音频，并通过所述的音频输出单元播放该弹幕音频。
该视频弹幕朗读装置中，所述的弹幕音频转换单元用以通过所述的音频输出单元，并与所述弹幕的播放顺序同步播放所述的弹幕音频。
该视频弹幕朗读装置中，所述的弹幕音频转换单元包括音源子单元和转换子单元。音源子单元存储有多种音源，转换子单元用以利用选定的音源生成与弹幕对应的弹幕音频。
该视频弹幕朗读装置中，所述的弹幕包括历史弹幕和即时弹幕，所述的转换子单元用以利用选定的音源，在所述历史弹幕播放前设定的时间段内或在获得所述的即时弹幕时，生成对应的弹幕音频。
该视频弹幕朗读装置中，所述的转换子单元还用以在生成所述的弹幕音频之前移除内容不可读或不友好的弹幕文本。
该视频弹幕朗读装置中，所述的弹幕音频转换单元可同步播放至少十个所述的弹幕音频。
该视频弹幕朗读装置中，所述的转换子单元利用不同音源生成同步播放的多个所述的弹幕音频。
该视频弹幕朗读装置还包括输入单元，用以输入新弹幕。
该视频弹幕朗读装置还包括网络单元，用以通过网络获取视频及弹幕。
本发明还提供一种视频弹幕朗读系统，该系统包括上述的视频弹幕朗读装置以及服务器，该服务器用以存储并向所述的视频弹幕朗读装置提供视频及弹幕。
该视频弹幕朗读系统中，所述的服务器还存储并向所述的视频弹幕朗读装置提供多种音源。
本发明还提供一种视频弹幕朗读方法，该方法包括利用上述视频弹幕朗读装置实现的步骤。
本发明还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时，实现上述的视频弹幕朗读方法。
采用了该发明的视频弹幕朗读装置、系统、方法及计算机可读存储介质，由于其可将利用弹幕生成对应的弹幕音频，进而播放该弹幕音频，从而使盲人可以使用弹幕，扩大了弹幕是使用人群，进一步地本发明利用不同的音源生成同步播放的多条弹幕音频，从而在同步播放多条弹幕音频可以相互区隔，便于盲人用户区分，同时也可使弹幕音频可以与视频原声有所区分，提升了盲人边听视频边听弹幕的清晰度，且本发明的视频弹幕朗读装置、系统其结构简单，便于在各类视频服务设备上实现，本发明的方法应用范围也相当广泛。
附图说明
图1为本发明的视频弹幕朗读装置的结构框图。
图2为本发明的视频弹幕朗读方法的步骤流程图。
具体实施方式
为了能够更清楚地理解本发明的技术内容，特举以下实施例详细说明。
请参阅图1所示，为本发明的视频弹幕朗读装置的结构框图。
在一种实施方式中，该视频弹幕朗读装置包括：显示单元、音频输出单元和弹幕音频转换单元。
其中，显示单元用以播放视频图像及弹幕；音频输出单元用以播放视频声音；弹幕音频转换单元用以根据所述弹幕生成对应的弹幕音频，并通过所述的音频输出单元播放该弹幕音频。
利用该实施方式所述的装置实现的视频弹幕朗读方法，如图2所示，包括以下步骤：
播放视频及弹幕；
根据所述弹幕生成对应的弹幕音频并播放。
在较优选的实施方式中，所述的弹幕音频转换单元用以通过所述的音频输出单元，并与所述弹幕的播放顺序同步播放所述的弹幕音频。
利用该较优选的实施方式所述的装置实现的视频弹幕朗读方法中，所述的根据所述弹幕生成对应的弹幕音频并播放，具体包括以下步骤：
根据所述弹幕生成对应的弹幕音频；
与所述弹幕同步播放其对应的弹幕音频。
在进一步优选的实施方式视频中，所述的弹幕音频转换单元包括音源子单元和转换子单元。音源子单元存储有多种音源，转换子单元用以利用选定的音源生成与弹幕对应的弹幕音频。
利用该进一步优选的实施方式所述的装置实现的视频弹幕朗读方法中，所述的根据所述弹幕生成对应的弹幕音频，具体为：利用选定的音源生成与弹幕对应的弹幕音频。
在又进一步优选的实施方式视频中，所述的弹幕包括历史弹幕和即时弹幕，历史弹幕是指在视频播放前已经生成并被用户获取的弹幕，即时弹幕则是指在视频播放使由用户生成的弹幕或在观看直播时实时接收到的弹幕。所述的转换子单元用以利用选定的音源，在所述历史弹幕播放前设定的时间段内或在获得所述的即时弹幕时，生成对应的弹幕音频。且所述的转换子单元还用以在生成所述的弹幕音频之前移除内容不可读或不友好的弹幕文本。
在利用该又进一步优选的实施方式所述的装置实现的视频弹幕朗读方法中，所述的利用选定的音源生成与弹幕对应的弹幕音频具体为，利用选定的音源，在所述历史弹幕播放前设定的时间段内或在获得所述的即时弹幕时，生成对应的弹幕音频。且在所述的根据所述弹幕生成对应的弹幕音频之前还包括以下步骤：
移除内容不可读或不友好的弹幕文本。
在更进一步优选的实施方式视频中，所述的弹幕音频转换单元可同步播放至少十个所述的弹幕音频。且所述的转换子单元利用不同音源生成同步播放的多个所述的弹幕音频。
利用该更进一步优选的实施方式所述的装置实现的视频弹幕朗读方法中，所述的与所述弹幕同步播放其对应的弹幕音频，具体为：根据多条弹幕的播放顺序同步播放多条弹幕音频。且所述的利用选定的音源生成与弹幕对应的弹幕音频，具体为：利用不同的音源生成同步播放的多条弹幕音频。
在更优选的实施方式中，如图1所示，该视频弹幕朗读装置还包括用以输入新弹幕的输入单元，以及用以通过网络获取视频及弹幕的网络单元。
本发明还提供一种视频弹幕朗读系统，其具体实施方式中，包括上述的任意一种视频弹幕朗读装置，还包括通过网络连接视频弹幕朗读装置的该服务器，该服务器用以存储并向所述的视频弹幕朗读装置提供视频及弹幕。进一步的，所述的服务器还可存储并向所述的视频弹幕朗读装置提供多种音源。
本发明还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时，实现上述的视频弹幕朗读方法。
在本发明的实际应用中，视频服务的用户端可选择性开启“朗读弹幕”功能。在开启弹幕朗读功能的情况下，可进一步选择开启或关闭弹幕播放。另外，当用户端的操作系统被设置为盲人辅助模式使，可自动开启该“朗读弹幕”功能。
开启“朗读弹幕”功能，并开始播放拥有弹幕的视频后，当视频播放到弹幕的播放时间点的10秒或设定的时间间隔之前，可将弹幕文本转换为语音。
转换前需对弹幕文本进行一定识别处理：
a.移除不可读的文本，如颜文字(固定的组合等)；
b.移除不友好的语言，如脏话等。
识别处理完成后，即可将通过的弹幕利用选定的音源进行转换。音源指配音演员声源，可以是男女声，也可以是更为细化的：温柔的女声、成熟的女声、成熟的男声、幼稚的男声、男明星甲的声音和女明星乙的声音等等，甚至可以是模拟的声音，如外星人的声音等。可以由用户选定采用一个或多个音源进行转换。在选用了多个音源的情况下，转换时可优先使用一种音源，也可顺序采用不同的音源。另外，也可以进一步识别弹幕发送者的性别和年龄等个人资料，选择与之最匹配的音源。同时，对于需要在同一时间播放的弹幕，则可利用不同的音源生成与之对应的弹幕音频，使用户在听到时可有所区别。
当视频播放到弹幕的播放时间点，判断正在同时播放的语音是否大于N条(如10条)，如果大于该设定数则取消播放，小于该设定数则播放该弹幕语音。
由此，盲人观众就可以通过播放的弹幕语音了解到弹幕信息。进而，还可以自己发送弹幕，自己发送的弹幕也通过上述机制产生弹幕语音，提升盲人观众的参与感，能充分体会弹幕互动的乐趣。
采用了该发明的视频弹幕朗读装置、系统、方法及计算机可读存储介质，由于其可将利用弹幕生成对应的弹幕音频，进而播放该弹幕音频，从而使盲人可以使用弹幕，扩大了弹幕是使用人群，进一步地本发明利用不同的音源生成同步播放的多条弹幕音频，从而在同步播放多条弹幕音频可以相互区隔，便于盲人用户区分，同时也可使弹幕音频可以与视频原声有所区分，提升了盲人边听视频边听弹幕的清晰度，且本发明的视频弹幕朗读装置、系统其结构简单，便于在各类视频服务设备上实现，本发明的方法应用范围也相当广泛。
在此说明书中，本发明已参照其特定的实施例作了描述。但是，很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此，说明书和附图应被认为是说明性的而非限制性的。

Claims (11)

1.一种视频弹幕朗读装置，其特征在于，包括：
显示单元，用以播放视频图像及弹幕；
音频输出单元，用以播放视频声音；
其特征在于，还包括：
弹幕音频转换单元，用以根据所述弹幕生成对应的弹幕音频，并通过所述的音频输出单元播放该弹幕音频，
所述的弹幕音频转换单元包括：
音源子单元，存储有多种音源，
转换子单元，用以利用选定的音源生成与弹幕对应的弹幕音频，并利用不同音源生成同步播放的多个所述的弹幕音频。
2.根据权利要求1所述的视频弹幕朗读装置，其特征在于，所述的弹幕音频转换单元用以通过所述的音频输出单元，并与所述弹幕的播放顺序同步播放所述的弹幕音频。
3.根据权利要求1所述的视频弹幕朗读装置，其特征在于，所述的弹幕包括历史弹幕和即时弹幕，所述的转换子单元用以利用选定的音源，在所述历史弹幕播放前设定的时间段内或在获得所述的即时弹幕时，生成对应的弹幕音频。
4.根据权利要求3所述的视频弹幕朗读装置，其特征在于，所述的转换子单元还用以在生成所述的弹幕音频之前移除内容不可读或不友好的弹幕文本。
5.根据权利要求4所述的视频弹幕朗读装置，其特征在于，所述的弹幕音频转换单元可同步播放至少十个所述的弹幕音频。
6.根据权利要求1所述的视频弹幕朗读装置，其特征在于，还包括：
输入单元，用以输入新弹幕。
7.根据权利要求1所述的视频弹幕朗读装置，其特征在于，还包括：
网络单元，用以通过网络获取视频及弹幕。
8.一种视频弹幕朗读系统，其特征在于，该系统包括：
如权利要求1至7中任一项所述的视频弹幕朗读装置；
服务器，用以存储并向所述的视频弹幕朗读装置提供视频及弹幕。
9.根据权利要求8所述的视频弹幕朗读系统，其特征在于，所述的服务器还存储并向所述的视频弹幕朗读装置提供多种音源。
10.一种视频弹幕朗读方法，其特征在于，包括利用如权利要求1至7中任一项所述的视频弹幕朗读装置实现的步骤。
11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时，实现权利要求10所述的视频弹幕朗读方法。
CN201810305071.0A 2018-04-08 2018-04-08 视频弹幕朗读装置、系统、方法及计算机可读存储介质 Active CN108495163B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810305071.0A CN108495163B (zh) 2018-04-08 2018-04-08 视频弹幕朗读装置、系统、方法及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810305071.0A CN108495163B (zh) 2018-04-08 2018-04-08 视频弹幕朗读装置、系统、方法及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN108495163A CN108495163A (zh) 2018-09-04
CN108495163B true CN108495163B (zh) 2021-03-16

Family

ID=63314948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810305071.0A Active CN108495163B (zh) 2018-04-08 2018-04-08 视频弹幕朗读装置、系统、方法及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN108495163B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110215704B (zh) * 2019-04-26 2023-03-21 平安科技（深圳）有限公司 游戏开启方法、装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106878823A (zh) * 2016-12-29 2017-06-20 武汉斗鱼网络科技有限公司 一种过滤文字弹幕并转换为语音弹幕的方法及系统
CN107888937A (zh) * 2017-11-08 2018-04-06 维沃移动通信有限公司 弹幕处理方法、服务端、客户端和计算机可读存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020146667A1 (en) * 2001-02-14 2002-10-10 Safe Drive Technologies, Llc Staged-learning process and system for situational awareness training using integrated media
US20050015306A1 (en) * 2003-06-27 2005-01-20 Carol Fields Method and apparatus providing community definition and legacy content development for legacy archives for restricted access by members of the community
CN104822093B (zh) * 2015-04-13 2017-12-19 腾讯科技（北京）有限公司 弹幕发布方法和装置
US20170171270A1 (en) * 2015-12-14 2017-06-15 Le Holdings (Beijing) Co., Ltd. Method and electronic device for controlling video playing
CN105959271A (zh) * 2016-04-25 2016-09-21 乐视控股（北京）有限公司 一种文字内容信息的语音转换方法、播放方法及装置
CN105847939A (zh) * 2016-05-12 2016-08-10 乐视控股（北京）有限公司 弹幕播放方法、播放装置及播放系统
CN105933784A (zh) * 2016-05-17 2016-09-07 乐视控股（北京）有限公司 弹幕播放、转换方法及弹幕播放器、服务器及播放系统
CN107277594B (zh) * 2017-07-06 2020-04-28 广州华多网络科技有限公司 一种视音频与弹幕同步方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106878823A (zh) * 2016-12-29 2017-06-20 武汉斗鱼网络科技有限公司 一种过滤文字弹幕并转换为语音弹幕的方法及系统
CN107888937A (zh) * 2017-11-08 2018-04-06 维沃移动通信有限公司 弹幕处理方法、服务端、客户端和计算机可读存储介质

Also Published As

Publication number Publication date
CN108495163A (zh) 2018-09-04

Similar Documents

Publication Publication Date Title
CN108200446B (zh) 虚拟形象的线上多媒体互动系统及方法
CN107911646B (zh) 一种会议分享、生成会议记录的方法及装置
US10341694B2 (en) Data processing method and live broadcasting method and device
US10827215B2 (en) Systems and methods for producing processed media content
CN103634681B (zh) 直播互动方法、装置、客户端、服务器及系统
US9973821B2 (en) Method and apparatus for concurrent broadcast of media program and social networking derived information exchange
CN106303658A (zh) 应用于视频直播的交互方法和装置
CN109951743A (zh) 弹幕信息处理方法、系统及计算机设备
CN110933485A (zh) 一种视频字幕生成方法、系统、装置和存储介质
CN109618223B (zh) 一种声音替换方法
CN111479124A (zh) 一种实时播放方法和装置
CN112423081A (zh) 一种视频数据处理方法、装置、设备及可读存储介质
Faden A fair (y) use tale
CN112954426B (zh) 视频播放方法、电子设备及存储介质
CN108495163B (zh) 视频弹幕朗读装置、系统、方法及计算机可读存储介质
CN110324702B (zh) 视频播放过程中的信息推送方法和装置
CN110933481A (zh) 一种基于互联网的节目显示方法、系统、装置和存储介质
CN116708853A (zh) 直播中的互动方法、装置和电子设备
Gibson YouTube diplomacy: A sentiment analysis of global reactions to the 2018 concert in Pyongyang
CN112565913B (zh) 视频通话方法、装置和电子设备
CN114760523A (zh) 音视频处理方法、装置、设备及存储介质
JP5777233B1 (ja) 動画生成装置及び動画生成方法
US20220038510A1 (en) System and Method for Providing Remote Attendance to a Live Event
CN113840152A (zh) 直播关键点处理方法和装置
JP2021197563A (ja) 関連情報配信装置、プログラム、コンテンツ配信システム及びコンテンツ出力端末

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20180904

Assignee: Sanming Maiyuan Digital Culture Creative Co.,Ltd.

Assignor: SHANGHAI BILIBILI TECHNOLOGY Co.,Ltd.

Contract record no.: X2023990000649

Denomination of invention: Danmaku subtitling reading device, system, method and computer readable storage medium

Granted publication date: 20210316

License type: Common License

Record date: 20230626

EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20180904

Assignee: Lazas Network Technology (Shanghai) Co., Ltd.

Assignor: SHANGHAI BILIBILI TECHNOLOGY Co.,Ltd.

Contract record no.: X2023990000722

Denomination of invention: Danmaku subtitling reading device, system, method and computer readable storage medium

Granted publication date: 20210316

License type: Common License

Record date: 20230720

EE01 Entry into force of recordation of patent licensing contract
OL01 Intention to license declared