CN111356025A - 一种多字幕显示方法、智能终端及存储介质 - Google Patents

一种多字幕显示方法、智能终端及存储介质 Download PDF

Info

Publication number
CN111356025A
CN111356025A CN201811585018.7A CN201811585018A CN111356025A CN 111356025 A CN111356025 A CN 111356025A CN 201811585018 A CN201811585018 A CN 201811585018A CN 111356025 A CN111356025 A CN 111356025A
Authority
CN
China
Prior art keywords
subtitle
target
original
caption
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811585018.7A
Other languages
English (en)
Inventor
李其浪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TCL New Technology Co Ltd
Original Assignee
Shenzhen TCL New Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TCL New Technology Co Ltd filed Critical Shenzhen TCL New Technology Co Ltd
Priority to CN201811585018.7A priority Critical patent/CN111356025A/zh
Priority to EP19902454.8A priority patent/EP3905663A4/en
Priority to US17/258,646 priority patent/US20210274262A1/en
Priority to PCT/CN2019/126441 priority patent/WO2020135192A1/zh
Publication of CN111356025A publication Critical patent/CN111356025A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/635—Overlay text, e.g. embedded captions in a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4856—End-user interface for client configuration for language selection, e.g. for the menu or subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278—Subtitling

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种多字幕显示方法、智能终端及存储介质，所述方法包括：获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息；将所述原始字幕翻译成对应的目标字幕；在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。本发明通过规避原始字幕内容的显示区域，将用户想要观看的目标字幕同时显示在屏幕的其他区域，根据用户的选择从多种字幕中播放适合自己的字幕，方便用户通过适合自己的字幕来观看节目。

Description

一种多字幕显示方法、智能终端及存储介质
技术领域
本发明涉及计算机技术领域，尤其涉及一种多字幕显示方法、智能终端及存储介质。
背景技术
随着互联网技术的发展和普及，各种智能终端发展迅速，例如网络电视已经不再是新鲜事物，其因为丰富的节目资源，方便快捷的播放方式，越来越多地得到人们的欢迎，甚至已经对传统的电视节目播放方式产生了较大的冲击，为人们带来了更加丰富多彩的资讯和电视节目。
由于目前人们的流动性非常高，处于一定收视范围内的用户所操的语言可能多种多样，然而伴随电视节目所播放的字幕且较为单一，一般只会提供一种语言的字幕，无法给用户提供选择的机会，造成用户无法选择适合自己的字幕。
目前的视频字幕呈现方式主要是从对应的字幕文件中提取字幕内容，将对应字幕片段根据时间呈现到对应的视频片段上，另外就是将字幕信息与视频图像本身一起编码，该处理方式字幕信息将成为视频的一部分，在视频播放解码并显示的时候两者一起同时呈现，但是如果要加载目标字幕，比如目标字幕，将可能出现与源视频文件中的字幕叠加，造成视觉混乱，反而影响用户的观看。
因此，现有技术还有待于改进和发展。
发明内容
本发明要解决的技术问题在于，针对现有技术中的上述缺陷，本发明提供一种多字幕显示方法、智能终端及存储介质，旨在将原始字幕翻译成用户选择的目标字幕，通过规避原始字幕内容的显示区域，将用户想要观看的目标字幕同时显示在屏幕的其他区域，避免两种字幕的相互干扰，根据用户的选择从多种字幕中播放适合自己的字幕，方便用户通过适合自己的字幕来观看节目。
本发明解决技术问题所采用的技术方案如下：
一种多字幕显示方法，其中，所述多字幕显示方法包括：
获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息；
将所述原始字幕翻译成对应的目标字幕；
在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
所述的多字幕显示方法，其中，所述将所述原始字幕翻译成对应的目标字幕的步骤包括：
通过终端本地安装的翻译应用将所述原始字幕翻译成所述目标字幕。
所述的多字幕显示方法，其中，所述将所述原始字幕翻译成对应的目标字幕的步骤包括：
将所述原始字幕上传至服务器，以供所述服务器将所述原始字幕翻译成所述目标字幕。
所述的多字幕显示方法，其中，所述将所述原始字幕翻译成对应的目标字幕的包括之前，还包括：
接收用户选择所述目标字幕语言的选择指令，并很据所述选择指令确定所述目标字幕对应的语言。
所述的多字幕显示方法，其中，所述接收用户选择所述目标字幕语言的选择指令的步骤包括：
检测到用户需要选择目标字幕时，将包含多种字幕种类的字幕列表显示在界面上供用户进行选择，并接收用户选择所述目标字幕语言的选择指令。
所述的多字幕显示方法，其中，所述在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域的步骤包括;
获取所述原始字幕于所述视频帧中的坐标信息和翻译得到的所述目标字幕；
在播放所述视频帧的过程中，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
所述的多字幕显示方法，其中，所述多字幕显示方法还包括：
实时接收用户切换目标字幕的切换指令，并很据所述切换指令将当前目标字幕切换到最新选择的目标字幕。
所述的多字幕显示方法，其中，所述多字幕显示方法还包括：
所述目标字幕在除所述原始字幕显示区域之外的显示区域显示的方式包括：目标字幕以水平方式显示和目标字幕以垂直方式显示。
一种智能终端，其中，所述智能终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的多字幕显示程序，所述多字幕显示程序被所述处理器执行时实现如上所述的多字幕显示方法的步骤。
一种存储介质，其中，所述存储介质存储有多字幕显示程序，所述多字幕显示程序被处理器执行时实现如上所述的多字幕显示方法的步骤。
本发明公开了一种多字幕显示方法、智能终端及存储介质，所述方法包括：获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息；将所述原始字幕翻译成对应的目标字幕；在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。本发明通过规避原始字幕内容的显示区域，将用户想要观看的目标字幕同时显示在屏幕的其他区域，根据用户的选择从多种字幕中播放适合自己的字幕，方便用户通过适合自己的字幕来观看节目。
附图说明
图1是本发明多字幕显示方法的较佳实施例的流程图；
图2是本发明多字幕显示方法的较佳实施例中提取视频解码的视频帧举例的示意图；
图3是本发明多字幕显示方法的较佳实施例中将图2中的原始字幕进行翻译转换成目标字幕语言的示意图；
图4是本发明多字幕显示方法的较佳实施例中步骤S30的流程图；
图5是本发明多字幕显示方法的较佳实施例中两种字幕在视频画面中同时显示的示意图；
图6为本发明智能终端的较佳实施例的运行环境示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明较佳实施例所述的多字幕显示方法，如图1所示，所述多字幕显示方法包括以下步骤：
步骤S10、获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息。
具体地，例如当用户收看电视节目时，如果显示的字幕不适合自己阅读时，就出现了需要显示目标字幕（其他字幕的语言）的需求，可以通过获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，如图2所示，提取了智能电视某一视频中的某一帧，此处未显示画面内容，任何画面均可，此处只给出了当前视频帧中的原始字幕“早安，中国”，此处的原始字幕仅仅为示例，可以为视频中的其他字幕内容。
提取每个视频帧中的字幕信息（文字信息），所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息，例如图2中的“早安，中国”，并分析记录字幕内容的坐标信息（x1，y1），例如图2中的“早安，中国”的坐标信息（x1，y1）。
步骤S20、将所述原始字幕翻译成对应的目标字幕。
具体地，在将所述原始字幕翻译成对应的目标字幕的包括之前，接收用户选择所述目标字幕语言的选择指令，并很据所述选择指令确定所述目标字幕对应的语言。也就是说，当检测到用户需要选择目标字幕时，将包含多种字幕种类的字幕列表显示在界面上供用户进行选择，并接收用户选择所述目标字幕语言的选择指令。
例如可以具体通过如下步骤实现：接收用户输入的预选择命令，根据所述预选择命令显示包含多个字幕种类的字幕列表，接收用户输入的选择命令，根据所述选择命令生成包含所选定字幕的选择指令；通过接收目标字幕的选择指令，该字幕选择指令包含有反映用户意愿的选定字幕，例如目标字幕语言为英语，即用户希望能够看到的选定字幕。
本发明中，将所述原始字幕翻译成对应的目标字幕的方式主要有两种，一种是通过终端本地安装的翻译应用（例如本地安装的翻译软件）将所述原始字幕翻译成所述目标字幕，另一种是将所述原始字幕上传至服务器，以供所述服务器将所述原始字幕翻译成所述目标字幕。
例如，通过服务器将所述原始字幕翻译成所述目标字幕可以通过如下过程实现：
将在每个视频帧中获取的字幕信息全部上传到服务器，接收用户选择目标字幕语言的选择指令，所述目标字幕语言从预先提供的多种语言中进行选择，服务器根据用户选择的目标字幕语言，将所有的字幕信息实时翻译得到目标字幕语言对应的文字信息。
进一步地，本发明可以通过服务器根据用户选择的目标字幕语言，将所有的字幕信息实时翻译得到目标字幕语言对应的文字信息，还可以将文字信息上传到提供在线翻译服务第三方服务器，通过第三方服务器直接翻译得到用户指定目标语言的文字信息，也就是需要将原始字幕的信息翻译转换成用户选择的语言的字幕信息，例如图2中的字幕信息的转换如图3所示，将中文的“早安，中国”翻译得到“Good Morning China”。
首先接收用户输入的预选择命令，该命令预示用户想要选择适合自己的字幕，在接收到预选择命令后，在显示界面上显示字幕列表，该字幕列表上包括多个字幕种类，包括汉语、英语、法语、德语或少数民族语言的字幕，如果此时用户进一步选择，则接收用户输入的选择命令，在接收到选择命令后，根据该选择命令生成包含选定字幕的字幕选择指令，选定字幕为上述选择命令所指向的字幕，将字幕选择请求发送到服务器。
在原有字幕的基础上，每次仅仅可以转换成某一种选择性的语言， 比如视频本身是中文的，用户每次只能选择翻译成英文、韩文、日本、法文等语言中的某一种，使得屏幕上可以同时显示两种语言的字幕。
进一步地，在接收到用户输入的字幕选择请求后，将该字幕选择请求发送到智能电视播放系统的服务器（例如字幕服务器），例如服务器中存储有与智能电视所播放的电视节目对应的多种字幕文件，其在接收到该字幕选择请求后从中选取该选定字幕所指向的字幕文件，接收服务器根据选定字幕选取的字幕文件，也就是说，服务器预先存储有节目对应的多种字幕文件，在接收到字幕选择请求后，从多种字幕文件中选取选定字幕所指向的字幕文件，根据字幕文件将文字信息翻译成目标字幕的文字信息。
步骤S30、在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
具体过程请参阅图4，其为本发明提供的多字幕显示方法中步骤S30的流程图。
如图4所示，所述步骤S30包括：
S31、获取所述原始字幕于所述视频帧中的坐标信息和翻译得到的所述目标字幕；
S32、在播放所述视频帧的过程中，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
具体地，根据原始字幕内容的坐标信息，例如图2中的“早安，中国”的坐标信息（x1，y1），避开原始字幕的显示区域的坐标区域(x1、y1)，在其他位置，例如位置（x2、y2）的显示区域显示第二种文字信息（目标字幕），例如图5中，将中文的“早安，中国”（原始字幕）和“Good Morning China”（目标字幕）同时显示在视频画面中，图5中将“Good MorningChina”（目标字幕）显示在了画面的上方，“早安，中国”（原始字幕）依旧保留在视频画面的下方，两种字幕可以同时互不干扰的显示在视频画面中，当接收服务器发送的目标字幕的文字信息并分配显示区域后，将目标字幕的文字信息与当前正在播放的节目一起播放。
另外，在播放了用户当前选择的目标字幕时，还可以实时接收用户切换目标字幕的切换指令，并很据所述切换指令将当前目标字幕切换到最新选择的目标字幕，也就是可以根据用户的意愿实时切换目标字幕。
进一步地，目标字幕的文字信息在屏幕上的显示方式包括水平显示和垂直显示，即所述目标字幕在除所述原始字幕显示区域之外的显示区域显示的方式包括：目标字幕以水平方式显示和目标字幕以垂直方式显示。例如图5中的显示方式是水平显示（水平显示在视频画面的上方），当然也可以是垂直方式显示，例如垂直显示在视频画面的左侧或者右侧。
进一步地，如图6所示，基于上述多字幕显示方法，本发明还相应提供了一种智能终端（例如智能电视、智能平板、智能手机等），所述智能终端包括处理器10、存储器20及显示器30。图6仅示出了智能终端的部分组件，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。
所述存储器20在一些实施例中可以是所述智能终端的内部存储单元，例如智能终端的硬盘或内存。所述存储器20在另一些实施例中也可以是所述智能终端的外部存储设备，例如所述智能终端上配备的插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（Secure Digital, SD）卡，闪存卡（Flash Card）等。进一步地，所述存储器20还可以既包括所述智能终端的内部存储单元也包括外部存储设备。所述存储器20用于存储安装于所述智能终端的应用软件及各类数据，例如所述安装智能终端的程序代码等。所述存储器20还可以用于暂时地存储已经输出或者将要输出的数据。在一实施例中，存储器20上存储有多字幕显示程序40，该多字幕显示程序40可被处理器10所执行，从而实现本申请中多字幕显示方法。
所述处理器10在一些实施例中可以是一中央处理器（Central Processing Unit,CPU），微处理器或其他数据处理芯片，用于运行所述存储器20中存储的程序代码或处理数据，例如执行所述多字幕显示方法等。
所述显示器30在一些实施例中可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED（Organic Light-Emitting Diode，有机发光二极管）触摸器等。所述显示器30用于显示在所述智能终端的信息以及用于显示可视化的用户界面。所述智能终端的部件10-30通过系统总线相互通信。
在一实施例中，当处理器10执行所述存储器20中多字幕显示程序40时实现以下步骤：
获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息；
将所述原始字幕翻译成对应的目标字幕；
在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
所述将所述原始字幕翻译成对应的目标字幕的步骤包括：
通过终端本地安装的翻译应用将所述原始字幕翻译成所述目标字幕。
所述将所述原始字幕翻译成对应的目标字幕的步骤包括：
将所述原始字幕上传至服务器，以供所述服务器将所述原始字幕翻译成所述目标字幕。
所述将所述原始字幕翻译成对应的目标字幕的包括之前，还包括：
接收用户选择所述目标字幕语言的选择指令，并很据所述选择指令确定所述目标字幕对应的语言。
所述接收用户选择所述目标字幕语言的选择指令的步骤包括：
检测到用户需要选择目标字幕时，将包含多种字幕种类的字幕列表显示在界面上供用户进行选择，并接收用户选择所述目标字幕语言的选择指令。
所述在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域的步骤包括;
获取所述原始字幕于所述视频帧中的坐标信息和翻译得到的所述目标字幕；
在播放所述视频帧的过程中，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
所述多字幕显示方法还包括：
实时接收用户切换目标字幕的切换指令，并很据所述切换指令将当前目标字幕切换到最新选择的目标字幕。
所述多字幕显示方法还包括：
所述目标字幕在除所述原始字幕显示区域之外的显示区域显示的方式包括：目标字幕以水平方式显示和目标字幕以垂直方式显示。
本发明还提供一种存储介质，其中，所述存储介质存储有多字幕显示程序，所述多字幕显示程序被处理器执行时实现如上所述的多字幕显示方法的步骤。
综上所述，本发明提供一种多字幕显示方法、智能终端及存储介质，所述方法包括：获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息；将所述原始字幕翻译成对应的目标字幕；在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。本发明通过规避原始字幕内容的显示区域，将用户想要观看的目标字幕同时显示在屏幕的其他区域，根据用户的选择从多种字幕中播放适合自己的字幕，方便用户通过适合自己的字幕来观看节目。
当然，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关硬件（如处理器，控制器等）来完成，所述的程序可存储于一计算机可读取的存储介质中，所述程序在执行时可包括如上述各方法实施例的流程。其中所述的存储介质可为存储器、磁碟、光盘等。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (10)

1.一种多字幕显示方法，其特征在于，所述多字幕显示方法包括：
获取经视频解码后的视频帧，并提取所述视频帧中的字幕信息，所述字幕信息包括原始字幕以及所述原始字幕于所述视频帧中的坐标信息；
将所述原始字幕翻译成对应的目标字幕；
在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
2.根据权利要求1所述的多字幕显示方法，其特征在于，所述将所述原始字幕翻译成对应的目标字幕的步骤包括：
通过终端本地安装的翻译应用将所述原始字幕翻译成所述目标字幕。
3.根据权利要求1所述的多字幕显示方法，其特征在于，所述将所述原始字幕翻译成对应的目标字幕的步骤包括：
将所述原始字幕上传至服务器，以供所述服务器将所述原始字幕翻译成所述目标字幕。
4.根据权利要求1所述的多字幕显示方法，其特征在于，所述将所述原始字幕翻译成对应的目标字幕的包括之前，还包括：
接收用户选择所述目标字幕语言的选择指令，并很据所述选择指令确定所述目标字幕对应的语言。
5.根据权利要求4所述的多字幕显示方法，其特征在于，所述接收用户选择所述目标字幕语言的选择指令的步骤包括：
检测到用户需要选择目标字幕时，将包含多种字幕种类的字幕列表显示在界面上供用户进行选择，并接收用户选择所述目标字幕语言的选择指令。
6.根据权利要求2或3所述的多字幕显示方法，其特征在于，所述在播放所述视频帧时，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域的步骤包括;
获取所述原始字幕于所述视频帧中的坐标信息和翻译得到的所述目标字幕；
在播放所述视频帧的过程中，根据所述坐标信息将所述目标字幕显示在除所述原始字幕显示区域之外的显示区域。
7.根据权利要求6所述的多字幕显示方法，其特征在于，所述多字幕显示方法还包括：
实时接收用户切换目标字幕的切换指令，并很据所述切换指令将当前目标字幕切换到最新选择的目标字幕。
8.根据权利要求1所述的多字幕显示方法，其特征在于，所述多字幕显示方法还包括：
所述目标字幕在除所述原始字幕显示区域之外的显示区域显示的方式包括：目标字幕以水平方式显示和目标字幕以垂直方式显示。
9.一种智能终端，其特征在于，所述智能终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的多字幕显示程序，所述多字幕显示程序被所述处理器执行时实现如权利要求1-8任一项所述的多字幕显示方法的步骤。
10.一种存储介质，其特征在于，所述存储介质存储有多字幕显示程序，所述多字幕显示程序被处理器执行时实现如权利要求1-8任一项所述的多字幕显示方法的步骤。
CN201811585018.7A 2018-12-24 2018-12-24 一种多字幕显示方法、智能终端及存储介质 Pending CN111356025A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201811585018.7A CN111356025A (zh) 2018-12-24 2018-12-24 一种多字幕显示方法、智能终端及存储介质
EP19902454.8A EP3905663A4 (en) 2018-12-24 2019-12-19 METHOD OF DISPLAYING MULTIPLE SUBTITLES, INTELLIGENT DEVICE AND STORAGE MEDIA
US17/258,646 US20210274262A1 (en) 2018-12-24 2019-12-19 Multi-subtitle display method, intelligent terminal and storage medium
PCT/CN2019/126441 WO2020135192A1 (zh) 2018-12-24 2019-12-19 一种多字幕显示方法、智能终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811585018.7A CN111356025A (zh) 2018-12-24 2018-12-24 一种多字幕显示方法、智能终端及存储介质

Publications (1)

Publication Number Publication Date
CN111356025A true CN111356025A (zh) 2020-06-30

Family

ID=71128361

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811585018.7A Pending CN111356025A (zh) 2018-12-24 2018-12-24 一种多字幕显示方法、智能终端及存储介质

Country Status (4)

Country Link
US (1) US20210274262A1 (zh)
EP (1) EP3905663A4 (zh)
CN (1) CN111356025A (zh)
WO (1) WO2020135192A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112667178A (zh) * 2020-12-18 2021-04-16 威创集团股份有限公司 一种文字显示方法、系统、电子设备和存储介质
CN113891168A (zh) * 2021-10-19 2022-01-04 北京有竹居网络技术有限公司 字幕处理方法、装置、电子设备和存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113886612A (zh) * 2020-11-18 2022-01-04 北京字跳网络技术有限公司 一种多媒体浏览方法、装置、设备及介质
CN113723342B (zh) * 2021-09-08 2023-09-29 北京奇艺世纪科技有限公司 一种字幕显示方法、装置、电子设备及可读存储介质
CN116634218B (zh) * 2023-05-25 2024-04-02 优酷网络技术（北京）有限公司 推广信息显示方法、装置、设备、介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1645470A (zh) * 2005-01-25 2005-07-27 英特维数位科技股份有限公司 调整字幕显示位置的装置及其方法
CN101064802A (zh) * 2006-04-28 2007-10-31 佳能株式会社 数字广播接收设备及其控制方法
CN103051945A (zh) * 2012-12-31 2013-04-17 广东欧珀移动通信有限公司 一种视频播放终端的字幕翻译方法、系统
CN103067775A (zh) * 2013-01-28 2013-04-24 Tcl集团股份有限公司 一种音视频终端的字幕显示方法、音视频终端及服务器
CN203327190U (zh) * 2013-02-28 2013-12-04 青岛海尔电子有限公司 电视节目字幕处理系统及广播系统
CN104093085A (zh) * 2014-04-22 2014-10-08 腾讯科技（深圳）有限公司 信息显示方法和装置
CN104219459A (zh) * 2014-09-30 2014-12-17 上海摩软通讯技术有限公司 视频语言翻译方法、系统及智能显示设备
US20150113558A1 (en) * 2012-03-14 2015-04-23 Panasonic Corporation Receiver apparatus, broadcast/communication-cooperation system, and broadcast/communication-cooperation method
CN105681890A (zh) * 2016-01-26 2016-06-15 广东欧珀移动通信有限公司 一种视频播放终端的字幕显示方法及装置
CN107484002A (zh) * 2017-08-25 2017-12-15 四川长虹电器股份有限公司 智能翻译字幕的方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003122751A (ja) * 2001-10-12 2003-04-25 Alps Electric Co Ltd 翻訳装置
CN2772159Y (zh) * 2005-01-20 2006-04-12 英业达股份有限公司 字幕翻译装置
JP4247291B1 (ja) * 2007-12-20 2009-04-02 株式会社東芝 再生装置および再生方法
US8786781B2 (en) * 2009-04-09 2014-07-22 Ati Technologies Ulc Detection and enhancement of in-video text
JP5014449B2 (ja) * 2010-02-26 2012-08-29 シャープ株式会社 会議システム、情報処理装置、会議支援方法、情報処理方法、及びコンピュータプログラム
WO2012035590A1 (ja) * 2010-09-17 2012-03-22 株式会社Ｆｉｃｐ 多言語訳文表示装置
US20140003792A1 (en) * 2012-06-29 2014-01-02 Kourosh Soroushian Systems, methods, and media for synchronizing and merging subtitles and media content
CN110134973A (zh) * 2019-04-12 2019-08-16 深圳壹账通智能科技有限公司 基于人工智能的视频字幕实时翻译方法、介质和设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1645470A (zh) * 2005-01-25 2005-07-27 英特维数位科技股份有限公司 调整字幕显示位置的装置及其方法
CN101064802A (zh) * 2006-04-28 2007-10-31 佳能株式会社 数字广播接收设备及其控制方法
US20150113558A1 (en) * 2012-03-14 2015-04-23 Panasonic Corporation Receiver apparatus, broadcast/communication-cooperation system, and broadcast/communication-cooperation method
CN103051945A (zh) * 2012-12-31 2013-04-17 广东欧珀移动通信有限公司 一种视频播放终端的字幕翻译方法、系统
CN103067775A (zh) * 2013-01-28 2013-04-24 Tcl集团股份有限公司 一种音视频终端的字幕显示方法、音视频终端及服务器
CN203327190U (zh) * 2013-02-28 2013-12-04 青岛海尔电子有限公司 电视节目字幕处理系统及广播系统
CN104093085A (zh) * 2014-04-22 2014-10-08 腾讯科技（深圳）有限公司 信息显示方法和装置
CN104219459A (zh) * 2014-09-30 2014-12-17 上海摩软通讯技术有限公司 视频语言翻译方法、系统及智能显示设备
CN105681890A (zh) * 2016-01-26 2016-06-15 广东欧珀移动通信有限公司 一种视频播放终端的字幕显示方法及装置
CN107484002A (zh) * 2017-08-25 2017-12-15 四川长虹电器股份有限公司 智能翻译字幕的方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112667178A (zh) * 2020-12-18 2021-04-16 威创集团股份有限公司 一种文字显示方法、系统、电子设备和存储介质
CN112667178B (zh) * 2020-12-18 2023-03-07 威创集团股份有限公司 一种文字显示方法、系统、电子设备和存储介质
CN113891168A (zh) * 2021-10-19 2022-01-04 北京有竹居网络技术有限公司 字幕处理方法、装置、电子设备和存储介质
CN113891168B (zh) * 2021-10-19 2023-12-19 北京有竹居网络技术有限公司 字幕处理方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
EP3905663A1 (en) 2021-11-03
US20210274262A1 (en) 2021-09-02
EP3905663A4 (en) 2022-08-31
WO2020135192A1 (zh) 2020-07-02

Similar Documents

Publication Publication Date Title
US11537267B2 (en) Method and device for search page interaction, terminal and storage medium
WO2021068558A1 (zh) 一种同声字幕翻译方法、智能电视及存储介质
CN111356025A (zh) 一种多字幕显示方法、智能终端及存储介质
US20200322684A1 (en) Video recommendation method and apparatus
CN106303723B (zh) 视频处理方法和装置
WO2020000972A1 (zh) 视频访问方法、客户端、装置、终端、服务器和存储介质
US11265614B2 (en) Information sharing method and device, storage medium and electronic device
CN108924622B (zh) 一种视频处理方法及其设备、存储介质、电子设备
WO2014178219A1 (ja) 情報処理装置および情報処理方法
US9936257B2 (en) Application display method and terminal
CN103748585A (zh) 智能电视
CN103546813A (zh) 基于Android平台的视频预览方法及智能电视
CN111097168B (zh) 游戏直播中的显示控制方法及装置、存储介质及电子设备
US20160345049A1 (en) Method and device for switching channel
WO2022134555A1 (zh) 视频处理方法及终端
CN113965813B (zh) 直播间内的视频播放方法、系统、设备及介质
CN104185086A (zh) 一种提供视频信息的方法和装置
US20160345059A1 (en) Method and device for switching channel
US20170185422A1 (en) Method and system for generating and controlling composite user interface control
CN113014985A (zh) 互动多媒体内容处理方法、装置、电子设备及存储介质
CN103748586B (zh) 智能电视
WO2019146466A1 (ja) 情報処理装置、動画検索方法、生成方法及びプログラム
US20230054388A1 (en) Method and apparatus for presenting audiovisual work, device, and medium
CN112929685B (zh) Vr直播间的互动方法、装置、电子设备和存储介质
CN112052376A (zh) 资源推荐方法、装置、服务器、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200630