CN1252602A - 交互式多媒体播放节奏同步显示字幕的方法及其装置 - Google Patents

交互式多媒体播放节奏同步显示字幕的方法及其装置 Download PDF

Info

Publication number
CN1252602A
CN1252602A CN 98123616 CN98123616A CN1252602A CN 1252602 A CN1252602 A CN 1252602A CN 98123616 CN98123616 CN 98123616 CN 98123616 A CN98123616 A CN 98123616A CN 1252602 A CN1252602 A CN 1252602A
Authority
CN
China
Prior art keywords
captions
play
beat
individual character
data bank
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 98123616
Other languages
English (en)
Other versions
CN1169149C (zh
Inventor
朱明�
林光信
宋建福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inventec Corp
Original Assignee
Inventec Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inventec Corp filed Critical Inventec Corp
Priority to CNB981236162A priority Critical patent/CN1169149C/zh
Publication of CN1252602A publication Critical patent/CN1252602A/zh
Application granted granted Critical
Publication of CN1169149C publication Critical patent/CN1169149C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Studio Circuits (AREA)

Abstract

一种交互式多媒体播放节奏同步显示字幕的方法及装置,该装置包括一中央控制单元、一媒体播放装置、一显示装置、一时钟定时器以及资料库等,资料库用来储存索引编号、开始位置、总节拍数及控制信息,控制信息将所需的节拍数注明于单字后面;当媒体播放时,时钟定时器判断播放位置,介于开始位置和结束位置之间时,显示装置显示出字幕内容,使媒体播放与字幕显示完全同步。

Description

交互式多媒体播放节奏同步显示字幕的方法及其装置
本发明涉及一种交互式多媒体播放节奏同步显示字幕的方法及其装置,尤指一种在多媒体系统中提供一具有多个字幕扫描显示记录的资料库,这些字幕扫描显示记录具有一控制信息,该控制信息将每一句字幕内的每一单字所需的节拍数注明于其单字后面,藉助所计算出的控制信息,控制字幕显示节奏,从而达到媒体播放与字幕的完全同步,此外,也可针对使用者的不同需要,即时由使用者调整每一句字幕的每一单字后的节拍数,进而改变媒体的节奏。
以往,一般交互式多媒体,如目前市面上常见的各类AudioCD或videoCD,其格式包括图像常用的.mpg格式、Video Karaoke常用的.dat格式以及AudioCD常用的.cda格式等,而这些媒体对于相应的字幕内容,无法同步根据正确的节奏,进行内容的同步扫描,进而无法辅助使用者达到学习及训练提高的功效。请参照图7,一般常见的MTV(音乐电视带),所采用的方法是先利用字幕机将字幕与媒体播放器播出的影像同步播放,并利用合成器及人工校准的方式,根据歌曲的节奏,使字幕与音乐同步,因此,比较耗费人力及时间,同时,使用者无法对内容及节奏适时进行修改,因而缺乏交互性,无法提高使用者的技能。
有鉴于此,为改进上述现有技术的缺点,本发明的目的在于提供一种交互式多媒体播放节奏同步显示字幕的方法及其装置。
为了达到本发明的目的,所提供的交互式多媒体播放节奏同步显示字幕的方法,是现有多媒体系统中提供一具有多个字幕扫描显示记录的资料库,资料库中储存有将每一句字幕内的每一单字所需的节拍数注明于其单字后面的控制信息,当媒体开始播放时,时钟定时器先判断出该媒体目前所播放的位置,此时,一旦判断出目前所播放的位置,是介于每一句字幕的开始位置和结束位置之间时,中央控制单元即令显示装置显示出该字幕的内容,该资料库中每一句字幕的每一单字的节拍数是根据媒体播放的节奏计算出的,所以,可使字幕显示的速度跟上媒体播放的节奏,使媒体播放与字幕显示完全同步。
本发明的另一交互式多媒体播放节奏同步显示字幕的方法,其中,在该显示装置的字幕显示区中,每一句字幕的单字后面谐设有一节拍调整钮,当多媒体系统内的中央控制单元接收到节拍调整钮被按压欲调整节拍时,即根据所改变的节拍数,改变媒体扫描的节奏。
本发明所提供的交互式多媒体播放节奏同步显示字幕的装置,其中,该多媒体系统包括一中央控制单元、一媒体播放装置、一显示装置、一时钟定时器以及储存有数个字幕扫描显示记录的资料库等,该中央控制单元控制整个多媒体系统的工作,媒体播放装置可为光碟驱动器,另外,显示装置可为显示屏幕,资料库用来储存每一句字幕的索引编号、每一句字幕的开始位置、整句的总节拍数及每一句字幕的控制信息,而控制信息是将每一句字幕内的每一单字所需的节拍数经计算后注明于其单字后面;当媒体(此泛指音乐、影象、声音等)开始播放时,时钟定时器先判断出该媒体目前所播放的位置,一旦判断出目前所播放的位置,是介于句字幕的开始位置和结束位置之间时,中央控制单元即令显示装置显示出该字幕的内容,由于资料库中每一句字幕的每一单字的节拍数是根据媒体播放的节奏计算出的,所以,可使字幕显示的速度跟上媒体播放的节奏,使媒体播放与字幕显示完全同步。
附图示的简单说明:
图1是本发明的多媒体硬件结构图。
图2是本发明的资料库实例图。
图3是本发明的主控制程序流程图。
图4是本发明的字幕扫描程序流程图。
图5是本发明的调整字幕节拍的流程图。
图6是本发明的调整字幕节拍的一实施例图。
图7是现有的字幕进行实时修改的流程图。
详细说明:为对本发明的目的、技术方案的特征及其功效,作更进一步的认识与了解,现对实施例配合附图,详细说明如下:
请参照图1,本发明是一种“交互式多媒体播放节奏同步显示字幕的方法及其装置”,在本发明的最佳实施例中,该交互式多媒体所播放的媒体为卡啦OK或KTV所播放的音乐录像带及歌曲字幕,其包括一中央控制单元1、一媒体播放装置2、一显示装置3、一时钟定时器4、一存储器5以及储存有数个字幕扫描显示记录的资料库6等,该中央控制单元1控制整个多媒体系统的工作,媒体播放装置2可为一先碟驱动器,另外,显示装置3可为一显示屏幕。
请参照图2,该资料库6用来储存每一句字幕的索引编号、每一句字幕的开始位置、整句歌词所含的总节拍数及每一句字幕的控制信息,而控制信息将每一句字幕的每一单字所需的节拍数经计算后注明于其单字后面,现以《花心》这首歌为例,根据该首歌的节奏,例如《花心》为4/4拍,代表每1/4音符为一基本单位,每小节占4拍,因此根据如下公式:
Figure A9812361600061
即可取得每个单词的节拍数,例如:
“花”字为1/4音符,则“花”的节拍数=(1/4)/(1/4)=1
“的”字为1/2音符,则“的”的节拍数=(1/2)/(1/4)=2
对于空拍,可使用“**”表示,以便不进行扫描。
故,根据歌谱,即可得到该句的资料库内容:
花的02心04**06藏在蕊02中02
若该单字的节拍数为1拍时,即不注明在单字后面,因此,将每一单字后面的节拍数相加,即可得到总节拍数,据此,可建立整首歌的资料库内容。
请参照图3,当欲播放媒体时,首先,中央控制单元1会读取资料库6内的资料,且开启相对应的媒体格式,如影片或声音,本实施例为开启某首歌曲的媒体格式,并根据该首歌曲的资料库6内的索引号设定索引编号记录(Cur_Sentence),以此记录画面的播放顺序,此时,画面开始播放后,中央控制单元1会从时钟定时器4中读取时钟信号,利用此时钟信号,实时检测目前画面的播放位置;当画面播放位置未超过画面总播放长度,且画面的索引编号记录也未超过字幕总句数时,即表示可继续播放画面,并设置一播放标志(FLAG),以此标志标识画面当前的播放位置,如果目前的画面播放位置未超过目前播放当前句的结束位置时,则继续播放画面,否则,表明此句的画面已播放完,将标志置成虚假的,且索引编号记录加一,继续播放下一句的画面。
如果,目前画面播放位置大于当前句的开始位置,则读取字幕及控制信息,将字幕显示出来,将标志置成真实,从资料库6内的控制信息中计算出当前句的基本节拍时间,如果当前句的结束位置超过了下一句的开始位置时,则表示播放已进入下一句,将当前句的结束位置设置为下一句的起始位置,如果画面播放位置还在当前句内,则处理字幕扫描显示步骤。
请参照图4,当欲处理字幕扫描显示步骤时,根据当前句的起始和结束位置,以及总节拍数,计算出平均每一拍的时间,设置基本扫描序号等于“0”,如果,当前句的结束位置没有超过下一句的开始位置,则根据资料库中索引号取得相应内容,并按列做颜色改变,并将当前的基本扫描序号加一,若当前句的结束位置已超过了下一句的开始位置,则将当前句加一,进行下一句的扫描动作。
请参照图5,其中,在该显示装置的字幕显示区31中,由于在资料库6内,每一句歌词的单字后面皆注明有节拍数,所以,可在该显示装置3的字幕显示区31上的在对应每一单字的后面设置一节拍调整钮32,当多媒体系统内的中央控制单元1接收到节拍调整钮32被按压欲调整节拍时,即会根据所改变的节拍数,改变媒体扫描的节奏,如图5所示,其正播放的当前句为:
Summer Kisses Winter tears(5)
例如:在点按“tears”后的上箭头一次,即将节拍减小一个单位,该句对应的资料库内容变为:
Summer Kisses Winter tears(4)
在点按“Kisses”后的下箭头一次,即将节拍增加一个单位,该句对应的资料库内容变为:
Summer Kisses(2)Winter tears(4)
依照此方法,可透过节拍调整按钮32,自由地进行调整,直至满意为止。
请再参照图6,为节奏调整的流程图,首先根据索引号,从资料库6中取得相应字幕的内容,提供一编辑按钮,通过节拍调整钮32,进行节拍内容的修改,如用户感觉效果仍不够满意,即可重复上述过程,继续进行调整直至满意为止。

Claims (7)

1.一种交互式多媒体播放节奏同步显示字幕的方法,其包括以下步骤:
首先,在该多媒体系统中提供一具有多个字幕扫描显示记录的资料库,该资料库中至少储存有将每一句字幕内的每一单字所需的节拍数注明于其单字相邻侧的控制信息;
其次,当媒体开始播放时,系统内的时钟定时器先判断出该媒体目前所播放的位置;
然后,一旦判断出目前画面播放的位置,是介于每一句字幕的开始位置与结束位置之间时,中央控制单元令显示装置显示出该字幕的内容;
此时,中央控制单元根据资料库中每一句字摹的每一单字所计算出的节拍数,使字幕显示的速度跟上媒体播放的节奏,使媒体播放与字幕显示完全同步。
2.如权利要求1所术的交互式多媒体播放节奏同步显示字幕的方法,其特征在于,该资料库用来储存每一句字幕所设定的索引编号、每一句字幕的开始位置、整句歌词所含的总节拍数及每一句字幕的控制信息等。
3.如权利要求1所述的交互式交媒体播放节奏同步显示字幕的方法,其特征在于,每一单字的节拍数可根据下列方式算出:
4.如权利要求1所述的交互式多媒体播放节奏同步显示字幕的方法,其特征在于,在资料库内的每一句歌词的单字后面皆注明有节拍数,在该多媒体系统的显示画面上对应每一单字的后面设置一节拍调整钮,当中央控制单元接收到节拍调整钮被按压欲调整节拍时,即根据所改变的节拍数,改变媒体扫描的节奏。
5.一种交互式多媒体播放节奏同步显示字幕的装置,该多媒体系统包括:
一中央控制单元,其控制整个系统的工作;
一媒体播放装置,藉助该媒体播放装置以播放媒体;
一显示装置,藉助该显示装置以显示所播放的媒体及字幕;
一时钟定时器,藉助该时钟定时器读取时钟信号,利用该时钟信号,实时检测目前媒体的播放位置;
一资料库,该资料库用来储存每一句字幕所设定的索引编号、每一句字幕的开始位置、整句歌词所含的总节拍数及每一句字幕的控制信息等。
6.如权利要求5所述的交互式多媒体播放节奏同步显示字幕的装置,其特征在于,该控制信息将每一句字幕内的每一单字所需的节拍数经计算后注明于其单字后面,该节拍数可根据下列方式算出:
Figure A9812361600031
7.如权利要求5所述的交互式多媒体播放节奏同步显示字幕的装置,其特征在于,该显示装置的字幕显示区上对应每一单字的后面设有一节拍调整钮,当按压节拍调纽时,每一句单字的节拍即会改变,根据所改变的节拍数,改变媒体扫描的节奏。
CNB981236162A 1998-10-28 1998-10-28 交互式多媒体播放节奏同步显示字幕的方法及其装置 Expired - Fee Related CN1169149C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB981236162A CN1169149C (zh) 1998-10-28 1998-10-28 交互式多媒体播放节奏同步显示字幕的方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB981236162A CN1169149C (zh) 1998-10-28 1998-10-28 交互式多媒体播放节奏同步显示字幕的方法及其装置

Publications (2)

Publication Number Publication Date
CN1252602A true CN1252602A (zh) 2000-05-10
CN1169149C CN1169149C (zh) 2004-09-29

Family

ID=5228262

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB981236162A Expired - Fee Related CN1169149C (zh) 1998-10-28 1998-10-28 交互式多媒体播放节奏同步显示字幕的方法及其装置

Country Status (1)

Country Link
CN (1) CN1169149C (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1327431C (zh) * 2001-06-14 2007-07-18 三星电子株式会社 含有预加载信息的信息存储媒体及其再现设备和方法
CN105068795A (zh) * 2015-07-20 2015-11-18 上海幻电信息科技有限公司 基于弹幕特效的开发方法与装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101650959B (zh) * 2009-09-07 2012-10-17 中国科学院声学研究所 一种多媒体同步播控关系的层次化架构的设计方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1327431C (zh) * 2001-06-14 2007-07-18 三星电子株式会社 含有预加载信息的信息存储媒体及其再现设备和方法
CN105068795A (zh) * 2015-07-20 2015-11-18 上海幻电信息科技有限公司 基于弹幕特效的开发方法与装置

Also Published As

Publication number Publication date
CN1169149C (zh) 2004-09-29

Similar Documents

Publication Publication Date Title
US6388181B2 (en) Computer graphic animation, live video interactive method for playing keyboard music
US4333152A (en) TV Movies that talk back
US7565059B2 (en) Dynamic variation of output media signal in response to input media signal
US4445187A (en) Video games with voice dialog
US5697789A (en) Method and system for aiding foreign language instruction
US4569026A (en) TV Movies that talk back
US4305131A (en) Dialog between TV movies and human viewers
US8278542B2 (en) Metronome responding to moving tempo
JPS59135680A (ja) ビデオ編集用ビユワ−
JPH10232884A (ja) 映像ソフトウェア処理方法及び映像ソフトウェア処理装置
US5770811A (en) Music information recording and reproducing methods and music information reproducing apparatus
US5621538A (en) Method for synchronizing computerized audio output with visual output
EP0016314A1 (en) Method and apparatus for voice dialogue between a video picture and a human
WO2006052666A2 (en) Apparatus and methods for encoding data for video compositing
EP0967796A3 (en) Client/server multimedia presentation system
US7080473B2 (en) Novelty animated device with synchronized audio output, and method for achieving synchronized audio output therein
CN1169149C (zh) 交互式多媒体播放节奏同步显示字幕的方法及其装置
JPH10274918A (ja) 身体動作練習システムおよび身体動作練習用教材
CN1063308C (zh) 交互式图象同步字幕显示装置及显示方法
JP2003241630A (ja) 動画配信方法、動画表示システム、教育モデル、ユーザーインターフェース、手動操作手順
JP2002008052A (ja) プレゼンテーションシステムおよび記録媒体
Borchers et al. Conducting a realistic electronic orchestra
WO1997037736A1 (en) Time-segmented multimedia game playing and authoring system
WO1997037736A9 (en) Time-segmented multimedia game playing and authoring system
JP3011789U (ja) 生放送・コマーシャル同時放送用テープ作成装置

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040929

Termination date: 20101028