CN109074328B - 信息处理方法及终端装置 - Google Patents

信息处理方法及终端装置 Download PDF

Info

Publication number
CN109074328B
CN109074328B CN201780022600.XA CN201780022600A CN109074328B CN 109074328 B CN109074328 B CN 109074328B CN 201780022600 A CN201780022600 A CN 201780022600A CN 109074328 B CN109074328 B CN 109074328B
Authority
CN
China
Prior art keywords
event
information
events
identification information
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780022600.XA
Other languages
English (en)
Other versions
CN109074328A (zh
Inventor
岩濑裕之
濑户优树
越智友美子
石田哲朗
岩田贵裕
森口翔太
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Publication of CN109074328A publication Critical patent/CN109074328A/zh
Application granted granted Critical
Publication of CN109074328B publication Critical patent/CN109074328B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/06—Simultaneous speech and data transmission, e.g. telegraphic transmission over the same conductors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41415—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance involving a public display, viewable by several users in a public space outside their home, e.g. movie theatre, information kiosk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles

Abstract

终端装置具有：信息接收部，其能够对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收；时刻确定部，其将预定所述各事件的发生的预定时刻依次确定；停止判定部，其对应于在所述各事件的预定时刻的附近所述信息接收部是否接收到该事件的识别信息而判定所述多个事件的进行是否停止；以及播放控制部，其关于将所述多个事件时间性地划分出的多个事件组各自，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，播放装置播放属于该事件组的各事件的相关信息，在所述停止判定部判定为所述多个事件的进行停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后所述信息接收部接收到识别信息，则恢复所述相关信息的更新。

Description

信息处理方法及终端装置
技术领域
本发明涉及将信息提供给终端装置的技术。
背景技术
以往提出了下述技术，即，将与戏剧或者演奏等各种演出相关的信息与演出的进行并行地提供给利用者的终端装置的技术。例如在专利文献1公开了下述结构，即，与演出的进行并行地向利用者的便携设备依次发送时间码，在根据时间码确定的时刻使字幕等解说用的信息显示于便携设备。
专利文献1：日本特开2009－213180号公报
发明内容
但是，在专利文献1的技术中，在例如便携设备由于某种理由而无法适当地接收时间码的情况下，有可能无法将显示于便携设备的信息在适当的定时进行更新。考虑以上的事情，本发明的目的在于，将与按照时间序列发生的事件相关的信息在适当的定时进行播放。
为了解决以上的课题，本发明的优选方式所涉及的信息处理方法，对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收，将预定所述各事件的发生的预定时刻依次确定，对应于在所述各事件的预定时刻的附近是否接收到该事件的识别信息而判定所述多个事件的进行是否停止，关于将所述多个事件时间性地划分出的多个事件组各自，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，使播放装置播放属于该事件组的所述至少一个事件的相关信息，在判定为所述多个事件的进行停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后接收到识别信息，则恢复所述相关信息的更新。
本发明的优选方式所涉及的终端装置具有：信息接收部，其能够对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收；时刻确定部，其将预定所述各事件的发生的预定时刻依次确定；停止判定部，其对应于在所述各事件的预定时刻的附近所述信息接收部是否接收到该事件的识别信息而判定所述多个事件的进行是否停止；以及播放控制部，其关于将所述多个事件时间性地划分出的多个事件组各自，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，使播放装置播放属于该事件组的所述至少一个事件的相关信息，在所述停止判定部判定为所述多个事件的进行停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后所述信息接收部接收到识别信息，则恢复所述相关信息的更新。
本发明的优选方式所涉及的终端装置具有：信息接收部，其能够对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收；以及播放控制部，其使与所述信息接收部接收到的识别信息相对应的所述事件的相关信息由播放装置播放。
附图说明
图1是本发明的第1实施方式所涉及的信息提供系统的结构图。
图2是传送装置的结构图。
图3是音响信号的说明图。
图4是演出的进行和终端装置的动作之间的关系的说明图。
图5是终端装置的结构图。
图6是信息表格的示意图。
图7是发生了突发的事情的情况下的终端装置的动作的说明图。
图8是发生了突发的事情的情况下的终端装置的动作的说明图。
图9是终端装置的动作的流程图。
图10是第2实施方式中的终端装置的结构图。
图11是第2实施方式中的终端装置的动作的流程图。
图12是第2实施方式中的终端装置的动作的说明图。
图13是发生了突发的事情的情况下的终端装置的动作的说明图。
具体实施方式
＜第1实施方式＞
图1是本发明的第1实施方式中的信息提供系统100的结构图。第1实施方式的信息提供系统100是用于将与各种演出(例如戏剧、演奏或者电影等)相关的信息与其进行并行地提供给利用者的计算机系统，如图1例示所示，具有传送装置10和终端装置20。传送装置10设置在举办各种演出的剧场或者大厅等设施H。来到设施H的利用者携带终端装置20。终端装置20例如是移动电话或者智能手机等移动型的信息处理终端。此外，实际上在设施H内存在多个终端装置20，但在下面的说明中为了方便起见而着眼于任意的1个终端装置20。
在第1实施方式中，设想下述情况，即，事先准备的多个台词按照规定的顺序以时间序列发声的演出(例如角色秀)在设施H内举办。利用者携带着终端装置20并欣赏演出。终端装置20将与以时间序列发声的多个台词各自相关的信息(以下称为“相关信息”)与演出的进行并行地依次显示。具体地说，例如展示各台词的文字列(即，字幕)作为相关信息而显示于终端装置20。根据以上的结构，终端装置20的利用者在欣赏演出的同时随时对终端装置20依次显示的相关信息进行确认，由此能够视觉性地掌握演出的台词。因此，具有例如即使是听觉障碍者也能够掌握演出的内容这样的优点。
图2是传送装置10的结构图。如图2例示所示，第1实施方式的传送装置10具有：控制装置12、存储装置14、输入装置16和放音装置18。控制装置12是例如包含CPU(CentralProcessing Unit)的处理电路，将传送装置10的各要素集中地控制。存储装置14例如是磁记录介质或者半导体记录介质等公知的记录介质，或者由多种记录介质的组合构成，对控制装置12执行的程序和控制装置12使用的各种数据进行存储。第1实施方式的存储装置14对音响信号X进行存储。音响信号X是表示在演出中发声出的多个台词的声音的时间信号。
放音装置18例如是设置于设施H内的扬声器装置，对音响信号X表示的声音进行播放。此外，将音响信号X从数字变换为模拟的D/A变换器、及对音响信号X进行放大的放大器的图示为了方便起见而被省略。输入装置16是接收来自监管演出的管理者的指示的操作仪器。例如通过将输入装置16适当地操作，从而管理者能够随时地指示音响信号X的播放或者停止。控制装置12与针对输入装置16的来自管理者的指示相应地将音响信号X供给至放音装置18，由此使多个台词各自的声音从放音装置18依次播放。通过与设施H内的舞台中的各演出者的表演并行地播放音响信号X而构成演出。
图3是音响信号X所包含的音响成分的说明图。如图3例示所示，多个台词Ln(L1、L2、L3、…)各自的音响成分包含于音响信号X的不同的区间(以下称为“播放区间”)(n是自然数)。因此，通过由放音装置18实现的音响信号X的播放，各台词Ln的音响成分依次被放音。另外，在音响信号X中的任意的1个台词Ln的播放区间，含有该台词Ln的识别信息Dn的音响成分。识别信息Dn(D1、D2、D3、…)是用于对台词Ln进行识别的标号。识别信息Dn的音响成分，例如是通过将规定的频率的正弦波等载波通过识别信息Dn进行调制的频率调制、或者利用了扩频码的识别信息Dn的扩频调制等调制处理而生成的调制成分。识别信息Dn的音响成分的频带设定为高于利用者在通常的环境中听到的声音的频带的范围(例如大于或等于18kHz且小于或等于20kHz)。
以上例示出的音响信号X被供给至图2的放音装置18。因此，台词Ln的音响成分和识别信息Dn的音响成分从放音装置18被放音。即，第1实施方式的放音装置18除了作为对台词Ln的音响成分进行放音的音响设备起作用以外，还作为通过将作为空气振动的声波设为传送介质的音响通信而将该台词Ln的识别信息Dn向周围发送的发送机起作用。
图4是演出的进行和终端装置20的动作之间的关系的说明图。如图4例示所示，传送装置10与多个台词Ln的播放(即，演出的进行)并行地将各台词Ln的识别信息Dn通过音响通信依次发送。例如，第n个台词Ln的播放和该台词Ln的识别信息Dn从传送装置10被发送。即，与各台词Ln的播放同步地将识别信息Dn依次发送。此外，在图3及图4中，例示出与台词Ln的播放区间的开始一起，开始识别信息Dn的发送的情况，但台词Ln的播放区间和发生识别信息Dn的期间的时间性关系能够适当地变更。另外，如果设为在台词Ln的播放区间内将识别信息Dn多次反复地发送的结构，则能够降低终端装置20无法接收到识别信息Dn的可能性。
图5是终端装置20的结构图。如图5例示所示，终端装置20具有：控制装置21、存储装置23、拾音装置25、输入装置27和显示装置29。控制装置21是包含例如CPU的处理电路，将终端装置20的各要素集中地控制。存储装置23是例如磁记录介质或者半导体记录介质等公知的记录介质，或者由多种记录介质的组合构成，对控制装置21执行的程序和控制装置21使用的各种数据进行存储。第1实施方式的存储装置23对图6例示的信息表格T进行存储。例如，经由移动体通信网或者互联网等通信网而由终端装置20从管理服务器(省略图示)接收到的信息表格T存储于存储装置23。
如图6例示所示，信息表格T是关于在演出中能够被发声的多个台词Ln各自对识别信息Dn(D1、D2、D3、…)和相关信息Rn(R1、R2、R3、…)进行了登记的数据表格。按照演出中的各台词Ln的发声的顺序对识别信息Dn和相关信息Rn进行排列。第1实施方式中的各台词Ln的相关信息Rn，是表示该台词Ln的文字列的文本数据。识别信息Dn如前述是用于对台词Ln进行识别的标号，但也能换言为用于对相关信息Rn进行识别的标号。
如图6例示所示，在第1实施方式的信息表格T中，针对相互前后的2个台词(Ln及Ln+1)的每对而登记时间差Qn、n+1(Q1、2、Q2、3、Q3、4、…)。时间差Q是在音响信号X中相互前后的2个台词Ln之间的时间。具体地说，如图3例示所示，任意的1个时间差Qn、n+1，是第n个台词Ln的播放区间的起点和紧跟在后面的台词Ln+1的播放区间的起点的间隔。因此，如果演出如当初的预定进行，则在通过传送装置10的放音装置18实现的播放音中，在从台词Ln的发声的时刻起经过时间差Qn、n+1后的时刻，开始台词Ln+1的发声。例如，在从最初的台词L1的发声的开始起经过时间差Q1、2后的时刻，开始第2个台词L2的发声，在从台词L2的发声的开始起经过时间差Q2、3后的时刻，开始第3个台词L3的发声。
如图6例示所示，多个台词Ln在时间轴上被划分为多个集合(以下称为“台词组”)Gm(m是自然数)。各台词组Gm(G1、G2、…)在时间轴上是相互前后的多个台词Ln的集合。在图6中，例示出将从第1个至第3个为止的3个台词Ln(L1、L2及L3)划分为第1个台词组G1，将第4个及第5个的2个台词Ln(L4及L5)划分为第2个台词组G2的情况。信息表格T对台词组Gm的划分(相互前后的台词组Gm的边界)进行规定。例如表示相互前后的台词组(Gm或者Gm+1)的边界的数据，或者表示各台词组Gm的起始或者末尾的台词Ln的数据(例如标志)包含于信息表格T。属于各台词组Gm的台词Ln的总数根据每个台词组Gm而可能有不同。另外，也能够将台词组Gm由1个台词Ln构成。此外，如果能够确定识别信息Dn、相关信息Rn、时间差Qn、n+1和台词组Gm的对应关系，则也能够将信息表格T由多个表格构成。
图5的拾音装置25(传声器)是对周围的声音进行拾音而生成音响信号Y的音响设备。具体地说，拾音装置25生成表示由传送装置10的放音装置18播放出的声音(即，台词Ln的音响成分和识别信息Dn的音响成分的混合音)的音响信号Y。此外，将拾音装置25生成的音响信号Y从模拟变换为数字的A/D变换器的图示为了方便起见而被省略。
输入装置27是为了输入针对终端装置20的各种指示而由利用者进行操作的输入仪器。例如将利用者进行操作的多个操作件或者对利用者的接触进行检测的触摸面板作为输入装置27而适当地利用。显示装置29(例如液晶显示面板)基于控制装置21的控制而对相关信息Rn进行显示。此外，也能够将拾音装置25及显示装置29的一方或者双方与终端装置20分体地构成而与终端装置20连接。
如图5例示所示，将在存储装置23中存储的程序由控制装置21执行，由此实现用于将相关信息Rn提供给利用者的多个功能(信息提取部42、时刻确定部44、播放控制部46及停止判定部48)。此外，也能够采用下述结构，即，将以上例示出的控制装置21的功能分散于多个装置，或者将控制装置21的功能的一部分由专用的电子电路实现。
信息提取部42从由拾音装置25生成的音响信号Y中提取各台词Ln的识别信息Dn。具体地说，信息提取部42例如通过带通滤波器对音响信号Y中的包含识别信息Dn的频带的音响成分进行选择，将与音响信号X生成时的调制处理相对应的解调处理针对该音响成分执行，由此提取识别信息Dn。具体地说，针对由放音装置18实现的台词Ln的每次发声，依次提取该台词Ln的识别信息Dn。如通过以上的说明理解那样，第1实施方式的拾音装置25除了被利用于终端装置20相互间的语音通话或者动画拍摄时的声音收录以外，还被利用于通过音响通信实现的识别信息Dn的接收。即，拾音装置25及信息提取部42作为能够对与多个台词Ln的播放并行地从传送装置10依次发送的各台词Ln的识别信息Dn进行接收的信息接收部50起作用。
时刻确定部44如图4例示所示，对预定发声台词Ln的时刻(以下称为“预定时刻”)Pn依次进行确定。具体地说，时刻确定部44将从既定的预定时刻Pn起经过了在信息表格T中指定出的时间差Qn、n+1后的时刻，确定为应该对第(n+1)个台词Ln+1进行发声的预定时刻Pn+1。例如，如图4例示所示，第3个台词L3的预定时刻P3，是从紧跟前面的台词L2的预定时刻P2起经过了时间差Q2、3后的时刻。第1实施方式的时刻确定部44从任意的1个预定时刻Pn起历时地使计时值C(例如内部计时器的计数值)增加，将计时值C到达至在信息表格T中指定出的时间差Qn、n+1的时刻确定为台词Ln+1的预定时刻Pn+1。此外，关于第1个的台词L1，时刻确定部44将信息接收部50从传送装置10接收到最初的识别信息D1的时刻确定为预定时刻P1。如图4例示所示，以各预定时刻Pn的到来为契机将计时值C初始化为零。
图5的播放控制部46对通过显示装置29实现的相关信息Rn的显示进行控制。具体地说，播放控制部46关于多个台词组Gm各自，以与其台词组Gm的起始的台词Ln相对应的预定时刻Pn的到来为契机，使属于该台词组Gm的多个台词Ln的相关信息Rn显示于显示装置29。例如，如图4例示所示，如果台词组G1中的起始的台词L1的预定时刻P1到来，则播放控制部46使属于其台词组G1的多个台词Ln的相关信息Rn(R1、R2及R3)显示于显示装置29。另外，如果台词组G2中的起始的台词L4的预定时刻P4到来，则使属于该台词组G2的多个台词Ln的相关信息Rn(R4及R5)显示于显示装置29。即，关于台词组Gm的起始的台词Ln针对由时刻确定部44确定的每个预定时刻Pn，对显示于显示装置29的相关信息Rn进行更新。如通过以上的说明理解那样，台词组Gm是由终端装置20集中地显示的多个台词Ln的集合。
另外，在实际的演出中，在相互前后的台词Ln之间，有可能发生事先没有预想的突发性的事件(以下称为“突发的事情”)。突发的事情是长度可变的事态，例如由演出者进行的即兴表演(即兴演出)是典型例。在发生了突发的事情的情况下，管理者通过针对传送装置10的输入装置16的操作而指示音响信号X的播放的停止，在突发的事情结束的阶段指示音响信号X的播放的恢复。传送装置10的控制装置21与来自管理者的指示相应地将音响信号X的播放停止及恢复。如通过以上的说明理解那样，在发生了突发的事情的情况下，台词Ln的播放的进行(以下称为“台词进行”)停止。因此，为了在与台词进行并行的适当的时刻显示相关信息Rn，对突发的事情的发生(台词进行的停止)进行检测，对之后的各台词Ln的预定时刻Pn进行确定是重要的。
考虑以上的事情，图5的停止判定部48判定台词进行是否停止(即，有无突发的事情)。参照图3如前述所示，传送装置10随着各台词Ln的播放而发送该台词Ln的识别信息Dn。因此，在演出按照预定进行的状况(没有发生突发的事情的状况)下，期待在各台词Ln的预定时刻Pn的附近的时刻由信息接收部50对该台词Ln的识别信息Dn进行接收。另一方面，在台词进行停止的状况下，无法在各台词Ln的预定时刻Pn的附近的时刻由信息接收部50对识别信息Dn进行接收。
考虑以上的倾向，第1实施方式的停止判定部48，对应于在时刻确定部44针对每个台词Ln而确定的预定时刻Pn的附近是否由信息接收部50接收到该台词Ln的识别信息Dn，判定台词进行是否停止。具体地说，停止判定部48如图4例示所示，在包含各台词Ln的预定时刻Pn的规定长度的期间(以下称为“判定期间”)W内信息接收部50接收到该台词Ln的识别信息Dn的情况下判定为台词进行没有停止，在判定期间W内信息接收部50没有接收到识别信息Dn的情况下判定为台词进行停止。
在停止判定部48判定为台词进行没有停止的情况下，如前述所述，时刻确定部44对预定时刻Pn依次确定的动作和播放控制部46对相关信息Rn的显示依次更新的动作继续地执行。另一方面，在停止判定部48判定为台词进行停止的情况下，通过时刻确定部44实现的预定时刻Pn的确定(计时值C的增加)和通过播放控制部46实现的相关信息Rn的显示的更新进行等待。下面对台词进行发生停止的情况下的动作的具体例进行说明。
图7是在1个台词组Gm内在相互前后的2个台词L(Ln及Ln+1)之间发生了突发的事情E，其结果，在台词Ln+1的紧跟前，台词进行停止的情况下的动作的说明图。具体地说，在台词组G1的台词L2和台词L3之间发生了突发的事情E，其结果，台词L3延迟的情况在图7中例示出。
停止判定部48对在将由时刻确定部44确定出的预定时刻P3作为起点的判定期间W内信息接收部50是否接收到台词L3的识别信息D3进行判定。如图7例示所示，在预定时刻P3发生了突发的事情E，因此在判定期间W内没有执行识别信息D3的发送及接收。因此，停止判定部48判定为台词进行停止(图7的“NG”)。在该情况下，通过时刻确定部44实现的计时值C的计数(预定时刻P4的确定)和通过播放控制部46实现的显示的更新进行等待。
如果突发的事情E结束，则通过传送装置10实现的音响信号X的播放(识别信息Dn的发送)被恢复。如图7例示所示，如果由信息接收部50接收到台词进行恢复后的最初的识别信息D3，则将接收到识别信息D3的时刻作为新的预定时刻P3而恢复通过时刻确定部44实现的计时值C的计数。而且，如果从更新后的预定时刻P3起经过时间差Q3、4后的预定时刻P4到来，则时刻确定部44在将计时值C初始化的基础上继续计数，播放控制部46使属于台词组G2的各台词Ln的相关信息Rn(R4及R5)显示于显示装置29。即，台词组G1的各台词Ln的相关信息Rn(R1、R2及R3)的显示，以预定时刻P4的到来为契机，更新为台词组G2的各台词Ln的相关信息Rn(R4及R5)的显示。另一方面，停止判定部48对应于在以预定时刻P4为起点的判定期间W内是否由信息接收部50接收到台词L4的识别信息D4而判定有无台词进行的停止。在停止判定部48判定为台词进行停止的情况下，预定时刻Pn的确定和相关信息Rn的显示的更新进行等待，这一点如前述所述。
此外，在以上的说明中，在台词进行恢复后以预定时刻P4的到来为契机而将台词组G2的各台词Ln的相关信息Rn(R4及R5)显示出，在台词进行恢复后首先对相关信息Rn的显示进行更新的状态下，也能够以预定时刻P4的到来和接收到识别信息D4这两者为条件而对台词组G2的相关信息Rn进行显示。
图8是在相互前后的2个台词组Gm－1及台词组Gm之间(即，台词组Gm的起始的台词Ln的紧跟前)发生了突发的事情E，其结果，在台词组Gm的起始的台词Ln的紧跟前，台词进行停止的情况下的动作的说明图。具体地说，在台词组G1的最后的台词L3和紧跟后面的台词组G2的起始的台词L4之间发生了突发的事情E，其结果，台词L4延迟的情况在图8中例示出。
停止判定部48对在以时刻确定部44确定出的预定时刻P4为起点的判定期间W内信息接收部50是否接收到台词L4的识别信息D4进行判定。如图8例示所示，在预定时刻P4发生了突发的事情E，因此在判定期间W内不执行识别信息D4的发送及接收。因此，停止判定部48判定为台词进行停止(图8的“NG”)。在该情况下，通过时刻确定部44实现的计时值C的计数(预定时刻P5的确定)和通过播放控制部46实现的显示的更新进行等待。
如果突发的事情E结束，则恢复通过传送装置10实现的音响信号X的播放(识别信息Dn的发送)。如图8例示所示，如果由信息接收部50接收到台词进行恢复后的最初的识别信息D4，则时刻确定部44将接收到识别信息D4的时刻作为新的预定时刻P4而从初始值起开始计时值C的计数。另外，以通过信息接收部50实现的识别信息D4的接收为契机，播放控制部46使属于台词组G2的各台词Ln的相关信息Rn(R4及R5)显示于显示装置29。即，以通过时刻确定部44实现的时间差Q3、4的计时(更新前的预定时刻P4的到来)和接收到台词L4的识别信息D4为条件，台词组G1的各台词Ln的相关信息Rn(R1、R2及R3)的显示被更新为台词组G2的各台词Ln的相关信息Rn(R4及R5)的显示。
如通过以上的说明理解那样，播放控制部46在停止判定部48判定为台词进行停止的情况下，等待显示于显示装置29的相关信息Rn的更新，另一方面，在该判定后如果信息接收部50接收到识别信息Dn，则恢复相关信息Rn的更新。突发的事情E发生时的终端装置20的动作例如上所述。
图9是终端装置20的控制装置21执行的处理的流程图。如果开始图9的处理，则时刻确定部44直至预定时刻Pn到来为止进行等待(SA1：NO)。如果预定时刻Pn到来(SA1：YES)，则时刻确定部44在将计时值C初始化为零的基础上开始计时(SA2)，停止判定部48对应于在包含预定时刻Pn的判定期间W内信息接收部50是否接收到台词Ln的识别信息Dn而判定有无台词进行的停止(SA3)。在台词进行没有停止的情况下(SA4：NO)，播放控制部46对由时刻确定部44确定出的预定时刻Pn是否对应于台词组Gm的起始的台词Ln进行判定(SA5)。在台词组Gm的起始的台词Ln的预定时刻Pn(例如图4的预定时刻P4)到来的情况下(SA5：YES)，播放控制部46使属于该台词组Gm的各台词Ln的相关信息Rn显示于显示装置29(SA6)。另一方面，在预定时刻Pn对应于台词组Gm的起始以外的台词Ln的情况下(SA5：NO)，播放控制部46维持现阶段的相关信息Rn的显示。即，如根据图4理解那样，在台词组Gm的起始以外的台词Ln被播放的阶段中，不更新显示装置29的显示。如果执行以上的处理，则转入至等待下一次预定时刻Pn的状态(SA1)。
如以上说明所述，在第1实施方式中，在台词进行没有停止的情况下，以与台词组Gm的起始的台词Ln相对应的预定时刻Pn的到来为契机而对该台词组Gm的各台词Ln的相关信息Rn进行显示。即，不是以接收到识别信息Dn为必要条件，对相关信息Rn的显示进行更新。因此，即使在有可能无法适当地对传送装置10发送出的识别信息Dn进行接收的环境下，也能够以与台词进行并行的方式对各台词Ln的相关信息Rn进行显示。
另一方面，在台词进行停止的情况下(SA4：YES)，时刻确定部44如图7及图8例示出的那样，将计时值C的计时停止(SA7)，直至由信息接收部50接收到传送装置10发送出的识别信息Dn为止进行等待(SA8：NO)。如果信息接收部50接收到识别信息Dn(SA8：YES)，则播放控制部46参照例如信息表格T，由此对信息接收部50接收到的识别信息Dn是否与台词组Gm的起始的台词Ln相对应进行判定(SA9)。在识别信息Dn与台词组Gm的起始以外的台词Ln相对应的情况下(SA9：NO)，即，在台词组Gm的起始以外的台词Ln的紧跟前发生了突发的事情E的情况下，不执行通过播放控制部46实现的相关信息Rn的显示的更新(SA10)。在该情况下，如参照图7说明那样，时刻确定部44将接收到识别信息Dn的时刻作为新的预定时刻Pn而恢复计时值C的计数(SA11)。
在识别信息Dn与台词组Gm的起始的台词Ln相对应的情况下(SA9：YES)，即，在台词组Gm的起始的台词Ln的紧跟前发生了突发的事情E的情况下，播放控制部46参照图8如前述所述，使属于该台词组Gm的多个台词Ln的相关信息Rn显示于显示装置29(SA10)。而且，时刻确定部44将接收到识别信息Dn的时刻作为新的预定时刻Pn而恢复计时值C的计数(SA11)。
如以上说明所述，在第1实施方式中，对应于在预定各台词Ln的发生的预定时刻Pn的附近是否接收到识别信息Dn而判定有无台词进行中的停止，在判定为台词进行停止的情况下播放控制部46等待相关信息Rn的更新。因此，在台词进行恢复后，能够以与台词进行并行的方式对各台词Ln的相关信息Rn进行播放。另外，在第1实施方式中，从台词Ln的预定时刻Pn起经过了在信息表格T中指定出的时间差的时刻，确定为台词Ln+1的预定时刻Pn+1。因此，具有下述优点，即，通过对从各预定时刻Pn起的经过时间(计时值C)进行计数的简便的结构，能够确定各台词Ln的预定时刻Pn。
＜第2实施方式＞
对本发明的第2实施方式进行说明。此外，关于在以下例示的各方式中作用或者功能与第1实施方式相同的要素，沿用在第1实施方式的说明中使用的标号而将各个详细的说明适当地省略。
图10是第2实施方式中的终端装置20的结构图。传送装置10与第1实施方式同样地，与演出的台词进行并行地将各台词Ln的识别信息Dn通过音响通信依次发送。如图10例示所示，第2实施方式中的终端装置20的控制装置21，作为信息提取部42及播放控制部46起作用。信息提取部42与第1实施方式同样地，从由拾音装置25生成的音响信号Y中提取识别信息Dn。因此，第2实施方式的终端装置20的拾音装置25及信息提取部42与第1实施方式同样地，作为能够对从传送装置10依次发送的各台词Ln的识别信息Dn进行接收的信息接收部50起作用。即，针对通过放音装置18实现的台词Ln的每次发声，将该台词Ln的识别信息Dn依次提取。
在第2实施方式的存储装置23所存储的信息表格T中，关于在演出中可能播放的多个台词Ln的各自，对识别信息Dn(D1、D2、D3、…)和相关信息Rn(R1、R2、R3、…)进行登记。播放控制部46从信息表格T对与信息提取部42提取出的识别信息Dn相对应的相关信息Rn进行检索而显示于显示装置29。即，在第2实施方式中，以接收到各台词Ln的识别信息Dn为契机，将该台词Ln的相关信息Rn在显示装置29依次显示。
图11是第2实施方式中的终端装置20的控制装置21执行的处理的流程图。如果开始图11的处理，则播放控制部46直至由信息接收部50接收到识别信息Dn为止进行等待(SB1：NO)。如果信息接收部50接收到识别信息Dn(SB1：YES)，则播放控制部46从信息表格T对与信息接收部50接收到的识别信息Dn相对应的相关信息Rn进行检索而显示于显示装置29(SB2)。
执行以上的动作，其结果，在第2实施方式中，如图12例示所示，以接收到按照时间序列发送的各台词Ln的识别信息Dn为契机而对该台词Ln的相关信息Rn进行显示。另一方面，在例如由于突发的事情E的发生而台词进行停止的情况下，通过传送装置10实现的识别信息Dn的发送进行等待。因此，如图13例示所示，在第2实施方式中，在台词进行恢复后，也能够以与台词进行并行的方式对各台词Ln的相关信息Rn进行播放。
＜变形例＞
以上例示出的各方式能够多样地变形。将具体的变形的方式在以下进行例示。从下面的例示任意地选择出的大于或等于2个方式，在不相互矛盾的范围能够适当地合并。
(1)在前述的各方式中，将相关信息Rn显示于显示装置29，但相关信息Rn的播放方法并不限定于以上的例示。例如，也能够将表示发声出台词Ln的语音的语音信号作为相关信息Rn而针对每个台词Ln存储于存储装置23，将与信息接收部50接收到的识别信息Dn相对应的相关信息Rn表示的语音从扬声器或者耳机等放音装置进行放音。此外，也能够通过利用台词Ln的语音合成而对该台词Ln的语音进行合成。如通过以上的说明理解那样，播放控制部46作为将相关信息Rn在播放装置进行播放的要素而被包括。播放装置包含将相关信息Rn作为图像进行显示的显示装置29及将相关信息Rn所示的语音进行放音的放音装置。
(2)在前述的各方式中，如参照图3说明所述，从台词Ln的播放区间的起始起发送识别信息Dn，但台词Ln的播放区间和识别信息Dn的发送的时刻之间的关系并不限定于以上的例示。例如，也能够在台词Ln的播放区间的开始前的时刻开始识别信息Dn的发送。根据以上的结构，能够在预定时刻Pn的紧跟前的时刻判定有无台词进行的停止。
具体地说，停止判定部48对应于在从各台词Ln的预定时刻Pn的前方遍及至后方的判定期间W内，信息接收部50是否接收到该台词Ln的识别信息Dn，判定台词进行是否停止。判定期间W例如是以预定时刻Pn为中点的规定长度的期间。根据以上的结构，在台词Ln的播放区间的开始前发送出识别信息Dn的情况下，能够在预定时刻Pn到来前的时刻判定有无台词进行的停止。另一方面，在从台词Ln的播放区间的起始起发送识别信息Dn的结构中，如在前述的各方式中例示出的那样，停止判定部48对在以预定时刻Pn为起点的判定期间W内信息接收部50是否接收到识别信息Dn进行判定。
(3)在前述的各方式中，将表示各台词Ln的文字列作为相关信息Rn进行播放，但相关信息Rn的内容并不限定于以上的例示。例如，也能够采用下述结构，即，将各台词Ln翻译为其他语言后的翻译文的文字列或者语音作为相关信息Rn而播放的结构，或者将对演出进行解说的文字列或者语音作为相关信息Rn而进行播放的结构。
另外，在前述的各方式中，例示出对按照时间序列播放的台词Ln的相关信息Rn进行播放的情况，但利用信息提供系统100的情况并不限定于在前述的各方式中例示出的演出。例如，在将对交通工具(例如电车或者公共汽车)、展示设施(例如博物馆或者美术馆)、或者观光设施等各种设施进行引导的语音以时间序列发声的情况下，也能够利用在前述的各方式中例示出的信息提供系统100。如通过以上的例示理解那样，信息提供系统100作为用于提供将以时间序列发生的多个事件(例如台词Ln或者引导的语音)并行地发送的各事件的相关信息Rn的计算机系统而综合地表现。另外，台词Ln的播放及各种设施的引导，作为以时间序列发生的事件而包括在内，在前述的各方式中例示出的台词组Gm，是对多个事件进行划分的事件组的例示。例如，也能够像对将相同内容以不同的语言(例如日本语和外国语)表达的多个台词Ln进行显示的情况那样，也能够使将多个信息同时或者依次(按照时间序列)进行显示这样的情况包含于一个事件。
(4)在前述的各方式中，对应于在各台词Ln的预定时刻Pn的附近信息接收部50是否接收到识别信息Dn而对有无台词进行的停止进行了判定，但关于各台词组Gm的起始以外的台词Ln，能够省略对识别信息Dn进行发送的结构。例如，也能够将不包含识别信息Dn的控制信号以规定的间隔(例如不与台词Ln同步的任意的周期)从传送装置10进行发送，另一方面，在终端装置20中以该间隔对预定时刻Pn依次进行确定。在以上的结构中，停止判定部48对应于在预定时刻Pn的附近信息接收部50是否接收到控制信号，判定台词进行是否停止。
(5)在前述的各方式中，对含有台词Ln的音响成分和识别信息Dn的音响成分的音响信号X进行播放，但也能够采用在音响信号X中不含有各台词Ln的音响成分的结构。例如，通过将拾音到演出的演出者的语音的语音信号和表示各识别信息Dn的音响成分的音响信号与演出的进行并行地按照实际时间进行混合，从而也能够生成音响信号X而供给至放音装置。另外，在前述的各方式中，将播放台词Ln的放音装置18利用于识别信息Dn的发送，但也能够从与台词Ln播放用的放音装置不同的放音装置向终端装置20发送识别信息Dn。
(6)在前述的各方式中，通过以声波为传送介质的音响通信而将识别信息Dn发送至终端装置20，但用于向终端装置20发送识别信息Dn的通信方式并不限定于音响通信。例如，也能够与通过放音装置18实现的台词Ln的放音同步，通过以电波或者红外线等电磁波为传送介质的无线通信而向终端装置20发送识别信息Dn。如通过以上的例示理解那样，在识别信息Dn的发送中，优选不经由移动体通信网等通信网而是近距离无线通信，以声波为传送介质的音响通信或者以电磁波为传送介质的无线通信例示出近距离无线通信。
(7)在前述的各方式中，将在终端装置20的存储装置23中事先存储的相关信息Rn由播放控制部46选择性地显示于显示装置29，但相关信息Rn的取得目标并不限定于存储装置23。例如，设想到下述结构，即，在对多个相关信息Rn进行保持的管理服务器之间终端装置20经由通信网进行通信。在以上的结构中，播放控制部46将指定了由信息提取部42提取出的识别信息Dn的信息请求发送至管理服务器，管理服务器对与由信息请求指定出的识别信息Dn相对应的相关信息Rn进行检索而发送至请求源的终端装置20。终端装置20的播放控制部46将从管理服务器接收到的相关信息Rn显示于显示装置29。
(8)在前述的各方式中例示出的终端装置20，如前述所述，是通过控制装置21和程序的协同动作而实现的。第1实施方式的程序是使计算机作为下述部分起作用的程序，即：信息接收部50，其能够对与多个台词Ln的发生并行地依次发送的各台词Ln的识别信息Dn进行接收；时刻确定部44，其对预定多个台词Ln各自的发生的预定时刻Pn依次进行确定；停止判定部48，其对应于在各台词Ln的预定时刻Pn的附近信息接收部50是否接收到该台词Ln的识别信息Dn而判定多个台词Ln的进行是否停止；以及播放控制部46，其关于将多个台词Ln时间性地划分出的多个台词组Gm各自，以与该台词组Gm的起始的台词Ln相对应的预定时刻Pn的到来为契机，使属于该台词组Gm的各台词Ln的相关信息Rn显示于显示装置29，播放控制部46在停止判定部48判定为多个台词Ln的进行停止的情况下，等待显示于显示装置29的相关信息Rn的更新，在该判定后，如果信息接收部50接收到识别信息Dn，则恢复相关信息Rn的更新。第2实施方式的程序使计算机作为下述部分起作用，即：信息接收部50，其能够对与多个台词Ln的发生并行地依次发送的各台词Ln的识别信息Dn进行接收；以及播放控制部46，其将与信息接收部50接收到的识别信息Dn相对应的台词Ln的相关信息Rn显示于显示装置29。
此外，第1实施方式及第2实施方式的程序，能够以储存于计算机可读取的记录介质的方式被提供而安装于计算机。记录介质是例如非易失性(non-transitory)的记录介质，优选是CD-ROM等光学式记录介质(光盘)，但也能够包含半导体记录介质或者磁记录介质等公知的任意形式的记录介质。此外，非易失性的记录介质包含除了非易失性的传输信号(transitory,propagating signal)以外的任意的记录介质，并非除了易失性的记录介质以外。
(9)根据以上例示出的方式，掌握例如下面的结构。
＜方式1＞
本发明的适当的方式(方式1)所涉及的信息处理方法，对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收，将预定所述各事件的发生的预定时刻依次确定，对应于在所述各事件的预定时刻的附近是否接收到该事件的识别信息而判定所述多个事件的进行是否停止，关于将所述多个事件时间性地划分出的多个事件组各自，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，使播放装置播放属于该事件组的所述至少一个事件的相关信息，在判定为所述多个事件的进行停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后接收到识别信息，则恢复所述相关信息的更新。
在上述的方式中，对应于在预定各事件的发生的预定时刻的附近是否接收到识别信息而判定多个事件的进行是否停止，在判定为多个事件的进行停止的情况下，等待相关信息的更新。因此，即使在多个事件的进行停止的情况下，在进行恢复后，也能够以与多个事件并行的方式对各事件的相关信息进行播放。另一方面，在多个事件的进行没有停止的情况下，以与事件组的起始的事件相对应的预定时刻的到来为契机而对该事件组的各事件的相关信息进行播放。即，不以接收到识别信息为必要条件而对相关信息进行更新。因此，即使在有可能无法适当地接收识别信息的环境下，也能够以与多个事件的进行并行的方式对各事件的相关信息进行播放。
＜方式2＞
在方式1的优选例(方式2)中，在所述预定时刻的确定中，对所述多个事件中的第1事件和第2事件之间的时间差进行确定，将从所述第1事件的预定时刻起经过该时间差的时刻确定为所述第2事件的预定时刻。在上述的方式中，将从第1事件的预定时刻起经过第1事件和第2事件的时间差的时刻确定为第2事件的预定时刻，因此具有下述优点，即，能够通过对从各预定时刻起的经过时间进行计时的简便的结构对各事件的预定时刻进行确定。此外，在确定第1事件和第2事件之间的时间差时，例如，使用对相互前后的各事件间的时间差进行指定的信息表格。
＜方式3＞
在方式1或者方式2的优选例(方式3)中，在判定为所述多个事件的进行停止后接收到所述识别信息的情况下，将接收到该识别信息的时刻作为预定时刻而对之后的预定时刻进行确定，在与该识别信息相对应的事件是所述事件组的起始的事件时，以接收到该识别信息为契机而播放该事件组的各事件的相关信息。在上述的方式中，在判定为多个事件的进行停止后接收到识别信息的情况下，将接收到该识别信息的时刻作为预定时刻而对之后的预定时刻进行确定。因此，在多个事件的进行被恢复的情况下，能够将相关信息的更新迅速地恢复。
＜方式4＞
在从方式1至方式3的任意的优选例(方式4)中，所述多个事件各自是由放音装置实现的声音的播放，在所述识别信息的接收中，通过利用所述放音装置的音响通信，接收所述各事件的识别信息。在上述的方式中，在作为事件的声音的播放中使用的放音装置，也沿用于该事件的识别信息的通信。因此，与在识别信息的通信中利用专用的通信机的情况相比较，能够通过简便的结构将识别信息提供至终端装置。
＜方式5＞
在方式1至方式4的任意的优选例(方式5)中，在所述判定中，对在以所述各事件的所述预定时刻为起点的判定期间内是否接收到该事件的识别信息进行判定。上述的方式适合于在事件发生的同时对识别信息进行发送的情况。
＜方式6＞
在从方式1至方式4的任意的优选例(方式6)中，在所述判定中，对在从所述各事件的所述预定时刻的前方遍及至后方的判定期间内是否接收到该事件的识别信息进行判定。以上的方式适合于在事件发生前对识别信息进行发送的情况。
＜方式7＞
本发明的其他方式(方式7)所涉及的终端装置具有：信息接收部，其能够对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收；时刻确定部，其将预定所述各事件的发生的预定时刻依次确定；停止判定部，其对应于在所述各事件的预定时刻的附近所述信息接收部是否接收到该事件的识别信息而判定所述多个事件的进行是否停止；以及播放控制部，其关于将所述多个事件时间性地区分出的多个事件组各自，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，使播放装置播放属于该事件组的所述至少一个事件的相关信息，在所述停止判定部判定为所述多个事件的进行停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后所述信息接收部接收到识别信息，则恢复所述相关信息的更新。
在上述的方式中，对应于在预定各事件的发生的预定时刻的附近是否接收到识别信息而判定多个事件的进行是否停止，在判定为多个事件的进行停止的情况下，相关信息的更新进行等待。因此，即使在多个事件的进行停止的情况下，在恢复事件进行后，也能够以与多个事件并行的方式对各事件的相关信息进行播放。另一方面，在多个事件的进行没有停止的情况下，以与事件组的起始的事件相对应的预定时刻的到来为契机而播放该事件组的各事件的相关信息。即，不以接收到识别信息为必要条件而对相关信息进行更新。因此，即使在有可能无法适当地接收识别信息的环境下，也能够以与多个事件的进行并行的方式对各事件的相关信息进行播放。
＜方式8＞
本发明的其他方式(方式8)所涉及的终端装置具有：信息接收部，其能够对与多个事件的发生并行地依次发送的所述各事件的识别信息进行接收；以及播放控制部，其使播放装置播放与所述信息接收部接收到的识别信息相对应的所述事件的相关信息。在上述的方式中，以接收到与多个事件的发生并行地针对每个事件依次进行发送的识别信息为契机而对相关信息进行播放。因此，即使在多个事件的进行停止的情况下，在事件的进行被恢复后，也能够以与多个事件并行的方式对各事件的相关信息进行播放。
标号的说明
100……信息提供系统，10…传送装置，12、21…控制装置，14、23…存储装置，16、27…输入装置，18…放音装置，20…终端装置，25…拾音装置，29…显示装置，42…信息提取部，44…时刻确定部，46…播放控制部，48…停止判定部，50…信息接收部。

Claims (6)

1.一种信息处理方法，
在信息表格中对与多个事件中的各事件相对应的识别信息和相关信息以及与所述多个事件中的相互前后的每对事件相对应的多个时间差进行登记，将所述多个事件时间性地划分出多个事件组，每个事件组包括至少一个事件，
对与多个事件的发生并行地依次发送的所述各事件的所述识别信息进行接收，
通过所述信息表格对所述多个事件中的第1事件和第2事件之间的时间差进行确定，将从所述第1事件的预定时刻起经过该时间差的时刻确定为所述第2事件的预定时刻，将预定所述各事件的发生的预定时刻依次确定，
针对每个事件，在包含与所述各事件相对应的预定时刻的判定期间内没有接收到与该事件相对应的所述识别信息的情况下，判定为所述多个事件的进行已停止，
针对所述多个事件组中的每个事件组，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，使播放装置播放与属于该事件组的所述至少一个事件相关的所述相关信息，关于属于该事件组的所述至少一个事件中的起始的事件在所确定的所述预定时刻到来时对所述相关信息进行更新，
在判定为所述多个事件的进行已停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后接收到识别信息，则恢复使所述播放装置播放的所述相关信息的更新。
2.根据权利要求1所述的信息处理方法，其中，
在判定为所述多个事件的进行已停止后接收到所述多个事件的任意的识别信息的情况下，将接收到该识别信息的时刻作为预定时刻而对之后的预定时刻进行确定，在与该识别信息相对应的事件是所述事件组的起始的事件时，以接收到该识别信息为契机而播放该事件组的至少一个事件的相关信息。
3.根据权利要求1或2所述的信息处理方法，其中，
所述多个事件各自是由放音装置实现的声音的播放，
在所述识别信息的接收中，通过利用所述放音装置的音响通信，接收所述各事件的识别信息。
4.根据权利要求1或2所述的信息处理方法，其中，
在所述判定中，对在以所述各事件的所述预定时刻为起点的判定期间内是否接收到该事件的识别信息进行判定。
5.根据权利要求1或2所述的信息处理方法，其中，
在所述判定中，对在从所述各事件的所述预定时刻的前方遍及至后方的判定期间内是否接收到该事件的识别信息进行判定。
6.一种终端装置，其具有：
存储装置，其存储有信息表格，在该信息表格中对与多个事件中的各事件相对应的识别信息和相关信息以及与所述多个事件中的相互前后的每对事件相对应的多个时间差进行登记，将所述多个事件时间性地划分出多个事件组，每个事件组包括至少一个事件，
信息接收部，其能够对与多个事件的发生并行地依次发送的所述各事件的所述识别信息进行接收；
时刻确定部，其通过所述信息表格对所述多个事件中的第1事件和第2事件之间的时间差进行确定，将从所述第1事件的预定时刻起经过该时间差的时刻确定为所述第2事件的预定时刻，将预定所述各事件的发生的预定时刻依次确定；
停止判定部，其针对每个事件，在包含与所述各事件相对应的预定时刻的判定期间内所述信息接收部没有接收到与该事件相对应的所述识别信息的情况下，判定为所述多个事件的进行已停止；以及
播放控制部，其针对所述多个事件组中的每个事件组，以与属于该事件组的至少一个事件中的起始的事件相对应的预定时刻的到来为契机，使播放装置播放与属于该事件组的所述至少一个事件相关的所述相关信息，关于属于该事件组的所述至少一个事件中的起始的事件在所确定的所述预定时刻到来时对所述相关信息进行更新，在所述停止判定部判定为所述多个事件的进行已停止的情况下，等待使所述播放装置播放的相关信息的更新，如果在该判定后所述信息接收部接收到识别信息，则恢复使所述播放装置播放的所述相关信息的更新。
CN201780022600.XA 2016-04-25 2017-04-17 信息处理方法及终端装置 Active CN109074328B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-086936 2016-04-25
JP2016086936A JP6866071B2 (ja) 2016-04-25 2016-04-25 端末装置、端末装置の動作方法およびプログラム
PCT/JP2017/015429 WO2017188038A1 (ja) 2016-04-25 2017-04-17 情報処理方法および端末装置

Publications (2)

Publication Number Publication Date
CN109074328A CN109074328A (zh) 2018-12-21
CN109074328B true CN109074328B (zh) 2021-08-10

Family

ID=60161382

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780022600.XA Active CN109074328B (zh) 2016-04-25 2017-04-17 信息处理方法及终端装置

Country Status (5)

Country Link
US (1) US10846150B2 (zh)
EP (1) EP3451177A4 (zh)
JP (1) JP6866071B2 (zh)
CN (1) CN109074328B (zh)
WO (1) WO2017188038A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6557886B1 (ja) * 2018-02-23 2019-08-14 エヴィクサー株式会社 コンテンツ再生プログラム、コンテンツ再生方法及びコンテンツ再生システム
JP6986036B2 (ja) * 2018-02-23 2021-12-22 エヴィクサー株式会社 コンテンツ再生プログラム、コンテンツ再生方法及びコンテンツ再生システム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050227614A1 (en) * 2001-12-24 2005-10-13 Hosking Ian M Captioning system
JP2007236711A (ja) * 2006-03-09 2007-09-20 Nec Corp 情報配信システム及び情報配信方法
CN104104986A (zh) * 2014-07-29 2014-10-15 小米科技有限责任公司 音频与字幕的同步方法和装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2129925A1 (en) * 1994-08-11 1996-02-12 Hendrik Adolf Eldert Zwaneveld Audio synchronization of subtitles
US6785539B2 (en) * 2001-12-05 2004-08-31 Disney Enterprises, Inc. System and method of wirelessly triggering portable devices
JP2004229706A (ja) * 2003-01-28 2004-08-19 Takuya Miyagawa 演劇通訳システム、演劇通訳装置
JP2007065928A (ja) * 2005-08-30 2007-03-15 Toshiba Corp 情報記憶媒体、情報処理方法、情報転送方法、情報再生方法、情報再生装置、情報記録方法、情報記録装置、及びプログラム
WO2007008589A2 (en) * 2005-07-08 2007-01-18 Seiji Kashioka Total timing control system for theater
US7716043B2 (en) * 2005-10-24 2010-05-11 Lg Electronics Inc. Removing time delays in signal paths
WO2013179535A1 (ja) * 2012-05-28 2013-12-05 Ｚｉｍａｋｕプラス株式会社 付加情報表示システム
JP5887446B1 (ja) 2014-07-29 2016-03-16 ヤマハ株式会社 情報管理システム、情報管理方法およびプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050227614A1 (en) * 2001-12-24 2005-10-13 Hosking Ian M Captioning system
JP2007236711A (ja) * 2006-03-09 2007-09-20 Nec Corp 情報配信システム及び情報配信方法
CN104104986A (zh) * 2014-07-29 2014-10-15 小米科技有限责任公司 音频与字幕的同步方法和装置

Also Published As

Publication number Publication date
JP2017199951A (ja) 2017-11-02
US10846150B2 (en) 2020-11-24
EP3451177A1 (en) 2019-03-06
CN109074328A (zh) 2018-12-21
JP6866071B2 (ja) 2021-04-28
EP3451177A4 (en) 2019-12-25
WO2017188038A1 (ja) 2017-11-02
US20190056980A1 (en) 2019-02-21

Similar Documents

Publication Publication Date Title
KR101796429B1 (ko) 단말 디바이스, 정보 제공 시스템, 정보 제시 방법, 및 정보 제공 방법
EP1989879B1 (en) Interactive services
JP5887446B1 (ja) 情報管理システム、情報管理方法およびプログラム
JP2016075956A (ja) 端末装置および情報提供システム
CN104010226A (zh) 基于音频的多终端互动播放的方法和系统
CN109074328B (zh) 信息处理方法及终端装置
JP2014187490A (ja) 放送受信装置及び端末装置
WO2018008383A1 (ja) 端末装置、情報再生方法、及びプログラム
JP6654718B2 (ja) 音声認識装置、音声認識方法及び音声認識プログラム
US10764631B2 (en) Synchronizing audio of a secondary-language audio track
US20170255615A1 (en) Information transmission device, information transmission method, guide system, and communication system
CN107209901B (zh) 信息提供系统、信息提供方法以及管理装置
JP6866948B2 (ja) 端末装置、端末装置の動作方法、およびプログラム
JP6930639B2 (ja) 端末装置、端末装置の動作方法およびプログラム
JP6766981B2 (ja) 放送システム、端末装置、放送方法、端末装置の動作方法、および、プログラム
JP7087745B2 (ja) 端末装置、情報提供システム、端末装置の動作方法および情報提供方法
JP2013126079A (ja) テレビジョン装置、情報処理方法、およびプログラム。
WO2020246205A1 (ja) プログラム、端末装置および端末装置の動作方法
JP6569629B2 (ja) 情報送信装置、情報送信方法およびプログラム
CN114257324A (zh) 用于无缝媒体同步和切换的方法和系统
WO2017130794A1 (ja) 情報処理装置、情報処理方法、情報管理装置および情報管理方法
CN112889298A (zh) 信息提供方法、信息提供系统、信息处理方法以及程序

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant