CN106537496B - 终端装置、信息提供系统、信息呈现方法和信息提供方法 - Google Patents

终端装置、信息提供系统、信息呈现方法和信息提供方法 Download PDF

Info

Publication number
CN106537496B
CN106537496B CN201580040538.8A CN201580040538A CN106537496B CN 106537496 B CN106537496 B CN 106537496B CN 201580040538 A CN201580040538 A CN 201580040538A CN 106537496 B CN106537496 B CN 106537496B
Authority
CN
China
Prior art keywords
information
sound
language
audio signal
piece
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580040538.8A
Other languages
English (en)
Other versions
CN106537496A (zh
Inventor
森口翔太
岩田贵裕
濑户优树
岩濑裕之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=55217478&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN106537496(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Yamaha Corp filed Critical Yamaha Corp
Publication of CN106537496A publication Critical patent/CN106537496A/zh
Application granted granted Critical
Publication of CN106537496B publication Critical patent/CN106537496B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/42—Data-driven translation
    • G06F40/47—Machine-assisted translation, e.g. using translation memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/263—Language identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/018—Audio watermarking, i.e. embedding inaudible data in the audio signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/487—Arrangements for providing information services, e.g. recorded voice services or time announcements

Abstract

一种终端装置，包括：声音接收装置，其接收根据音频信号发射的声音并且产生接收的音频信号，该音频信号包括表示导览语音的音频信号并且包括调制的信号，该调制的信号包括所述导览语音的识别信息；信息提取器，其从所述声音接收装置产生的所述接收的音频信号中提取所述识别信息；发射器，其发送信息请求，该信息请求包括所述信息提取器所提取的识别信息；获取器，其从对应于多条不同识别信息的多条相关信息中获取与信息请求中的识别信息对应的一条相关信息；和输出装置，其输出所述获取器获取到的所述一条相关信息。

Description

终端装置、信息提供系统、信息呈现方法和信息提供方法
技术领域
本发明涉及用于向终端装置的用户提供信息的技术。
背景技术
已提出各种技术来充当为展览设施(比如美术馆和博物馆)中的访客进行的导览。例如，专利文献1公开了一种自动再现语音导览系统，其利用放置在美术馆或博物馆中的展览品附近的发送装置和访客携带的便携式接收器。发送装置通过无线电波或红外线间歇性地将展览品唯一的识别码发送到其周围环境。便携式接收器从预先存储在其存储介质中的各导览语音中再现与接收自发送装置的识别码对应的导览语音。根据专利文献1，在便携式接收器在(展览品附近的)一个范围(在该范围中来自发送装置的无线电波或红外线到达便携式接收器)内移动并接收到识别码之后，对描述该范围内的展览品的导览语音进行再现。
现有技术文献
专利文献
专利文献1：日本专利申请公开第2011-109629号
发明内容
本发明要解决的问题
但是，专利文献1中公开的技术具有如下缺点：因为通过无线电波或红外线来发送每个展览品的识别码，因此需要将发送或接收无线电波或红外线的专用通信设备附加至每个发送装置和每个便携式接收器。在以上描述中，给出诸如美术馆和博物馆之类的展览设施作为示例。但是，在向用户提供各种信息的任何场合中(比如，在例如火车或公交车等的交通系统中的语音导览的情况下)都会存在与上述关于需要专用通信设备的问题相类似的问题。鉴于所述问题，本发明的目的在于使得能够向用户提供各种信息，且无需专用于无线通信的通信设备。
解决问题的方案
为了解决所述问题，根据本发明的第一模式的终端装置包括：声音接收装置，其构造为接收根据音频信号发射的声音以产生接收的音频信号，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；信息提取装置，其构造为从所述声音接收装置产生的所述接收的音频信号中提取所述识别信息；发送装置，其构造为向所述信息提供装置发送信息请求，该信息请求包括所述信息提取装置所提取的识别信息；获取装置，其构造为从所述信息提供装置获取多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关；和输出装置，其构造为输出所述获取装置获取到的所述一条相关信息。在以上构造中，从接收的音频信号中提取识别信息，所述接收的音频信号从根据音频信号发射并随后被接收的声音导出，所述音频信号包括表示用于再现的声音的音频信号以及调制的信号，该调制的信号包括所述用于再现的声音的识别信息。换言之，通过利用了连同所述用于再现的声音一起发射的声音的声音通信来向终端装置通知识别信息。因此，终端装置的用于语音呼叫和记录声音的声音接收装置可被用于获取识别信息，并且因此，可以向用户提供与用于再现的声音的识别信息对应的相关信息而无需专用于使用红外线或无线电波的无线通信的通信设备。
在本发明的优选模式中，所述发送装置发送包括语言信息的信息请求，所述语言信息指示所述终端装置中指定的语言；并且，所述获取装置获取所述信息请求中的语言信息所指定的语言的一条相关信息，该一条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。在以上模式中，从不同语言的多条相关信息中，获取信息请求中的语言信息所指定的语言的一条相关信息。结果，获得了这样的优点：可以向使用他们各自语言的各种用户中的每一个用户提供该用户可理解的语言的相关信息。此外，在使用了用于指示终端装置的OS中的语言设定所指定的语言的语言信息的情况下，获得了用户无需指定语言的优点。替代性地，可以采用其中获取语言信息(其指示了终端装置的用户所指定的语言)所指定的语言的相关信息的构造。
在第一模式中，优选地，所述信息请求中的语言信息所指定的语言的一条相关信息是表示口声的音频信号，该口声是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串的发音声(spoken rendition)，或者，所述信息请求中的语言信息所指定的语言的一条相关信息是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串。因此，即使当终端装置的用户无法理解根据表示用于再现的声音的音频信号而发射的第一语言的语音时，所述终端装置的用户也将能够通过查看第二语言的翻译的字符串或通过聆听第二语言的语音来理解所述用于再现的声音的内容。
优选地，并行于以所述不同语言中的第一语言表示的用于再现的声音的发射(来自声音发射系统的发射)，所述输出装置输出所述信息请求中的语言信息所指定的语言的一条相关信息,所述语言为不同于所述第一语言的语言。在该模式中，因为与第一语言表示的用于再现的声音的发射并行地输出不同于第一语言的语言的相关信息，因此与在对应于相关信息的用于再现的声音的语音的再现之后输出相关信息的构造相比，例如，获得了用户能够容易地辨别用于再现的声音与相关信息之间的关联性的优点。
根据本发明的第二模式的信息提供系统包括：声音发射装置，其构造为根据音频信号发射声音，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；和信息提供装置，其构造为从终端装置接收信息请求，该信息请求包括从所述声音发射装置发射的声音中提取的所述识别信息，并且所述信息提供装置构造为向所述终端装置发送多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关。在以上构造中，声音发射装置根据音频信号发射声音，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息。换言之，通过利用了连同所述用于再现的声音一起发射的声音的声音通信来向终端装置通知识别信息。因此，可以向用户提供与用于再现的声音的识别信息对应的相关信息而无需专用于例如使用红外线或无线电波的无线通信的通信设备。
在第二模式的优选示例中，信息提供装置接收包括语言信息的信息请求，所述语言信息指示所述终端装置中指定的语言，并且所述信息提供装置向所述终端装置发送所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。在该模式中，因为发送了信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言的多条相关信息中的一条相关信息，因此，获得了这样的优点：可以向使用他们各自语言的各种用户中的每一个用户提供该用户可理解的语言的相关信息。
优选地，所述信息请求中的语言信息所指定的语言的一条相关信息是表示口声的音频信号，该口声是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串的发音声，或者，所述信息请求中的语言信息所指定的语言的一条相关信息是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串。
本发明可以理解为根据上述每种模式的在终端装置中执行的操作方法(信息呈现方法)或操作方法(信息提供方法)。
更具体地，根据本发明，终端装置中的信息呈现方法包括：接收根据音频信号发射的声音以产生接收的音频信号，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；从所述接收的音频信号中提取所述识别信息；向信息提供装置发送包括所述识别信息的信息请求；从所述信息提供装置获取多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关；和输出所述一条相关信息。
优选地，在该信息呈现方法中，所述信息请求包括语言信息，所述语言信息指示所述终端装置中指定的语言；并且，在获取时，获取所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
根据本发明的信息提供方法包括：根据音频信号发射声音，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；和从终端装置接收包括从所发射的声音中提取的所述识别信息的信息请求，并且向所述终端装置发送多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关。
优选地，在该信息提供方法中，所述信息请求包括语言信息，所述语言信息指示所述终端装置中指定的语言；并且，在发送时，向所述终端装置发送所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
根据上述它们各自模式的终端装置和信息提供系统均可以通过使用专用电路或通过通用处理装置(比如中央处理单元(CPU))和协作程序来实现。根据本发明的计算机程序可以以存储有程序的计算机可读存储介质的形式来提供，并且可安装在计算机中。更具体地，根据本发明的计算机可读存储介质存储有使得计算机执行以下处理的程序：声音接收处理，其接收根据音频信号发射的声音以产生接收的音频信号，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；信息提取处理，其从所述声音接收处理产生的所述接收的音频信号中提取所述识别信息；发送处理，其向信息提供装置发送信息请求，该信息请求包括通过所述信息提取处理提取的识别信息；获取处理，其从所述信息提供装置获取多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关；和输出处理，其输出通过所述获取处理获取到的所述一条相关信息。
优选地，所述信息请求包括语言信息，所述语言信息指示所述终端装置中指定的语言；并且，所述获取处理获取所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
根据其各自模式的信息呈现方法、信息提供方法、用于信息呈现方法和信息提供方法的程序以及存储有这些程序的计算机可读存储介质均将实现与根据上述每种模式的终端装置和信息提供系统所实现的有利效果类似的有利效果。
附图说明
图1是示出根据本发明的第一实施例的通信系统的构造的示图。
图2是示出信息管理系统的构造的示图。
图3是示出音频信号获取器和相关信息获取器的构造的示图。
图4是示出信号处理器的构造的示图。
图5是示出信号处理器的操作的示图。
图6是示出信息管理系统的操作的流程图。
图7是示出声音发射系统的构造的示图。
图8是示出终端装置的构造的示图。
图9是示出获取相关信息时终端装置的操作的示图。
图10是示出音频信号获取器和相关信息获取器的修改例(模式1)的构造的示图。
图11是示出音频信号获取器和相关信息获取器的修改例(模式2)的构造的示图。
图12是示出音频信号获取器和相关信息获取器的修改例(模式3)的构造的示图。
图13是示出音频信号获取器和相关信息获取器的修改例(模式4)的构造的示图。
图14是示出音频信号获取器和相关信息获取器的修改例(模式5)的构造的示图。
图15是示出音频信号获取器和相关信息获取器的修改例(模式6)的构造的示图。
图16是示出音频信号获取器和相关信息获取器的修改例(模式7)的构造的示图。
图17是示出音频信号获取器和相关信息获取器的修改例(模式7)的进一步修改的构造的示图。
图18是示出音频信号获取器和相关信息获取器的修改例(模式7)的进一步修改的构造的示图。
图19是示出音频信号获取器和相关信息获取器的修改例(模式7)的进一步修改的构造的示图。
图20是示出音频信号获取器和相关信息获取器的修改例(模式8)的构造的示图。
图21是示出音频信号获取器和相关信息获取器的修改例(模式8)的进一步修改的构造的示图。
图22是示出音频信号获取器和相关信息获取器的修改例(模式8)的进一步修改的构造的示图。
图23是示出根据第二实施例的信号处理器的操作的示图。
图24是示出根据第三实施例的信息提供器的操作的示图。
图25示出了根据一个修改例的相关信息的显示示例。
图26是示出根据一个修改例的通信系统的构造的示图。
具体实施方式
第一实施例
图1是示出根据本发明的第一实施例的通信系统100的构造的示图。如图1的示例中所示，第一实施例的通信系统100包括信息提供系统10和终端装置12。信息提供系统10是计算机系统，其向终端装置12提供各种信息。终端装置12是便携式信息处理装置，比如移动电话或智能电话。在以下描述中，假设终端装置12的用户出现在展示比如艺术品和文献之类的展览品的比如美术馆或博物馆之类的设施(下文称作“展览设施”)M中，并且假设从信息提供系统10向终端装置12提供与各展览品有关的信息。在图1中，为了简要示出了单个终端装置12。但是，在现实中，信息提供系统10可以向多个终端装置12中的每一个提供信息。
如图1的示例中所示，第一实施例的信息提供系统10包括信息管理系统14和声音发射系统16。声音发射系统16安装在展览设施M中，用于设施中的语音导览。具体地，如图1的示例中所示，第一实施例的声音发射系统16发射特定语言(下文称作“第一语言”)的用于为用户导览的语音(下文称作“导览语音V”)，并向终端装置12通知预先分配给导览语音V的识别信息D。例如，导览语音V是提供展览品的说明的声音，或者是提供展览设施M的音频导览的声音。通过无线信息通信将导览语音V的识别信息D通知给终端装置12。在第一实施例中，描述了其中通过声音通信(其中声音(声波)，即，空气的振动，被用作传输介质)从声音发射系统16向终端装置12通知识别信息D的示例。即，识别信息D作为声音与导览语音V一起从声音发射系统16发射。
信息管理系统14是计算机系统，其管理提供至终端装置12的信息。终端装置12能够经由通信网络18(包括移动通信网络、互联网等)与信息管理系统14进行通信。如图1的示例中所示，终端装置12向信息管理系统14发送信息请求R，该信息请求R包括声音发射系统16所通知的识别信息D。信息管理系统14向请求源终端装置12发送相关信息Q，该相关信息Q与经由通信网络18接收到的信息请求R中所指定的识别信息D相对应。相关信息Q是与导览语音V有关的信息。在第一实施例中，终端装置12被提供有指示翻译的相关信息Q，在该翻译中，作为第一语言的导览语音V发音的导览已经被翻译成另一语言(下文称作“第二语言”)。因此，能够理解第一语言的用户将能够通过聆听导览语音V理解用于展览设施M的导览，而能够理解第二语言的用户将能够通过参考相关信息Q理解用于展览设施M的导览。以下提供关于以上简要描述的通信系统100的各元件的具体构造和功能的细节。
信息管理系统14
图2是示出信息管理系统14的构造的示图。如图2的示例中所示，第一实施例的信息管理系统14包括控制装置142、存储装置144、输入装置146和显示装置148。存储装置144存储由控制装置142使用的各种数据，并且还存储由控制装置142执行的程序。任何公知存储介质(例如半导体存储介质或磁存储介质)或不同类型存储介质的组合可用于存储装置144。输入装置146是操作信息管理系统14的管理员操作来向信息管理系统14提供各种指令的操作设备。输入装置146包括例如管理员可操作的操作单元。例如，通过适当地操作输入装置146，管理员可以提供关于包含展览设施M中的各展览品的导览的字符串(下文称作“指定字符串ST”)的指令。显示装置148是在控制装置142的控制下显示各种信息(比如语音识别的结果和机器翻译的结果)的装置(例如，液晶显示面板)。这里，可以采用输入装置146和显示装置148一体形成的触摸面板。
如图2的示例中所示，控制装置142可以为中央处理单元(CPU)，并且通过与存储装置144中存储的程序进行协作来实现信息管理系统14的功能。即，通过执行存储在存储装置144中的程序，控制装置142实现各种功能(音频信号获取器22、相关信息获取器24、识别信息设置器26、信号处理器32、关联管理器34和信息提供器36)以管理要提供至终端装置12的信息。可以采用其中控制装置142的各功能在多个装置中分布的构造。额外地或替代性地，可以采用使得控制装置142的部分功能由专用电子电路执行的构造。
音频信号获取器22获取表示导览语音V的音频信号SG。如图3的示例中所示，第一实施例的音频信号获取器22通过语音合成产生表示导览语音V的时间波形的音频信号SG，导览语音V是第一语言的、由管理员经由输入装置146的操作而指定的指定字符串ST的发音声。任何公知技术可用于音频信号获取器22所执行的语音合成。例如，音频信号获取器22可以通过例如单元拼接型语音合成(其通过从预先准备的语音单元(音素或音素链)中按照时间顺序对与指定字符串ST中的字符相对应的语音单元进行拼接来产生音频信号SG)或通过基于统计模型的语音合成(其通过利用统计模型(比如隐马可夫模型(HMM))产生对应于指定字符串ST的音频信号SG)来产生音频信号SG。在本实施例中，由于通过语音合成来产生指示导览语音V的音频信号SG，因此可以获得无需提前记录导览语音V的优点。
图2中的相关信息获取器24产生与导览语音V有关的相关信息Q。如图3的示例中所示，通过对第一语言的、管理员指定的指定字符串ST进行机器翻译(自动翻译),第一实施例的相关信息获取器24产生表示展览设施M的导览的第二语言的字符串(下文称作“翻译的字符串CT”)。任何公知技术可以用于对指定字符串ST进行机器翻译。相关信息获取器24可以通过利用例如基于规则的机器翻译(其中基于对指定字符串ST进行语法分析的结果和语言规则来转换词汇顺序和各词汇)或通过统计机器翻译(其中利用表示了语言的统计学趋势的统计模型(翻译模型和语言模型)来将指定字符串ST翻译为第二语言)来产生相关信息Q。在本实施例中，由于通过对指示导览语音V的发音内容的字符串进行机器翻译(即，通过对指定字符串ST进行机器翻译)来产生相关信息Q，因此，获得了无需预先准备与导览语音V的语言不同的语言的相关信息Q的优点。
图2的识别信息设置器26对将与导览语音V的再现一起从声音发射系统16通知给终端装置12的识别信息D进行分配。识别信息D包括用于识别导览语音V的唯一码，并且被分配给每个导览语音V。例如，识别信息设置器26将通过公知技术产生的一系列随机数字作为识别信息D分配给导览语音V，使得所述一系列随机数字不会与针对不同导览语音V的另一系列随机数字重叠。
信号处理器32通过将识别信息设置器26分配的识别信息D与导览语音V的音频信号SG进行合成来产生音频信号S。任何公知技术(例如，音频水印)可以用于识别信息D与音频信号SG的合成。例如，优选地使用WO 2010/016589中描述的技术。具体地，如图4的示例中所示，信号处理器32包括解调处理器322和混合处理器324。通过利用扩频码对识别信息D顺序地执行扩频调制并通过利用特定频率的载波执行频率变换，解调处理器322产生包括作为该特定频带的声音分量的识别信息D的音频信号(下文称作“调制的信号”)SD。调制的信号SD的频带是其中声音发射系统16可以发射声音并且其中终端装置12可以接收声音的频带，并且处于比正常环境中用户可听到的声音(比如语音或乐音)的频带(例如，可听频带中的16kHz或更低)更高的频带范围(例如，18kHz或更高且20kHz或更低)内。解调处理器322产生调制的信号SD的方式不限于上述示例(扩频调制)。例如，可以通过将特定频率的载波(例如正弦波)与识别信息D进行频率调制来产生指定频带(例如，18kHz或更高且20kHz或更低)中的调制的信号SD。
图4中的混合处理器324通过将音频信号获取器22获取的音频信号SG与解调处理器322产生的调制的信号SD叠加(通常是相加)来产生音频信号S。从以上描述中可以理解，音频信号S包括导览语音V的声音分量(音频信号SG)和包括导览语音V的识别信息D的声音分量(调制的信号SD)。
图5是描述导览语音V的音频信号SG与包括识别信息D的调制的信号SD之间的时间关系的示图。如图5的示例中所示，包括导览语音V的识别信息D的调制的信号SD被多次地重复添加至导览语音V的音频信号SG中的沿时间轴的不同部分。即，导览语音V的识别信息D的声音分量沿时间轴在导览语音V中的多个点处混合。这里，调制的信号SD可以按照连续方式沿时间轴彼此连接。
第一实施例的信号处理器32以特定格式(例如，WAV格式或MP3格式)将音频信号S作为音频文件存储在存储装置144中。通过重复该处理多次，对于具有不同导览内容的导览语音V(针对不同展览品来提供导览的导览语音V)中的每一个，在存储装置144中存储音频信号S，其包括：导览语音V的声音分量(音频信号SG)和包括导览语音V的识别信息D的声音分量(调制的信号SD)。
图2的关联管理器34将通过识别信息设置器26分配给每个导览语音V的识别信息D与通过相关信息获取器24针对导览语音V而获取的相关信息Q相关联，并且将识别信息D与相关信息Q存储在存储装置144中。因此，如图2的示例中所示，针对相应导览语音V的每条识别信息D，在存储装置144中存储一条相关信息Q。从以上描述中将理解到，针对展览设施M中发射的每个导览语音V，产生音频信号S和一条相关信息Q。换言之，各自对应于共同的导览语音V的音频信号SG(音频信号S)和一条相关信息Q通过对应的一条识别信息D而彼此相关联。虽然图2中示出了在存储装置144中存储各音频信号S和各条相关信息Q的示例构造，但是各音频信号S和各条相关信息Q可以存储在分离的存储介质中。替代性地，可以采用其中将连接至信息管理系统14并能够与信息管理系统14交换数据的至少一个外部装置用作存储各音频信号S和各条相关信息Q的存储装置的构造。
图2中的信息提供器36从终端装置12接收包括一条识别信息D的信息请求R，并且从存储在存储装置144中的多条相关信息Q中选择与信息请求R中指定的所述一条识别信息D相对应的一条相关信息Q，以将所选择的该条相关信息Q发送至请求源终端装置12。稍后描述向终端装置12发送相关信息Q。
图6是信息管理系统14产生音频信号S和相关信息Q的处理(下文称作“信息产生处理”)的流程图。例如，图6中示出的信息产生处理在管理员对输入装置146进行操作之后(具体地，在管理员对指定字符串ST进行指定之后)启动。在启动信息产生处理之后，控制装置142(音频信号获取器22和相关信息获取器24)获取与指定字符串ST对应的导览语音V的音频信号SG和与该导览语音V有关的相关信息Q(SA1)。控制装置142(识别信息设置器26)为导览语音V分配识别信息D(SA2)。控制装置142(信号处理器32)产生音频信号S，并且将所产生的音频信号S存储在存储装置144中(SA3)，在该音频信号S中，包括导览语音V的识别信息D的调制的信号SD叠加在导览语音V的音频信号SG上。控制装置142(关联管理器34)将针对导览语音V的相关信息Q与识别信息D相关联，并且将它们存储在存储装置144中(SA4)。
在如上作为示例描述的信息产生处理中由信息管理系统14产生的音频信号S(音频文件)被传输至图1中所示的声音发射系统16。传输音频信号S的方式可以自由选择。例如，音频信号S可以经由通信网络18从信息管理系统14传输至声音发射系统16，或者音频信号S可以经由便携式存储介质(比如半导体存储介质)从信息管理系统14传输至声音发射系统16。
声音发射系统16
图7是声音发射系统16的构造示图。如图7的示例中所示，第一实施例的声音发射系统16包括控制装置162、存储装置164和声音发射装置166。存储装置164是公知的存储介质，比如半导体存储介质或磁存储介质，或者是不同类型存储介质的组合。在存储装置164中，存储有从信息管理系统14传输的各音频信号S。
控制装置162控制声音发射系统16中的各元件。第一实施例的控制装置162为声音发射装置166提供存储装置164中存储的音频信号S。声音发射装置166各自放置在展览设施M的不同展览品中的对应一个的附近。放置在展览品附近的声音发射装置166被提供有与该展览品的导览语音V相对应的音频信号S。每个声音发射装置166是根据从控制装置162提供的音频信号S发射声音的音频装置。为了简要起见省略了将音频信号S从数字格式转换为模拟格式的D/A转换器的图示。
如上参照图4和图5所述，音频信号S包括表示导览语音V的音频信号SG和包括导览语音V的识别信息D的调制的信号SD。因此，与一个展览品相对应的声音发射装置166发射表示该展览品的导览语音V的声音。如图5的示例中所示，针对识别信息D的调制的信号SD被多次地重复添加至音频信号SG。因此，导览语音V的识别信息D的声音与导览语音V的再现相并行地多次重复发射。声音发射装置166附近(展览品附近)的用户听到针对该展览品的导览语音V，并且通过声音通信向用户的终端装置12通知导览语音V的识别信息D。如上所述，因为与用户在正常环境下能够听到的声音的频带相比，包括识别信息D的调制的信号SD的频带处于更高的音高范围(例如，18kHz或更高且20kHz或更低)，所以识别信息D的声音几乎无法被用户听到。因此，可以利用声音通信将识别信息D发送至终端装置12，而不会妨碍用户聆听导览语音V。
终端装置12
图8是示出终端装置12的构造的示图。在图8中，还示出了声音发射系统16的声音发射装置166中的一个。如图8的示例中所述，第一实施例的终端装置12包括控制装置50、存储装置52、通信装置54、声音接收装置56和输出装置58。存储装置52存储由控制装置50使用的数据，并且还存储由控制装置50执行的程序。任何公知存储介质(比如半导体存储介质或磁存储介质)或不同类型存储介质的组合可用作存储装置52。
声音接收装置56是接收环境声音的音频装置(麦克风)，并且用于终端装置12之间的语音呼叫，或者在录制视频期间用于记录声音。如图8的示例中所示，第一实施例的声音接收装置56接收从展览设施M的声音发射装置166发射的声音，并产生表示所接收的声音的时间波形的音频信号(下文称作“接收的音频信号”)X。因此，接收的音频信号X包括导览语音V的声音分量(音频信号SG)和导览语音V的识别信息D的声音分量(调制的信号SD)。为了简要起见，省略了将声音接收装置56产生的接收的音频信号X从模拟格式转换为数字格式的A/D转换器的图示。
控制装置50控制终端装置12中的各元件。例如，第一实施例的控制装置50是CPU并且通过执行存储在存储装置52中的程序来用作信息提取器51。信息提取器51通过对声音接收装置56所产生的接收的音频信号X进行解调来提取导览语音V的识别信息D。具体地，信息提取器51通过利用例如高通滤波器从接收的音频信号X中选择处于高音高范围且包括识别信息D的频带(18kHz或更高且20kHz或更低)中的频带分量。随后，信息提取器51通过使所选择的频带分量通过匹配滤波器来提取识别信息D，在该匹配滤波器中使用在识别信息D的扩频调制时使用的扩频码作为系数。
通信装置54是经由通信网络18与信息提供系统10进行通信的通信设备。可以任意选择通信装置54和通信网络18之间的通信方案。通常，使用与声音发射装置16向终端装置12通知识别信息D所使用的声音通信不同的无线通信方案(例如，利用无线电波或红外线作为传输介质的信息通信)。如图8的示例中所示，第一实施例的通信装置54包括发射器542和获取器544。发射器542向信息管理系统14发送信息请求R，该信息请求R包括信息提取器51从接收的音频信号X中提取的识别信息D。获取器544获取响应于信息请求R而从信息管理系统14发送的相关信息Q。如上参照图5所述的那样，识别信息D的调制的信号SD被多次地重复添加至导览语音V的音频信号SG。因此，虽然对于信息提取器51而言可以在多个时间点处多次重复地每次提取单条识别信息D，但是只有在信息提取器51首次提取新的识别信息D时才执行信息请求R的发送和相应的相关信息Q的接收。如上述示例中所述，在第一实施例中，重复多次地发送单条识别信息D。因此，可以获得这样的优点：例如，即使由于周围噪声干扰而导致终端装置12获取识别信息D失败，终端装置12也能够再次获取识别信息D。
图8的输出装置58输出获取器544从信息管理系统14获取到的相关信息Q。在第一实施例中，采用以第二语言显示相关信息Q所指示的翻译的字符串CT的显示装置作为输出装置58。即，并行于通过声音发射系统16的声音发射装置166进行的第一语言的导览语音V的再现，在终端装置12上显示(呈现)第二语言的翻译的字符串CT。因此，即使终端装置12的用户无法理解第一语言，该用户通过查看第二语言的翻译的字符串CT也将能够理解关于展览品的导览。
图9是示出终端装置12的用于获取相关信息Q的操作的示图。如上所述，从声音发射系统16的声音发射装置166的每一个处，与导览语音V的再现并行地重复发射识别信息D的声音。当终端装置12的用户移动到从声音发射装置166发射的声音的范围内时，即，当移动到靠近展览品时，终端装置12的声音接收装置56产生接收的音频信号X，其包括导览语音V的声音分量和相应一条识别信息D的声音分量(SB1)。控制装置50(信息提取器51)通过对接收的音频信号X进行解调来提取该条识别信息D(SB2)，并且通信装置54的发射器542向信息管理系统14发送包括该条识别信息D的信息请求R(SB3)。
信息管理系统14的信息提供器36从通信网络18接收终端装置12所发送的信息请求R。随后，信息提供器36从存储在存储装置144中的多条相关信息Q中选择与信息请求R中指定的那条识别信息D相对应的那条相关信息Q(SB4)，并且将所选择的这条相关信息Q发送至请求源终端装置12(SB5)。终端装置12的获取器544从信息管理系统14获取该条相关信息Q(SB6)，并且输出装置58输出该条相关信息Q(SB7)。从以上描述中可以理解，在终端装置12并行于导览语音的再现而接收从声音发射系统16的声音发射装置166发射的识别信息D的声音之后，即，在终端装置12在来自声音发射装置166的声波到达终端装置12的范围内移动之后，执行包括识别信息D的信息请求R的发送(SB3)和与识别信息D对应的相关信息Q的获取(SB6)。
如上所述，在第一实施例中，发射对应于音频信号S的声音，音频信号S包括导览语音的音频信号SG和包括导览语音的识别信息D的调制的信号SD。即，通过利用了与导览语音一起发射的声音的声音通信来向终端装置12通知识别信息D。因此，获得了这样的优点：用于语音呼叫和记录声音的声音接收装置56可以被用于获取识别信息D，因此，无需专用于识别信息D的无线通信的通信设备。此外，获得了这样的优点：在声音发射系统16中，无需专用于识别信息D的发送的通信设备，并且用于语音导览的现有声音发射装置166可以被用于向终端装置12通知识别信息D。此外，根据其中通过声音通信来向终端装置12传达识别信息D的构造，优点在于可以毫无困难地控制识别信息D的声音的到达范围，并且可以向多个终端装置12统一通知识别信息D。
在第一实施例中，通过信息管理系统14将一旦发射导览语音V就向终端装置12通知的一条识别信息D和与该导览语音V有关的一条相关信息Q彼此关联，并且在多条相关信息Q中，将与通知给终端装置12的该条识别信息D相对应的该条相关信息Q提供给终端装置12。因此，终端装置12的存储装置52无需预先存储多条相关信息Q。根据上述构造，获得了终端装置12存储相关信息Q所需的存储容量可以极大减小的优点。在每个终端装置12中存储了多条相关信息Q的构造中，当一条相关信息Q需要更新时，该条相关信息Q需要分别在每个终端装置12中更新。在第一实施例中，多条相关信息Q存储在信息管理系统15的存储装置144中并被选择性地提供给终端装置12。因此，通过更新存储在存储装置144中的相关信息Q，可以向每个终端装置12提供更新后的相关信息Q。因此，获得了无需针对每个终端装置12分别更新相关信息Q的优点。
在第一实施例中，导览语音V的识别信息D被与该导览语音的再现一起通知给终端装置12。因此，与识别信息D相对应的相关信息Q可以并行于导览语音V的再现而在终端装置1上输出。例如，与在导览语音的再现之后输出相关信息Q的构造相比，可以获得用户能够容易地辨识导览语音V和相关信息Q之间的关联性的优点。
例如，日本专利申请公开第2011-109629号(下文称作“现有技术1”)公开了一种自动再现语音导览系统，其利用放置在美术馆或博物馆中的展览品附近的发送装置和用户携带的便携式接收器。发送装置通过无线电波或红外线间歇性地将展览品唯一的识别码发送到其周围环境。便携式接收器从预先存储在其存储介质中的各导览语音中再现与从发送装置接收的识别码相对应的导览语音。根据现有技术1，在便携式接收器在(展览品附近的)一个范围(在该范围中来自发送装置的无线电波或红外线到达便携式接收器)内移动并接收到识别码之后，对描述该范围内的展览品的导览语音进行再现。
但是，在现有技术1中，因为通过无线电波或红外线来发送每个展览品的识别码，因此需要将发送或接收无线电波或红外线的专用通信设备附加至每个发送装置和每个便携式接收器。在第一实施例中，发射对应于音频信号S的声音，音频信号S包括导览语音V的音频信号SG和包括导览语音V的识别信息D的调制的信号SD。即，通过利用了与导览语音V一起发射的声音的声音通信来向终端装置12通知识别信息D。因此，获得了这样的优点：用于语音呼叫和记录声音的声音接收装置56可以被用于获取识别信息D，因此，无需专用于识别信息D的无线通信的通信设备。此外，获得了这样的优点：在声音发射系统16中，无需专用于识别信息D的发送的通信设备，并且用于语音导览的现有声音发射装置166可以被用于向终端装置12通知识别信息D。换言之，可以通过利用发射和接收声音的部件、通过简单构造来发射和接收识别信息D。此外，根据通过声音通信来向终端装置12传达识别信息D的构造，优点在于可以毫无困难地控制识别信息D的声音的到达范围，并且可以向多个终端装置12统一通知识别信息D。
例如，日本专利申请公开第2000-207170号(下文称作“现有技术2”)公开了一种信息处理装置，其以不会干扰对与将要再现的音频信号对应的声音的聆听的方式，向该音频信号添加附加信息，以产生输出音频信号。在利用该信息处理装置的播报系统(announcement system)中，当经由扬声器向用户发送作为语音导览的信息时，服务器向该信息添加与该语音导览有关的信息(例如，翻译)作为附加信息。例如，通过扩频技术，将附加信息叠加到音频信号上。
在上述使用声波(其为空气的振动)作为传输介质的声音通信中，发送速度和发送容量与使用例如无线电波作为传输介质的无线通信相比而言较低。在现有技术2中，通过声音通信发送附加信息(即，相关信息)。在第一实施例中，通过声音通信发送识别信息D。因此，第一实施例的构造具有这样的优点：通过声音通信发送的数据量减小，这是因为发送了其数据大小比相关信息更小的识别信息D。由于声音通信中通信容量较小，因此采用现有技术2方案可以发送的附加信息实际上限于具有小的数据大小的信息。在第一实施例中，通过声音通信发送识别信息，并且通过信息管理系统14分发与该识别信息相对应的相关信息。因此，还可以向用户呈现具有大的数据大小的各种相关信息(例如，声音或图像)。
第一实施例的各修改例
在第一实施例中，利用由信息管理系统14的管理员指定的指定字符串ST、通过语音合成来产生音频信号SG，并且通过对指定字符串ST进行机器翻译来产生相关信息Q。获取(通常地，产生)音频信号SG和相关信息Q的方式不限于这些示例。下面描述获取音频信号SG和相关信息Q的其他方式的示例。关于以下描述的每种模式中获取音频信号SG和相关信息Q的处理，可以视情况改变执行用以获取(或产生)音频信号SG的处理和用于获取(或产生)相关信息Q的处理的顺序。
修改模式1
在图10的示例中示出的模式1中，信息管理系统14的音频信号获取器22以与第一实施例中采用的方式类似的方式，根据指定字符串ST、通过语音合成来产生导览语音V的音频信号SG。相关信息获取器24获取管理员指定的指定字符串ST作为相关信息Q。即，相关信息Q是表示第一语言的导览语音V的发音内容的字符串，第一语音还用于导览语音V。在上述构造中，并行于由声音发射系统16进行的导览语音V的再现，在显示装置12上显示导览语音V的发音内容的字符串。因此，获得了例如弱听力人士(听力障碍人士)能够查看导览语音V的内容的优点。
在根据本实施例的该模式的信息产生处理(图6)中，可以理解，获取与指定字符串ST对应的导览语音V的音频信号SG和与该导览语音V有关的相关信息Q的步骤(SA1)包括：通过语音合成产生与指定字符串ST对应的导览语音V的音频信号SG；以及获取指定字符串ST作为相关信息Q。
修改模式2
在图11的示例中示出的模式2中，信息管理系统14的音频信号获取器22以与第一实施例中采用的方式类似的方式，根据第一语言的指定字符串ST、通过语音合成来产生导览语音V的音频信号SG。信息管理系统14的管理员通过适当地操作输入装置146来指定第二语言的表示导览语音V的字符串(翻译的字符串CT)。相关信息获取器24获取第二语言的、由管理员指定的翻译的字符串CT作为相关信息Q。在如上参照的图3中示出的构造中，当机器翻译准确性较低时无法产生适当的翻译的字符串CT。在图11的示例中示出的模式2中，对指定字符串ST的机器翻译(图3)是不必需的。因此，获得了这样的优点：可以准备例如通过人工翻译(人类翻译)产生且准确地以第二语言表示导览语音V的相关信息Q。
在该模式中，可以理解，信息产生处理(图6)的步骤SA1包括：通过语音合成产生与指定字符串ST对应的导览语音V的音频信号SG；和获取指定的翻译的字符串CT(即，获取根据从导览语音V的发音内容到第二语言的翻译导出的字符串)作为相关信息Q。
修改模式3
在图12的示例中示出的模式3中，信息管理系统14的音频信号获取器22以与第一实施例中采用的方式类似的方式，根据指定字符串ST、通过语音合成来产生导览语音V的音频信号SG。相关信息获取器24通过对第一语言的指定字符串ST进行机器翻译来产生第二语言的翻译的字符串CT，并且根据翻译的字符串CT、通过语音合成产生第二语言的导览语音V的音频信号作为相关信息Q。终端装置12的输出装置58包括声音发射装置(比如扬声器或耳机)，其用于发射与从信息管理系统14提供的相关信息Q所指示的音频信号相对应的声音(第二语言的导览语音V)。即，并行于声音发射系统16进行的第一语言的导览语音V的再现，通过终端装置12再现第二语言的导览语音。因此，即使当终端装置12的用户无法理解第一语言时，该用户通过聆听第二语言的导览语音V也将能够理解关于展览品的导览。
在该模式中，可以理解，信息产生处理(图6)的步骤SA1包括：通过语音合成产生与指定字符串ST对应的导览语音V的音频信号SG；通过对所指定的指定字符串ST进行机器翻译(即，对表示导览语音V的发音内容的字符串进行机器翻译)来产生表示导览语音V的翻译的翻译的字符串CT；和通过语音合成产生作为翻译的字符串CT的发音声且指示导览语音V的音频信号(即，产生指示口声(vocal sound)的音频信号，所述口声是根据从导览语音V的发音内容到第二语言的翻译导出的字符串的发音声)。
修改模式4
在图13的示例中示出的模式4中，信息管理系统14的音频信号获取器22从信号供应装置200获取导览语音V的音频信号SG。信号供应装置200可以为接收其附近声音并产生音频信号SG的声音接收装置；或者其可以为从便携式存储介质或内置存储介质获取音频信号SG并输出该信号的再现装置；或者其可以为从通信网络18接收音频信号SG并输出该信号的通信装置。相关信息获取器24获取管理员指定的指定字符串ST作为相关信息Q，如在上述模式1或模式2中那样。因此，声音发射装置166发射与信号供应装置200所产生的音频信号SG相对应的导览语音V，并且在终端装置12上显示符合来自管理员的指令的指定字符串ST。相关信息获取器24可以从声音供应装置200获取音频信号(例如，第二语言的导览语音V的音频信号)作为相关信息Q。
在该模式中，可以理解，信息产生处理(图6)的步骤SA1包括：从信号供应装置200获取导览语音V的音频信号SG；以及获取所指定的指定字符串ST(即，获取表示导览语音V的发音内容的字符串)作为相关信息Q。
修改模式5
在图14的示例中所示的模式5中，信息管理系统14的音频信号获取器22以与第一实施例中采用的方式类似的方式，根据指定字符串ST、通过语音合成来产生导览语音V的音频信号SG。相关信息获取器24获取与导览语音V有关的图像IMG(静态或动态)作为相关信息Q。因此，并行于与指定字符串ST对应的第一语言导览语音V的再现，在终端装置12上与显示导览语音V有关的图像IMG。在该模式中，因为获取与导览语音V有关的图像IMG作为相关信息Q，因此具有无需在终端装置12中预先存储图像IMG的优点。当在终端装置12中存储具有大的数据大小的图像数据时，占用了终端装置12的大量存储容量。根据本模式，可以极大地减小终端装置12存储与导览语音V有关的图像IMG所需的存储容量。
在该模式中，可以理解，信息产生处理(图6)的步骤SA1包括：通过语音合成产生与指定字符串ST对应的导览语音V的音频信号SG；以及获取与导览语音V有关的图像IMG作为相关信息Q。
修改模式6
在图15的示例中示出的模式6中，与图13中示出的模式(模式4)类似，信息管理系统14的音频信号获取器22从信号供应装置200获取导览语音V的音频信号SG。相关信息获取器24通过对从信号供应装置200提供的音频信号SG进行语音识别来产生表示导览语音V的发音内容的字符串作为相关信息Q。对于对音频信号SG进行的语音识别，可以使用任何公知技术，比如利用诸如HMM之类的音频模型或表示语言约束的语言模型的识别技术。从上述描述中将理解，在模式6中，并行于通过声音发射系统16进行的导览语音V的再现，在终端装置12上显示导览语音V的发音内容的字符串，如上述模式1(图10)中那样。因此，获得了这样的优点：即使在用户使用未配备有单独获取和存储表示导览语音V的发音内容的字符串的装置的终端装置12时、在错过所发射的导览语音V时或者在用户具有收听导览语音V的困难(即，弱听力人士)的情况下，用户也能够查看导览语音V的内容。终端装置12用于存储表示导览语音V的发音内容的字符串所需的存储容量减小。信息管理系统14的相关信息获取器24根据从信号供应装置200供应的指示导览语音V的音频信号SG、通过语音识别来产生表示导览语音V的发音内容的字符串。因此，获得了这样的优点：信息管理系统14无需管理员来单独指定这些字符串作为指定字符串ST。
在该模式中，可以理解，信息产生处理(图6)的步骤SA1包括：获取导览语音V的音频信号SG，该音频信号SG供应自信号供应装置200；以及通过对供应自信号供应装置200的音频信号SG进行语音识别来产生表示导览语音V的发音内容的字符串作为相关信息Q。
修改模式7
在图16的示例中示出的模式7中，信息管理系统14的音频信号获取器22以与模式6中采用的方式类似的方式，从信号供应装置200获取第一语言的导览语音V的音频信号SG。与模式6一样，相关信息获取器24通过对音频信号SG进行语音识别产生导览语音V的字符串，并且通过对该字符串进行机器翻译来产生第二语言的表示导览语音V的翻译的字符串CT作为相关信息Q。可以使用任何公知技术来进行机器翻译。换言之，在模式7中，并行于通过声音发射系统进行的第一语言的导览语音V的再现，在终端装置12上显示翻译的字符串CT，其展示了导览语音V的第二语言翻译。因此，无需管理员在信息管理系统14中单独指定该字符串作为指定字符串CT，此外，通过对表示导览语音V的发音内容的字符串进行机器翻译来产生相关信息Q。因此，获得了这样的优点：无需预先准备与导览语音V的语言不同的语言的相关信息Q。
在该模式中，可以理解，信息产生处理(图6)的步骤SA1包括：获取导览语音V的音频信号SG，音频信号SG供应自信号供应装置200；通过对供应自信号供应装置200的音频信号SG进行语音识别来产生表示导览语音V的发音内容的字符串；以及通过对所产生的字符串进行机器翻译来产生表示导览语音V的翻译的相关信息Q(即，产生根据从导览语音V的发音内容到第二语言的翻译导出的字符串作为相关信息Q)。
如图17的示例中所示，可以根据通过机器翻译产生的翻译的字符串CT、通过语音合成来产生第二语言导览语音V的音频信号作为相关信息Q。并行于导览语音V的发射，在终端装置12上再现第二语言导览语音V，第二语言不同于作为导览语音V的原始语言的第一语言。因此，获得了这样的优点：即使在终端装置12的用户无法理解第一语言的导览语音V时，用户通过聆听第二语言的导览语音V也能够理解再现内容。
在这种情况下，可以理解，图6的步骤SA1包括：获取导览语音V的音频信号SG，音频信号SG供应自信号供应装置200；通过对供应自信号供应装置200的音频信号SG进行语音识别来产生表示导览语音V的发音内容的字符串；通过对所产生的字符串进行机器翻译来产生表示导览语音V的翻译的翻译的字符串CT；以及通过语音合成产生表示作为翻译的字符串CT的发音声的口声的音频信号。
在一个构造(即，图18所示的示例构造)中，当在显示装置148上查看通过对音频信号SG进行语音识别而产生的第一语言字符串之后，管理员OP通过适当地操作输入装置146给出与导览语音V的书面的第二语言翻译有关的指令(即，示出由管理员OP他自己/她自己进行的翻译的字符串)，相关信息获取器24获取管理员指定的第二语言的翻译的字符串CT作为相关信息Q。在该模式中，相关信息获取器24获取表示管理员OP执行对第一语言字符串的人工翻译的结果的翻译的字符串CT作为相关信息Q。因此，与通过机器翻译产生翻译的字符串CT的情况相比，可以获取导览语音V的书面的第二语言翻译，该翻译具有更高的质量。
在该情况下，可以理解，图6中的步骤SA1包括：获取导览语音V的音频信号SG，音频信号SG供应自信号供应装置200；以及获取表示导览语音V的翻译的字符串作为相关信息Q，该字符串通过在输入装置146上针对表示导览语音V的发音内容的字符串执行操作而指定，并且该字符串通过对供应自信号供应装置200的音频信号进行语音识别而产生(即，获取根据从导览语音V的发音内容到第二语言的翻译导出的字符串)。
如图19的示例中所示，在如图16的模式7中那样通过机器翻译产生第二语言的翻译的字符串CT显示在显示装置148上之后，相关信息获取器24可以获取管理员OP通过操作输入装置146对翻译的字符串CT进行编辑(通常地，修订)的结果作为相关信息Q。在该模式中，获取管理员OP对通过机器翻译产生的第二语言的翻译的字符串CT进行编辑而产生的内容作为相关信息Q。因此，获得了这样的优点：与仅通过机器翻译来产生表示导览语音V的翻译的字符串的模式相比，可以获取更高质量的书面翻译。还具有这样的优点：与获取通过仅人工翻译的书面翻译的情况相比，可以减少管理员OP所需的工作量并且可以更快地获取相关信息Q。
在该情况下，可以理解，图6中的步骤SA1包括：获取导览语音V的音频信号SG，音频信号SG供应自信号供应装置200；产生表示导览语音V的发音内容的字符串，该导览语音V的发音内容通过对供应自信号供应装置200的音频信号SG进行语音识别而产生；通过对所产生的字符串进行机器翻译来产生表示导览语音V的翻译的翻译的字符串CT；以及获取表示导览语音V的翻译的字符串作为相关信息Q，该字符串已经通过对输入装置146进行操作而被编辑(即，获取根据从导览语音V的发音内容到第二语言的翻译导出的字符串)。
因此，根据从导览语音V的发音内容到第二语言的翻译导出的字符串被理解为包括例如：所指定的翻译的字符串CT(模式2(图11))；通过机器翻译产生的翻译的字符串CT(模式3(图12、图16和图17))；通过人工翻译产生的翻译的字符串(模式7(图18))；以及对通过机器翻译产生的翻译的字符串CT进行编辑而产生的字符串，所述编辑通过对输入装置146执行操作来进行(模式7(图19))。
修改模式8
在图20的示例中所示的模式8中，信息管理系统14的相关信息获取器24通过对音频信号SG进行自动内容识别(ACR)来获取与音频信号SG有关的内容或内容信息(例如，内容的名称)作为相关信息Q。可以随意使用任何适当技术来进行自动内容识别。例如，相关信息获取器24分析音频信号SG的特征(例如，MFCC、基频等)，并且从预先准备的内容中搜索和获取与音频信号SG的特征相对应的内容作为相关信息Q。对音频信号SG的特征进行分析和核对的指纹技术或将信息嵌入音频信号SG的可听频带或非可听频带中的水印技术可以应用至图20中的自动内容识别。在该模式中，由于使用自动内容识别来获取相关信息Q，因此通过简单构造，终端装置12的用户可以被导向与导览语音V有关的各种信息(例如，与从导览语音V衍生的服务有关的信息)。
在该模式的信息产生处理(图6)中，步骤SA1被理解为包括：获取导览语音V的音频信号SG，音频信号SG供应自信号供应装置200；以及获取与供应自信号供应装置200的音频信号SG有关的内容作为相关信息Q。
相关信息获取器24可以选择性地执行语音识别和自动内容识别以获取相关信息Q(图21)。例如，根据音频信号SG所表示的导览语音V的类型来选择语音识别或自动内容识别。具体地，当音频信号SG的声音是人类发出的口声(语音)时，相关信息获取器24通过对音频信号SG进行语音识别来产生相关信息Q。当音频信号SG的声音是音乐(例如，歌声、演奏乐器的声音等)时，相关信息获取器24通过对音频信号SG进行自动内容识别来获取相关信息Q。相关信息获取器24可以同时使用语音识别和自动内容识别(图22)。例如，设想这样一种构造：相关信息获取器24通过对根据对音频信号SG的语音识别产生的字符串进行自动内容识别来获取相关信息Q；或者，相关信息获取器24获取对自动内容识别所识别的内容进行语音识别而产生的字符串作为相关信息Q。
在模式6至模式8中，在使用声音接收装置(其接收从声源(例如，扬声器)发射的导览语音V以产生音频信号SG)或通信装置(其从通信网络18接收通过声音接收装置产生的音频信号SG)作为信号供应装置200的构造中，可以与声源发射导览语音V并行地且与声音发射系统16再现导览语音V并行地向终端装置12实时地提供相关信息Q。在模式6至模式8中，假设了从信号供应装置200供应音频信号SG。但是，可以通过各种语音合成技术中的任一技术来产生导览语音V的音频信号SG，并且可以通过对这些音频信号SG进行语音识别来产生相关信息Q。
其他修改
音频信号获取器22获取音频信号SG的方式以及相关信息获取器24获取相关信息Q的方式不限于上述示例。例如，通过对第一语言的指定字符串ST进行机器翻译，相关信息获取器24可以产生第二语言的翻译的字符串CT作为相关信息Q。通过根据机器翻译所产生的翻译的字符串CT进行语音合成，音频信号获取器22可以产生第二语言的导览语音V的音频信号SG。
如从上述示例中将理解的，音频信号获取器22被理解为获取导览语音V的音频信号SG的元件。音频信号获取器22的构思包括：通过音频处理(比如语音合成)产生音频信号SG的元件，以及从外部装置(比如图13中的信号供应装置200)获取音频信号SG的元件。类似地，相关信息获取器24被理解为获取与导览语音V有关的相关信息Q的元件。相关信息获取器24的构思包括：通过信息处理(比如语音识别、机器翻译、或语音合成、或这些处理中的至少两项的组合)产生相关信息Q的元件；从外部装置获取相关信息Q(比如字符串(指定字符串ST或翻译的字符串CT)或与导览语音V有关的图像)的元件；或者这两种元件的组合。
第二实施例
现在将如下描述本发明的第二实施例。在以下作为示例描述的模式的每一个中，对于其操作或功能类似于第一实施例的那些元件的元件，使用与第一实施例中相同的参考标记，并且视情况省略其详细描述。
图23是描述第二实施例中的信息管理系统14的信号处理器32中的产生音频信号S的处理的示图。如图23的示例中所示，沿时间轴具有不同位置的各部分T(下文称作“再现部分”)被分配给音频信号获取器22所获取的导览语音V的音频信号SG。具体地，根据导览语音V的内容(其目的或目标)将音频信号SG划分为各再现部分T(T1、T2等)。例如，当导览语音V包括具有要对其提供导览的不同目标的场景时，根据场景将音频信号SG划分为各再现部分T。通常根据管理员对输入装置146执行的操作来指定再现部分T的起点和终点(相邻的再现部分T之间的边界)。替代性地或额外地，音频信号S中的静音部分可以用作对再现部分T进行限定的边界。可以随意设置沿时间轴的相邻部分之间的间隔。虽然在图23中为了描述目的各再现部分T的时间长度相等，但是各再现部分T的时间长度可以彼此不同。
第二实施例的识别信息设置器26将不同的多条识别信息D(D1、D2等)分配给音频信号SG的各再现部分T。信号处理器32将识别信息设置器26分配的不同的多条识别信息D添加至音频信号SG的各再现部分T。换言之，如图23的示例中所示，信号处理器32通过重复地向音频信号SG的每个再现部分T添加识别信息设置器26已分配给该再现部分T的那条识别信息D的调制的信号SD来产生音频信号S。即，在导览语音V的再现部分T的多个时间点处，该再现部分T的一条识别信息D的声音分量被重复地混合。与第一实施例一样，通过信号处理器32产生的音频信号S被传输至声音发射系统16。
第二实施例的相关信息获取器24针对音频信号SG的每个再现部分T获取一条相关信息Q。例如，相关信息获取器24通过根据导览语音V的再现部分T对指定字符串ST进行划分并且针对每个再现部分T执行机器翻译，来针对每个再现部分产生表示第二语言的翻译的字符串CT的一条相关信息Q。关联管理器34针对导览语音V的每个再现部分T将识别信息设置器26分配的一条识别信息D与相关信息获取器24获取的那条相关信息Q相关联。即，关联管理器34将识别信息设置器26针对每个再现部分T分配的一条识别信息D与相关信息获取器24针对该再现部分T获取的一条相关信息Q相关联，并将它们存储在存储装置144中。
与第一实施例一样，声音发射系统16的声音发射装置166发射与从信息管理系统14传输的音频信号S相对应的声音。并行于与音频信号SG对应的导览语音V的再现，重复地发射针对音频信号SG的每个再现部分T的一条识别信息D的声音，各再现部分T之间的各条识别信息D彼此不同。因此，每当导览语音V的再现点从一个再现部分T改变为下一再现部分T时，就改变向终端装置12通知的那条识别信息D。终端装置12的信息提取器51从接收的音频信号X中顺序地提取导览语音V的各再现部分T的各条识别信息D。对于(针对每个再现部分T的)一条相关信息D的每次提取，通过发射器542发射指定该条相关信息D的信息请求R，并通过获取器544获取与信息请求R相对应的一条相关信息Q。因此，输出装置58输出的各条相关信息Q随着导览语音V的再现进程而顺序地改变。具体地，在导览语音V的一个再现部分T已经开始之后(在从一个再现部分T过渡到下一个再现部分T之后)，通过输出装置58输出的内容(一条相关信息Q)改变。
第二实施例实现了与第一实施例的有利效果相类似的有利效果。在第二实施例中，对于作为导览语音V的时间轴分开部分的各再现部分T的每一个，分配一条识别信息D并且该条识别信息D与相应一条相关信息Q彼此关联。因此，可以结合导览语音V的再现进程改变呈现给终端装置12的用户的相关信息Q。
第三实施例
图24是描述本发明的第三实施例中的操作的示图。如图24的示例中所示，第三实施例的信息管理系统14的存储装置144针对音频信号SG所表示的导览语音V的每条识别信息D存储多(N)条相关信息Q(Q1、Q2等)。具体地，N条相关信息Q均与导览语音V的一条识别信息D相关联并且对N条相关信息Q进行存储，该N条相关信息Q以除第一语言外的不同语言表示各自均表示最初为第一语言的导览语音V的字符串的发音声的口声。准备不同语言的N条相关信息Q的方式可以随意选择。比如，如上参照的图12的示例中那样，可以首先通过对第一语言的指定字符串ST进行机器翻译来产生不同语言的N条翻译的字符串CT。利用根据所产生的翻译的字符串CT的语音合成，随后可以产生N种语言的表示导览语音V的N条相关信息Q。替代性地，如上参照的图17的示例中那样，可以通过对导览语音V的音频信号SG进行语音识别来产生导览语音V的字符串，音频信号SG从信号供应装置200提供。随后，通过对所产生的字符串进行机器翻译，可以产生不同语言的N条翻译的字符串CT。利用根据所产生的翻译的字符串CT的语音合成，随后可以产生N种语言的表示导览语音V的N条相关信息Q
在信息提取器51从接收的音频信号X(其根据通过声音发射系统16发射并随后被接收的声音导出)中提取了识别信息D之后，终端装置12的发射器542向信息管理系统14发送包括识别信息D和语言信息L的信息请求R(SB3)。语言信息L是指定终端装置12中使用的语言的信息。可以随意选择获取语言信息L的方式。例如，可以使用发射器542通过参照终端装置12的操作系统(OS)中的语言设定来产生语言信息L的构造。在这种情况下，获得了用户无需指定语言的优点。替代性地，可以使用产生表示终端装置12的用户按照他/她的意愿指定的语言的语言信息L的构造。
在从终端装置12接收到信息请求R之后，信息管理系统14的信息提供器36从各自与信息请求R中指定的一条识别信息D相关联并且存储在存储装置144中的N条相关信息Q中，选择信息请求R中指定的语言信息L所指示的语言的一条相关信息Q(SB4)，并且将该条相关信息Q发送至请求源终端装置12(SB5)。终端装置12的获取器544获取信息管理系统14所发送的该条相关信息Q(SB6)，并且输出装置58(声音发射装置166)发射该条相关信息Q所指示的导览语音V以呈现给用户(SB7)。从以上描述中可以理解，并行于第一语言的导览语音V的再现，从终端装置12的输出装置58输出语言信息L所指定的语言的导览语音V，指定的语言为N种语言之一且不同于第一语言。因此，例如，与在导览语音V的再现之后输出相关信息Q的构造相比，获得了用户易于辨别导览语音V与相关信息Q之间的关联性的优点。
第三实施例实现了与第一实施例的那些有利效果相类似的有利效果。此外，在第三实施例中，由于将不同语言的N条相关信息Q中的一条选择性地提供给终端装置12，获得了可以向使用他们各自语言的各种用户中的每一个提供该用户可理解的语言的一条相关信息Q的优点。在以上描述中，给出了各条相关信息Q表示不同语言的语音的示例。替代性地，可以使用各条相关信息Q表示字符串(翻译的字符串CT)(其因而表示不同语言的导览语音V)的构造。在这种情况下，可以随意选择产生各条相关信息Q的方式。如图16中示出的示例中那样，可以通过对第一语言的字符串进行机器翻译产生N种不同语言的N条翻译的字符串作为N条相关信息Q，所述字符串通过对供应自信号供应装置的导览语音V的音频信号SG进行语音识别而产生。在相关信息Q表示字符串的构造中，终端装置12的输出装置58(显示装置)显示该字符串，从而将相关信息Q呈现给用户。在这种情况下，不同于图16中的示例所示的产生方法，可以使用图11(用于获取输入的翻译的字符串CT的构造)、图18(用于获取指示通过管理员OP他自己/她自己执行的翻译的字符串的构造)、或图19(用于获取根据管理员OP编辑机器翻译所产生的翻译的字符串CT而产生的字符串的构造)中所示的产生(获取)方法。第二实施例的构造可以应用至第三实施例。
修改例
以上作为示例给出的模式中的每一个可以用各种方式进行修改。下面描述一些示例修改例。可以视情况组合从以下示例中随意选择的至少两种模式，只要它们彼此不会冲突即可。
(1)在上述模式中，示出了一种构造的示例，其中每当接收一条识别信息D的声音时(每当用户移动到展览品附近时)，终端装置12就获取与该条识别信息D相对应的一条相关信息Q。替代性地，关联管理器34可以将与展览设施M中的不同展览品对应的多条相关信息Q与仅一条识别信息D相关联，并且当终端装置12接收到从声音发射系统16的声音发射装置166发射的该条识别信息D的声音时，终端装置12可以从信息提供器36统一地获取与该条识别信息D相对应的所述多条相关信息Q。例如，当终端装置12的用户进入特定展览设施M时或者当用户在展览设施M中首次获取到一条识别信息D时，终端装置12可以统一地获取与展览设施M中的各展览品有关的多条相关信息Q。
在选择性地再现在用户携带的终端装置中预先存储的多条信息的构造中，存在这样的问题：当需要更新信息时，需要在每个终端装置中分别更新信息。在根据修改例的当前模式的构造中，向终端装置12提供信息管理系统14的存储装置144中存储的相关信息Q。因此，通过更新存储在存储装置144中的相关信息Q，可以将更新后的相关信息Q提供给每个终端装置12。因此，获得了无需针对每个终端装置12分别更新相关信息Q的优点。
(2)相关信息Q的内容不限于上述模式中示出的示例。例如，信息提供器36可以向终端装置12提供声音、图像和字符串(它们被示出为上述模式中的相关信息Q的示例)之中的至少两者的组合，作为相关信息Q。替代性地或额外地，例如，信息提供器36可以向终端装置12提供指示与导览语音V有关的信息(例如，上述示例中示出的相关信息Q)的位置的链接信息(例如，URL)，作为相关信息Q。
(3)在第二实施例中，如参照图23描述的那样，示出了其中与导览语音V的不同再现部分T相对应的多条识别信息D(D1、D2、D3等)中的每一条在相应再现部分T中重复地多次发送至终端装置12的示例构造。在该构造中，例如，在终端装置12获取到在接近再现部分T1的结尾的点处发送的识别信息D1和在接近下一再现部分T1的开头的点处发送的识别信息D2的情况下，存在终端装置12将在与识别信息D1对应的相关信息Q被再现的中途获取到与识别信息D2对应的相关信息Q的可能性。在这种情形下，优选的是，终端装置12中途(获取到与识别信息D2对应的相关信息Q的点处)停止再现与识别信息D1对应的相关信息Q，并且随后开始再现与识别信息D2对应的相关信息Q。替代性地，可以仅在相应再现部分T的开头(即，上半段)期间向终端装置12发送各条识别信息D，以使得在与不同的各条识别信息D对应的多条相关信息Q之间，通过终端装置12进行的所述多条相关信息Q的再现的时间段不会彼此重叠。
在如上述示例中那样终端装置12在再现与识别信息D1对应的相关信息Q的中途获取到识别信息D2的相关信息Q的情况下，可以使用这样的构造：终端装置12在完成识别信息D1的相关信息Q的再现之后开始再现识别信息D2的相关信息Q。替代性地，在终端装置12在再现与识别信息D1对应的相关信息Q的中途获取到识别信息D2的相关信息Q的情况下，用户所执行的操作可以作为触发器以使得终端装置12开始再现识别信息D2的相关信息Q，从而使得识别信息D1的相关信息的再现在中途停止。例如，在获取到与识别信息D2对应的相关信息Q之后显示“下一个”按钮，并且在用户操作该按钮之后，终端装置12开始再现识别信息D2的相关信息Q。
(4)可以随意选择输出(例如，显示)相关信息Q的方式。例如，在终端装置12包括例如获取图像(静态和/或动态)的图像获取装置(图中未示出)的构造中，可以对图像获取装置获取的图像和相关信息Q所指示的图像(例如，静态图像、动态图像、字符串等)进行合成并将其显示在输出装置58的显示装置上。
例如，如图25所示，设想了这样的情况：在诸如博物馆之类的展览设施M中展示机器人300作为展览品，机器人300带有发射各种用于再现的声音(比如导览语音)的声音发射功能。信息管理系统14的存储装置144存储音频信号S，该音频信号S包括用于再现的声音的音频信号SG和识别信息D的调制的信号SD。表示用于再现的声音的发音内容的字符串形式的相关信息Q与识别信息D相关联并且存储在存储装置144中。如图25的示例中所示，终端装置12的控制装置50实时地使通过图像获取装置获取的机器人300的图像G(通常为动态图像)与作为供应自信息管理系统14的相关信息Q的字符串一起显示(覆盖显示)在输出装置58的显示装置上。
在相关信息Q单独显示在显示装置上的构造中，用户将需要在显示装置上显示的图像(相关信息Q)与作为实际展览品的机器人300之间频繁切换他/她的关注点。在参照图25描述的构造中，在单个显示画面上一起显示图像G和相关信息Q。因此，具有用户无需在显示装置与机器人300之间频繁切换他/她的关注点的优点。尤其是，在连同图像G显示用于再现的声音的字符串的构造中，例如，可以实现弱听力人士能够容易地查看机器人300的移动和用于再现的声音的内容的额外优点。
(5)在上述模式中，信息提供系统10被用作展览设施M中的导览。使用信息提供系统10的情形不限于上述示例。例如，可以使用信息提供系统10来提供交通系统(比如火车或公交车)中的语音导览。具体地，比如火车或者公交车之类的车辆配备有声音发射系统16，并且通过信息管理系统14产生音频信号S并随后传输至声音发射系统16，音频信号S根据导览语音V(其提供关于车辆停靠点(比如火车站或公交站)的导览)的音频信号SG产生，并且添加有识别信息D。当车辆移动到停靠点附近时，与该停靠点对应的音频信号S被提供给声音发射系统16的声音发射装置166，从而将对车辆到达停靠点进行播报的导览语音V连同识别信息D一起发射。车辆中的终端装置12从输出装置58输出相关信息Q，响应于包括识别信息D的信息请求R而从信息管理系统14提供相关信息Q。可以准备为相关信息Q的信息的示例包括：表示最初是第一语言的导览语音V的第二语言翻译的语音，如上述模式中描述的那样；以及指示与停靠点周围的关注区域有关的旅游信息的语音或图像(静态或动态)。
(6)上述模式提供了这样的示例构造：各自包括用于再现的声音的音频信号SG和一条识别信息D的调制的信号SD的各音频信号S以及针对每条识别信息D的一条相应相关信息Q被存储在存储装置144中。在该构造中，均对应于共同导览语音V的音频信号S和相关信息Q通过对应的识别信息D彼此关联。可以视情况采用将音频信号SG与相关信息Q彼此关联的具体方法。例如，可以设想这样的构造，其中针对相关信息Q的提供，将指定了位置和时间或者位置的范围和时间的范围的辅助信息与该相关信息Q相关联，并存储在存储装置144中。辅助信息可以指定例如要再现相应音频信号SG的位置和时间。终端装置12向信息管理系统14发送包括时间和位置检测装置(比如全球定位系统(GPS))检测到的终端装置12的位置信息的信息请求R。信息管理系统14的信息提供器36从存储在存储装置144中的多条相关信息Q中选择与分别接近信息请求R中指定的时间和位置信息的时间和位置中的每一个相对应的一条相关信息Q(SB4)，并且随后将该条所选的相关信息Q发送至请求源终端装置12(SB5)。在该构造中，在无需识别信息D的情况下，可以如上述模式中那样向终端装置12提供与音频信号SG对应的相关信息Q。
(7)在上述模式中，从声音发射装置166中发射包括导览语音V的音频信号SG和识别信息D的调制的信号SD的音频信号S的声音。一旦发射导览语音V就向终端装置12通知识别信息D的方式不限于上述示例。例如，可以根据从导览语音V的接收的声音导出的接收的音频信号X的特征(实质上音频信号SG的特征)来对识别信息D进行识别。更具体地，如图26中示出的示例那样，将匹配器15添加至与上述模式中的信息提供系统类似的信息提供系统10。例如，通过能够经由通信网络18与终端装置12进行通信的服务器来实现匹配器15。匹配器15具有搜索表TBL，在该搜索表TBL中各条辨识信息W(W1、W2等)(其表示从声音发射系统16的声音发射装置166发射的导览语音V的音频信号SG的特征)与导览语音V的各条识别信息D(D1、D2等)彼此相关联。
在图26示出的构造中，声音发射系统16的声音发射装置166发射由音频信号SG表示的导览语音V，但是不发射识别信息D的声音分量。终端装置12的控制装置50将导览语音V的接收的音频信号X存储在存储装置52中，接收的音频信号X根据声音接收装置56所接收的声音导出，在特定长度时间(例如，几秒)之后，通信装置54的发射器542将接收的音频信号X发送至匹配器15。即，终端装置12参照匹配器15来寻求声音接收装置56所接收的导览语音V的识别信息D。
匹配器15分析经由通信网络18从终端装置12接收到的接收的音频信号X的特征，并从搜索表TBL搜索具有与所分析的特征类似或匹配的特征的一条辨识信息W。可以随意选择对辨识信息W进行搜索的方式。例如，优选使用自动内容识别技术。匹配器15获取与从搜索表TBL搜索到的一条辨识信息W对应的一条识别信息D，并且将获取到的信息发送至终端装置12。因此，从声音发射装置166发射的导览语音V的识别信息D被通知给终端装置12。终端装置12从信息管理系统14获取与从匹配器15通知的该条识别信息D对应的一条相关信息Q的操作类似于上述模式中描述的方式。
虽然以上描述中给出表示音频信号SG的特征的辨识信息W作为示例，但是辨识信息W的内容可以视情况改变。例如，可以将音频信号SG自身(例如，波形数据)记录在搜索表TBL中作为一条辨识信息W。匹配器15从搜索表TBL搜索具有与接收自终端装置12的接收的音频信号X类似或匹配的波形的一条辨识信息W。匹配器15可以包括在信息管理系统14中或终端装置12中。
在上述模式的与导览语音V的发射并行地通过声音通信向终端装置12通知识别信息D的构造中，需要提供能够再现调制的信号SD(包括识别信息D在内)的频带(例如，18kHz或更高且20kHz或更低)的声音发射装置166。在图26示出的构造中，存在这样的优点：不论声音发射装置166可再现的频带如何，都可以向终端装置12通知识别信息D。因此，图26的构造优选用于使用无法再现高音高的可听频带的常规声音发射装置166的情形。在通过声音通信向终端装置12通知识别信息D的构造中，存在这样的优点：终端装置12无需向匹配器15发送接收的音频信号X，从而减小了通信量，并且无需使用利用接收的音频信号X搜索识别信息D的匹配器15。
(8)可以通过使用单独装置或通过物理地彼此分开的多个装置(服务器)来形成上述模式中描述的信息管理系统14。例如，可以采用将上述模式中的信息管理系统14分布于包括识别信息设置器26的第一服务器和包括不同于识别信息设置器26的元件的第二服务器的构造，第一服务器和第二服务器经由例如通信网络18来彼此进行通信。从以上描述中将显而易见的是，本发明的信息提供系统10涵盖单独装置和装置的集合这两者。此外，可以由单个装置形成包括信息管理系统14和声音发射系统16的整个信息提供系统10。
(9)虽然在上述模式中用于提供展览设施M中的导览的导览语音V的再现被示出为示例，但是声音发射系统16的声音发射装置166可以发射的声音的类型不限于导览语音V。例如，上述模式可以用于再现各种声音，比如音乐。从以上描述中还将显而易见的是，上述模式中的音频信号SG可以统一地表示为指示待再现的声音(用于再现的声音)的信号。
(10)在上述模式中，示出了这样的构造，其中声音发射系统16的声音发射装置166发射与音频信号S对应的声音，每个音频信号S包括表示导览语音V的音频信号SG和包括识别信息D的调制的信号SD。但是，可以省略导览语音V(用于再现的声音)的再现。具体地，信息管理系统14的信号处理器32可以将包括识别信息设置器26分配的识别信息D的调制的信号SD作为音频信号S(音频文件)传输至声音发射系统16。声音发射系统16通过将音频信号S提供至声音发射装置166来发射识别信息D的声音。终端装置12从接收的音频信号X(其通过声音接收装置56接收从声音发射系统16发射的声音而产生)中提取识别信息D。随后，终端装置12从信息管理系统14的信息提供器36获取与识别信息D对应的相关信息Q。从以上描述中将显而易见的是，声音接收装置56统一地表示为通过接收根据各音频信号S(其包括各自包括识别信息D的各调制的信号SD)发射的声音来产生接收的音频信号X的元件。但是，并没有对音频信号S是否包括导览语音V的音频信号SG进行规定。
(11)在上述模式中，使用声音通信来向终端装置12通知识别信息D。用于向终端装置12通知识别信息D的通信方案不限于上述示例。例如，利用红外线或无线电波的无线通信(例如，近场通信)可用于向终端装置12通知识别信息D。
(12)产生导览语音的音频信号SG的方式或产生相关信息Q的方式不限于上述模式中给出的示例(图3、图10至图22)。关于第三实施例，音频信号获取器22、相关信息获取器24、识别信息设置器26、信号处理器32和关联管理器34均非必要元件，只要信息管理系统14包括信息提供器36和存储装置144即可。因此，可以采用其中单独装置包括这些元件并且使得存储装置144存储音频信号S和相关信息Q的构造。
(13)在上述模式中，信息管理系统、声音发射系统和终端装置均可以通过控制装置及协作程序或通过使用专用电路来实现。根据本发明的程序可以以存储有程序的计算机可读存储介质的形式来提供，并且可安装在计算机中。例如，存储介质可以为非暂时性存储介质，其代表示例为光存储介质(光盘)，比如CD-ROM。这种存储介质的示例还可以包括任何类型的公知存储介质，比如磁存储介质或半导体存储介质。根据本发明的程序可以通过通信网络分发并且可安装在计算机中。
附图标记
100…通信系统；10…信息提供系统；12…终端装置；14…信息管理系统；142…控制装置；144…存储装置；146…输入装置；148…显示装置；16…声音发射系统；162…控制装置；164…存储装置；166…声音发射装置；18…通信网络；22…音频信号获取器；24…相关信息获取器；26…识别信息设置器；32…信号处理器；322…解调处理器；324…混合处理器；34…关联管理器；36…信息提供器；50…控制装置；51…信息提取器；52…存储装置；54…通信装置；542…发射器；544…获取器；56…声音接收装置；58…输出装置；200…信号供应装置。

Claims (17)

1.一种终端装置，包括：
声音接收装置，其构造为接收根据音频信号发射的声音以产生接收的音频信号，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；
信息提取装置，其构造为从所述声音接收装置产生的所述接收的音频信号中提取所述识别信息；
发送装置，其构造为向信息提供装置发送信息请求，该信息请求包括所述信息提取装置所提取的识别信息；
获取装置，其构造为从所述信息提供装置获取多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关；和
输出装置，其构造为输出所述获取装置获取到的所述一条相关信息。
2.根据权利要求1所述的终端装置，
其中，所述发送装置发送包括语言信息的信息请求，所述语言信息指示所述终端装置中指定的语言；并且
其中，所述获取装置获取所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
3.根据权利要求2所述的终端装置，其中，所述语言信息指示所述终端装置的OS中的语言设定所指定的语言。
4.根据权利要求2所述的终端装置，其中，所述语言信息指示所述终端装置的用户所指定的语言。
5.根据权利要求2至4中任一项所述的终端装置，其中，所述信息请求中的语言信息所指定的语言的一条相关信息是表示口声的音频信号，该口声是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串的发音声。
6.根据权利要求2至4中任一项所述的终端装置，其中，所述信息请求中的语言信息所指定的语言的一条相关信息是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串。
7.根据权利要求2至4中任一项所述的终端装置，其中，并行于以所述不同语言中的第一语言表示的用于再现的声音的发射，所述输出装置输出所述信息请求中的语言信息所指定的与所述第一语言不同的语言的一条相关信息。
8.一种信息提供系统，包括：
声音发射装置，其构造为根据音频信号发射声音，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；和
信息提供装置，其构造为从终端装置接收信息请求，该信息请求包括从所述声音发射装置发射的声音中提取的所述识别信息，并且构造为向所述终端装置发送多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关。
9.根据权利要求8所述的信息提供系统，其中，所述信息提供装置接收包括语言信息的信息请求，所述语言信息指示所述终端装置中指定的语言，并且所述信息提供装置向所述终端装置发送所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
10.根据权利要求9所述的信息提供系统，其中，所述信息请求中的语言信息所指定的语言的一条相关信息是表示口声的音频信号，该口声是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串的发音声。
11.根据权利要求9所述的信息提供系统，其中，所述信息请求中的语言信息所指定的语言的一条相关信息是表示口声的字符串，该口声是根据从所述用于再现的声音的发音内容到所述指定的语言的翻译导出的字符串的发音声。
12.一种信息呈现方法，包括：
在终端装置中，
接收根据音频信号发射的声音以产生接收的音频信号，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；
从所述接收的音频信号中提取所述识别信息；
向信息提供装置发送包括所述识别信息的信息请求；
从所述信息提供装置获取多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关；和
输出所述一条相关信息。
13.根据权利要求12所述的信息呈现方法，
其中，所述信息请求包括语言信息，所述语言信息指示所述终端装置中指定的语言；并且
其中，在获取时，获取所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
14.一种信息提供方法，包括：
根据音频信号发射声音，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；和
从终端装置接收包括从所发射的声音中提取的所述识别信息的信息请求，并且向所述终端装置发送多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关。
15.根据权利要求14所述的信息提供方法，
其中，所述信息请求包括语言信息，所述语言信息指示所述终端装置中指定的语言；并且
其中，在发送时，向所述终端装置发送所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
16.一种存储有使得计算机执行以下处理的程序的计算机可读存储介质：
声音接收处理，其接收根据音频信号发射的声音以产生接收的音频信号，该音频信号包括表示用于再现的声音的音频信号并且包括调制的信号，该调制的信号包括所述用于再现的声音的识别信息；
信息提取处理，其从通过所述声音接收处理产生的所述接收的音频信号中提取所述识别信息；
发送处理，其向信息提供装置发送信息请求，该信息请求包括通过所述信息提取处理提取的识别信息；
获取处理，其从所述信息提供装置获取多条相关信息中的一条相关信息，所述多条相关信息中的每一条对应于所述信息请求中包括的识别信息并且均与所述用于再现的声音相关；和
输出处理，其输出通过所述获取处理获取到的所述一条相关信息。
17.根据权利要求16所述的计算机可读存储介质，
其中，所述信息请求包括语言信息，所述语言信息指示终端装置中指定的语言；并且
其中，所述获取处理获取所述信息请求中的语言信息所指定的语言的一条相关信息，该条相关信息是不同语言且均对应于所述信息请求中的识别信息的多条相关信息当中的一条相关信息。
CN201580040538.8A 2014-07-29 2015-07-27 终端装置、信息提供系统、信息呈现方法和信息提供方法 Active CN106537496B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
JP2014-154118 2014-07-29
JP2014154118 2014-07-29
JP2014217346 2014-10-24
JP2014-217346 2014-10-24
JP2015092283A JP5871088B1 (ja) 2014-07-29 2015-04-28 端末装置、情報提供システム、情報提供方法およびプログラム
JP2015-092283 2015-04-28
PCT/JP2015/071237 WO2016017577A1 (ja) 2014-07-29 2015-07-27 端末装置、情報提供システム、情報提示方法および情報提供方法

Publications (2)

Publication Number Publication Date
CN106537496A CN106537496A (zh) 2017-03-22
CN106537496B true CN106537496B (zh) 2019-12-20

Family

ID=55217478

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580040538.8A Active CN106537496B (zh) 2014-07-29 2015-07-27 终端装置、信息提供系统、信息呈现方法和信息提供方法

Country Status (7)

Country Link
US (1) US10733386B2 (zh)
EP (1) EP3176782B8 (zh)
JP (1) JP5871088B1 (zh)
KR (2) KR20170125415A (zh)
CN (1) CN106537496B (zh)
AU (1) AU2015297648B2 (zh)
WO (1) WO2016017577A1 (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6484958B2 (ja) 2014-08-26 2019-03-20 ヤマハ株式会社 音響処理装置、音響処理方法およびプログラム
JP6181231B1 (ja) * 2016-05-02 2017-08-16 株式会社Ｃｏ３ 音声ガイド提供システム
JP6780305B2 (ja) * 2016-06-06 2020-11-04 ヤマハ株式会社 情報処理装置および情報提供方法
JP6834634B2 (ja) * 2017-03-15 2021-02-24 ヤマハ株式会社 情報提供方法および情報提供システム
JP6809319B2 (ja) * 2017-03-16 2021-01-06 ヤマハ株式会社 音響通信のための装置および方法
EP3678018A4 (en) * 2017-08-31 2021-03-31 Yamaha Corporation INFORMATION PROVIDING PROCESS AND INFORMATION PROVIDING APPARATUS
CN107734036B (zh) * 2017-10-19 2021-01-19 威盛电子股份有限公司 通信方法与使用此方法的通信系统
US10276175B1 (en) 2017-11-28 2019-04-30 Google Llc Key phrase detection with audio watermarking
JP6962158B2 (ja) * 2017-12-01 2021-11-05 ヤマハ株式会社 機器制御システム、機器制御方法、及びプログラム
JP6955452B2 (ja) * 2018-01-26 2021-10-27 Toa株式会社 放送音形成装置、及び情報提示システム
JP6600374B2 (ja) * 2018-03-01 2019-10-30 ヤマハ株式会社 情報処理方法、情報処理装置およびプログラム
JP7196426B2 (ja) * 2018-05-30 2022-12-27 ヤマハ株式会社 情報処理方法および情報処理システム
JP2019219872A (ja) * 2018-06-19 2019-12-26 株式会社ｉＴｅｓｔ インフォメーション提供システム
WO2020009038A1 (ja) * 2018-07-02 2020-01-09 ヤマハ株式会社 放送システム、端末装置、放送方法、端末装置の動作方法、および、プログラム
JP7279310B2 (ja) * 2018-07-17 2023-05-23 カシオ計算機株式会社 電子機器、学習支援装置、学習支援システム、電子機器の制御方法、学習支援装置の制御方法、電子機器の制御プログラム及び学習支援装置の制御プログラム
JP6883562B2 (ja) * 2018-10-05 2021-06-09 株式会社京三製作所 情報案内システム
JP7099241B2 (ja) * 2018-10-11 2022-07-12 ヤマハ株式会社 情報取得装置および情報取得方法
JP6791228B2 (ja) * 2018-11-09 2020-11-25 ヤマハ株式会社 情報提供方法、情報提供システム、端末装置の動作方法、端末装置およびプログラム
US11304013B2 (en) 2019-02-08 2022-04-12 Starkey Laboratories, Inc. Assistive listening device systems, devices and methods for providing audio streams within sound fields
JP7074116B2 (ja) * 2019-10-03 2022-05-24 ヤマハ株式会社 情報処理方法および情報処理装置
JP7385531B2 (ja) * 2020-06-17 2023-11-22 Toa株式会社 音響通信システム、音響送信装置、音響受信装置、プログラムおよび音響信号送信方法
US11812213B2 (en) 2020-09-30 2023-11-07 Starkey Laboratories, Inc. Ear-wearable devices for control of other devices and related methods
JP7126590B1 (ja) * 2021-05-18 2022-08-26 三菱電機株式会社 音響コミュニケーション用送受信装置及び音響コミュニケーションシステム

Family Cites Families (91)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3263207A (en) 1964-03-27 1966-07-26 Herbert L West Transistor underwater telephone system
JP2539507B2 (ja) * 1989-01-20 1996-10-02 株式会社日立製作所 案内情報再生装置及びそれを用いた案内システム
US7064749B1 (en) * 1992-11-09 2006-06-20 Adc Technology Inc. Portable communicator
JPH088855A (ja) 1994-06-07 1996-01-12 Neptune:Kk 輸送機用案内放送装置
JPH0879199A (ja) 1994-09-02 1996-03-22 Sony Corp 文字情報提供システム
US5615301A (en) * 1994-09-28 1997-03-25 Rivers; W. L. Automated language translation system
JP3558239B2 (ja) 1995-06-30 2004-08-25 株式会社リコー 情報配信システム
JPH10174190A (ja) 1996-12-16 1998-06-26 Matsushita Electric Ind Co Ltd 音響再生装置
JPH1115827A (ja) 1997-06-19 1999-01-22 Fujitsu Ltd 翻訳装置および記録媒体
JPH11252121A (ja) * 1998-03-05 1999-09-17 Ntt Data Corp 位置依存情報提供システム
JP3348831B2 (ja) 1998-05-11 2002-11-20 日本電信電話株式会社 文字併用音声通信システム、通信サーバ装置、及び通信表示装置
JP2000207170A (ja) * 1999-01-14 2000-07-28 Sony Corp 情報処理装置および情報処理方法
JP3410088B2 (ja) 1999-06-02 2003-05-26 富士通株式会社 現実世界の感知情報に対応した仮想コミュニケーション空間構築システム
GB9917985D0 (en) 1999-07-30 1999-09-29 Scient Generics Ltd Acoustic communication system
US6546365B1 (en) * 2000-02-04 2003-04-08 International Business Machines Corporation System for national language support and automated translation table
US20010055391A1 (en) 2000-04-27 2001-12-27 Jacobs Paul E. System and method for extracting, decoding, and utilizing hidden data embedded in audio signals
JP3747759B2 (ja) * 2000-09-20 2006-02-22 日本ビクター株式会社 情報配信システム
JP2002217839A (ja) 2001-01-12 2002-08-02 Nec Corp 弾性波による通信システム
JP4657471B2 (ja) 2001-03-05 2011-03-23 泉陽興業株式会社 観覧施設案内システム
US20040220995A1 (en) 2001-04-23 2004-11-04 Takehiko Tsutsumi Method, program, and apparatus for delegating information processing
US6542200B1 (en) * 2001-08-14 2003-04-01 Cheldan Technologies, Inc. Television/radio speech-to-text translating processor
JP2003186500A (ja) 2001-12-17 2003-07-04 Sony Corp 情報伝達システム、情報符号化装置および情報復号装置
US7062339B2 (en) * 2002-05-09 2006-06-13 Matsushita Electric Industrial Co., Ltd. Method and apparatus for communicating between a portable device and a server
TW200417228A (en) * 2002-09-17 2004-09-01 Ginganet Corp Sign language image presentation apparatus, sign language image input/output apparatus, and system for sign language translation
US7460684B2 (en) * 2003-06-13 2008-12-02 Nielsen Media Research, Inc. Method and apparatus for embedding watermarks
US20050192095A1 (en) * 2004-02-27 2005-09-01 Chiu-Hao Cheng Literal and/or verbal translator for game and/or A/V system
US7516881B1 (en) * 2004-07-07 2009-04-14 Diebold Self-Service Systems Division Of Diebold, Incorporated Cash dispensing automated banking machine user interface system and method
JP2006251676A (ja) 2005-03-14 2006-09-21 Akira Nishimura 振幅変調を用いた音響信号への電子透かしデータの埋め込み・検出装置
JP3822224B1 (ja) 2005-06-28 2006-09-13 株式会社フィールドシステム 情報提供システム
JP4899416B2 (ja) 2005-10-27 2012-03-21 大日本印刷株式会社 ネットワーク接続装置
JP4343896B2 (ja) 2005-12-02 2009-10-14 ソニー株式会社 再生端末装置及び出力方法
US20070135135A1 (en) 2005-12-09 2007-06-14 Kenneth Brown Electronic equipment with content management function and program for providing same
JP2007164659A (ja) 2005-12-16 2007-06-28 Absurd Spear:Kk 音楽情報を利用した情報配信システム及び情報配信方法
US20100225808A1 (en) 2006-01-27 2010-09-09 Thomson Licensing Closed-Captioning System and Method
US7822606B2 (en) * 2006-07-14 2010-10-26 Qualcomm Incorporated Method and apparatus for generating audio information from received synthesis information
CN101115124B (zh) 2006-07-26 2012-04-18 日电（中国）有限公司 基于音频水印识别媒体节目的方法和装置
EP1902906B1 (en) * 2006-09-22 2017-07-26 Harman Becker Automotive Systems GmbH Add-on module for externally controlling a speech dialog system
JP4024285B1 (ja) 2007-01-11 2007-12-19 有 小山 警報表示システム
JP2008299032A (ja) 2007-05-31 2008-12-11 Akira Nishimura 語学教材および文字データ再生装置
US20090012788A1 (en) * 2007-07-03 2009-01-08 Jason Andre Gilbert Sign language translation system
JP2009020291A (ja) * 2007-07-11 2009-01-29 Yamaha Corp 音声処理装置および通信端末装置
US8676273B1 (en) * 2007-08-24 2014-03-18 Iwao Fujisaki Communication device
JP2009180893A (ja) * 2008-01-30 2009-08-13 Dainippon Printing Co Ltd 音響信号で制御されるコンテンツ再生装置
JP2009205485A (ja) 2008-02-28 2009-09-10 Fujitsu Fsas Inc 乗降車通知方法及び乗降車通知システム
GB2460306B (en) 2008-05-29 2013-02-13 Intrasonics Sarl Data embedding system
JP2010011282A (ja) 2008-06-30 2010-01-14 Yamaha Corp 変調装置、復調装置、情報伝達システム、変調方法および復調方法
JP5589308B2 (ja) 2009-05-29 2014-09-17 ヤマハ株式会社 オーディオ信号受信装置、オーディオ信号再生装置および音響通信システム
EP2312763A4 (en) 2008-08-08 2015-12-23 Yamaha Corp MODULATION DEVICE AND DEMODULATION DEVICE
JP5343758B2 (ja) 2008-08-21 2013-11-13 ヤマハ株式会社 音声再生装置
EP2230596A1 (en) * 2009-02-27 2010-09-22 Research In Motion Limited Methods and apparatus for use in selectively retrieving and displaying user interface information of a wireless peripheral device
JP2010284423A (ja) 2009-06-15 2010-12-24 Toshiba Corp 医用画像診断装置及び医用画像撮影方法
JP2011109629A (ja) * 2009-11-17 2011-06-02 Toru Tsurubuchi 自動再生音声ガイドシステム
EP2362385A1 (en) 2010-02-26 2011-08-31 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Watermark signal provision and watermark embedding
EP2550652A4 (en) * 2010-03-25 2015-01-21 Verisign Inc SYSTEMS AND METHOD FOR PROVIDING ACCESS TO RESOURCES THROUGH IMPROVED AUDIO SIGNALS
US9183560B2 (en) * 2010-05-28 2015-11-10 Daniel H. Abelow Reality alternate
JP2011255982A (ja) 2010-06-07 2011-12-22 Hitachi Ltd エレベーターの情報通知装置
US9143881B2 (en) * 2010-10-25 2015-09-22 At&T Intellectual Property I, L.P. Providing interactive services to enhance information presentation experiences using wireless technologies
US9002717B2 (en) * 2010-12-03 2015-04-07 At&T Intellectual Property I, L.P. Method and apparatus for audio communication of information
US20120214416A1 (en) 2011-02-23 2012-08-23 Jonathan Douglas Kent Methods and apparatuses for communication between devices
US9754045B2 (en) * 2011-04-01 2017-09-05 Harman International (China) Holdings Co., Ltd. System and method for web text content aggregation and presentation
KR101563951B1 (ko) 2011-04-05 2015-10-28 야마하 가부시키가이샤 정보 제공 시스템, 식별 정보 해결 서버, 및 휴대 단말 장치
JP2013005377A (ja) 2011-06-21 2013-01-07 Yamaha Corp 携帯端末装置および情報提供システム
JP2013008109A (ja) 2011-06-22 2013-01-10 Yamaha Corp 文書投稿支援システム、携帯端末装置および文書投稿支援プログラム
JP2013024915A (ja) * 2011-07-15 2013-02-04 Yamaha Corp ドングル（ｄｏｎｇｌｅ）装置および再生システム
JP2013068657A (ja) 2011-09-20 2013-04-18 Casio Comput Co Ltd 画像生成装置、画像生成方法及びそのプログラム、並びに演奏支援装置、演奏支援方法及びプログラム
JP5953687B2 (ja) 2011-09-26 2016-07-20 ヤマハ株式会社 情報処理装置及びプログラム
JP5454544B2 (ja) 2011-10-12 2014-03-26 富士ゼロックス株式会社 画像処理装置、情報提供システム及びプログラム
JP5866728B2 (ja) * 2011-10-14 2016-02-17 サイバーアイ・エンタテインメント株式会社 画像認識システムを備えた知識情報処理サーバシステム
US9053096B2 (en) 2011-12-01 2015-06-09 Elwha Llc Language translation based on speaker-related information
JP2013117688A (ja) 2011-12-05 2013-06-13 Sony Corp 音響処理装置、音響処理方法、プログラム、記録媒体、サーバ装置、音響再生装置および音響処理システム
US9110891B2 (en) * 2011-12-12 2015-08-18 Google Inc. Auto-translation for multi user audio and video
JP2013125047A (ja) 2011-12-13 2013-06-24 Zenrin Datacom Co Ltd 情報提供システム、使用言語種別提供端末装置、情報提供装置、情報提供方法、使用言語種別提供プログラムおよび情報提供プログラム
JP6167542B2 (ja) 2012-02-07 2017-07-26 ヤマハ株式会社 電子装置及びプログラム
CN102868752A (zh) * 2012-09-25 2013-01-09 北京苹果派科技有限公司 一种数据传输方法、系统及终端
US9305559B2 (en) 2012-10-15 2016-04-05 Digimarc Corporation Audio watermark encoding with reversing polarity and pairwise embedding
US20140120503A1 (en) * 2012-10-25 2014-05-01 Andrew Nicol Method, apparatus and system platform of dual language electronic book file generation
CN203136168U (zh) * 2012-12-17 2013-08-14 北京天安信通科技有限责任公司 一种基于超声波或声波进行用户识别的无线移动通信终端
CN103077165A (zh) * 2012-12-31 2013-05-01 威盛电子股份有限公司 自然语言对话方法及其系统
JP2014138324A (ja) * 2013-01-17 2014-07-28 Casio Comput Co Ltd 情報提供システム、サーバシステム、端末装置、情報提供方法及びプログラム
JP6255946B2 (ja) 2013-02-21 2018-01-10 ヤマハ株式会社 復調装置、音響伝送システム、プログラム及び復調方法
KR102108500B1 (ko) * 2013-02-22 2020-05-08 삼성전자 주식회사 번역 기반 통신 서비스 지원 방법 및 시스템과, 이를 지원하는 단말기
US9093064B2 (en) * 2013-03-11 2015-07-28 The Nielsen Company (Us), Llc Down-mixing compensation for audio watermarking
US20140269678A1 (en) * 2013-03-15 2014-09-18 Evan Patrick McGee Method for providing an application service, including a managed translation service
CN110083714B (zh) * 2013-04-05 2024-02-13 杜比实验室特许公司 用于自动文件检测的对来自基于文件的媒体的特有信息的获取、恢复和匹配
KR101288305B1 (ko) 2013-05-02 2013-08-01 (주)아이스플럽 차량에서의 자동 안내 방송 장치를 활용한 위치 정보 제공 시스템, 모바일 기기, 및 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체
US20150149146A1 (en) * 2013-11-22 2015-05-28 Jay Abramovitz Systems for delivery of audio signals to mobile devices
US20150347399A1 (en) * 2014-05-27 2015-12-03 Microsoft Technology Licensing, Llc In-Call Translation
US9614969B2 (en) * 2014-05-27 2017-04-04 Microsoft Technology Licensing, Llc In-call translation
JP6484958B2 (ja) 2014-08-26 2019-03-20 ヤマハ株式会社 音響処理装置、音響処理方法およびプログラム
US20160170970A1 (en) * 2014-12-12 2016-06-16 Microsoft Technology Licensing, Llc Translation Control
WO2017112813A1 (en) * 2015-12-22 2017-06-29 Sri International Multi-lingual virtual personal assistant

Also Published As

Publication number Publication date
AU2015297648B2 (en) 2017-07-06
EP3176782B1 (en) 2020-12-02
JP2016075890A (ja) 2016-05-12
EP3176782B8 (en) 2021-02-24
EP3176782A1 (en) 2017-06-07
KR20170125415A (ko) 2017-11-14
AU2015297648A1 (en) 2017-03-16
JP5871088B1 (ja) 2016-03-01
EP3176782A4 (en) 2018-03-28
KR20170033429A (ko) 2017-03-24
US10733386B2 (en) 2020-08-04
KR101796429B1 (ko) 2017-11-09
WO2016017577A1 (ja) 2016-02-04
CN106537496A (zh) 2017-03-22
US20170206195A1 (en) 2017-07-20

Similar Documents

Publication Publication Date Title
CN106537496B (zh) 终端装置、信息提供系统、信息呈现方法和信息提供方法
JP6860055B2 (ja) 情報提供方法、端末装置の動作方法、情報提供システム、端末装置およびプログラム
CN106537497B (zh) 信息管理系统和信息管理方法
JP7331645B2 (ja) 情報提供方法および通信システム
JP2022017568A (ja) 情報提供方法、情報提供システムおよびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant