JP2019071123A - Information providing system, information providing method, and program - Google Patents

Information providing system, information providing method, and program Download PDF

Info

Publication number
JP2019071123A
JP2019071123A JP2019008999A JP2019008999A JP2019071123A JP 2019071123 A JP2019071123 A JP 2019071123A JP 2019008999 A JP2019008999 A JP 2019008999A JP 2019008999 A JP2019008999 A JP 2019008999A JP 2019071123 A JP2019071123 A JP 2019071123A
Authority
JP
Japan
Prior art keywords
guidance
information
unit
voice
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019008999A
Other languages
Japanese (ja)
Other versions
JP6881477B2 (en
Inventor
翔太 森口
Shota MORIGUCHI
翔太 森口
貴裕 岩田
Takahiro Iwata
貴裕 岩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2019008999A priority Critical patent/JP6881477B2/en
Publication of JP2019071123A publication Critical patent/JP2019071123A/en
Application granted granted Critical
Publication of JP6881477B2 publication Critical patent/JP6881477B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To reproduce a content associated with a guide voice in conjunction with emission of the guide voice.SOLUTION: An information providing system 100 has an information distribution unit that transmits, to a mobile terminal 20, distribution information Q for reproducing a content associated with a guide voice in conjunction with emission of the guide voice performed by a sound emitting device.SELECTED DRAWING: Figure 1

Description

本発明は、画像や音声等のコンテンツを移動端末にて再生するための技術に関する。   The present invention relates to a technology for reproducing content such as images and sounds on a mobile terminal.

画像や音声等のコンテンツを移動端末にて再生するための各種の技術が従来から提案されている。例えば特許文献1には、配信対象として事前に登録された移動端末に対して、当該移動端末の位置に応じたコンテンツを配信する技術が開示されている。   Various techniques for reproducing contents such as images and sounds on mobile terminals have been conventionally proposed. For example, Patent Document 1 discloses a technique for distributing content according to the position of a mobile terminal to a mobile terminal registered in advance as a distribution target.

特開2002−351905号公報Japanese Patent Application Laid-Open No. 2002-351905

例えば電車やバス等の交通機関では、乗降や乗換等に関する情報を利用者に案内する案内音声が随時に再生される。案内音声の発音内容の文字列や翻訳文等のコンテンツを案内音声の放音毎に利用者の移動端末に提供できれば、例えば案内音声の聴取が困難な難聴者や案内音声の言語の理解が困難な外国人等の利用者も案内音声の内容を把握できて便利である。しかし、特許文献1の技術のもとでは、実際の案内音声の放音に連動したコンテンツの提供は想定されていない。以上の事情を考慮して、本発明は、案内音声に関連するコンテンツを当該案内音声の放音に連動して移動端末にて再生させることを目的とする。   For example, in a transportation system such as a train or a bus, a guidance voice for guiding a user about information about getting on / off or transfer is reproduced at any time. If it is possible to provide the mobile terminal of the user with content such as a character string of the pronunciation content of the guidance voice or a translation for each emission of the guidance voice, for example, it is difficult to understand the language of the guidance voice. Foreign users are also useful because they can grasp the contents of the guidance voice. However, under the technology of Patent Document 1, provision of content linked to the actual sound emission of the guidance voice is not assumed. In consideration of the above circumstances, the present invention has an object of causing a mobile terminal to reproduce content related to a guidance voice in conjunction with the emission of the guidance voice.

以上の課題を解決するために、本発明の好適な態様に係る情報提供システムは、案内音声に関連するコンテンツを再生するための配信情報を、放音装置による当該案内音声の放音に連動して、移動端末に送信する情報配信部を具備する。   In order to solve the above problems, an information providing system according to a preferred aspect of the present invention interlocks distribution information for reproducing content related to a guidance voice with the emission of the guidance voice by a sound emitting device. And an information distribution unit for transmitting to the mobile terminal.

本発明の他の態様に係る情報提供システムは、案内音声に関連するコンテンツの提供指示を当該案内音声の放音毎に発生する提供指示手段と、案内音声に関連するコンテンツの提供対象として登録された移動端末に、提供指示に係るコンテンツを再生するための配信情報を送信する情報配信手段とを具備する。以上の構成では、案内音声に関連するコンテンツの提供指示が案内音声の放音毎に生成され、提供対象として登録された移動端末に、提供指示に係るコンテンツを再生するための配信情報が送信される。したがって、案内音声に関連するコンテンツを案内音声の放音に連動して移動端末にて再生させることが可能である。   An information providing system according to another aspect of the present invention is registered as providing instruction means for generating an instruction to provide content related to a guidance voice for each emission of the guidance voice, and as a provision target of content related to the guidance voice. The mobile terminal is provided with an information distribution means for transmitting distribution information for reproducing the content relating to the provision instruction. In the above configuration, the provision instruction of the content related to the guidance voice is generated for each sound emission of the guidance voice, and the distribution information for reproducing the content related to the provision instruction is transmitted to the mobile terminal registered as the provision target. Ru. Therefore, it is possible to reproduce the content related to the guidance voice on the mobile terminal in conjunction with the emission of the guidance voice.

本発明の好適な態様に係る情報提供システムは、案内音声が放音される場所で移動端末が取得した案内識別情報を当該移動端末から受信し、当該案内識別情報で指定される案内対象の案内音声に関連するコンテンツの提供対象として当該移動端末を登録する登録処理手段を具備する。以上の態様では、案内音声が放音される場所で案内識別情報を取得した移動端末がコンテンツの提供対象として登録されるから、案内音声が放音される場所に位置する移動端末に限定してコンテンツを提供できるという利点がある。例えば、案内音声が放音される場所に設置された情報画像の撮像により移動端末が取得した案内識別情報を登録処理手段が当該移動端末から受信する構成や、案内音声が放音される場所において近距離無線通信で移動端末に送信される案内識別情報を登録処理手段が当該移動端末から受信する構成が好適である。   The information providing system according to a preferred aspect of the present invention receives from the mobile terminal the guidance identification information acquired by the mobile terminal at the place where the guidance voice is emitted, and guides the guidance target specified by the guidance identification information. A registration processing unit is provided which registers the mobile terminal as a provision target of content related to voice. In the above aspect, since the mobile terminal which acquired the guidance identification information at the place where the guidance voice is emitted is registered as the provision target of the content, it is limited to the mobile terminal located at the place where the guidance speech is emitted. It has the advantage of being able to provide content. For example, in the configuration where the registration processing means receives from the mobile terminal the guidance identification information acquired by the mobile terminal by capturing the information image installed at the location where the guidance voice is emitted, or in the location where the guidance voice is emitted It is preferable that the registration processing means receives, from the mobile terminal, the guide identification information transmitted to the mobile terminal by the short distance wireless communication.

本発明の好適な態様に係る情報提供システムは、案内音声の音響成分と当該案内音声に関連するコンテンツの識別情報の音響成分とを含有する音響信号を放音部に供給する再生処理手段と、音響信号から識別情報を抽出する情報抽出手段とを具備し、提供指示手段は、情報抽出手段が抽出した識別情報で指定されるコンテンツの提供指示を発生する。以上の態様では、放音部に対する音響信号の供給により案内音声が放音される一方、当該音響信号に音響成分として含有される識別情報が情報抽出手段により抽出されたうえで提供指示が生成される。すなわち、放音部による案内音声の放音と情報抽出手段による識別情報の抽出とに音響信号が共用される。したがって、放音部による案内音声の放音と提供指示手段による提供指示の生成(ひいては移動端末によるコンテンツの再生)とを容易かつ確実に連動させることができる。   An information providing system according to a preferred aspect of the present invention is a reproduction processing means for supplying an audio signal including an acoustic component of a guidance voice and an acoustic component of identification information of content related to the guidance voice to a sound emitting unit; And an information extraction unit that extracts identification information from the acoustic signal, and the provision instruction unit generates a provision instruction of the content designated by the identification information extracted by the information extraction unit. In the above aspect, the guidance voice is emitted by the supply of the acoustic signal to the sound emission unit, while the identification information included as the acoustic component in the acoustic signal is extracted by the information extraction unit and the provision instruction is generated. Ru. That is, the acoustic signal is shared by the emission of the guidance voice by the sound emission unit and the extraction of the identification information by the information extraction unit. Therefore, it is possible to easily and reliably interlock the emission of the guidance sound by the sound emission unit and the generation of the provision instruction by the provision instruction unit (and the reproduction of the content by the mobile terminal).

案内音声の音響成分と識別情報の音響成分とを含有する音響信号を利用する構成の好適例に係る情報提供システムは、情報抽出手段と提供指示手段とを含む管理端末を具備し、再生処理手段は、音響信号を有線で管理端末に送信する。以上の態様では、案内音声の音響成分と識別情報の音響成分とを含有する音響信号が有線で再生処理手段から管理端末に送信される。したがって、識別情報の音響成分が知覚され難くなるように当該音響成分の音量を充分に抑制した場合でも音響信号から高精度に識別情報を特定できるという利点がある。   An information providing system according to a preferred example of a configuration using an acoustic signal containing an acoustic component of a guidance voice and an acoustic component of identification information comprises a management terminal including an information extraction unit and a provision instruction unit, and a reproduction processing unit Sends a sound signal to the management terminal by wire. In the above aspect, an acoustic signal containing the acoustic component of the guidance voice and the acoustic component of the identification information is transmitted from the reproduction processing means to the management terminal by wire. Therefore, there is an advantage that the identification information can be specified from the acoustic signal with high accuracy even when the sound volume of the acoustic component is sufficiently suppressed so that the acoustic component of the identification information is not easily perceived.

案内音声の音響成分と識別情報の音響成分とを含有する音響信号を利用する構成の好適例において、音響信号は、案内音声を表す原音響信号のうち放音部による再生帯域の上限値から低域側の所定幅にわたる利用帯域の音響成分を抑圧した第1音響信号と、利用帯域内の音響成分として識別情報を表す第2音響信号とを合成した信号である。以上の態様では、案内音声の原音響信号のうち識別情報Dの音響成分が合成される利用帯域内の音響成分が抑圧されるから、識別情報の音響成分の音量を充分に抑制した場合にも音響信号から高精度に識別情報を特定できるという利点がある。   In a preferred example of the configuration using an acoustic signal containing the acoustic component of the guidance voice and the acoustic component of the identification information, the acoustic signal is lower than the upper limit value of the reproduction band by the sound emitting portion in the original acoustic signal representing the guidance voice It is the signal which synthesize | combined the 1st acoustic signal which suppressed the acoustic component of the utilization band over the predetermined width | variety by the side of a zone, and the 2nd acoustic signal showing identification information as an acoustic component in a utilization band. In the above aspect, since the acoustic component in the utilization band where the acoustic component of the identification information D is synthesized among the original acoustic signal of the guidance voice is suppressed, even when the volume of the acoustic component of the identification information is sufficiently suppressed. There is an advantage that identification information can be identified with high accuracy from an acoustic signal.

以上の各態様に係る情報提供システムは、専用の電子回路で実現されるほか、CPU(Central Processing Unit)等の汎用の演算処理装置とプログラムとの協働によっても実現される。本発明のプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされ得る。記録媒体は、例えば非一過性(non-transitory)の記録媒体であり、CD-ROM等の光学式記録媒体(光ディスク)が好例であるが、半導体記録媒体や磁気記録媒体等の公知の任意の形式の記録媒体を包含し得る。なお、例えば、本発明のプログラムは、通信網を介した配信の形態で提供されてコンピュータにインストールされ得る。   The information providing system according to each of the above aspects is realized not only by a dedicated electronic circuit but also by cooperation of a general-purpose processing unit such as a CPU (Central Processing Unit) and a program. The program of the present invention may be provided in the form of being stored in a computer readable recording medium and installed on the computer. The recording medium is, for example, a non-transitory recording medium, and is preferably an optical recording medium (optical disc) such as a CD-ROM, but any known medium such as a semiconductor recording medium or a magnetic recording medium may be used. Recording media of the form Note that, for example, the program of the present invention may be provided in the form of distribution via a communication network and installed on a computer.

また、本発明は、前述の各態様に係る情報提供システムの動作方法(情報提供方法)としても特定され得る。具体的には、本発明の好適な態様に係る情報提供方法は、案内音声に関連するコンテンツの提供指示を当該案内音声の放音毎に発生することと、案内音声に関連するコンテンツの提供対象として登録された移動端末に、提供指示に係るコンテンツを再生するための配信情報を送信することとを包含する。   The present invention can also be specified as an operation method (information provision method) of the information provision system according to each aspect described above. Specifically, an information providing method according to a preferred aspect of the present invention generates an instruction to provide content related to a guidance voice for each sound emission of the guidance voice, and a provision target of content related to the guidance voice. Transmitting the distribution information for reproducing the content relating to the provision instruction to the mobile terminal registered as.

本発明の第1実施形態に係る情報提供システムの構成図である。It is a block diagram of the information-provision system which concerns on 1st Embodiment of this invention. 音声案内装置の構成図である。It is a block diagram of a voice guidance apparatus. 信号処理装置の構成図である。It is a block diagram of a signal processing apparatus. 信号処理装置の動作の説明図である。It is explanatory drawing of operation | movement of a signal processing apparatus. 管理端末の構成図である。It is a block diagram of a management terminal. 移動端末の構成図である。It is a block diagram of a mobile terminal. 情報提供装置の構成図である。It is a block diagram of an information provision apparatus. 情報提供システムの動作の説明図である。It is explanatory drawing of operation | movement of an information-provision system. 第2実施形態における音声案内装置および管理端末の構成図である。It is a block diagram of the voice guidance apparatus and management terminal in 2nd Embodiment. 第3実施形態における管理端末の構成図である。It is a block diagram of the management terminal in 3rd Embodiment. 第4実施形態における音声案内装置および管理端末の構成図である。It is a block diagram of the voice guidance apparatus and management terminal in 4th Embodiment. 第6実施形態における移動端末の構成図である。It is a block diagram of the mobile terminal in 6th Embodiment.

<第1実施形態>
図1は、第1実施形態に係る情報提供システム100の構成図である。第1実施形態の情報提供システム100は、電車やバス等の交通機関の利用者HAに情報を提供するコンピュータシステムであり、音声案内装置12と管理端末14と情報提供装置16とを具備する。交通機関の車輌M内に位置する各利用者HAは移動端末20を携帯する。移動端末20は、携帯電話機やスマートフォン等の可搬型の通信端末である。実際には車輌M内には複数の移動端末20が存在し得るが、以下の説明では便宜的に任意の1個の移動端末20に着目する。
First Embodiment
FIG. 1 is a block diagram of an information providing system 100 according to the first embodiment. The information providing system 100 according to the first embodiment is a computer system that provides information to a user HA of a transportation facility such as a train or a bus, and includes a voice guidance device 12, a management terminal 14, and an information providing device 16. Each user HA located in the vehicle M of the transportation organization carries the mobile terminal 20. The mobile terminal 20 is a portable communication terminal such as a mobile phone or a smartphone. Actually, a plurality of mobile terminals 20 may exist in the vehicle M, but in the following description, attention is focused on any one mobile terminal 20 for convenience.

音声案内装置12および管理端末14は車輌M内に設置され、情報提供装置16は、移動通信網やインターネット等を含む通信網18に接続される。移動端末20および管理端末14は、通信網18を介して情報提供装置16と通信可能である。音声案内装置12は、交通機関に関する案内用の音声(以下「案内音声」という)を車輌M内の利用者HAに対して放音する。案内音声は、例えば交通機関の乗降(電車の駅やバスの停留所等の停車地点の名称)や乗換,運賃,運行状況(例えば遅延の有無),周辺の観光地等を案内する音声である。   The voice guidance device 12 and the management terminal 14 are installed in the vehicle M, and the information providing device 16 is connected to a communication network 18 including a mobile communication network, the Internet, and the like. The mobile terminal 20 and the management terminal 14 can communicate with the information providing device 16 via the communication network 18. The voice guidance device 12 emits a voice for guidance on a transportation facility (hereinafter referred to as “guidance voice”) to the user HA in the vehicle M. The guidance voice is, for example, a voice for guiding the getting on / off of transportation (name of a stop point such as a train station or a bus stop), transfer, fare, operation status (for example, presence or absence of delay), surrounding sightseeing spots and the like.

第1実施形態の情報提供システム100では、概略的には、図1に例示される通り、音声案内装置12による案内音声の放音毎に、当該案内音声に関連するコンテンツCの提供指示Pが管理端末14から情報提供装置16に送信され、提供指示Pで指定されたコンテンツCを含む配信情報Qが情報提供装置16から移動端末20に送信される。情報提供装置16から移動端末20に配信されるコンテンツCは、案内音声に関連する音声または画像(例えば静止画,動画,文字列)である。例えば、案内音声の発音内容を表現した文字列や当該発音内容の言語を他言語に翻訳した文字列または音声等の各種の情報がコンテンツCとして移動端末20に提供される。なお、第1実施形態では、複数の案内対象に関する案内の提供を想定する。案内対象は、案内の客体を意味し、典型的には案内が提供される場所である。図1では交通機関の車輌Mを案内対象として例示したが、実際には複数の案内対象の各々について(例えば同種の交通機関の車輌M毎に)音声案内装置12と管理端末14とが設置される。他方、情報提供装置16は複数の案内対象にわたり共用される。   In the information providing system 100 according to the first embodiment, as schematically illustrated in FIG. 1, for each emission of guidance voice by the voice guidance device 12, the provision instruction P of the content C related to the guidance voice is Distribution information Q transmitted from the management terminal 14 to the information providing apparatus 16 and including the content C designated by the provision instruction P is transmitted from the information providing apparatus 16 to the mobile terminal 20. The content C distributed from the information providing device 16 to the mobile terminal 20 is a voice or an image (for example, a still image, a moving image, a character string) related to the guidance voice. For example, a character string representing the pronunciation content of the guidance voice and various information such as a character string or a voice obtained by translating the language of the pronunciation content into another language are provided to the mobile terminal 20 as the content C. In the first embodiment, provision of guidance regarding a plurality of guidance targets is assumed. An object of guidance means an object of guidance, and is typically a place where guidance is provided. In FIG. 1, the vehicle M of the transportation system is illustrated as the guidance target, but in practice, the voice guidance device 12 and the management terminal 14 are installed for each of a plurality of guidance objects (for example, for each vehicle M of the same transportation organization). Ru. On the other hand, the information providing device 16 is shared across multiple guidance targets.

<音声案内装置12>
図2は、音声案内装置12の構成図である。図2に例示される通り、音声案内装置12は、再生処理部32と放音部34とを具備する。再生処理部32は、案内音声を表す音響信号Sを放音部34に供給し、放音部34(例えばスピーカ)は、再生処理部32から供給される音響信号Sに応じた案内音声を車輌M内に放音する。
<Voice guidance device 12>
FIG. 2 is a block diagram of the voice guidance device 12. As illustrated in FIG. 2, the voice guidance device 12 includes a reproduction processing unit 32 and a sound emitting unit 34. The reproduction processing unit 32 supplies an acoustic signal S representing a guidance sound to the sound emission unit 34. The sound emission unit 34 (for example, a speaker) transmits a guidance sound according to the sound signal S supplied from the reproduction processing unit 32 It emits noise in M.

図2に例示される通り、再生処理部32は、制御部322と記憶部324と操作部326とを具備する。記憶部324は、磁気記録媒体や半導体記録媒体等の公知の記録媒体であり、発音内容が相違する案内音声に対応する複数の音響信号Sを記憶する。例えば、車輌Mが停車する複数の地点(例えば電車の駅やバスの停留所等の停車地点)の各々について、当該地点に対する到着や当該地点での乗換、当該地点の周辺の情報を案内する案内音声の音響信号Sが記憶部324に記憶される。操作部326は、交通機関の管理者(典型的には車輌Mの運転者)HBによる操作を受付ける入力機器である。例えば管理者HBは、操作部326を適宜に操作することで、記憶部324に記憶された複数の案内音声のうち任意の1個の案内音声を選択することが可能である。   As illustrated in FIG. 2, the reproduction processing unit 32 includes a control unit 322, a storage unit 324, and an operation unit 326. The storage unit 324 is a known recording medium such as a magnetic recording medium or a semiconductor recording medium, and stores a plurality of acoustic signals S corresponding to guidance voices having different sounding content. For example, for each of a plurality of points where the vehicle M stops (for example, a stopping point such as a train station or a bus stop), guidance voice for arriving at the point, changing at the point, and information around the point Sound signal S is stored in the storage unit 324. The operation unit 326 is an input device for receiving an operation by a transportation manager (typically, a driver of the vehicle M) HB. For example, the administrator HB can select any one guidance voice from among the plurality of guidance voices stored in the storage unit 324 by appropriately operating the operation unit 326.

制御部322は、例えばCPU等の処理装置で構成され、音声案内装置12の各要素を統括的に制御する。第1実施形態の制御部322は、記憶部324に記憶された複数の音響信号Sのうち操作部326に対する操作で管理者HBが選択した案内音声の音響信号Sを放音部34に供給する。したがって、管理者HBによる指示毎に放音部34から案内音声が放音される。車輌M内の利用者HAは、放音部34から放音される案内音声を聴取することが可能である。   The control unit 322 is configured of, for example, a processing device such as a CPU, and centrally controls the elements of the voice guidance device 12. The control unit 322 according to the first embodiment supplies the sound output unit 34 with the sound signal S of the guidance voice selected by the administrator HB by the operation on the operation unit 326 among the plurality of sound signals S stored in the storage unit 324. . Therefore, the guidance sound is emitted from the sound emitting unit 34 for each instruction by the manager HB. The user HA in the vehicle M can listen to the guidance sound emitted from the sound emitting unit 34.

任意の1個の案内音声の音響信号Sには、当該案内音声に関連するコンテンツCを一意に識別するための識別情報Dが含有される。図3は、識別情報Dを含有する音響信号Sを生成する信号処理装置200の構成図である。図3の信号処理装置200が順次に生成した複数の音響信号Sが、例えば通信網18や可搬型の記録媒体を介して音声案内装置12に転送されたうえで記憶部324に格納される。   The acoustic signal S of any one guidance voice contains identification information D for uniquely identifying the content C related to the guidance voice. FIG. 3 is a block diagram of a signal processing apparatus 200 for generating an acoustic signal S containing identification information D. As shown in FIG. A plurality of acoustic signals S sequentially generated by the signal processing device 200 of FIG. 3 are transferred to the voice guidance device 12 via, for example, the communication network 18 or a portable recording medium, and then stored in the storage unit 324.

<信号処理装置200>
図3に例示される通り、信号処理装置200は、制御部42と記憶部44とを具備する。信号処理装置200の制御部42は、例えばCPU等の処理装置で構成され、音響信号Sを生成するための複数の要素(成分抑圧部422,変調処理部424,混合処理部426)として機能する。記憶部44は、例えば磁気記録媒体や半導体記録媒体等の公知の記録媒体である。第1実施形態の記憶部44には、任意の1個の案内音声を表す音響信号(以下「原音響信号」という)S0と、当該案内音声に関連するコンテンツCに固有の識別情報Dとが記憶される。原音響信号S0が表す案内音声は、例えば、特定の発声者が実際に発音した音声の収録音や、公知の音声合成技術で生成された音声である。
<Signal processing device 200>
As illustrated in FIG. 3, the signal processing device 200 includes a control unit 42 and a storage unit 44. The control unit 42 of the signal processing device 200 is configured by a processing device such as a CPU, for example, and functions as a plurality of elements (component suppressing unit 422, modulation processing unit 424, mixing processing unit 426) for generating the acoustic signal S. . The storage unit 44 is, for example, a known recording medium such as a magnetic recording medium or a semiconductor recording medium. The storage unit 44 according to the first embodiment includes an acoustic signal (hereinafter referred to as an "original acoustic signal") S0 representing any one guidance voice and identification information D specific to the content C related to the guidance voice. It is memorized. The guide voice represented by the original sound signal S0 is, for example, a recorded sound of a voice actually uttered by a specific speaker or a voice generated by a known voice synthesis technology.

図4は、信号処理装置200の動作の説明図である。図4に例示される通り、原音響信号S0は、放音部34が再生可能な音響の周波数帯域(以下「再生帯域」という)B0の略全域にわたる音響成分を含有する。第1実施形態では、約20Hzから20kHzまでの可聴帯域のうち高域側の周波数帯域の音響成分を再生できない低性能な放音部34を想定する。具体的には、放音部34の再生帯域B0の上限値Fが8kHzである場合を例示する。図3の成分抑圧部422は、図4に例示される通り、記憶部44に記憶された原音響信号S0のうち放音部34による再生帯域B0の上限値Fから低域側の所定幅にわたる周波数帯域(以下「利用帯域」という)BAの音響成分を抑圧することで音響信号SAを生成する。例えば上限値Fと比較して利用帯域BAの帯域幅分だけ低い周波数FCを遮断周波数とする低域通過フィルタが成分抑圧部422として利用される。利用帯域BAの帯域幅は例えば2kHzである。したがって、利用帯域BAは、可聴帯域に内包される6kHz以上かつ8kHz以下の周波数帯域である。   FIG. 4 is an explanatory diagram of the operation of the signal processing device 200. As illustrated in FIG. 4, the original acoustic signal S0 contains an acoustic component that covers substantially the entire frequency band of the sound that can be reproduced by the sound emitting unit 34 (hereinafter referred to as “reproduction band”) B0. In the first embodiment, it is assumed that the low-performance sound emitting unit 34 can not reproduce the acoustic component of the high frequency band among the audible band from about 20 Hz to 20 kHz. Specifically, the case where the upper limit F of the reproduction band B0 of the sound emitting unit 34 is 8 kHz is illustrated. As illustrated in FIG. 4, the component suppressing unit 422 in FIG. 3 extends from the upper limit F of the reproduction band B0 by the sound emitting unit 34 to the predetermined width on the low band side of the original sound signal S0 stored in the storage unit 44. An acoustic signal SA is generated by suppressing an acoustic component of a frequency band (hereinafter referred to as “use band”) BA. For example, a low pass filter having a cut-off frequency that is lower than the upper limit F by the bandwidth of the usage band BA is used as the component suppression unit 422. The bandwidth of the utilization band BA is, for example, 2 kHz. Therefore, the use band BA is a frequency band of 6 kHz or more and 8 kHz or less included in the audible band.

図3の変調処理部424は、記憶部44が記憶する識別情報Dを含有する音響信号SBを生成する。音響信号SBは、利用帯域BA内の音響成分で構成される。識別情報Dを含有する音響信号SBの生成には公知の方法が任意に採用され得るが、例えば国際公開第2010/016589号に開示された方法が好適である。具体的には、変調処理部424は、拡散符号を利用した識別情報Dの拡散変調と利用帯域BA内の搬送波を利用した周波数変調とを順次に実行することで、識別情報Dを利用帯域BA内の音響成分として含有する音響信号SBを生成する。第1実施形態の変調処理部424は、音響信号SBを音響信号SAと比較して充分に小さい音量に調整する。具体的には、音響信号SBの音量(音圧レベル)は、音響信号SAの音量に対して−50dB〜−80dB程度の音量に調整される。   The modulation processing unit 424 in FIG. 3 generates an acoustic signal SB containing the identification information D stored in the storage unit 44. The acoustic signal SB is composed of acoustic components in the usage band BA. Although any known method may be employed for generating the acoustic signal SB containing the identification information D, for example, the method disclosed in WO 2010/016589 is preferable. Specifically, the modulation processing unit 424 sequentially performs the spreading modulation of the identification information D using the spreading code and the frequency modulation using the carrier wave in the usage band BA, to thereby use the identification information D in the usage band BA. An acoustic signal SB is generated which is contained as an internal acoustic component. The modulation processing unit 424 of the first embodiment adjusts the sound signal SB to a sufficiently small volume compared to the sound signal SA. Specifically, the volume (sound pressure level) of the sound signal SB is adjusted to a volume of about −50 dB to −80 dB with respect to the volume of the sound signal SA.

図3の混合処理部426は、成分抑圧部422による処理後の音響信号SAと変調処理部424による処理後の音響信号SBとを合成(典型的には加算)することで音響信号Sを生成する。すなわち、任意の1個の案内音声の音響信号Sは、当該案内音声の音響成分(音響信号SA)と、当該案内音声に関連するコンテンツCの識別情報Dの音響成分(利用帯域BAの音響信号SB)とを含有する。以上に例示した処理が案内音声毎に順次に実行されることで、相異なる案内音声に対応する複数の音響信号Sが生成されて音声案内装置12の記憶部324に転送される。以上の説明から理解される通り、第1実施形態において音声案内装置12の放音部34から放音される音響信号Sには、可聴帯域内の利用帯域BAの音響成分(音響信号SB)として識別情報Dが含有される。前述の通り、案内音声の音響信号SAと比較して音響信号SBは充分に音量が小さいから、車輌M内の利用者HAは、案内音声を明確に知覚する一方、利用帯域BA内の識別情報Dの音響成分は殆ど知覚できない。   The mixing processing unit 426 in FIG. 3 generates an acoustic signal S by combining (typically adding) the acoustic signal SA processed by the component suppressing unit 422 and the acoustic signal SB processed by the modulation processing unit 424. Do. That is, the acoustic signal S of any one guidance voice is the acoustic component of the guidance voice (acoustic signal SA) and the acoustic component of the identification information D of the content C related to the guidance voice (acoustic signal of the usage band BA And SB). The processes exemplified above are sequentially executed for each guidance voice, so that a plurality of acoustic signals S corresponding to different guidance voices are generated and transferred to the storage unit 324 of the voice guidance device 12. As understood from the above description, the acoustic signal S emitted from the sound emitting unit 34 of the voice guidance device 12 in the first embodiment is an acoustic component (acoustic signal SB) of the usage band BA in the audible band. Identification information D is included. As described above, since the sound signal SB has a sufficiently small volume compared to the sound signal SA of the guidance voice, the user HA in the vehicle M clearly perceives the guidance voice while identifying information in the usage band BA The acoustic component of D can hardly be perceived.

図1に例示される通り、管理端末14は、信号線(ケーブル)13を介して案内音声システムの再生処理部32に接続される。再生処理部32の制御部322は、操作部326に対する管理者HBからの操作(案内音声の選択)を契機として、記憶部324に記憶された音響信号Sを前述の通り放音部34に供給して案内音声を放音させるとともに、当該音響信号Sを信号線13から管理端末14に送信する。すなわち、放音部34および管理端末14の双方に対して音響信号Sが並列に供給される。したがって、放音部34による案内音声の放音毎に、当該案内音声に関連するコンテンツCの識別情報Dを含有する音響信号Sが有線で管理端末14に送信される。   As illustrated in FIG. 1, the management terminal 14 is connected to the reproduction processing unit 32 of the guidance voice system via a signal line (cable) 13. The control unit 322 of the reproduction processing unit 32 supplies the sound signal S stored in the storage unit 324 to the sound emission unit 34 as described above in response to an operation (selection of guidance voice) from the administrator HB on the operation unit 326. Then, the guidance voice is emitted and the acoustic signal S is transmitted from the signal line 13 to the management terminal 14. That is, the acoustic signal S is supplied in parallel to both the sound emitting unit 34 and the management terminal 14. Therefore, for each sound emission of the guidance sound by the sound emission unit 34, an acoustic signal S containing the identification information D of the content C related to the guidance sound is transmitted to the management terminal 14 by wire.

なお、放音部34および管理端末14に対する音響信号Sの供給の契機は操作部326に対する管理者HBからの操作に限定されない。例えば、事前に設定された時刻(例えば車輌Mが特定の地点に到着する予定時刻)の到来を契機として音響信号Sを放音部34および管理端末14に供給する構成や、車輌Mに設置された検出器(センサ)が特定の地点に対する車輌Mの到達を検知したことを契機として音響信号Sを放音部34および管理端末14に供給する構成も採用され得る。   The trigger for the supply of the sound signal S to the sound emitting unit 34 and the management terminal 14 is not limited to the operation from the administrator HB to the operation unit 326. For example, a configuration in which the sound signal S is supplied to the sound emitting unit 34 and the management terminal 14 triggered by the arrival of a preset time (for example, an estimated time when the vehicle M arrives at a specific point) A configuration may also be adopted in which the sound signal S is supplied to the sound emitting unit 34 and the management terminal 14 in response to the detection of the arrival of the vehicle M at a specific point by the detected detector (sensor).

<管理端末14>
図5は、管理端末14の構成図である。管理端末14は、例えば管理者HBが使用する携帯電話機やスマートフォン等の可搬型または据置型の通信端末であり、図5に例示される通り、制御部51と記憶部52と通信部53と操作部54と受信部55とを具備する。通信部53は、通信網18を介して情報提供装置16と通信する。操作部54は、管理者HBによる操作を受付ける入力機器である。
<Management terminal 14>
FIG. 5 is a block diagram of the management terminal 14. The management terminal 14 is, for example, a portable or stationary communication terminal such as a mobile phone or a smartphone used by the administrator HB, and as illustrated in FIG. 5, the control unit 51, the storage unit 52, the communication unit 53, and the operation A unit 54 and a receiving unit 55 are provided. The communication unit 53 communicates with the information providing device 16 via the communication network 18. The operation unit 54 is an input device for receiving an operation by the administrator HB.

記憶部52は、磁気記録媒体や半導体記録媒体等の公知の記録媒体であり、制御部51が実行するプログラムや制御部51が使用する各種のデータを記憶する。第1実施形態の記憶部52は、当該管理端末14を利用した案内の案内対象を一意に識別するための識別情報(以下「案内識別情報」という)Gを記憶する。受信部55は、音声案内装置12の再生処理部32から信号線13を介して有線で供給される音響信号Sを受信する。   The storage unit 52 is a known recording medium such as a magnetic recording medium or a semiconductor recording medium, and stores programs executed by the control unit 51 and various data used by the control unit 51. The storage unit 52 of the first embodiment stores identification information (hereinafter referred to as “guidance identification information”) G for uniquely identifying a guidance target of guidance using the management terminal 14. The receiving unit 55 receives the acoustic signal S supplied by wire from the reproduction processing unit 32 of the voice guidance device 12 through the signal line 13.

制御部51は、例えばCPU等の処理装置で構成され、記憶部52に記憶されたプログラムを実行することで情報抽出部512および提供指示部514として機能する。情報抽出部512は、受信部55が受信した音響信号Sから識別情報Dを抽出する。具体的には、情報抽出部512は、音響信号Sのうち識別情報Dを含有する利用帯域BAの音響成分を例えば高域通過フィルタで抽出し、識別情報Dの拡散変調に使用された拡散符号を係数とする整合フィルタを通過させることで識別情報Dを抽出する。   The control unit 51 is formed of, for example, a processing device such as a CPU, and functions as an information extraction unit 512 and a provision instruction unit 514 by executing a program stored in the storage unit 52. The information extraction unit 512 extracts identification information D from the acoustic signal S received by the reception unit 55. Specifically, the information extraction unit 512 extracts the acoustic component of the use band BA containing the identification information D from the acoustic signal S by using, for example, a high pass filter, and the spreading code used for the diffusion modulation of the identification information D The identification information D is extracted by passing through a matched filter having a coefficient of.

提供指示部514は、情報抽出部512が抽出した識別情報Dで指定されるコンテンツCの提供指示Pを生成する。具体的には、提供指示部514は、情報抽出部512が音響信号Sから抽出した識別情報Dと記憶部52に記憶された案内識別情報Gとを含む提供指示Pを生成して通信部53から情報提供装置16に送信する。情報抽出部512による識別情報Dの抽出と提供指示部514による提供指示Pの生成とは、音声案内装置12の再生処理部32から音響信号Sを受信するたびに実行される。前述の通り、再生処理部32は放音部34および管理端末14に並列に音響信号Sを供給する。したがって、放音部34による案内音声の放音毎に、当該案内音声に関連するコンテンツCの識別情報Dの抽出と、当該識別情報Dで指定されるコンテンツCの提供指示Pの生成とが実行される。   The provision instruction unit 514 generates a provision instruction P of the content C specified by the identification information D extracted by the information extraction unit 512. Specifically, the provision instruction unit 514 generates the provision instruction P including the identification information D extracted from the acoustic signal S by the information extraction unit 512 and the guidance identification information G stored in the storage unit 52, and the communication unit 53 To the information providing apparatus 16. Extraction of the identification information D by the information extraction unit 512 and generation of the provision instruction P by the provision instruction unit 514 are executed each time the acoustic signal S is received from the reproduction processing unit 32 of the voice guidance device 12. As described above, the reproduction processing unit 32 supplies the acoustic signal S in parallel to the sound emitting unit 34 and the management terminal 14. Therefore, extraction of identification information D of content C related to the guidance voice and generation of provision instruction P of content C specified by the identification information D are performed for each emission of the guidance voice by the sound emission unit 34 Be done.

<移動端末20>
図6は、任意の1個の移動端末20の構成図である。図6に例示される通り、移動端末20は、制御部61と記憶部62と通信部63と操作部64と再生部65と撮像部66とを具備する。記憶部62は、磁気記録媒体や半導体記録媒体等の公知の記録媒体であり、制御部61が実行するプログラムや制御部61が使用する各種のデータを記憶する。例えば移動端末20を一意に識別するための識別情報(以下「端末識別情報」という)Tが記憶部62に記憶される。操作部64は、利用者HAによる操作を受付ける入力機器である。
<Mobile terminal 20>
FIG. 6 is a block diagram of one arbitrary mobile terminal 20. As shown in FIG. As illustrated in FIG. 6, the mobile terminal 20 includes a control unit 61, a storage unit 62, a communication unit 63, an operation unit 64, a reproduction unit 65, and an imaging unit 66. The storage unit 62 is a known recording medium such as a magnetic recording medium or a semiconductor recording medium, and stores programs executed by the control unit 61 and various data used by the control unit 61. For example, identification information (hereinafter referred to as “terminal identification information”) T for uniquely identifying the mobile terminal 20 is stored in the storage unit 62. The operation unit 64 is an input device for receiving an operation by the user HA.

通信部63は、通信網18を介して情報提供装置16と通信する。例えば通信部63は、案内音声に関連するコンテンツCを含む配信情報Qを情報提供装置16から受信する。再生部65は、情報提供装置16から提供されるコンテンツCを再生する。具体的には、コンテンツCの画像を表示する表示装置(例えば液晶表示パネル)やコンテンツCの音響を放音する放音装置(例えばスピーカやヘッドホン)が再生部65として利用される。   The communication unit 63 communicates with the information providing device 16 via the communication network 18. For example, the communication unit 63 receives, from the information providing device 16, the distribution information Q including the content C related to the guidance voice. The reproduction unit 65 reproduces the content C provided from the information providing device 16. Specifically, a display device (for example, a liquid crystal display panel) that displays the image of the content C and a sound emission device (for example, a speaker or headphones) that emits the sound of the content C are used as the reproduction unit 65.

制御部61は、例えばCPU等の処理装置で構成され、記憶部62に記憶されたプログラムを実行することで再生制御部612および情報取得部614として機能する。再生制御部612は、情報提供装置16から受信した配信情報Qに含まれるコンテンツCを再生部65に再生させる。他方、情報取得部614は、案内音声が放音される場所(すなわち車輌M内)で提供される案内識別情報Gを取得する。   The control unit 61 is formed of, for example, a processing device such as a CPU, and functions as a reproduction control unit 612 and an information acquisition unit 614 by executing a program stored in the storage unit 62. The reproduction control unit 612 causes the reproduction unit 65 to reproduce the content C included in the distribution information Q received from the information providing device 16. On the other hand, the information acquisition unit 614 acquires the guidance identification information G provided at the place where the guidance voice is emitted (that is, in the vehicle M).

第1実施形態では、案内対象である車輌M内に情報画像Xが設置される。例えば、車輌M内に貼付された広告等の印刷物に情報画像Xが印刷される。情報画像Xは、案内対象に固有の案内識別情報Gを表象する光学的に読取可能な平面図像(例えばQRコード(登録商標))である。図6の撮像部66は、例えば画像を撮像可能な撮像素子を含んで構成され、操作部64に対する利用者HAからの指示を契機として情報画像Xを撮像する。情報取得部614は、撮像部66が撮像した情報画像Xの復調で案内識別情報Gを特定し、当該案内識別情報Gと当該移動端末20の端末識別情報Tとを包含する登録要求Rを通信部63から情報提供装置16に送信する。登録要求Rは、案内識別情報Gで指定される案内対象の案内音声に関連するコンテンツCの提供対象として当該移動端末20を登録(いわばチェックイン)することを要求する信号である。任意の1個の案内対象の案内識別情報Gは、当該案内対象の案内音声が放音される場所で限定的に提供されるから、特定の案内対象の案内識別情報Gを含む登録要求Rを送信した移動端末20は、当該案内対象の案内音声が放音される場所(例えば車輌M内)に位置すると推定される。   In the first embodiment, the information image X is installed in the vehicle M to be guided. For example, the information image X is printed on a printed matter such as an advertisement affixed in the vehicle M. The information image X is an optically readable plan view image (for example, a QR code (registered trademark)) representing guidance identification information G specific to the guidance target. The imaging unit 66 in FIG. 6 includes, for example, an imaging element capable of capturing an image, and captures an information image X in response to an instruction from the user HA to the operation unit 64. The information acquisition unit 614 identifies the guidance identification information G by demodulating the information image X captured by the imaging unit 66, and communicates a registration request R including the guidance identification information G and the terminal identification information T of the mobile terminal 20. The information is transmitted from the unit 63 to the information providing apparatus 16. The registration request R is a signal for requesting registration (in other words, check-in) of the mobile terminal 20 as an object to be provided with the content C related to the guidance voice designated as the guidance identification information G. Since the guidance identification information G of any one guidance target is limitedly provided at the place where the guidance voice of the guidance target is emitted, the registration request R including the guidance identification information G of the specific guidance target is The transmitted mobile terminal 20 is estimated to be located at a place where the guidance voice of the guidance object is emitted (for example, in the vehicle M).

<情報提供装置16>
図7は、情報提供装置16の構成図である。情報提供装置16は、例えば通信網18に接続されたサーバ装置(典型的にはウェブサーバ)であり、図7に例示される通り、制御部72と記憶部74と通信部76とを具備する。通信部76は、通信網18を介して移動端末20および管理端末14の各々と通信する。第1実施形態の通信部76は、管理端末14が送信した提供指示Pと移動端末20が送信した登録要求Rとを通信網18を介して受信する。記憶部74は、例えば磁気記録媒体や半導体記録媒体等の公知の記録媒体であり、複数のコンテンツCと登録情報Eとを記憶する。図7に例示される通り、複数のコンテンツC(C11,C12,……)の各々には、当該コンテンツCに固有の識別情報D(D11,D12,……)と、当該コンテンツCに対応する案内音声が放音される案内対象(車輌M)に固有の案内識別情報G(G1,G2,……)とが付加される。
<Information Providing Device 16>
FIG. 7 is a block diagram of the information providing device 16. The information providing device 16 is, for example, a server device (typically, a web server) connected to the communication network 18, and includes a control unit 72, a storage unit 74, and a communication unit 76 as illustrated in FIG. . The communication unit 76 communicates with each of the mobile terminal 20 and the management terminal 14 via the communication network 18. The communication unit 76 of the first embodiment receives, via the communication network 18, the provision instruction P transmitted by the management terminal 14 and the registration request R transmitted by the mobile terminal 20. The storage unit 74 is, for example, a known recording medium such as a magnetic recording medium or a semiconductor recording medium, and stores a plurality of contents C and registration information E. As illustrated in FIG. 7, each of the plurality of contents C (C11, C12,...) Corresponds to identification information D (D11, D12,...) Unique to the contents C and the contents C. Guidance identification information G (G1, G2,...) Unique to the guidance target (vehicle M) from which the guidance voice is emitted is added.

登録情報Eは、各案内対象の案内音声に関連するコンテンツCの提供対象となる移動端末20を指定する。具体的には、登録情報Eは、図7に例示される通り、案内対象に固有の案内識別情報G(G1,G2,……)と、当該案内対象の案内音声に関連するコンテンツCの提供対象となる1個以上の移動端末20の端末識別情報T(T11,T12,……)とを対応させたデータテーブルである。   The registration information E designates the mobile terminal 20 to be provided with the content C related to the guidance voice of each guidance target. Specifically, as illustrated in FIG. 7, the registration information E is provided with guidance identification information G (G1, G2,...) Unique to the guidance target, and the content C related to the guidance voice of the guidance target. It is a data table in which terminal identification information T (T11, T12,...) Of one or more target mobile terminals 20 correspond to each other.

制御部72は、例えばCPU等の処理装置で構成され、記憶部74に記憶されたプログラムを実行することで登録処理部722および情報配信部724として機能する。登録処理部722は、移動端末20から送信された登録要求Rに応じて登録情報Eを更新する。具体的には、登録処理部722は、登録情報Eに含まれる複数の案内識別情報Gのうち登録要求Rで指定される案内識別情報Gについて、当該登録要求Rで指定される端末識別情報Tを対応させる。すなわち、登録要求R内の案内識別情報Gが指定する案内対象のコンテンツCの配信対象として、当該登録要求Rで指定された端末識別情報Tの移動端末20が登録される。   The control unit 72 includes, for example, a processing device such as a CPU, and functions as a registration processing unit 722 and an information distribution unit 724 by executing a program stored in the storage unit 74. The registration processing unit 722 updates the registration information E in response to the registration request R transmitted from the mobile terminal 20. Specifically, of the plurality of pieces of guidance identification information G included in the registration information E, the registration processing unit 722 determines the terminal identification information T specified by the registration request R for the guidance identification information G designated by the registration request R. Make it correspond. That is, the mobile terminal 20 of the terminal identification information T designated by the registration request R is registered as a distribution target of the content C of the guidance target designated by the guidance identification information G in the registration request R.

情報配信部724は、配信情報Qを生成して通信部76から移動端末20に送信する。具体的には、情報配信部724は、管理端末14から受信した提供指示Pで指定された識別情報DのコンテンツCを、当該提供指示Pで指定された案内識別情報Gについて登録情報Eに登録された各移動端末20(すなわち当該案内対象について登録されたコンテンツCの配信対象)に送信する。前述の通り、特定の案内対象の案内識別情報Gを含む登録要求Rを送信した移動端末20は、当該案内対象の案内音声が放音される場所に位置すると推定される。したがって、案内対象の案内音声が放音される場所に位置する移動端末20には、当該案内対象の案内音声に対応するコンテンツCが提供される。   The information delivery unit 724 generates delivery information Q and transmits the delivery information Q from the communication unit 76 to the mobile terminal 20. Specifically, the information distribution unit 724 registers the content C of the identification information D designated by the provision instruction P received from the management terminal 14 in the registration information E for the guidance identification information G designated by the provision instruction P. It transmits to each mobile terminal 20 (namely, delivery object of the content C registered about the said guidance object). As described above, the mobile terminal 20 that has transmitted the registration request R including the guidance identification information G of the specific guidance target is estimated to be located at a place where the guidance voice of the guidance target is emitted. Therefore, the content C corresponding to the guidance voice of the guidance object is provided to the mobile terminal 20 located at the place where the guidance voice of the guidance object is emitted.

<全体動作>
図8は、情報提供システム100の全体的な動作の説明図である。車輌Mに乗車した利用者HAは、自身の移動端末20の操作部64を適宜に操作することで、当該車輌M内に設置された情報画像Xの撮像を指示する。利用者HAからの指示に応じて撮像部66が情報画像Xを撮像すると(SA1)、移動端末20の情報取得部614は、当該情報画像Xから特定される案内識別情報Gと当該移動端末20の端末識別情報Tとを含む登録要求Rを通信部63から情報提供装置16に送信する(SA2)。
<Overall operation>
FIG. 8 is an explanatory diagram of the overall operation of the information providing system 100. As shown in FIG. The user HA who got on the vehicle M instructs the imaging of the information image X installed in the vehicle M by operating the operation unit 64 of the mobile terminal 20 of the user as appropriate. When the imaging unit 66 captures the information image X in response to an instruction from the user HA (SA1), the information acquisition unit 614 of the mobile terminal 20 receives the guidance identification information G specified from the information image X and the mobile terminal 20. The registration request R including the terminal identification information T is transmitted from the communication unit 63 to the information providing apparatus 16 (SA2).

移動端末20が送信した登録要求Rを通信部76が受信すると、情報提供装置16の登録処理部722は、登録情報Eのうち登録要求Rで指定された案内識別情報Gについて、当該登録要求Rで指定された端末識別情報Tを登録する(SA3)。すなわち、案内対象である車輌M内で放音される案内音声に関連するコンテンツCの配信対象として当該車輌M内の移動端末20が追加される。   When the communication unit 76 receives the registration request R transmitted by the mobile terminal 20, the registration processing unit 722 of the information providing apparatus 16 transmits the registration request R for the guidance identification information G designated by the registration request R in the registration information E. The terminal identification information T designated in is registered (SA3). That is, the mobile terminal 20 in the vehicle M is added as a distribution target of the content C related to the guidance sound emitted in the vehicle M which is the guidance target.

他方、音声案内装置12の再生処理部32は、操作部326に対する操作で管理者HBが選択した案内音声の音響信号Sを、放音部34に供給する(SA4)とともに信号線13を介して管理端末14に送信する(SA5)。音響信号Sの供給により放音部34からは案内音声が放音され、車輌M内に位置する利用者HAは当該案内音声を聴取する。他方、管理端末14の情報抽出部512は、再生処理部32から供給される音響信号Sを解析することで、当該案内音声に関連するコンテンツCの識別情報Dを抽出する(SA6)。提供指示部514は、情報抽出部512が抽出した識別情報Dと記憶部52が保持する案内識別情報Gとを含む提供指示Pを通信部53から情報提供装置16に送信する(SA7)。   On the other hand, the reproduction processing unit 32 of the voice guidance device 12 supplies the sound signal S of the guidance voice selected by the administrator HB by the operation to the operation unit 326 to the sound emitting unit 34 (SA4) and via the signal line 13 It transmits to the management terminal 14 (SA5). A guidance sound is emitted from the sound emitting unit 34 by the supply of the sound signal S, and the user HA located in the vehicle M listens to the guidance sound. On the other hand, the information extraction unit 512 of the management terminal 14 extracts the identification information D of the content C related to the guidance voice by analyzing the acoustic signal S supplied from the reproduction processing unit 32 (SA6). The provision instruction unit 514 transmits a provision instruction P including the identification information D extracted by the information extraction unit 512 and the guidance identification information G held by the storage unit 52 from the communication unit 53 to the information provision device 16 (SA7).

管理端末14から送信された提供指示Pを通信部76が受信すると、情報提供装置16の情報配信部724は、記憶部74に記憶された複数のコンテンツCのうち提供指示Pで指定された識別情報Dに対応するコンテンツCを特定し(SA8)、提供指示Pで指定された案内識別情報Gに対応する1個以上の端末識別情報T(すなわち、案内対象のコンテンツCの配信対象として登録された移動端末20)を登録情報Eから特定する(SA9)。そして、情報配信部724は、ステップSA8で特定したコンテンツCを含む配信情報Qを、ステップSA9で特定した各端末識別情報Tの移動端末20を宛先として通信部76から送信する(SA10)。   When the communication unit 76 receives the provision instruction P transmitted from the management terminal 14, the information distribution unit 724 of the information providing apparatus 16 identifies the content C specified in the provision instruction P among the plurality of contents C stored in the storage unit 74. The content C corresponding to the information D is specified (SA8), and one or more pieces of terminal identification information T corresponding to the guidance identification information G designated by the provision instruction P (ie, registered as a distribution target of the content C to be guided) The mobile terminal 20) is specified from the registration information E (SA9). Then, the information distribution unit 724 transmits the distribution information Q including the content C identified in step SA8 from the communication unit 76 with the mobile terminal 20 of each terminal identification information T identified in step SA9 as a destination (SA10).

情報提供装置16から送信された配信情報Qを通信部63が受信すると、移動端末20の再生制御部612は、配信情報Qに含まれるコンテンツCを再生部65に再生させる(SA11)。以上の説明から理解される通り、案内対象である車輌M内では、案内対象に関する案内音声が車輌M内の放音部34から順次に放音される一方、案内音声の放音毎に、当該案内音声に関連するコンテンツCが移動端末20の再生部65にて順次に再生される。すなわち、案内音声に関連するコンテンツCが当該案内音声の放音に連動して順次に移動端末20で再生される。したがって、車輌M内の利用者HAは、案内音声を順次に聴取するとともに、当該案内音声に関連するコンテンツCを順次に視聴することが可能である。   When the communication unit 63 receives the distribution information Q transmitted from the information providing apparatus 16, the reproduction control unit 612 of the mobile terminal 20 causes the reproduction unit 65 to reproduce the content C included in the distribution information Q (SA11). As understood from the above description, in the vehicle M which is the guidance object, the guidance sound regarding the guidance object is sequentially emitted from the sound emitting unit 34 in the vehicle M, while for each emission of the guidance sound, The content C related to the guidance voice is sequentially reproduced by the reproduction unit 65 of the mobile terminal 20. That is, the content C related to the guidance voice is sequentially reproduced on the mobile terminal 20 in conjunction with the emission of the guidance voice. Therefore, the user HA in the vehicle M can sequentially listen to the guidance voice and can sequentially view the content C related to the guidance voice.

なお、情報提供装置16の登録処理部722は、端末識別情報Tを登録情報Eに追加してから所定の時間(利用者HAが車輌M内に位置すると見込まれる時間)が経過したことを条件に、当該端末識別情報Tを登録情報Eから削除する。すなわち、当該端末識別情報Tの移動端末20は配信情報Qの送信対象から除外される。したがって、車輌Mから降車した利用者HAの移動端末20に配信情報Qは送信されない。なお、端末識別情報Tを登録情報Eから削除するための条件は以上の例示(所定時間の経過)に限定されない。例えば、操作部64に対する利用者HAからの操作に応じて移動端末20から情報提供装置16に送信される削除要求を契機として当該移動端末20の端末識別情報Tを登録情報Eから削除することも可能である。   The condition that the predetermined time (the time when the user HA is expected to be located in the vehicle M) has elapsed since the registration processing unit 722 of the information providing device 16 adds the terminal identification information T to the registration information E Then, the terminal identification information T is deleted from the registration information E. That is, the mobile terminal 20 of the terminal identification information T is excluded from transmission targets of the distribution information Q. Therefore, the distribution information Q is not transmitted to the mobile terminal 20 of the user HA who got off the vehicle M. The condition for deleting the terminal identification information T from the registration information E is not limited to the above example (elapsed time). For example, the terminal identification information T of the mobile terminal 20 may be deleted from the registration information E in response to a deletion request transmitted from the mobile terminal 20 to the information providing apparatus 16 in response to an operation from the user HA to the operation unit 64. It is possible.

以上に説明した通り、第1実施形態では、案内音声に関連するコンテンツの提供指示Pが放音部34による案内音声の放音毎に生成され、登録情報Eで配信対象として登録された移動端末20に対して当該提供指示Pに係るコンテンツCの配信情報Qが送信される。したがって、案内対象の各案内音声に関連するコンテンツCを当該案内音声の放音に連動して移動端末20にて再生させることが可能である。   As described above, in the first embodiment, the mobile terminal for which the provision instruction P of the content related to the guidance voice is generated for each emission of the guidance voice by the sound emitting unit 34 and registered as the distribution target in the registration information E The distribution information Q of the content C related to the provision instruction P is transmitted to the information 20. Therefore, it is possible to reproduce the content C related to each guidance voice of guidance object in conjunction with the sound emission of the guidance voice on the mobile terminal 20.

また、第1実施形態では、案内音声が放音される場所(車輌M内)で取得可能な案内識別情報Gを含む登録要求Rを情報提供装置16が移動端末20から受信した場合に、当該案内音声に関連するコンテンツCの提供対象として当該移動端末20が登録される。したがって、案内音声に関連するコンテンツCの提供対象を、当該案内音声が放音される場所に位置する移動端末20に制限することが可能である。第1実施形態では特に、案内音声が放音される場所に設置された情報画像Xの撮像により移動端末20が取得した案内識別情報Gを含む登録要求Rが移動端末20から送信されるから、移動端末20に案内識別情報Gを取得させるための構成や手順が簡素化されるという利点がある。   Further, in the first embodiment, when the information providing apparatus 16 receives from the mobile terminal 20 a registration request R including the guidance identification information G which can be acquired at the place (in the vehicle M) where the guidance voice is emitted. The mobile terminal 20 is registered as a provision target of the content C related to the guidance voice. Therefore, it is possible to limit the provision object of the content C related to the guidance voice to the mobile terminal 20 located at the place where the guidance voice is emitted. In the first embodiment, in particular, the registration request R including the guidance identification information G acquired by the mobile terminal 20 by the imaging of the information image X installed at the place where the guidance voice is emitted is transmitted from the mobile terminal 20, There is an advantage that the configuration and procedure for causing the mobile terminal 20 to acquire the guide identification information G are simplified.

また、第1実施形態では、音響信号Sの供給により放音部34から案内音声が放音される一方、当該音響信号Sに音響成分として含有される識別情報Dが管理端末14にて抽出されたうえで提供指示Pが生成される。すなわち、放音部34による案内音声の放音と管理端末14による識別情報Dの抽出とに音響信号Sが共用される。したがって、放音部34による案内音声の放音と提供指示部514による提供指示Pの送信(ひいては移動端末20に対するコンテンツCの提供)とを容易に連動させることが可能である。   In the first embodiment, the guidance sound is emitted from the sound emitting unit 34 by the supply of the acoustic signal S, while the identification information D contained as an acoustic component in the acoustic signal S is extracted by the management terminal 14 The provision instruction P is then generated. That is, the sound signal S is shared by the sound emission of the guidance voice by the sound emission unit 34 and the extraction of the identification information D by the management terminal 14. Therefore, it is possible to easily interlock the emission of the guidance sound by the sound emission unit 34 and the transmission of the provision instruction P by the provision instruction unit 514 (and thus the provision of the content C to the mobile terminal 20).

なお、識別情報Dの音響成分が含有される利用帯域BA内の音量は他帯域の音響成分(音響信号SA)と比較して充分に低い音量に抑制される。したがって、放音部34から放音される音響を聴取した利用者HAに識別情報Dの音響成分が知覚され難くなるように識別情報Dの音響成分の音量を充分に抑制した場合でも、音響信号Sから高精度に識別情報Dを抽出できるという利点がある。   The sound volume in the utilization band BA in which the sound component of the identification information D is contained is suppressed to a sufficiently low sound volume as compared with the sound component (sound signal SA) of the other band. Therefore, even when the volume of the sound component of the identification information D is sufficiently suppressed so that the user HA who listens to the sound emitted from the sound emitting unit 34 does not easily perceive the sound component of the identification information D There is an advantage that the identification information D can be extracted from S with high accuracy.

ところで、音響信号Sに含有された識別情報Dを管理端末14にて抽出するための構成としては、例えば、放音部34から放音された音響を管理端末14にて収音した音響信号から識別情報Dを抽出する構成(以下「対比例」という)も想定され得る。しかし、対比例では、放音部34から管理端末14までの経路上で音響に雑音が重畳されるから、結果的に管理端末14にて識別情報Dを高精度に抽出することが困難となり得る。第1実施形態では、識別情報Dを含有する音響信号Sが有線で音声案内装置12から管理端末14に送信されるから、音響信号Sに対する雑音の影響が低減される。したがって、第1実施形態によれば、対比例と比較して、音響信号Sから高精度に識別情報Dを抽出できるという利点がある。ただし、以上の説明は本発明の範囲から対比例を除外する趣旨ではなく、対比例は本発明の範囲に包含され得る。   By the way, as a configuration for extracting the identification information D contained in the sound signal S by the management terminal 14, for example, from the sound signal obtained by collecting the sound emitted by the sound emitting unit 34 by the management terminal 14 A configuration for extracting the identification information D (hereinafter, referred to as “contrast example”) may also be assumed. However, in the comparative example, since noise is superimposed on the sound on the path from the sound emitting unit 34 to the management terminal 14, it may be difficult as a result to extract the identification information D with high accuracy in the management terminal 14. . In the first embodiment, since the sound signal S containing the identification information D is transmitted from the voice guidance apparatus 12 to the management terminal 14 by wire, the influence of noise on the sound signal S is reduced. Therefore, according to the first embodiment, as compared with the comparative example, there is an advantage that the identification information D can be extracted from the acoustic signal S with high accuracy. However, the above description is not intended to exclude the comparative example from the scope of the present invention, and the comparative example can be included in the scope of the present invention.

<第2実施形態>
本発明の第2実施形態について説明する。なお、以下に例示する各形態において作用や機能が第1実施形態と同様である要素については、第1実施形態の説明で使用した符号を流用して各々の詳細な説明を適宜に省略する。
Second Embodiment
A second embodiment of the present invention will be described. In addition, about the element which an operation | movement and a function are the same as 1st Embodiment in each form illustrated below, the code | symbol used by description of 1st Embodiment is diverted and detailed description of each is abbreviate | omitted suitably.

図9は、第2実施形態における音声案内装置12および管理端末14の構成図である。図9に例示される通り、第2実施形態では音声案内装置12と管理端末14とは接続されない。音声案内装置12の再生処理部32は、操作部326に対する操作で管理者HBが選択した案内音声の音響信号Sを放音部34に供給する。   FIG. 9 is a block diagram of the voice guidance apparatus 12 and the management terminal 14 in the second embodiment. As illustrated in FIG. 9, in the second embodiment, the voice guidance apparatus 12 and the management terminal 14 are not connected. The reproduction processing unit 32 of the voice guidance device 12 supplies the sound emitting unit 34 with the sound signal S of the guidance voice selected by the administrator HB by the operation on the operation unit 326.

第2実施形態の管理端末14は、第1実施形態の構成から受信部55および情報抽出部512を省略した構成である。また、第2実施形態の記憶部52は、音声案内装置12の記憶部324に音響信号Sが記憶された複数の案内音声(すなわち音声案内装置12が放音可能な複数の案内音声)の各々について、当該案内音声に関連するコンテンツCの識別情報Dを記憶する。   The management terminal 14 of the second embodiment has a configuration in which the receiving unit 55 and the information extraction unit 512 are omitted from the configuration of the first embodiment. In addition, the storage unit 52 of the second embodiment includes each of a plurality of guidance voices for which the sound signal S is stored in the storage unit 324 of the voice guidance device 12 (that is, a plurality of guidance voices that the voice guidance device 12 can emit). , And stores identification information D of the content C related to the guidance voice.

管理者HBは、音声案内装置12の操作部326に対する操作で所望の案内音声を選択するとともに、管理端末14の操作部54に対する操作で当該案内音声(あるいは当該案内音声に関連するコンテンツC)を選択する。提供指示部514は、操作部54に対する操作で管理者HBが選択した案内音声に関連するコンテンツCの識別情報Dを記憶部52から取得し、当該識別情報Dと案内対象の案内識別情報Gとを含む提供指示Pを通信部53から情報提供装置16に送信する。第2実施形態における他の構成や動作は第1実施形態と同様である。   The administrator HB selects a desired guidance voice by operating the operation unit 326 of the voice guidance device 12, and operates the operation unit 54 of the management terminal 14 to generate the guidance voice (or the content C related to the guidance voice). select. The providing instruction unit 514 acquires, from the storage unit 52, identification information D of the content C related to the guidance voice selected by the administrator HB by the operation on the operation unit 54, and the identification information D and guidance identification information G for guidance. The communication unit 53 transmits the provision instruction P including the information to the information providing apparatus 16. Other configurations and operations in the second embodiment are the same as those in the first embodiment.

以上の説明から理解される通り、第2実施形態では、放音部34が案内音声を放音する動作と、当該案内音声のコンテンツCの提供指示Pを生成および送信する動作とが、相互に連動して実行される。すなわち、放音部34による案内音声の放音毎に、当該案内音声に関連するコンテンツCの提供指示Pが順次に生成される。したがって、第1実施形態と同様に、案内対象の各案内音声に関連するコンテンツCを当該案内音声の放音に連動して移動端末20にて再生させることが可能である。また、第2実施形態では、音声案内装置12と管理端末14との間の通信(音響信号Sの授受)が不要であるから、例えば音声案内装置12と管理端末14とを相互に接続できない場合(例えば各々のハードウェアの制約から両者を接続できない場合)に有効である。   As understood from the above description, in the second embodiment, the operation of the sound emitting unit 34 emitting the guidance voice and the operation of generating and transmitting the provision instruction P of the content C of the guidance audio are mutually performed. It is executed in conjunction with it. That is, for each sound emission of the guidance sound by the sound emission unit 34, the provision instruction P of the content C related to the guidance sound is sequentially generated. Therefore, as in the first embodiment, it is possible to reproduce the content C related to each guidance voice of guidance object in conjunction with the emission of the guidance voice on the mobile terminal 20. Further, in the second embodiment, since communication (transmission and reception of the acoustic signal S) between the voice guidance device 12 and the management terminal 14 is unnecessary, for example, when the voice guidance device 12 and the management terminal 14 can not be connected to each other This is effective (for example, in the case where both can not be connected due to limitations of each hardware).

<第3実施形態>
図10は、第3実施形態における管理端末14の構成図である。図10に例示される通り、第3実施形態の管理端末14は、第1実施形態の受信部55を省略するとともに第1実施形態の情報抽出部512を放音指示部516に置換した構成である。また、第3実施形態の管理端末14の記憶部52は、第2実施形態と同様に、音声案内装置12が放音可能な複数の案内音声の各々についてコンテンツCの識別情報Dを記憶する。
Third Embodiment
FIG. 10 is a block diagram of the management terminal 14 in the third embodiment. As illustrated in FIG. 10, the management terminal 14 of the third embodiment has a configuration in which the reception unit 55 of the first embodiment is omitted and the information extraction unit 512 of the first embodiment is replaced with a sound emission instructing unit 516. is there. Further, the storage unit 52 of the management terminal 14 of the third embodiment stores the identification information D of the content C for each of the plurality of guidance voices that can be emitted by the voice guidance device 12 as in the second embodiment.

管理者HBは、管理端末14の操作部54に対する操作で所望の案内音声(あるいは当該案内音声に関連するコンテンツC)を選択する。提供指示部514は、第2実施形態と同様に、操作部54に対する操作で管理者HBが選択した案内音声に関連するコンテンツCの識別情報Dを記憶部52から取得し、当該識別情報Dと案内対象の案内識別情報Gとを含む提供指示Pを通信部53から情報提供装置16に送信する。   The administrator HB selects a desired guidance voice (or content C related to the guidance voice) by operating the operation unit 54 of the management terminal 14. As in the second embodiment, the provision instructing unit 514 acquires, from the storage unit 52, identification information D of the content C related to the guidance voice selected by the administrator HB by the operation on the operation unit 54. The communication unit 53 transmits the provision instruction P including the guidance identification information G of the guidance target to the information providing device 16.

他方、放音指示部516は、操作部54に対する操作で管理者HBが選択した案内音声を音声案内装置12に通知する。管理端末14と音声案内装置12との間の通信の有線/無線は不問である。音声案内装置12の制御部322は、管理端末14から指示された案内音声の音響信号Sを記憶部324から放音部34に供給することで案内音声を放音させる。第3実施形態における他の構成や動作は第1実施形態と同様である。   On the other hand, the sound output instruction unit 516 notifies the voice guidance device 12 of the guidance voice selected by the administrator HB by the operation on the operation unit 54. The wired / wireless communication between the management terminal 14 and the voice guidance device 12 is not limited. The control unit 322 of the voice guidance device 12 emits the guidance voice by supplying the sound signal S of the guidance voice instructed from the management terminal 14 from the storage unit 324 to the sound emitting unit 34. Other configurations and operations in the third embodiment are the same as in the first embodiment.

以上の説明から理解される通り、第3実施形態では、管理者HBが選択した案内音声のコンテンツCの提供指示Pを管理端末14が送信する動作と、放音部34が当該案内音声を放音する動作とが、相互に連動して実行される。すなわち、放音部34による案内音声の放音毎に、当該案内音声に関連するコンテンツCの提供指示Pが順次に生成される。したがって、第1実施形態と同様に、案内対象の各案内音声に関連するコンテンツCを当該案内音声の放音に連動して移動端末20にて再生させることが可能である。なお、第3実施形態は、可搬型の音声案内装置12および管理端末14(あるいは音声案内装置12と管理端末14とが一体に構成された装置)をバスガイドやツアーガイド等の管理者HBが携行して車輌M内の各利用者HAを案内する場合に特に好適である。   As understood from the above description, in the third embodiment, the management terminal 14 transmits an instruction to provide the content C of the guidance voice selected by the administrator HB, and the sound emitting unit 34 emits the guidance voice. The operation to make a sound is performed in conjunction with each other. That is, for each sound emission of the guidance sound by the sound emission unit 34, the provision instruction P of the content C related to the guidance sound is sequentially generated. Therefore, as in the first embodiment, it is possible to reproduce the content C related to each guidance voice of guidance object in conjunction with the emission of the guidance voice on the mobile terminal 20. In the third embodiment, a manager HB, such as a bus guide or a tour guide, supports the portable voice guidance device 12 and the management terminal 14 (or a device in which the voice guidance device 12 and the management terminal 14 are integrally configured). It is particularly suitable for carrying around and guiding each user HA in the vehicle M.

<第4実施形態>
図11は、第4実施形態における音声案内装置12および管理端末14の構成図である。図11に例示される通り、第4実施形態の音声案内装置12は、第1実施形態の音声案内装置12の再生処理部32を収音部36に置換した構成である。収音部36(マイクロホン)は、管理者HBが発音した案内音声の収音により音響信号Sを生成および増幅して放音部34に供給する。したがって、管理者HBが発音した案内音声が放音部34から放音される。
Fourth Embodiment
FIG. 11 is a block diagram of the voice guidance apparatus 12 and the management terminal 14 in the fourth embodiment. As illustrated in FIG. 11, the voice guidance apparatus 12 of the fourth embodiment has a configuration in which the reproduction processing unit 32 of the voice guidance apparatus 12 of the first embodiment is replaced with a sound collection unit 36. The sound collection unit 36 (microphone) generates and amplifies an acoustic signal S from the collection of the guidance voice uttered by the administrator HB and supplies the sound signal S to the sound emission unit 34. Therefore, the guidance voice generated by the manager HB is emitted from the sound emitting unit 34.

他方、第4実施形態の管理端末14は、図11に例示される通り、第1実施形態の受信部55を収音部56(マイクロホン)に置換するとともに情報抽出部512を音声解析部518に置換した構成である。収音部56は、管理者HBが発音した案内音声を収音して音声信号Vを生成する。以上の説明から理解される通り、管理者HBが発音した案内音声は、音声案内装置12の収音部36および管理端末14の収音部56の双方により並列に収音される。   On the other hand, as illustrated in FIG. 11, the management terminal 14 of the fourth embodiment replaces the reception unit 55 of the first embodiment with the sound collection unit 56 (microphone) and the information extraction unit 512 as the voice analysis unit 518. It is the replaced configuration. The sound pickup unit 56 picks up the guidance voice uttered by the manager HB and generates a voice signal V. As understood from the above description, the guidance voice generated by the administrator HB is collected in parallel by both the sound collection unit 36 of the voice guidance device 12 and the sound collection unit 56 of the management terminal 14.

図11の音声解析部518は、音声信号Vの解析で案内音声の発音内容を解析する。発音内容の解析には公知の音声認識技術が任意に採用される。また、第4実施形態の記憶部52は、管理者HBが発音する予定の案内音声毎に、当該案内音声に関連するコンテンツCの識別情報Dを記憶する。提供指示部514は、音声解析部518が解析した発音内容の案内音声に対応する識別情報Dを記憶部52から検索し、当該識別情報Dと案内対象の案内識別情報Gとを含む提供指示Pを通信部53から情報提供装置16に送信する。第4実施形態における他の構成や動作は第1実施形態と同様である。   The voice analysis unit 518 in FIG. 11 analyzes the pronunciation content of the guidance voice by analyzing the voice signal V. Well-known speech recognition technology is arbitrarily adopted for analysis of the pronunciation content. In addition, the storage unit 52 of the fourth embodiment stores, for each guidance voice scheduled by the manager HB, the identification information D of the content C related to the guidance voice. The provision instruction unit 514 searches the storage unit 52 for identification information D corresponding to the guidance voice of the pronunciation content analyzed by the voice analysis unit 518, and provides the provision instruction P including the identification information D and the guidance identification information G for guidance. Are transmitted from the communication unit 53 to the information providing apparatus 16. Other configurations and operations in the fourth embodiment are the same as those in the first embodiment.

以上の説明から理解される通り、第4実施形態においては、管理者HBが発音した案内音声を放音部34が放音する動作と、当該案内音声に関連するコンテンツCの提供指示Pを管理端末14が送信する動作とが、相互に連動して実行される。すなわち、放音部34による案内音声の放音毎に、当該案内音声に関連するコンテンツCの提供指示Pの生成が順次に実行される。したがって、第1実施形態と同様に、案内対象の各案内音声に関連するコンテンツCを当該案内音声の放音に連動して移動端末20にて再生させることが可能である。   As understood from the above description, in the fourth embodiment, the operation of the sound emitting unit 34 emitting the guidance voice uttered by the manager HB and the provision instruction P of the content C related to the guidance voice are managed. The operation transmitted by the terminal 14 is performed in conjunction with each other. That is, for each sound emission of the guidance sound by the sound emission unit 34, generation of the provision instruction P of the content C related to the guidance sound is sequentially executed. Therefore, as in the first embodiment, it is possible to reproduce the content C related to each guidance voice of guidance object in conjunction with the emission of the guidance voice on the mobile terminal 20.

なお、図11では、音声信号Vの解析で特定される発音内容に応じて提供指示部514が識別情報Dを選択したが、管理者HBが発音した案内音声を音声案内装置12の放音部34から放音する一方、第3実施形態と同様に、管理者HBが操作部54に対する操作で選択した案内音声に対応する識別情報Dを提供指示部514が選択することも可能である。   In FIG. 11, the provision instructing unit 514 selects the identification information D according to the pronunciation content specified by the analysis of the voice signal V. However, the sound emitting unit of the voice guidance device 12 is the guidance voice generated by the administrator HB. While emitting sound from 34, the provision instruction unit 514 can also select the identification information D corresponding to the guidance voice selected by the operation of the operation unit 54 by the administrator HB, as in the third embodiment.

<第5実施形態>
第5実施形態の情報提供システム100は、図11に例示した第4実施形態と同様の構成である。すなわち、第5実施形態の音声案内装置12は、第4実施形態と同様に、管理者HBが発音した案内音声の収音で音響信号Sを生成する収音部36と、音響信号Sに応じた案内音声を放音する放音部34とを具備する。
Fifth Embodiment
The information providing system 100 of the fifth embodiment has the same configuration as that of the fourth embodiment illustrated in FIG. That is, as in the fourth embodiment, the voice guidance apparatus 12 of the fifth embodiment generates the acoustic signal S by collecting the guidance voice uttered by the administrator HB and the acoustic signal S. And a sound emitting unit 34 for emitting the guidance sound.

第5実施形態の管理端末14は、第4実施形態と同様に収音部56と音声解析部518とを具備する。音声解析部518は、収音部56が生成した音声信号Vに対する音声認識で発音内容を解析し、当該発音内容を示す文字列をコンテンツCとして生成する。提供指示部514は、音声解析部518が生成したコンテンツCと案内対象の案内識別情報Gとを含む提供指示Pを通信部53から情報提供装置16に送信する。   The management terminal 14 of the fifth embodiment includes the sound collection unit 56 and the voice analysis unit 518 as in the fourth embodiment. The voice analysis unit 518 analyzes the pronunciation content by voice recognition of the voice signal V generated by the sound collection unit 56, and generates a character string indicating the pronunciation content as the content C. The provision instruction unit 514 transmits, from the communication unit 53, the provision instruction P including the content C generated by the voice analysis unit 518 and the guidance identification information G of the guidance target to the information providing apparatus 16.

情報提供装置16の情報配信部724は、管理端末14から受信した提供指示Pで指定された案内識別情報Gについて登録情報Eに登録された各移動端末20(すなわち当該案内対象について登録されたコンテンツCの配信対象)に対して提供指示P内のコンテンツCを送信する。すなわち、管理者HBが発音した案内音声の発音内容を表現した文字列のコンテンツCが車輌M内の各移動端末20に提供される。なお、案内音声の発音内容の文字列を編集(例えば管理者HBによる修正)または翻訳した文字列をコンテンツCとして各移動端末20に提供することも可能である。   The information distribution unit 724 of the information providing device 16 registers each mobile terminal 20 registered in the registration information E for the guidance identification information G designated by the provision instruction P received from the management terminal 14 (that is, the content registered for the guidance target The content C in the providing instruction P is transmitted to the distribution target C). That is, the content C of the character string representing the pronunciation content of the guidance voice uttered by the manager HB is provided to each mobile terminal 20 in the vehicle M. In addition, it is also possible to provide each mobile terminal 20 as the content C by editing (for example, correcting by the administrator HB) or translating a character string of the pronunciation content of the guidance voice.

以上の説明から理解される通り、第5実施形態では、管理者HBが発音した案内音声を放音部34が放音する動作と、当該案内音声の発音内容を示すコンテンツCの提供指示Pを管理端末14が送信する動作とが、相互に連動して実行される。すなわち、放音部34による案内音声の放音毎に、当該案内音声に関連するコンテンツCの提供指示Pが順次に生成される。したがって、第1実施形態と同様に、案内対象の各案内音声に関連するコンテンツCを当該案内音声の放音に連動して移動端末20にて再生させることが可能である。第5実施形態では、情報提供装置16の記憶部74に複数のコンテンツCを事前に記憶する必要がないという利点もある。ただし、管理端末14から順次に送信されるコンテンツCと記憶部74に事前に記憶されたコンテンツCとを併用することも可能である。   As understood from the above description, in the fifth embodiment, an operation in which the sound emitting unit 34 emits the guidance voice uttered by the administrator HB, and an instruction P for providing the content C indicating the pronunciation content of the guidance voice The operation transmitted by the management terminal 14 is executed in conjunction with each other. That is, for each sound emission of the guidance sound by the sound emission unit 34, the provision instruction P of the content C related to the guidance sound is sequentially generated. Therefore, as in the first embodiment, it is possible to reproduce the content C related to each guidance voice of guidance object in conjunction with the emission of the guidance voice on the mobile terminal 20. In the fifth embodiment, there is also an advantage that it is not necessary to store a plurality of pieces of content C in advance in the storage unit 74 of the information providing device 16. However, the content C sequentially transmitted from the management terminal 14 and the content C stored in advance in the storage unit 74 can be used in combination.

<第6実施形態>
図12は、第6実施形態における移動端末20の構成図である。図12から理解される通り、第6実施形態の移動端末20は、第1実施形態の撮像部66を無線受信部67に置換した構成である。
Sixth Embodiment
FIG. 12 is a block diagram of the mobile terminal 20 in the sixth embodiment. As understood from FIG. 12, the mobile terminal 20 of the sixth embodiment has a configuration in which the imaging unit 66 of the first embodiment is replaced with a wireless reception unit 67.

第6実施形態では車輌M内に無線送信部300が設置される。無線送信部300は、案内対象(車輌M)の案内識別情報Gを近距離無線通信により周期的に周囲に送信する通信機器である。車輌M内に位置する移動端末20の無線受信部67は、無線送信部300から送信された案内識別情報Gを受信する。無線送信部300と無線受信部67との間で実行される近距離無線通信の具体的な通信方式は任意であるが、電波や赤外線等の電磁波を伝送媒体とした無線通信や、空気振動たる音響を伝送媒体とした音響通信が好適に採用され得る。   In the sixth embodiment, the wireless transmission unit 300 is installed in the vehicle M. The wireless transmission unit 300 is a communication device that periodically transmits the guidance identification information G of the guidance target (vehicle M) to the surroundings by near field communication. The wireless reception unit 67 of the mobile terminal 20 located in the vehicle M receives the guidance identification information G transmitted from the wireless transmission unit 300. Although the specific communication method of the short distance wireless communication performed between the wireless transmission unit 300 and the wireless reception unit 67 is arbitrary, wireless communication using electromagnetic waves such as radio waves and infrared rays as a transmission medium, air vibration, etc. Acoustic communication using sound as a transmission medium may be suitably employed.

第6実施形態における移動端末20の情報取得部614は、無線受信部67が受信した案内識別情報Gを取得し、当該案内識別情報Gと移動端末20の端末識別情報Tとを含む登録要求Rを通信部63から情報提供装置16に送信する。第6実施形態における他の構成や動作は第1実施形態から第5実施形態の何れかと同様である。第6実施形態においても第1実施形態と同様の効果が実現される。なお、図12に例示した無線送信部300を管理端末14に搭載することも可能である。   The information acquisition unit 614 of the mobile terminal 20 in the sixth embodiment acquires the guidance identification information G received by the wireless reception unit 67, and the registration request R including the guidance identification information G and the terminal identification information T of the mobile terminal 20. Are transmitted from the communication unit 63 to the information providing apparatus 16. Other configurations and operations in the sixth embodiment are the same as any of the first to fifth embodiments. Also in the sixth embodiment, the same effect as that of the first embodiment is realized. Note that the wireless transmission unit 300 illustrated in FIG. 12 can also be mounted on the management terminal 14.

<変形例>
以上に例示した各形態は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2以上の態様は、相互に矛盾しない範囲で適宜に併合され得る。
<Modification>
Each form illustrated above can be variously deformed. The aspect of a specific deformation | transformation is illustrated below. Two or more aspects arbitrarily selected from the following exemplifications may be combined appropriately as long as they do not contradict each other.

(1)前述の各形態では、情報提供装置16から移動端末20に送信される配信情報QがコンテンツCを包含する構成を例示したが、配信情報Qの内容は以上の例示に限定されない。例えば、移動端末20の記憶部62に複数のコンテンツCを事前に記憶した構成では、提供指示Pで指定されたコンテンツCの識別情報Dを含む(コンテンツC自体は含まない)配信情報Qを情報提供装置16から移動端末20に送信することも可能である。移動端末20の再生制御部612は、配信情報Qに含まれる識別情報Dに対応するコンテンツCを記憶部62から取得して再生部65に再生させる。以上の説明から理解される通り、前述の各形態における配信情報Qは、案内音声に関連するコンテンツCを移動端末20にて再生するための情報として包括的に表現され、配信情報QにコンテンツC自体が包含されるか否かは不問である。 (1) Although the distribution information Q transmitted from the information providing apparatus 16 to the mobile terminal 20 exemplifies the configuration including the content C in the above-described embodiments, the content of the distribution information Q is not limited to the above examples. For example, in the configuration in which a plurality of contents C are stored in advance in the storage unit 62 of the mobile terminal 20, the distribution information Q including the identification information D of the contents C designated by the provision instruction P (not including the contents C itself) It is also possible to transmit from the provision device 16 to the mobile terminal 20. The reproduction control unit 612 of the mobile terminal 20 acquires the content C corresponding to the identification information D included in the distribution information Q from the storage unit 62 and causes the reproduction unit 65 to reproduce the content C. As understood from the above description, the delivery information Q in each of the above-described embodiments is comprehensively expressed as information for reproducing the content C related to the guidance voice on the mobile terminal 20, and the content C is included in the delivery information Q. It does not matter whether or not it is included.

(2)端末識別情報Tを登録情報Eから削除(いわばチェックアウト)するための条件は任意である。例えば、第6実施形態の例示のように、無線送信部300との通信(案内識別情報Gの受信)を契機として移動端末20が情報提供装置16に登録要求Rを送信する構成では、無線送信部300からの無線信号が移動端末20に到達しなくなった場合(例えば受信強度が閾値未満まで低下した場合)に、当該移動端末20の端末識別情報Tを登録情報Eから削除することを要求する削除要求を移動端末20から情報提供装置16に送信することも可能である。 (2) The conditions for deleting (checking out) terminal identification information T from the registration information E are arbitrary. For example, as illustrated in the sixth embodiment, in the configuration in which the mobile terminal 20 transmits the registration request R to the information providing apparatus 16 triggered by communication with the wireless transmission unit 300 (reception of the guidance identification information G), wireless transmission When the radio signal from the unit 300 does not reach the mobile terminal 20 (for example, when the reception strength decreases below the threshold), the terminal identification information T of the mobile terminal 20 is requested to be deleted from the registration information E It is also possible to transmit a deletion request from the mobile terminal 20 to the information providing device 16.

なお、無線送信部300との間の通信状態を推定する機能を移動端末20に搭載した構成が想定される。通信状況の典型例は、例えば受信強度に応じて推定される無線送信部300からの距離であり、例えば近接(immediate),範囲内(near),範囲外(far),不明(unknown)の何れかの状態が判別される。以上の構成では、通信可能な状態(近接,範囲内,範囲外)が通信不能な不明(unknown)状態に遷移してから所定時間が経過した場合に、移動端末20が情報提供装置16に削除要求を送信することも可能である。   In addition, the structure which mounted the function which estimates the communication state between the wireless transmission parts 300 in the mobile terminal 20 is assumed. A typical example of the communication state is, for example, the distance from the wireless transmission unit 300 estimated according to the reception strength, and any of, for example, immediate, in range, near, out of range and unknown. The condition of the subject is determined. In the above configuration, the mobile terminal 20 deletes the information providing apparatus 16 when a predetermined time has elapsed since the communicable state (proximity, within range, out of range) transitions to the uncommunicable unknown state. It is also possible to send a request.

(3)前述の各形態では、電車やバス等の交通機関の音声案内を例示したが、情報提供システム100が利用される案内対象は以上の例示に限定されない。例えば、車輌M以外に船舶または航空機等を包含する移動体(移動端末20を収容して移動する設備)の音声案内にも前述の各形態と同様の情報提供システム100が利用される。美術館や博物館等の展示施設、宿泊施設、または商業施設等の各種の施設の音声案内に情報提供システム100を利用することも可能である。各種の施設にて火災や地震等の災害が発生した場合の情報提供(例えば避難の案内や状況の通知)にも情報提供システム100を利用することが可能である。 (3) In each above-mentioned form, although voice guidance of transportations, such as a train and a bus, was illustrated, a guidance object in which information providing system 100 is used is not limited to the above illustration. For example, the information providing system 100 similar to each of the above-described embodiments is also used for voice guidance of a mobile object (equipment that accommodates and moves the mobile terminal 20) other than the vehicle M, such as a ship or aircraft. It is also possible to use the information providing system 100 for voice guidance of various facilities such as exhibition facilities such as museums and museums, accommodation facilities, or commercial facilities. The information providing system 100 can also be used to provide information (for example, guidance on evacuation and notification of the situation) when disasters such as fires and earthquakes occur in various facilities.

(4)前述の各形態では、音声案内装置12と管理端末14と情報提供装置16とを別体とした構成を例示したが、複数の装置の一体/別体や、各機能と各装置との関係は任意である。例えば、管理端末14および情報提供装置16の一方における一部の機能を他方に搭載した構成や、情報提供装置16および管理端末14の機能を単体の装置に搭載した構成も採用され得る。また、音声案内装置12の機能を管理端末14に搭載する(管理端末14を音声案内装置12として兼用する)ことも可能である。 (4) In each of the above-described embodiments, the voice guidance device 12, the management terminal 14, and the information providing device 16 are illustrated separately. However, the integral / separate of a plurality of devices, each function, and each device The relationship between is arbitrary. For example, a configuration in which a part of the functions of one of the management terminal 14 and the information providing apparatus 16 is mounted on the other, and a configuration in which the functions of the information providing apparatus 16 and the management terminal 14 are mounted on a single apparatus may be employed. It is also possible to load the function of the voice guidance apparatus 12 on the management terminal 14 (use the management terminal 14 as the voice guidance apparatus 12).

100……情報提供システム、200……信号処理装置、12……音声案内装置、14……管理端末、16……情報提供装置、18……通信網、20……移動端末、32……再生処理部、322……制御部、324……記憶部、326……操作部、34……放音部、36……収音部、42……制御部、422……成分抑圧部、424……変調処理部、426……混合処理部、44……記憶部、51……制御部、512……情報抽出部、514……提供指示部、516……放音指示部、518……音声解析部、52……記憶部、53……通信部、54……操作部、55……受信部、56……収音部、61……制御部、612……再生制御部、614……情報取得部、62……記憶部、63……通信部、64……操作部、65……再生部、66……撮像部、67……無線受信部、72……制御部、722……登録処理部、724……情報配信部、74……記憶部、76……通信部。 100: information providing system 200: signal processing device 12: voice guidance device 14: management terminal 16: information providing device 18: communication network 20: mobile terminal 32: reproduction Processing unit, 322 ... control unit, 324 ... storage unit, 326 ... operation unit, 34 ... sound emitting unit, 36 ... sound collecting unit, 42 ... control unit, 422 ... component suppression unit, 424 ... ... modulation processing unit 426 ... mixing processing unit 44 ... storage unit 51 ... control unit 512 ... information extraction unit 514 ... provision instruction unit 516 ... sound emission instruction unit 518 ... voice Analysis unit, 52: storage unit, 53: communication unit, 54: operation unit, 55: reception unit, 56: sound collection unit, 61: control unit, 612: reproduction control unit, 614: Information acquisition unit, 62 ... storage unit, 63 ... communication unit, 64 ... operation unit, 65 ... playback unit, 66 ... Imaging unit, 67 ...... wireless reception unit, 72 ...... controller, 722 ...... registration processing unit, 724 ...... information distribution unit, 74 ...... storage unit, 76 ...... communication unit.

Claims (8)

案内音声に関連するコンテンツを再生するための配信情報を、放音装置による当該案内音声の放音に連動して、移動端末に送信する情報配信部
を具備する情報提供システム。
An information providing system comprising: an information distribution unit configured to transmit distribution information for reproducing content related to a guidance voice to a mobile terminal in synchronization with the emission of the guidance voice by the sound emission device.
前記案内音声が放音される場所で前記移動端末が取得した案内識別情報を当該移動端末から受信し、当該移動端末を登録する登録処理部を具備し、
前記情報配信部は、前記登録処理部が登録した前記移動端末に前記配信情報を送信する
請求項1の情報提供システム。
A registration processing unit configured to receive guidance identification information acquired by the mobile terminal from the mobile terminal at a place where the guidance voice is emitted, and to register the mobile terminal;
The information providing system according to claim 1, wherein the information distribution unit transmits the distribution information to the mobile terminal registered by the registration processing unit.
前記放音装置による前記案内音声の放音毎に提供指示を受信する通信部を具備し、
前記情報配信部は、前記通信部が前記提供指示を受信した場合に、前記配信情報を前記移動端末に送信する
請求項1または請求項2の情報提供システム。
The communication unit includes a communication unit that receives a provision instruction for each emission of the guidance sound by the sound emission device.
The information providing system according to claim 1, wherein the information distribution unit transmits the distribution information to the mobile terminal when the communication unit receives the provision instruction.
前記通信部は、通信網を介して前記提供指示を受信し、
前記情報配信部は、前記通信網を介して前記配信情報を前記移動端末に送信する
請求項3の情報提供システム。
The communication unit receives the provision instruction via a communication network;
The information providing system according to claim 3, wherein the information distribution unit transmits the distribution information to the mobile terminal via the communication network.
前記放音装置は、発音内容が相違する複数の案内音声の何れかを放音し、
前記情報配信部は、前記複数の案内音声にそれぞれ関連する複数のコンテンツのうち、前記放音装置が放音した案内音声に対応するコンテンツを再生するための配信情報を、前記移動端末に送信する
請求項1から請求項4の何れかの情報提供システム。
The sound emitting device emits any of a plurality of guidance voices having different pronunciation contents,
The information distribution unit transmits, to the mobile terminal, distribution information for reproducing the content corresponding to the guidance voice emitted by the sound emitting device among the plurality of contents respectively associated with the plurality of guidance voices. The information providing system according to any one of claims 1 to 4.
前記放音装置は、発音内容が相違する複数の案内音声を順次に放音し、
前記情報配信部は、前記複数の案内音声の各々の放音毎に、当該案内音声に関連するコンテンツを再生するための配信情報を、前記移動端末に送信する
請求項1から請求項4の何れかの情報提供システム。
The sound emitting device sequentially emits a plurality of guidance voices having different sounding contents,
The information distribution unit transmits, to the mobile terminal, distribution information for reproducing content related to the guidance voice for each sound emission of the plurality of guidance voices. Information providing system.
案内音声に関連するコンテンツを再生するための配信情報を、放音装置による当該案内音声の放音に連動して、移動端末に送信する、
コンピュータにより実現される情報提供方法。
The delivery information for reproducing the content related to the guidance voice is transmitted to the mobile terminal in conjunction with the emission of the guidance voice by the sound emission device.
Information provision method realized by a computer.
案内音声に関連するコンテンツを再生するための配信情報を、放音装置による当該案内音声の放音に連動して、移動端末に送信する情報配信部
としてコンピュータを機能させるプログラム。
A program that causes a computer to function as an information distribution unit that transmits, to a mobile terminal, distribution information for reproducing content related to a guidance voice in conjunction with the emission of the guidance voice by a sound emission device.
JP2019008999A 2019-01-23 2019-01-23 Information provision system, information provision method and program Active JP6881477B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019008999A JP6881477B2 (en) 2019-01-23 2019-01-23 Information provision system, information provision method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019008999A JP6881477B2 (en) 2019-01-23 2019-01-23 Information provision system, information provision method and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016177360A Division JP6493343B2 (en) 2016-09-12 2016-09-12 Information providing system, information providing method and program

Publications (2)

Publication Number Publication Date
JP2019071123A true JP2019071123A (en) 2019-05-09
JP6881477B2 JP6881477B2 (en) 2021-06-02

Family

ID=66441278

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019008999A Active JP6881477B2 (en) 2019-01-23 2019-01-23 Information provision system, information provision method and program

Country Status (1)

Country Link
JP (1) JP6881477B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099670A (en) * 2001-09-26 2003-04-04 Nec Corp Content delivery system and content reception and display device
JP2004326190A (en) * 2003-04-21 2004-11-18 Fuji Photo Film Co Ltd Guide system
JP2008097362A (en) * 2006-10-12 2008-04-24 Dainippon Printing Co Ltd Exhibit guide system and method
JP2011238009A (en) * 2010-05-10 2011-11-24 Castalia Co Ltd Learning system, learning content transmitting method and computer program
JP2013005377A (en) * 2011-06-21 2013-01-07 Yamaha Corp Mobile terminal device and information provision system
JP2014165572A (en) * 2013-02-22 2014-09-08 Sharp Corp Content reproduction device and content reproduction system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099670A (en) * 2001-09-26 2003-04-04 Nec Corp Content delivery system and content reception and display device
JP2004326190A (en) * 2003-04-21 2004-11-18 Fuji Photo Film Co Ltd Guide system
JP2008097362A (en) * 2006-10-12 2008-04-24 Dainippon Printing Co Ltd Exhibit guide system and method
JP2011238009A (en) * 2010-05-10 2011-11-24 Castalia Co Ltd Learning system, learning content transmitting method and computer program
JP2013005377A (en) * 2011-06-21 2013-01-07 Yamaha Corp Mobile terminal device and information provision system
JP2014165572A (en) * 2013-02-22 2014-09-08 Sharp Corp Content reproduction device and content reproduction system

Also Published As

Publication number Publication date
JP6881477B2 (en) 2021-06-02

Similar Documents

Publication Publication Date Title
WO2016017577A1 (en) Terminal device, information provision system, information presentation method, and information provision method
JP6860055B2 (en) Information provision method, terminal device operation method, information provision system, terminal device and program
WO2016017576A1 (en) Information management system and information management method
US10433083B2 (en) Audio processing device and method of providing information
US10139241B2 (en) Information provision system, information provision method, and management device
JP6493343B2 (en) Information providing system, information providing method and program
JP6955838B2 (en) Playback control device, playback control method and program
JP6881477B2 (en) Information provision system, information provision method and program
JP6114249B2 (en) Information transmitting apparatus and information transmitting method
JP7067597B2 (en) Information provision method, information provision device, mobile terminal operation method, mobile terminal and program
JP6668634B2 (en) Terminal device, method of operating terminal device, and program
JP6701756B2 (en) INFORMATION PROVIDING SYSTEM, INFORMATION PROVIDING DEVICE, AND INFORMATION PROVIDING METHOD
JP6866947B2 (en) Information provision system and information provision method
JP6569629B2 (en) Information transmitting apparatus, information transmitting method and program
JP7087745B2 (en) Terminal device, information provision system, operation method of terminal device and information provision method
JP2020038695A (en) Terminal device, operation method of terminal device, and program
JP2018132634A (en) Information providing device and information providing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190123

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200512

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201006

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210406

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210419

R151 Written notification of patent or utility model registration

Ref document number: 6881477

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151