JP6876926B2 - Information processing equipment, information processing methods, and programs - Google Patents
Information processing equipment, information processing methods, and programs Download PDFInfo
- Publication number
- JP6876926B2 JP6876926B2 JP2017563712A JP2017563712A JP6876926B2 JP 6876926 B2 JP6876926 B2 JP 6876926B2 JP 2017563712 A JP2017563712 A JP 2017563712A JP 2017563712 A JP2017563712 A JP 2017563712A JP 6876926 B2 JP6876926 B2 JP 6876926B2
- Authority
- JP
- Japan
- Prior art keywords
- point
- information
- recorded
- display
- information indicating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 55
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000004458 analytical method Methods 0.000 claims description 37
- 238000004891 communication Methods 0.000 description 61
- 238000010586 diagram Methods 0.000 description 24
- 230000005540 biological transmission Effects 0.000 description 17
- 238000012986 modification Methods 0.000 description 17
- 230000004048 modification Effects 0.000 description 12
- 238000000034 method Methods 0.000 description 10
- 230000007704 transition Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 241001465754 Metazoa Species 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 238000005034 decoration Methods 0.000 description 4
- 241001137251 Corvidae Species 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000007774 longterm Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- SAZUGELZHZOXHB-UHFFFAOYSA-N acecarbromal Chemical compound CCC(Br)(CC)C(=O)NC(=O)NC(C)=O SAZUGELZHZOXHB-UHFFFAOYSA-N 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000007477 logistic regression Methods 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000001556 precipitation Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B29/00—Maps; Plans; Charts; Diagrams, e.g. route diagram
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Educational Technology (AREA)
- Mathematical Physics (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- Educational Administration (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本開示は、情報処理装置、情報処理方法、およびプログラムに関する。 The present disclosure relates to information processing devices, information processing methods, and programs.
近年、例えばICレコーダやスマートフォンなどの普及に伴い、長時間の音声を録音することが容易になっている。また、録音した音声をジャンルごとにデータベースに記録する技術も提案されている(例えば、下記特許文献1参照)。 In recent years, with the spread of, for example, IC recorders and smartphones, it has become easy to record long-time voice. Further, a technique of recording recorded voice in a database for each genre has also been proposed (see, for example, Patent Document 1 below).
また、録音した音声に関する情報を表示するための技術も提案されている。例えば、下記特許文献2に記載の位置情報提供装置は、周囲の音データをリアルタイムに取得し、そして、当該音データの位置を地図画面上に表示する。
In addition, a technique for displaying information on recorded voice has also been proposed. For example, the position information providing device described in
しかしながら、特許文献2に記載の技術では、現在位置の周囲の音の情報だけしか表示することができない。このため、特許文献2に記載の技術では、例えば、現在位置から離れた特定の地点における音の特徴をユーザが把握することができない。
However, the technique described in
そこで、本開示では、複数の地点における音声の特徴を分かりやすく表示させることが可能な、新規かつ改良された情報処理装置、情報処理方法、およびプログラムを提案する。 Therefore, the present disclosure proposes a new and improved information processing apparatus, information processing method, and program capable of displaying the characteristics of speech at a plurality of points in an easy-to-understand manner.
本開示によれば、複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて表示画面に表示させる出力制御部、を備え、前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含む、情報処理装置が提供される。 According to the present disclosure, for each of a plurality of points, an output control unit that displays a display corresponding to information indicating the characteristics of the voice recorded in the area including the point on the display screen in association with the information about the point. , And the information indicating the characteristics of the recorded voice includes information indicating the magnitude of the recorded voice, an information processing apparatus is provided.
また、本開示によれば、所定の地点で録音された音声に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に表示画面に表示させる出力制御部、を備える、情報処理装置が提供される。 Further, according to the present disclosure, an information processing device provided with an output control unit that displays information indicating the loudness of each recording time on a display screen in order of recording time with respect to the voice recorded at a predetermined point. Will be done.
また、本開示によれば、複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けてプロセッサが表示画面に表示させること、を含み、前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含む、情報処理方法が提供される。 Further, according to the present disclosure, for each of the plurality of points, the processor displays a display corresponding to the information indicating the characteristics of the sound recorded in the area including the point on the display screen in association with the information about the point. An information processing method is provided in which the information indicating the characteristics of the recorded sound includes the information indicating the magnitude of the recorded sound.
また、本開示によれば、コンピュータを、複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて表示画面に表示させる出力制御部として機能させるための、プログラムであって、前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含む、プログラムが提供される。 Further, according to the present disclosure, the computer displays a display corresponding to the information indicating the characteristics of the sound recorded in the area including the point for each of the plurality of points on the display screen in association with the information about the point. A program is provided for functioning as an output control unit to be displayed, wherein the information indicating the characteristics of the recorded sound includes information indicating the magnitude of the recorded sound.
以上説明したように本開示によれば、複数の地点における音声の特徴を分かりやすく表示させることができる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。 As described above, according to the present disclosure, it is possible to display the characteristics of voice at a plurality of points in an easy-to-understand manner. The effects described here are not necessarily limited, and may be any of the effects described in the present disclosure.
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。 Preferred embodiments of the present disclosure will be described in detail below with reference to the accompanying drawings. In the present specification and the drawings, components having substantially the same functional configuration are designated by the same reference numerals, so that duplicate description will be omitted.
また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。例えば、実質的に同一の機能構成を有する複数の構成を、必要に応じて録音端末40aおよび録音端末40bのように区別する。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。例えば、録音端末40aおよび録音端末40bを特に区別する必要が無い場合には、単に録音端末40と称する。
Further, in the present specification and the drawings, a plurality of components having substantially the same functional configuration may be distinguished by adding different alphabets after the same reference numerals. For example, a plurality of configurations having substantially the same functional configuration are distinguished as necessary, such as a
また、以下に示す項目順序に従って当該「発明を実施するための形態」を説明する。
1.情報処理システムの構成
2.実施形態の詳細な説明
3.応用例
4.ハードウェア構成
5.変形例In addition, the "mode for carrying out the invention" will be described in accordance with the order of items shown below.
1. 1. Information
<<1.情報処理システムの構成>>
<1−1.基本構成>
まず、本実施形態による情報処理システムの基本構成について、図1を参照して説明する。図1に示すように、本実施形態による情報処理システムは、録音提示サーバ10、録音蓄積サーバ20、録音解析サーバ30、録音端末40、通信網42、および、ユーザ端末50を有する。<< 1. Information processing system configuration >>
<1-1. Basic configuration>
First, the basic configuration of the information processing system according to the present embodiment will be described with reference to FIG. As shown in FIG. 1, the information processing system according to the present embodiment includes a
{1−1−1.録音端末40}
録音端末40は、外部の音声を録音するための装置である。この録音端末40は、図1に示すように、複数の不動産2の各々に設置され得る。例えば、録音端末40は、複数の不動産2の各々の屋外(例えばベランダなど)および屋内に設置され得る。より詳細には、録音端末40は、不動産2の屋内に一個だけ設置されてもよいし、または、不動産2に含まれる部屋ごとに室外および室内に一個ずつ設置されてもよい。なお、不動産は、本開示における地点の一例である。{1-1-1. Recording terminal 40}
The
ここで、図2を参照して、録音端末40の構成について説明する。図2は、録音端末40の構成例を示した機能ブロック図である。図2に示すように、録音端末40は、制御部400、通信部420、マイクロフォン422、GPS(Global Positioning System)受信部424、日時情報取得部426、および、記憶部428を有する。
Here, the configuration of the
(1−1−1−1.制御部400)
制御部400は、録音端末40に内蔵される例えばCPU(Central Processing Unit)、RAM(Random Access Memory)、および、ROM(Read Only Memory)などのハードウェアを用いて、録音端末40の動作を全般的に制御する。また、図2に示すように、制御部400は、録音部402、録音保存部404、および、送信制御部406を有する。(1-1-1-1. Control unit 400)
The
(1−1−1−2.録音部402)
録音部402は、マイクロフォン422に対する録音の制御を行う。例えば、録音端末40に対して録音開始の操作がなされた際などの所定の場合には、録音部402は、マイクロフォン422に集音を開始させる。また、録音端末40に対して録音終了の操作がなされた際などの所定の場合には、マイクロフォン422に集音を終了させる。(1-1-1-2. Recording unit 402)
The
(1−1−1−3.録音保存部404)
録音保存部404は、録音部402の制御に従って、マイクロフォン422により集音された音声と、録音時のメタデータとを対応付けて記憶部428に保存する。ここで、メタデータは、例えば、録音日時、録音時間、および、録音時の位置情報などを含む。なお、後述するように、位置情報は、GPS受信部424により取得される。また、録音日時は、録音時において日時情報取得部426により取得される。なお、メタデータは機械的に収集されるものに限定されない。例えば、測定者の情報、使用機材の情報、測定した方角、天気、風向き、または、特定騒音(鉄道騒音、航空機騒音、工事騒音など)の有無などを、メタデータの一部としてユーザが入力してもよい。(1-1-1-3. Recording storage unit 404)
The
(1−1−1−4.送信制御部406)
送信制御部406は、記憶部428に保存されている録音データおよびメタデータの送信の制御を行う。例えば、録音データのアップロードの操作がなされた際などの所定の場合には、送信制御部406は、記憶部428に保存されている録音データおよびメタデータを、通信網42を介して録音蓄積サーバ20へ通信部120に送信させる。(1-1-1-4. Transmission control unit 406)
The
(1−1−1−5.通信部420)
通信部420は、無線通信または有線通信により、他の装置との間で通信を行う。例えば、通信部420は、送信制御部406の制御に従って、録音データおよびメタデータを録音蓄積サーバ20へ送信する。なお、図1では、録音端末40が無線通信により通信網42に接続する例を示しているが、かかる例に限定されない。録音端末40は、例えばLAN(Local Area Network)ケーブルなどを用いた有線通信により通信網42に接続されてもよい。(1-11-1-5. Communication unit 420)
The
(1−1−1−6.マイクロフォン422)
マイクロフォン422は、外部の音を電気信号に変換することにより集音する機能を有する。(1-11-1-6. Microphone 422)
The
(1−1−1−7.GPS受信部424)
GPS受信部424は、GPSなどの測位衛星から測位信号を受信して、現在位置を測位する。なお、GPS受信部424は、一種類の衛星から測位信号を受信することも可能であるし、複数の種類の衛星による測位信号を受信し、受信された信号を組み合わせて測位することも可能である。なお、位置情報は、ユーザが入力することも可能である。(1-1-1-7. GPS receiver 424)
The
(1−1−1−8.日時情報取得部426)
日時情報取得部426は、現在の日時情報を取得する。例えば、日時情報取得部426は、ハードウェアクロックにより計時される日時を現在の日時情報として取得する。または、日時情報取得部426は、所定の時計サーバ(図示省略)から現在の日時情報を取得することも可能である。なお、日時情報は、ユーザが入力することも可能である。(1-1-1-8. Date and time information acquisition unit 426)
The date and time
(1−1−1−9.記憶部428)
記憶部428は、各種のデータや各種のアプリケーションを記憶する。例えば、記憶部428は、録音データおよびメタデータを記憶する。(1-11-1-9. Storage unit 428)
The
{1−1−2.録音蓄積サーバ20}
録音蓄積サーバ20は、複数の録音端末40により録音された音声を、録音端末40ごとに記憶するための装置である。ここで、図3を参照して、録音蓄積サーバ20の構成について説明する。図3は、録音蓄積サーバ20の構成例を示した機能ブロック図である。図3に示すように、録音蓄積サーバ20は、制御部200、通信部220、および、記憶部222を有する。{1-1-2. Recording storage server 20}
The
(1−1−2−1.制御部200)
制御部200は、録音蓄積サーバ20に内蔵される例えばCPUおよびRAMなどのハードウェアを用いて、録音蓄積サーバ20の動作を全般的に制御する。また、図3に示すように、制御部200は、録音保存部202、および、送信制御部204を有する。(1-1-2-1. Control unit 200)
The
(1−1−2−2.録音保存部202)
録音保存部202は、複数の録音端末40の各々から受信される録音データおよびメタデータと、当該録音端末40が設置されている不動産とを対応付けて記憶部222に保存する。例えば、録音保存部202は、不動産の屋外の録音データと、当該不動産の屋内の録音データとを区別して記憶部222に保存する。(1-1-2-2. Recording storage unit 202)
The
(1−1−2−3.送信制御部204)
送信制御部204は、記憶部222に保存されている録音データおよびメタデータを、所定のタイミングに録音解析サーバ30へ通信部220に送信させる。(1-1-2-3. Transmission control unit 204)
The
(1−1−2−4.通信部220)
通信部220は、例えば通信網42を介して他の装置との間で情報の送受信を行う。例えば、通信部220は、送信制御部204の制御に従って、不動産ごとの録音データおよびメタデータを録音解析サーバ30へ送信する。(1-1-2-4. Communication unit 220)
The
(1−1−2−5.記憶部222)
記憶部222は、各種のデータや各種のアプリケーションを記憶する。例えば、記憶部222は、録音データおよびメタデータと不動産とを対応付けて記憶する。(1-1-2-5. Storage unit 222)
The
{1−1−3.録音解析サーバ30}
(1−1−3−1.音特徴情報)
録音解析サーバ30は、複数の録音端末40の各々により録音された音声の特徴を示す情報(以下、音特徴情報と称する場合がある)を特定するための装置である。ここで、音特徴情報は、例えば、音の大きさ、防音性能、または、音の種類などを含む。ここで、音の大きさとして、例えば(JIS Z8731 3.5に定義されている)等価騒音レベルが用いられ得る。但し、かかる例に限定されず、例えば、騒音レベル、単発騒音曝露レベル、時間率騒音レベル、長期平均等価騒音レベル、評価騒音レベル、または、長期平均評価騒音レベルなどが、音の大きさとして用いられてもよい。なお、以下では、音の大きさとして等価騒音レベルが用いられる例を中心に説明する。{1-1-3. Recording analysis server 30}
(1-1-3-1. Sound feature information)
The
等価騒音レベルは、ある時間範囲Tについて、変動する騒音の騒音レベルをエネルギー的な平均値として表した量であり、単位はデシベル(dB)である。より具体的には、等価騒音レベルは、(JIS Z8731 3.1に定義されている)A特性音圧を用いて以下の式(1)により算出される。この等価騒音レベルは、人間の聴覚の周波数特定を考慮した音の大きさを表す値である。 The equivalent noise level is a quantity expressing the noise level of fluctuating noise as an energetic average value for a certain time range T, and the unit is decibel (dB). More specifically, the equivalent noise level is calculated by the following equation (1) using the A characteristic sound pressure (defined in JIS Z8731 3.1). This equivalent noise level is a value representing the loudness of the sound in consideration of the frequency specification of human hearing.
なお、時間Tについては以下のように定められ得る。詳細については後述するが、録音提示サーバ10により、録音された音声の等価騒音レベルが時系列的に表示される場合には、比較的小さな所定の値(例えば10秒など)が時間Tとして定められ得る。また、録音提示サーバ10により、録音された音声の等価騒音レベルの代表値だけが表示される場合には、録音時間の長さが時間Tとして定められ得る。
The time T can be determined as follows. Although the details will be described later, when the equivalent noise level of the recorded voice is displayed in chronological order by the
また、録音解析サーバ30は、録音データに対して音源分離を適用することにより、単一または複数の音源による等価騒音レベルを区別することも可能である。また、録音解析サーバ30は、A特性補正を使用する例に限定されず、C特性補正またはZ特性補正を使用してもよい。
The
ここで、図4を参照して、録音解析サーバ30の構成について説明する。図4は、録音解析サーバ30の構成例を示した機能ブロック図である。図4に示すように、録音解析サーバ30は、制御部300、通信部320、および、記憶部322を有する。
Here, the configuration of the
(1−1−3−2.制御部300)
制御部300は、録音解析サーバ30に内蔵される例えばCPUおよびRAMなどのハードウェアを用いて、録音解析サーバ30の動作を全般的に制御する。また、図4に示すように、制御部300は、特徴情報特定部302、特徴情報保存部304、および、送信制御部306を有する。(1-1-3-2. Control unit 300)
The
(1−1−3−3.特徴情報特定部302)
特徴情報特定部302は、録音蓄積サーバ20から受信される、複数の不動産の各々の録音データおよびメタデータに基づいて、当該不動産における音特徴情報を特定する。例えば、特徴情報特定部302は、一つの録音データ全体に関する音特徴情報と、当該録音データの録音時刻ごとの音特徴情報とをそれぞれ特定する。(1-1-3-3. Feature information identification unit 302)
The feature
例えば、特徴情報特定部302は、まず、録音データの波形から例えばパワー、スペクトル包絡形状、ゼロ交差率、ピッチ、相関係数、メル周波数ケプストラム係数、または、音源方位などの特徴量を特定する。そして、特徴情報特定部302は、特定した特徴量に対して、例えば分類木、確率モデル、ロジスティック回帰、サポートベクトルマシン、または、ニューラルネットワークなどの識別器を適用することにより、音特徴情報を特定する。
For example, the feature
(1−1−3−4.特徴情報保存部304)
特徴情報保存部304は、不動産ごとに、特徴情報特定部302により特定された当該不動産の音特徴情報を記憶部322に保存する。(1-1-3-4. Feature information storage unit 304)
The feature
(1−1−3−5.送信制御部306)
送信制御部306は、記憶部322に保存されている不動産ごとの音特徴情報を、所定のタイミングに録音提示サーバ10へ通信部320に送信させる。(1-1-3-5. Transmission control unit 306)
The
(1−1−3−6.通信部320)
通信部320は、例えば通信網42を介して他の装置との間で情報の送受信を行う。例えば、通信部320は、送信制御部306の制御に従って、不動産ごとの音特徴情報を録音提示サーバ10へ送信する。(1-1-3-6. Communication unit 320)
The
(1−1−3−7.記憶部322)
記憶部322は、各種のデータや各種のアプリケーションを記憶する。例えば、記憶部322は、不動産と、特定された音特徴情報とを対応付けて記憶する。(1-1-3-7. Storage unit 322)
The
{1−1−4.録音提示サーバ10}
録音提示サーバ10は、本開示における情報処理装置の一例である。録音提示サーバ10は、録音解析サーバ30により特定された、不動産ごとの音特徴情報をユーザ端末50に提示するための装置である。{1-1-4. Recording presentation server 10}
The
{1−1−5.ユーザ端末50}
ユーザ端末50は、ユーザが使用する情報処理端末である。ユーザ端末50は、表示画面を表示するディスプレイ、音を出力する出力部、および、通信網42を介して通信を行うための通信機能を有する。例えば、ユーザ端末50は、表示制御情報や音声データなどを録音提示サーバ10から受信する。また、ユーザ端末50は、受信した表示制御情報に従って表示画面を表示したり、受信した音声データを出力する。{1-1-5. User terminal 50}
The
このユーザ端末50は、例えば、PC(Personal Computer)、タブレット端末、スマートフォンなどの携帯電話、または、ゲーム機であってもよい。または、ユーザ端末50は、例えばヘッドマウンドディスプレイ、アイウェア、または、スマートウォッチなどのウェアラブルデバイスであってもよい。
The
{1−1−6.通信網42}
通信網42は、通信網42に接続されている装置から送信される情報の有線、または無線の伝送路である。例えば、通信網42は、電話回線網、インターネット、衛星通信網などの公衆回線網や、Ethernet(登録商標)を含む各種のLAN、WAN(Wide Area Network)などを含んでもよい。また、通信網42は、IP−VPN(Internet Protocol−Virtual Private Network)などの専用回線網を含んでもよい。{1-1-6. Communication network 42}
The
なお、本実施形態による情報処理システムの構成は、上述した構成に限定されない。例えば、録音蓄積サーバ20、録音解析サーバ30、および、録音提示サーバ10はそれぞれ独立した装置として構成される代わりに、いずれか二以上は一体の装置として構成されてもよい。
The configuration of the information processing system according to the present embodiment is not limited to the above-described configuration. For example, instead of the
<1−2.課題の整理>
以上、本実施形態による情報処理システムの構成について説明した。ところで、従来、録音データの内容を把握するための方法として、録音データを試聴することが行われている。しかしながら、試聴では、録音時間と同じだけの時間がかかるので、非効率的である。<1-2. Arrangement of issues>
The configuration of the information processing system according to the present embodiment has been described above. By the way, conventionally, as a method for grasping the contents of recorded data, auditioning of recorded data has been performed. However, auditioning is inefficient because it takes as long as the recording time.
また、録音データの内容を把握するための別の方法として、録音データと一緒に取得されたメタデータのみを参照する方法が考えられる。しかしながら、メタデータは、例えば、録音時刻、録音時間、位置情報といった情報だけしか含まないので、録音データの内容をユーザが十分に把握することができない。 Further, as another method for grasping the content of the recorded data, a method of referring only to the metadata acquired together with the recorded data can be considered. However, since the metadata includes only information such as recording time, recording time, and position information, the user cannot sufficiently grasp the contents of the recorded data.
そこで、上記事情を一着眼点にして、本実施形態による録音提示サーバ10を創作するに至った。録音提示サーバ10は、複数の不動産の各々に関して、当該不動産において録音された音声の音特徴情報を、当該不動産に関する情報と関連付けてユーザ端末50に表示させることができる。これにより、不動産ごとの音声の特徴を容易に、かつ、効率的に確認することができる。
Therefore, with the above circumstances as the first point of view, the
<<2.実施形態の詳細な説明>>
<2−1.構成>
次に、本実施形態による録音提示サーバ10の構成について詳細に説明する。図5は、本実施形態による録音提示サーバ10の構成を示した機能ブロック図である。図5に示すように、録音提示サーバ10は、制御部100、通信部120、および、記憶部122を有する。<< 2. Detailed description of the embodiment >>
<2-1. Configuration>
Next, the configuration of the
{2−1−1.制御部100}
制御部100は、録音提示サーバ10に内蔵される、後述するCPU150や、RAM154などのハードウェアを用いて、録音提示サーバ10の動作を全般的に制御する。また、図5に示すように、制御部100は、出力制御部102、および、入力受付部104を有する。{2-1-1. Control unit 100}
The
{2−1−2.出力制御部102}
出力制御部102は、複数の不動産の各々に関して、録音蓄積サーバ20から受信される当該不動産の録音データおよびメタデータと、録音解析サーバ30から受信される当該不動産の音特徴情報とに応じた表示画面をユーザ端末50に表示させる。例えば、出力制御部102は、まず、上記の表示画面を表示させるための表示制御情報を生成し、そして、生成した表示制御情報をユーザ端末50へ通信部120に送信させる。{2-1-2. Output control unit 102}
The
(2−1−2−1.リスト表示)
例えば、出力制御部102は、複数の不動産の各々に関する、当該不動産で録音された音声の音特徴情報と、当該不動産に関する情報との組み合わせをリスト形式で表示させることが可能である。例えば、出力制御部102は、複数の不動産の各々に関する、当該不動産で録音された音声の音特徴情報と、当該不動産に関する情報との組み合わせを、音特徴情報に応じた順序で一方向に並べて表示画面に表示させる。ここで、不動産に関する情報は、例えば、不動産の識別情報、または、不動産の位置情報を含む。(2-1-2-1. List display)
For example, the
図6は、リスト形式の表示例(リスト画面60)を示した説明図である。図6に示したように、リスト画面60は、複数の不動産の各々に関する、当該不動産の情報620を一覧表示する表示画面である。ここで、不動産の情報620は、例えば画像600、不動産名602、住所604、階数606、屋外騒音608、屋内騒音610、および、防音性能612などの複数の項目を含む。
FIG. 6 is an explanatory diagram showing a display example (list screen 60) in a list format. As shown in FIG. 6, the
画像600には、該当の不動産の例えば外観の画像が表示される。また、不動産名602には、該当の不動産の名称(識別情報)が表示される。また、住所604には、該当の不動産の住所が表示される。また、階数606には、該当の不動産(の建物)の階数が表示される。また、屋外騒音608には、録音解析サーバ30により特定された、該当の不動産の屋外の等価騒音レベルが表示される。また、屋内騒音610には、録音解析サーバ30により特定された、該当の不動産の屋内の等価騒音レベルが表示される。また、防音性能612には、該当の不動産の防音性能を示す値が表示される。ここで、防音性能は、例えば、該当の不動産の屋外の等価騒音レベルと屋内の等価騒音レベルとの差として算出される。例えば、該当の不動産の外から所定の音を出力した際の、屋外での当該音の等価騒音レベルの測定結果と、屋内での当該音の等価騒音レベルの測定結果との差として、防音性能は算出され得る。
The
このリスト画面60は、例えば、屋外騒音608、屋内騒音610、および、防音性能612などの項目に関して、ユーザの選択に基づいて、値の昇順または降順に各不動産の情報620を並び替えて表示することが可能である。また、リスト画面60では、一以上の項目の値の範囲をユーザが指定したり、または、例えば録音時刻などのメタデータを指定することにより、不動産の情報620を絞り込んで表示することも可能である。また、リスト画面60は、例えば屋外騒音608の値が同じ範囲内であるなど、音特徴情報が類似している不動産の群ごとに不動産の情報620を分けて表示することも可能である。
The
また、リスト画面60においていずれかの不動産が選択された場合には、後述するように、出力制御部102は、選択された不動産に関する詳細画面を表示させることが可能である。
When any real estate is selected on the
このリスト画面60によれば、不動産ごとの、不動産に関する情報、および、等価騒音レベルが一覧表示される。このため、ユーザは、複数の不動産に関する騒音の大きさを分かりやすく、かつ、効率的に参照することができる。例えば、ユーザは、複数の不動産の中から、より静かな不動産を効率的に探すことができる。
According to the
‐変形例
なお、変形例として、一つの建物が複数の部屋を有する場合には、リスト画面60は、当該建物に関して部屋ごとの等価騒音レベルを表示することも可能である。例えば、リスト画面60は、各建物に含まれる部屋ごとに、例えば当該部屋の名称、当該部屋の室外騒音、および、当該部屋の室内騒音などの情報を表示してもよい。-Modification example As a modification, when one building has a plurality of rooms, the
(2−1−2−2.地図表示)
また、出力制御部102は、地図画面をユーザ端末50に表示させ、かつ、不動産ごとに、当該不動産で録音された音声の音特徴情報に対応する表示を、当該不動産の位置情報に対応する表示位置に表示させることが可能である。例えば、出力制御部102は、不動産ごとに、当該不動産で録音された音声の音特徴情報に対応するアイコンを、当該不動産で録音された音声の大きさに応じた表示態様で地図画面上に表示させる。(2-1-2-2. Map display)
Further, the
図7は、地図画面の表示例(地図画面70)を示した説明図である。図7に示したように、地図画面70では、複数の不動産の各々に関して、不動産アイコン700、および、騒音レベルアイコン702を関連付けて表示させる。また、地図画面70は、例えば、カレンダーUI710、時計UI712、および、拡大率変更UI714を含む。ここで、不動産アイコン700は、該当の不動産の位置情報に対応する表示位置に表示される所定のアイコンである。なお、図7では、全ての不動産について不動産アイコン700が同じである例を示しているが、かかる例に限定されず、不動産ごと、または、不動産の種類ごとに、不動産アイコン700の形状や表示色を異ならせて表示してもよい。
FIG. 7 is an explanatory diagram showing a display example of a map screen (map screen 70). As shown in FIG. 7, on the
なお、いずれかの不動産アイコン700がユーザにより選択された場合には、後述するように、出力制御部102は、選択された不動産アイコン700に対応する不動産に関する詳細画面を表示させることが可能である。
When any of the real estate icons 700 is selected by the user, the
また、騒音レベルアイコン702は、該当の不動産の等価騒音レベル(例えば屋外の等価騒音レベルなど)を示すためのアイコンである。図7では、等価騒音レベルが大きいほど、騒音レベルアイコン702のサイズを大きく表示させる例を示している。但し、かかる例に限定されず、出力制御部102は、等価騒音レベルの大きさに応じて、例えば騒音レベルアイコン702の形状、騒音レベルアイコン702の表示色(色の種類、色の濃さ、または透明度など)、騒音レベルアイコン702のデコレーション、または、騒音レベルアイコン702に含まれる文字や画像などを変化させることも可能である。または、出力制御部102は、該当の不動産に関する複数の種類の等価騒音レベルに応じて、騒音レベルアイコン702に関する複数の種類の表示形式を変化させてもよい。例えば、出力制御部102は、該当の不動産の屋外の等価騒音レベルの大きさに応じて騒音レベルアイコン702の大きさを変化させ、かつ、該当の不動産の屋内の等価騒音レベルの大きさに応じて騒音レベルアイコン702の表示色を変化させてもよい。
Further, the noise level icon 702 is an icon for indicating the equivalent noise level of the real estate (for example, the equivalent outdoor noise level). FIG. 7 shows an example in which the size of the noise level icon 702 is displayed larger as the equivalent noise level is larger. However, the present invention is not limited to this, and the
なお、騒音レベルアイコン702がユーザにより選択された場合には、後述するように、出力制御部102は、該当の不動産の録音データを時系列的に表示させてもよいし、または、該当の不動産の録音データの音声をユーザ端末50に出力させてもよい。
When the noise level icon 702 is selected by the user, the
また、カレンダーUI710および時計UI712は、それぞれ録音日付または録音時刻を選択するためのUIである。例えば、カレンダーUI710において日付が選択され、かつ、時計UI712において時刻が選択された場合には、出力制御部102は、複数の不動産の各々に関して、選択された日付および時刻に録音された音声に関する等価騒音レベルを地図画面70に表示させることが可能である。
The
この地図画面70によれば、複数の不動産の各々に関して、当該不動産の位置情報(不動産アイコン700)と等価騒音レベルアイコン702とが関連付けて表示される。このため、ユーザは、複数の不動産の各々の等価騒音レベルを同一の画面において参照することができ、効率的に参照することができる。また、不動産ごとの等価騒音レベルの大きさを分かりやすく表示させることができる。
According to the
‐変形例1
なお、変形例として、地図画面70上に選択用ウィンドウ(図示省略)を表示し、そして、表示対象の、音の特徴の種類(例えば、屋外の等価騒音レベル、屋内の等価騒音レベル、および防音性能など)を当該選択用ウィンドウにおいて選択可能にしてもよい。この場合、当該選択用ウィンドウにおいて選択された種類の特徴の値が、騒音レベルアイコン702で表示される。または、表示対象の、音の種類(例えば、電車の音、自動車の音、および動物の鳴き声など)も当該選択用ウィンドウにおいて選択可能にしてもよい。-Modification example 1
As a modification, a selection window (not shown) is displayed on the
また、別の変形例として、一つの建物が複数の部屋(物件)を有する場合に関しては、(該当の建物に対応する)騒音レベルアイコン702では、複数の部屋の等価騒音レベルの平均値を表示してもよいし、または、複数の部屋のうちのいずれかの等価騒音レベルのみを表示してもよい。または、この場合、地図画面70上に表示される選択用ウィンドウにおいて、複数の部屋のうちの一つを選択可能とし、そして、(該当の建物に対応する)騒音レベルアイコン702では、選択された部屋の等価騒音レベルを表示してもよい。
As another modification, when one building has a plurality of rooms (property), the noise level icon 702 (corresponding to the corresponding building) displays the average value of the equivalent noise levels of the plurality of rooms. Alternatively, only the equivalent noise level of any one of a plurality of rooms may be displayed. Alternatively, in this case, one of a plurality of rooms can be selected in the selection window displayed on the
また、別の変形例として、地図画面70では、例えば録音時刻を自動的にカウントアップ可能とし、そして、出力制御部102は、複数の不動産の各々に関して、録音時刻のカウントアップに応じて、等価騒音レベルの変化をアニメーション表示させてもよい。
Further, as another modification, on the
‐変形例2
また、図8は、地図画面の別の表示例(地図画面70b)を示した説明図である。図8に示したように、地図画面70bでは、不動産ごとに、不動産アイコン700、および、種類別の騒音レベル表示704が表示される。図8に示したように、種類別の騒音レベル表示704では、例えば、該当の不動産の屋外の等価騒音レベルおよび屋内の等価騒音レベルがそれぞれ棒グラフにより表示される。この表示例によれば、地図画面70において、複数の不動産の各々に関して、複数の種類の騒音レベルを一覧表示することができる。-
Further, FIG. 8 is an explanatory diagram showing another display example of the map screen (
(2−1−2−3.詳細画面)
また、例えば、リスト画面または地図画面においていずれかの不動産が選択された場合には、出力制御部102は、選択された不動産に関する詳細画面をユーザ端末50に表示させることが可能である。ここで、詳細画面は、該当の不動産に関して、音特徴情報を含む各種の情報を表示する画面である。(2-1-2-3. Detailed screen)
Further, for example, when any real estate is selected on the list screen or the map screen, the
図9は、詳細画面の表示例(詳細画面72)を示した説明図である。図9に示したように、詳細画面72では、選択された不動産に関する、不動産名720、住所722、階数724、屋外騒音726、時系列表示アイコン728、屋内騒音730、防音性能732、および、画像734が表示される。ここで、不動産名720、住所722、階数724、屋外騒音726、屋内騒音730、防音性能732、および、画像734の内容は、図6に示した、不動産名602、住所604、階数606、屋外騒音608、屋内騒音610、防音性能612、および、画像600とそれぞれ同じであり得る。
FIG. 9 is an explanatory diagram showing a display example of a detailed screen (detailed screen 72). As shown in FIG. 9, on the
また、時系列表示アイコン728は、該当の不動産の録音データに関する時系列表示画面を表示させるためのUIである。ここで、時系列表示画面は、該当の不動産の録音データに関して、録音時刻ごとの等価騒音レベルを時系列的に表示する画面である。
Further, the time-
(2−1−2−4.時系列表示画面)
また、例えば、詳細画面において時系列表示アイコン728が選択された場合などの所定の場合には、出力制御部102は、該当の不動産の音特徴情報の時系列表示画面を表示させることが可能である。(2-1-2-4. Time series display screen)
Further, in a predetermined case such as when the time
図10は、音特徴情報の時系列表示画面の表示例(時系列表示画面74)を示した説明図である。図10に示すように、時系列表示画面74では、例えば、等価騒音レベル座標系740、不動産の等価騒音レベルの時系列グラフ742、他の音の等価騒音レベルのグラフ744、音種類選択用UI748、および、対象時間選択バー750が表示される。ここで、等価騒音レベル座標系740では、例えば、横軸が録音時刻であり、かつ、縦軸が等価騒音レベルである。また、不動産の等価騒音レベルの時系列グラフ742は、該当の不動産の、録音時刻ごとの等価騒音レベルの推移を示すグラフである。また、不動産の等価騒音レベルの時系列グラフ742上の任意の点は選択可能であり、そして、いずれかの点がユーザにより選択されると、後述するように、出力制御部102は、選択された点に対応する時刻を開始時刻として、録音データの音声をユーザ端末50に出力させ、かつ、録音データ再生画面をユーザ端末50に表示させることが可能である。なお、変形例として、該当の不動産の等価騒音レベルの信頼度の時系列的な推移を示すグラフが等価騒音レベル座標系740にさらに表示されてもよい。
FIG. 10 is an explanatory diagram showing a display example (time-series display screen 74) of the time-series display screen of sound feature information. As shown in FIG. 10, on the time-series display screen 74, for example, the equivalent noise level coordinate
また、他の音の等価騒音レベルのグラフ744は、例えば住宅街の等価騒音レベルや繁華街の等価騒音レベルなど、目安となる他の種類の音の等価騒音レベルを示すグラフである。また、音種類選択用UI748は、複数の音の種類の中からユーザが一以上の音の種類を選択するためのUI(例えばチェックボックス)である。この音種類選択用UI748においていずれかの音の種類をユーザが選択すると、出力制御部102は、該当の不動産の等価騒音レベルに対する、選択された種類の音の等価騒音レベルの大きさの比率(単位はパーセント)の時系列グラフを時系列表示画面74に表示させる。例えば、図10では、音種類選択用UI748において「電車の音」が選択されており、そして、(該当の不動産の等価騒音レベルに対する)「電車の音」の等価騒音レベルの大きさの比率の時系列グラフ746が表示されている例を示している。
Further, the graph 744 of the equivalent noise level of other sounds is a graph showing the equivalent noise level of other kinds of sounds as a guide, such as the equivalent noise level of a residential area and the equivalent noise level of a downtown area. Further, the sound
また、対象時間選択バー750は、等価騒音レベル座標系740に表示される録音時刻(横軸)の値の範囲を指定するためのバーである。なお、対象時間選択バー750に代えて、あるいは、加えて、例えば1時間、夜間、24時間、1週間などの所定の複数の種類の期間のうちの一つを選択可能とし、そして、選択された期間が、等価騒音レベル座標系740の横軸の値の範囲として設定されてもよい。
Further, the target
この時系列表示画面74によれば、該当の不動産の等価騒音レベルの時系列的な推移をユーザは一目で確認することができる。例えば、一日のうちで騒音が大きい時間帯や小さい時間帯を、目安となる他の種類の音の等価騒音レベルと比較しながら容易に確認することができる。 According to the time-series display screen 74, the user can confirm at a glance the time-series transition of the equivalent noise level of the real estate. For example, it is possible to easily confirm a time zone in which noise is loud or a time zone in which noise is low in a day by comparing it with an equivalent noise level of other types of sounds as a guide.
‐変形例
なお、図10では、該当の不動産に関する一種類の等価騒音レベルの時系列的な推移を表示する例を示したが、かかる例に限定されない。例えば、図11に示すように、時系列表示画面は、該当の不動産の等価騒音レベルに含まれる音の種類ごとの等価騒音レベルの時系列的な推移を一覧表示する面グラフ(積み上げ型のグラフ)を表示する画面であってもよい。-Modification example Although FIG. 10 shows an example of displaying a time-series transition of one type of equivalent noise level for the relevant real estate, the present invention is not limited to this example. For example, as shown in FIG. 11, the time-series display screen is an area graph (stacked graph) that displays a list of time-series transitions of the equivalent noise level for each type of sound included in the equivalent noise level of the real estate. ) May be displayed.
図11に示した時系列表示画面74bでは、該当の不動産の等価騒音レベルに含まれる、「電車の音」の等価騒音レベルの時系列的な推移を示す領域760a、「自動車の音」の等価騒音レベルの時系列的な推移を示す領域760b、「通行人の音」の等価騒音レベルの時系列的な推移を示す領域760c、および、その他の種類の音の合計の等価騒音レベルの時系列的な推移を示す領域760dを積み上げた面グラフの例を示している。
In the time-
(2−1−2−5.録音データ再生画面)
また、例えば図10または図11に示した時系列グラフ742上のいずれかの点が選択された場合などには、出力制御部102は、選択された時刻を開始時刻として、録音データの音声をユーザ端末50に出力を開始させ、かつ、録音データ再生画面をユーザ端末50に表示させることが可能である。(2-1-2-5. Recorded data playback screen)
Further, for example, when any point on the
図12は、録音データ再生画面の表示例(録音データ再生画面76)を示した説明図である。図12に示したように、録音データ再生画面76では、例えば、該当の不動産の等価騒音レベルに対する、複数の種類の音の各々の等価騒音レベルの大きさの比率がそれぞれ棒グラフ770で表示される。例えば、出力制御部102は、複数の種類の音の各々に関して、再生時刻ごとの当該音の等価騒音レベルの大きさの比率に応じて棒グラフ770の長さが変化するように、音の再生に沿って棒グラフ770の長さを逐次更新(アニメーション表示)してもよい。なお、変形例として、録音データ再生画面76では、複数の種類の音のうちユーザにより選択された音に対応する棒グラフ770を非表示にすることも可能である。
FIG. 12 is an explanatory diagram showing a display example (recorded data reproduction screen 76) of the recorded data reproduction screen. As shown in FIG. 12, on the recorded
この録音データ再生画面76によれば、ユーザは、録音データを試聴しながら、当該試聴タイミングごとの、該当の不動産に関する騒音の大きさに対する、音の種類ごとの騒音の比率を確認することができる。
According to the recorded
{2−1−3.入力受付部104}
入力受付部104は、ユーザの入力内容を受け付ける。例えば、入力受付部104は、リスト画面または地図画面に表示されている複数の不動産の中から、(例えば詳細画面の表示対象として)いずれかの不動産の選択を受け付ける。また、入力受付部104は、例えば図10および図11に示した、不動産の等価騒音レベルの時系列グラフ742において、(録音データの再生時刻として)当該時系列グラフ742上のいずれかの点の選択を受け付ける。{2-1-3. Input reception unit 104}
The
{2−1−4.通信部120}
通信部120は、録音提示サーバ10と通信可能な他の装置との間で情報の送受信を行う。例えば、通信部120は、出力制御部102の制御に従って、各種の画面を表示させるための表示制御情報をユーザ端末50へ送信する。{2-1-4. Communication unit 120}
The
{2−1−5.記憶部122}
記憶部122は、各種のデータや各種のソフトウェアを記憶する。例えば、記憶部122は、複数の不動産の各々に関する情報(当該不動産の名称や画像など)を記憶する。{2-1-5. Storage unit 122}
The
<2−2.動作>
以上、本実施形態による構成について説明した。次に、本実施形態による動作の一例について、「2−2−1.録音時の動作」および「2−2−2.表示時の動作」において説明する。なお、基本的に、まず「録音時の動作」が実行され、その後、「表示時の動作」が実行される。<2-2. Operation>
The configuration according to the present embodiment has been described above. Next, an example of the operation according to the present embodiment will be described in "2-2-1. Operation at the time of recording" and "2-2-2. Operation at the time of display". Basically, the "recording operation" is executed first, and then the "display operation" is executed.
{2−2−1.録音時の動作}
まず、本実施形態による録音時の動作について、図13を参照して説明する。なお、図13では、録音端末40を一つだけ記載しているが、基本的には、録音端末40は複数設置されており、そして、当該複数の録音端末40の各々が、図13に示すシーケンス図と同様の動作を行うものとする。{2-2-1. Operation during recording}
First, the operation during recording according to the present embodiment will be described with reference to FIG. Although only one
図13に示したように、まず、複数の不動産の各々に設置されている録音端末40は、所定の録音期間が終了するまで録音を行う(S101〜S103)。そして、所定の録音期間が終了した場合には、複数の録音端末40の各々は、録音データおよび録音時に取得したメタデータを、通信網42を介して録音蓄積サーバ20へ送信する(S105)。なお、かかる例に限定されず、例えば、通信網42に接続可能な他の装置(図示省略)の位置まで録音端末40を人手で運び、そして、録音端末40を当該他の装置に接続させてもよい。そして、この場合、当該他の装置が通信網42を介して、録音データおよびメタデータを録音蓄積サーバ20へ送信する。
As shown in FIG. 13, first, the
その後、録音蓄積サーバ20の録音保存部202は、S105で受信された録音データおよびメタデータを、該当の不動産と対応付けて記憶部222に保存する(S107)。そして、通信部220は、送信制御部204の制御に従って、当該録音データおよびメタデータを録音解析サーバ30へ送信する(S109)。
After that, the
その後、録音解析サーバ30の特徴情報特定部302は、S109で受信された録音データおよびメタデータに基づいて、録音データの音特徴情報を特定する(S111)。そして、特徴情報保存部304は、特定された音特徴情報を、該当の不動産と対応付けて記憶部322に保存する(S113)。
After that, the feature
{2−2−2.表示時の動作}
次に、本実施形態による表示時の動作について、図14および図15を参照して説明する。{2-2-2. Operation at the time of display}
Next, the operation at the time of display according to this embodiment will be described with reference to FIGS. 14 and 15.
図14に示したように、まず、ユーザ端末50は、例えばユーザの入力に基づいて、録音提示サーバ10にアクセスする(S121)。
As shown in FIG. 14, first, the
その後、録音提示サーバ10は、複数の不動産の各々の音特徴情報の提供を録音解析サーバ30に対して要求する。そして、録音解析サーバ30は、当該複数の不動産の各々の音特徴情報を録音提示サーバ10へ送信する(S123)。
After that, the
また、録音提示サーバ10は、複数の不動産の各々に関して、録音データおよびメタデータの提供を録音蓄積サーバ20に対して要求する。そして、録音蓄積サーバ20は、当該複数の不動産の各々に関して、録音データおよびメタデータを録音提示サーバ10へ送信する(S125)。
Further, the
その後、録音提示サーバ10の出力制御部102は、複数の不動産の各々に関して、S123で受信された音特徴情報と、当該不動産に関する情報とを関連付けて表示させるための表示制御情報を生成する(S127)。そして、通信部120は、出力制御部102の制御に従って、生成された表示制御情報をユーザ端末50へ送信する(S129)。
After that, the
その後、ユーザ端末50は、S129で受信された表示制御情報に基づいて、複数の不動産の各々に関して、当該不動産に関する情報と音特徴情報とを関連付けた表示画面(例えばリスト画面や地図画面)を表示する(S131)。
After that, the
その後、ユーザ端末50は、表示中の表示画面においていずれかの不動産がユーザにより選択されるまで待機する(S133)。そして、いずれかの不動産が選択された場合には(S133:Yes)、ユーザ端末50は、選択された不動産の識別情報を録音提示サーバ10へ通知する(S135)。
After that, the
その後、録音提示サーバ10の出力制御部102は、S135で通知された不動産に関する詳細画面を表示させるための表示制御情報を生成する(S137)。そして、通信部120は、出力制御部102の制御に従って、生成された表示制御情報をユーザ端末50へ送信する(S139)。
After that, the
ここで、図15を参照して、S139より後の動作について説明する。図15に示したように、S139の後、ユーザ端末50は、S139で受信された表示制御情報に基づいて、S133で選択された不動産に関する詳細画面を表示する(S141)。
Here, the operation after S139 will be described with reference to FIG. As shown in FIG. 15, after S139, the
その後、ユーザ端末50は、表示中の詳細画面において、音特徴情報の時系列表示の選択がユーザによりなされるまで待機する(S143)。そして、時系列表示の選択がなされた場合には(S143:Yes)、ユーザ端末50は、当該選択がなされたことを録音提示サーバ10へ通知する(S145)。
After that, the
その後、録音提示サーバ10の出力制御部102は、該当の不動産の音特徴情報を時系列的に表示させるための表示制御情報を生成する(S147)。そして、通信部120は、出力制御部102の制御に従って、生成された表示制御情報をユーザ端末50へ送信する(S149)。
After that, the
その後、ユーザ端末50は、S149で受信された表示制御情報に基づいて、該当の不動産の音特徴情報の時系列表示画面を表示する(S151)。
After that, the
その後、ユーザ端末50は、表示中の時系列表示画面において録音データの再生が選択されるまで待機する。例えば、ユーザ端末50は、表示中の時系列グラフ上のいずれかの点が選択されるまで待機する(S153)。そして、録音データの再生が選択された場合には(S153:Yes)、ユーザ端末50は、当該選択がなされたことを録音提示サーバ10へ通知する(S155)。
After that, the
その後、録音提示サーバ10の出力制御部102は、S155の通知に基づいて、該当の不動産の録音データを例えばストリーミング形式で、ユーザ端末50へ通信部120に送信させる(S157)。
After that, the
その後、ユーザ端末50は、S157で受信された録音データの音声を出力する(S159)。
After that, the
‐変形例
なお、本実施形態による動作は、上述した動作例に限定されない。例えば、「録音時の動作」と「表示時の動作」とは連続的に実行される例に限定されず、それぞれ並行に実行されてもよい。また、S135の後に、上述したS137〜S145の処理が行われる代わりに、S147以降の処理が行われてもよい。また、S133、S143、および、S153において、表示の終了の入力をユーザが行うことも可能であり、そして、当該入力がされた場合には、上述した「表示時の動作」は終了され得る。-Modification example The operation according to the present embodiment is not limited to the operation example described above. For example, the "operation at the time of recording" and the "operation at the time of display" are not limited to the examples of being executed continuously, and may be executed in parallel. Further, after S135, instead of performing the above-mentioned processes S137 to S145, the processes after S147 may be performed. Further, in S133, S143, and S153, the user can also input the end of the display, and when the input is made, the above-mentioned "operation at the time of display" can be ended.
<2−3.効果>
以上説明したように、本実施形態による録音提示サーバ10は、複数の不動産の各々に関して、当該不動産で録音された音声の音特徴情報に対応する表示を、当該不動産に関する情報と関連付けて表示画面に表示させる。このため、複数の不動産の各々における音の特徴を分かりやすく表示させることができる。例えば、複数の不動産の各々における音の特徴をユーザは効率的に参照し、即座に把握することが可能となる。また、ユーザは実際に現地に赴かなくても、各不動産の音の特徴を調査することができる。<2-3. Effect>
As described above, the
例えば、録音提示サーバ10は、複数の不動産の各々に関して、当該不動産で録音された音声の等価騒音レベルと、当該不動産に関する情報とを関連付けてリスト形式で表示させたり、地図画面上に表示させる。このため、複数の不動産の各々に関する騒音の大きさを同一の画面において参照することができるので、効率的、かつ、容易に確認することができる。また、等価騒音レベルが特異である不動産や、特異な等価騒音レベルの値の調査が容易になる。
For example, the
また、録音提示サーバ10は、例えばユーザにより選択された不動産に関して、録音時刻ごとの等価騒音レベルを例えば折れ線グラフにより時系列的にユーザ端末50に表示させる。このため、ユーザは、該当の不動産の等価騒音レベルの時系列的な推移を一目で確認することができる。また、等価騒音レベルが特異である時刻や、当該時刻における等価騒音レベルの値の調査が容易になる。
Further, the
また、録音提示サーバ10は、例えばユーザにより選択された不動産に関して、当該不動産で録音された音声をユーザ端末50に出力させながら、当該音声の出力時における等価騒音レベルをユーザ端末50に表示させる。このため、当該不動産の録音データの内容をユーザが十分に、かつ、効率的に把握することができる。
Further, the
<<3.応用例>>
以上、本実施形態について説明した。上述した実施形態では、不動産ごとに音声を録音する例について説明した。次に、本実施形態の応用例について説明する。後述するように、本応用例によれば、不動産に限定されず、任意の地点における音声を録音することにより、任意の地点における音特徴情報をユーザ端末50に表示させることができる。<< 3. Application example >>
The present embodiment has been described above. In the above-described embodiment, an example of recording voice for each real estate has been described. Next, an application example of this embodiment will be described. As will be described later, according to this application example, the sound feature information at an arbitrary point can be displayed on the
<3−1.情報処理システムの構成>
図16は、本応用例による情報処理システムの構成例を示した説明図である。図16に示すように、本応用例による録音端末40は、例えば、電柱4、郵便ポスト6、または、街路樹8などの、地域内に設置されている静止物に取り付けられ得る。なお、かかる例に限定されず、録音端末40は、看板、ガードレール、信号機、防犯カメラ、または、建物などに取り付けられてもよい。<3-1. Information processing system configuration>
FIG. 16 is an explanatory diagram showing a configuration example of an information processing system according to this application example. As shown in FIG. 16, the
なお、録音端末40は、静止している物体に取り付けられる例に限定されず、例えば、ユーザが携帯することも可能である。例えば、録音端末40は、スマートフォンなどの携帯電話やICレコーダなどの携帯型の装置、または、ウェアラブルデバイスなどであってもよい。この場合、ユーザは録音端末40を携帯しながら移動することにより、ユーザの移動経路における音声を録音することが可能である。
The
または、録音端末40は、乗り物(自動車、バイク、または、自転車など)の外部に取り付けられてもよい。この場合、当該乗り物が移動することにより、当該乗り物の移動経路における音声を録音することが可能である。なお、これらの変形例の場合、録音解析サーバ30は、録音端末40により録音された音声から、人や乗り物の移動に伴う音声を除外することにより、任意の地点における音特徴情報を適切に抽出することができる。
Alternatively, the
なお、本応用例による録音端末40、録音蓄積サーバ20、録音解析サーバ30、および、ユーザ端末50の構成は、上述した実施形態と概略同様である。
The configurations of the
<3−2.構成>
次に、本応用例による録音提示サーバ10の構成について説明する。なお、本応用例による録音提示サーバ10の構成要素は、上述した実施形態と同様である。以下では、上述した実施形態と異なる機能についてのみ説明を行う。<3-2. Configuration>
Next, the configuration of the
{3−2−1.出力制御部102}
本応用例による出力制御部102は、複数の録音端末40の各々が位置する地点に関して、当該地点で録音された音声の音特徴情報を、当該地点の位置情報と関連付けて表示画面に表示させる。{3-2-1. Output control unit 102}
The
(3−2−1−1.地点ごとの表示)
例えば、出力制御部102は、地図画面をユーザ端末50に表示させ、かつ、複数の地点の各々に関して、当該地点で録音された音声の音特徴情報に対応する表示を、当該地点の位置情報に対応する表示位置に表示させることが可能である。(3-2-1-1. Display for each point)
For example, the
図17は、本応用例による地図画面の表示例(地図画面80)を示した説明図である。図17に示すように、出力制御部102は、地図画面80において、複数の地点の各々に関して、当該地点の位置情報に対応する表示位置に等価騒音レベルアイコン800を表示させる。そして、出力制御部102は、当該地点で録音された音声の等価騒音レベルに応じて、等価騒音レベルアイコン800の表示態様(例えば等価騒音レベルアイコン800の大きさなど)を異ならせて表示させる。なお、地図画面80における他の表示内容に関しては、図7に示した地図画面70と概略同様である。
FIG. 17 is an explanatory diagram showing a display example (map screen 80) of a map screen according to this application example. As shown in FIG. 17, the
(3−2−1−2.補間表示)
ところで、例えば設置可能な録音端末40の個数には限界があったり、また、一以上の録音端末40の充電残量が不足するなどの理由により、録音データを取得不可能な位置や時刻などが生じ得る。そこで、出力制御部102は、録音データが取得不可能な位置に関しては、近隣の複数の地点で録音された音声の音特徴情報を、当該録音データが取得不可能な位置と当該近隣の複数の地点との位置関係に応じて補間することが可能である。そして、出力制御部102は、例えば地図画面において、補間した音特徴情報に対応する表示を該当の表示位置に表示させることが可能である。(3-2-1-2. Interpolated display)
By the way, for example, there is a limit to the number of
図18は、録音データが取得不可能な位置の等価騒音レベルを、近隣の地点の等価騒音レベルを補間することにより求め、そして、地図画面上に表示する表示例(地図画面82)を示した説明図である。図18に示したように、出力制御部102は、地図画面82上の各表示位置において、等価騒音レベルの大きさに応じて例えば色の種類や、色の濃淡などを異ならせて表示させる。
FIG. 18 shows a display example (map screen 82) in which the equivalent noise level at a position where recorded data cannot be acquired is obtained by interpolating the equivalent noise level at a nearby point and displayed on the map screen. It is explanatory drawing. As shown in FIG. 18, the
また、例えば拡大率変更UI714がユーザに操作された場合など、地図画面82の拡大率が変更される度に、出力制御部102は、録音データが取得不可能な位置に関して、近隣の複数の地点との位置関係と、変更後の拡大率とに応じて、当該近隣の複数の地点の等価騒音レベルを逐次補間することにより、当該位置の等価騒音レベルを求めることが可能である。そして、出力制御部102は、補間した等価騒音レベルに対応する表示を該当の表示位置に逐次表示させることが可能である。
Further, every time the enlargement ratio of the
この地図画面82によれば、録音データを取得不可能な位置であっても、おおよその等価騒音レベルを知ることができる。また、地域全体の等価騒音レベルの分布を分かりやすく表示させることができる。例えば、ユーザは、静かな領域および騒がしい領域を一目で把握することができる。
According to the
(3−2−1−3.交通量の表示)
また、出力制御部102は、複数の録音端末40の各々が位置する地点に関して、当該地点において録音された音声に基づいて推定された、当該地点または当該地点の近隣における交通量や車の速度を表示画面に表示させることが可能である。なお、録音解析サーバ30は、複数の地点の各々に関して、録音された音声に基づいて車の走行音を解析し、そして、解析した走行音の大きさに基づいて当該地点における例えば交通量や車の速度などを推定することが可能である。(3-2-1-3. Display of traffic volume)
Further, the
図19は、複数の地点の各々に関する、当該地点または当該地点の近隣における交通量を地図画面上に表示する表示例(地図画面84)を示した説明図である。図19に示したように、出力制御部102は、地図画面84において、複数の地点の各々に関して車アイコン840を表示させ、かつ、当該地点の交通量が多いほど車アイコン840を大きく表示させる。但し、かかる例に限定されず、出力制御部102は、当該地点の交通量の多さに応じて、例えば、車アイコン840の形状、車アイコン840の表示色(色の種類、色の濃さ、または透明度など)、車アイコン840のデコレーション、または、車アイコン840に含まれる文字や画像などを変化させてもよい。
FIG. 19 is an explanatory diagram showing a display example (map screen 84) for displaying the traffic volume at the point or in the vicinity of the point on the map screen for each of the plurality of points. As shown in FIG. 19, the
また、カレンダーUI710において日付が選択され、かつ、時計UI712において時刻が選択された場合には、出力制御部102は、複数の地点の各々に関して、選択された日時における交通量を地図画面84に表示させるように、表示を更新する。
When the date is selected in the
これらの表示例によれば、地域内の交通量、および、地域に含まれる道路ごとの交通量を同一の画面において参照することができ、効率的に参照することができる。例えば、地図画面84に表示されている道路の渋滞状況をユーザは推測することができる。
According to these display examples, the traffic volume in the area and the traffic volume for each road included in the area can be referred to on the same screen, and can be referred to efficiently. For example, the user can infer the traffic congestion situation of the road displayed on the
(3−2−1−4.天候に関する情報の表示)
また、出力制御部102は、複数の地点の各々に関して、当該地点において録音された音声に基づいて推定された、当該地点における天候に関する情報を表示画面に表示させることが可能である。ここで、天候に関する情報は、例えば、雨量、風速、または、雷の頻度などである。なお、録音解析サーバ30は、複数の地点の各々に関して、録音された音声に基づいて雨の音、風の音、または、雷の音を解析し、そして、解析結果に基づいて、当該地点における例えば雨量、風速、または、雷の頻度などを推定することが可能である。(3-2-1-4. Display of weather information)
In addition, the
図20は、複数の地点の各々における雨量を地図画面上に表示する表示例(地図画面86)を示した説明図である。図20に示したように、出力制御部102は、地図画面86において、複数の地点の各々に関して雨アイコン860を表示させ、かつ、当該地点の雨量が多いほど雨アイコン860を大きく表示させる。但し、かかる例に限定されず、出力制御部102は、当該地点の雨量に応じて、例えば、雨アイコン860の形状、雨アイコン860の表示色(色の種類、色の濃さ、または透明度など)、雨アイコン860のデコレーション、または、雨アイコン860に含まれる文字や画像などを変化させてもよい。
FIG. 20 is an explanatory diagram showing a display example (map screen 86) for displaying the amount of rainfall at each of the plurality of points on the map screen. As shown in FIG. 20, the
(3−2−1−5.通行人に関する情報の表示)
また、出力制御部102は、複数の地点の各々に関して、当該地点において録音された音声に基づいて推定された、当該地点における通行人に関する情報を表示画面に表示させることが可能である。なお、録音解析サーバ30は、複数の地点の各々に関して、録音された音声に基づいて通行人の話し声や足音などを解析し、そして、解析結果に基づいて、当該地点における例えば性別や年齢別(例えば子どもや高齢者など)の通行人の人数や、時間帯別の通行人の人数を推定することが可能である。または、録音解析サーバ30は、解析結果に基づいて、通行人の使用言語の比率を推定することが可能である。(3-2-1-5. Display of information about passersby)
Further, the
図21は、複数の地点の各々に関する、当該地点における性別ごとの通行人の人数を地図画面上に表示する表示例(地図画面88)を示した説明図である。図21に示したように、出力制御部102は、地図画面88において、複数の地点の各々に関して、地点表示アイコン880、および、通行人の人数表示882を表示させる。図8に示したように、例えば、通行人の人数表示882では、男性の通行人の人数および女性の通行人の人数がそれぞれ棒グラフにより表示される。
FIG. 21 is an explanatory diagram showing a display example (map screen 88) for displaying the number of passersby for each gender at each of the plurality of points on the map screen. As shown in FIG. 21, the
この地図画面88は、マーケティングのための地域調査などに有用である。例えば、地域における人口分布や、時間帯ごとの通行人の分布をユーザは推測することができる。
This
(3−2−1−6.動物の生息状況の表示)
また、出力制御部102は、複数の地点の各々に関して、当該地点において録音された音声に基づいて推定された、当該地点における動物の生息状況を表示画面に表示させることが可能である。なお、録音解析サーバ30は、複数の地点の各々に関して、録音された音声に基づいて、動物の種類ごとの鳴き声を解析し、そして、解析結果に基づいて、当該地点における例えば動物の種類別の数を推定することが可能である。(3-2-1-6. Display of animal habitat)
In addition, the
図22は、複数の地点の各々に関する、当該地点または当該地点の近隣におけるカラスの生息状況を地図画面上に表示する表示例(地図画面90)を示した説明図である。図22に示したように、出力制御部102は、地図画面90において、複数の地点の各々に関してカラスアイコン900を表示させ、かつ、当該地点のカラスの推定数が多いほどカラスアイコン900を大きく表示させる。但し、かかる例に限定されず、出力制御部102は、当該地点におけるカラスの推定数に応じて、例えば、カラスアイコン900の形状、カラスアイコン900の表示色(色の種類、色の濃さ、または透明度など)、カラスアイコン900のデコレーション、または、カラスアイコン900に含まれる文字や画像などを変化させてもよい。
FIG. 22 is an explanatory diagram showing a display example (map screen 90) for displaying the habitat status of crows at the point or in the vicinity of the point with respect to each of the plurality of points on the map screen. As shown in FIG. 22, the
<3−3.効果>
以上説明したように、本応用例による録音提示サーバ10は、複数の地点の各々に関して、当該地点で録音された音声の音特徴情報を、当該地点の位置情報と関連付けて表示画面に表示させる。このため、複数の地点の各々の音の特徴を分かりやすく表示させることができる。例えば、複数の地点の各々の音の特徴をユーザは効率的に参照し、即座に把握することができる。<3-3. Effect>
As described above, the
また、録音提示サーバ10は、録音データが取得不可能な位置に関しては、近隣の複数の地点で録音された音声の音特徴情報を、当該近隣の複数の地点との位置関係に応じて補間し、そして、補間した音特徴情報を該当の表示位置に表示させることが可能である。これにより、録音データが取得不可能な位置であっても、おおよその等価騒音レベルを知ることができる。また、地域全体の等価騒音レベルの分布を分かりやすく表示させることができる。
Further, the
<3−4.変形例>
なお、上記の説明では、本応用例が地域調査の用途で用いられる例を中心として説明したが、かかる例に限定されない。例えば、本応用例によれば、録音された音声に基づいて、例えば悲鳴、銃声、暴走族、暴動、闇取引などの音を解析することにより、犯罪などの検知や統計などの用途にも利用可能である。また、録音された音声に基づいて、例えば車やバイクなどの移動速度を推定することにより、速度違反の検知などの用途にも利用可能である。<3-4. Modification example>
In the above description, the present application example has been mainly described as an example used for the purpose of the area survey, but the present invention is not limited to such an example. For example, according to this application example, by analyzing sounds such as screams, gunshots, runaway tribes, riots, and black trades based on recorded voices, it can also be used for crime detection and statistics. It is possible. It can also be used for detecting speed violations by estimating the moving speed of, for example, a car or a motorcycle based on the recorded voice.
さらに、複数の地点の各々で録音された音声と、公知のデータマイニング技術とを用いることにより、例えば地価予測、株価予測、景気予測、街や店の評判の収集などの用途にも利用可能である。 Furthermore, by using voice recorded at each of multiple points and known data mining technology, it can be used for purposes such as land price forecasting, stock price forecasting, economic forecasting, and collecting reputation of towns and stores. is there.
<<4.ハードウェア構成>>
次に、本実施形態による録音提示サーバ10のハードウェア構成について、図23を参照して説明する。図23に示すように、録音提示サーバ10は、CPU150、ROM152、RAM154、バス156、インターフェース158、ストレージ装置160、および、通信装置162を備える。<< 4. Hardware configuration >>
Next, the hardware configuration of the
CPU150は、演算処理装置および制御装置として機能し、各種プログラムに従って録音提示サーバ10内の動作全般を制御する。また、CPU150は、録音提示サーバ10において制御部100の機能を実現する。なお、CPU150は、マイクロプロセッサなどのプロセッサにより構成される。
The
ROM152は、CPU150が使用するプログラムや演算パラメータなどの制御用データなどを記憶する。
The
RAM154は、例えば、CPU150により実行されるプログラムなどを一時的に記憶する。
The
バス156は、CPUバスなどから構成される。このバス156は、CPU150、ROM152、およびRAM154を相互に接続する。
The
インターフェース158は、ストレージ装置160および通信装置162を、バス156と接続する。
The
ストレージ装置160は、記憶部122として機能する、データ格納用の装置である。ストレージ装置160は、例えば、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置、または記憶媒体に記録されたデータを削除する削除装置などを含む。
The
通信装置162は、例えば通信網42などに接続するための通信デバイス等で構成された通信インターフェースである。また、通信装置162は、無線LAN対応通信装置、LTE(Long Term Evolution)対応通信装置、または有線による通信を行うワイヤー通信装置であってもよい。この通信装置162は、通信部120として機能する。
The
<<5.変形例>>
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示はかかる例に限定されない。本開示の属する技術の分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。<< 5. Modification example >>
Although the preferred embodiments of the present disclosure have been described in detail with reference to the accompanying drawings, the present disclosure is not limited to such examples. It is clear that anyone with ordinary knowledge in the field of technology to which this disclosure belongs can come up with various modifications or modifications within the scope of the technical ideas set forth in the claims. It is understood that these also belong to the technical scope of the present disclosure.
例えば、上述した制御部100に含まれる全ての構成要素は、録音提示サーバ10の代わりに、ユーザ端末50に搭載されてもよい。そして、この場合、本開示における情報処理装置は、ユーザ端末50になり得る。この変形例では、ユーザ端末50は、複数の地点の各々に関する録音データ、メタデータ、および、音特徴情報を録音蓄積サーバ20および録音解析サーバ30から受信することにより、上述した実施形態と概略同様に、複数の地点の各々に関して音特徴情報を表示画面に表示することが可能である。
For example, all the components included in the
また、上述した実施形態によれば、CPU150、ROM152、およびRAM154などのハードウェアを、上述した実施形態による録音提示サーバ10の各構成と同等の機能を発揮させるためのコンピュータプログラムも提供可能である。また、該コンピュータプログラムが記録された記録媒体も提供される。
Further, according to the above-described embodiment, it is possible to provide a computer program for causing the hardware such as the
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。 In addition, the effects described herein are merely explanatory or exemplary and are not limited. That is, the techniques according to the present disclosure may exhibit other effects apparent to those skilled in the art from the description herein, in addition to or in place of the above effects.
なお、以下のような構成も本開示の技術的範囲に属する。
(1)
複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて表示画面に表示させる出力制御部、
を備え、
前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含む、情報処理装置。
(2)
前記録音された音声の大きさを示す情報は、前記録音された音声の騒音レベルを含む、前記(1)に記載の情報処理装置。
(3)
前記地点に関する情報は、前記地点に位置する不動産の識別情報または前記不動産の位置情報を含み、
前記録音された音声の大きさを示す情報は、前記不動産の屋外または屋内で録音された音声の騒音レベルを含む、前記(2)に記載の情報処理装置。
(4)
前記地点に関する情報は、前記地点に位置する不動産の識別情報または前記不動産の位置情報を含み、
前記録音された音声の大きさを示す情報は、前記不動産の防音性能を示す値を含む、前記(1)〜(3)のいずれか一項に記載の情報処理装置。
(5)
前記出力制御部は、前記複数の地点の各々に関する、当該地点を含む領域内で録音された音声の特徴を示す情報と、当該地点に関する情報との組み合わせを、リスト形式で表示させる、前記(1)〜(4)のいずれか一項に記載の情報処理装置。
(6)
前記出力制御部は、前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報と、当該地点に関する情報との組み合わせを、当該録音された音声の大きさを示す情報に応じた順序で一方向に並べて前記表示画面に表示させる、前記(5)に記載の情報処理装置。
(7)
前記表示画面は、地図画面であり、
前記地点に関する情報は、前記地点の位置情報を含み、
前記出力制御部は、前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、前記地図画面における、前記地点の位置情報に対応する表示位置に表示させる、前記(1)〜(4)のいずれか一項に記載の情報処理装置。
(8)
前記出力制御部は、前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該音声の大きさを示す情報に応じた表示態様で前記地図画面に表示させる、前記(7)に記載の情報処理装置。
(9)
前記複数の地点は、第1の地点と、前記第1の地点の周囲に位置する第2の地点とを含み、
前記出力制御部は、さらに、前記地図画面における前記第1の地点と前記第2の地点との間の表示位置に関して、前記第1の地点を含む領域内で録音された音声の大きさを示す情報と、前記第2の地点を含む領域内で録音された音声の大きさを示す情報とを、前記第1の地点と前記第2の地点と前記表示位置との位置関係に応じて補間し、かつ、補間した情報に対応する表示を前記表示位置に表示させる、前記(8)に記載の情報処理装置。
(10)
前記出力制御部は、前記第1の地点を含む領域内で録音された音声の大きさを示す情報と、前記第2の地点を含む領域内で録音された音声の大きさを示す情報とを、さらに前記地図画面の拡大率に応じて補間し、かつ、補間した情報に対応する表示を前記表示位置に表示させる、前記(9)に記載の情報処理装置。
(11)
前記録音された音声の特徴を示す情報は、前記録音された音声に含まれる音の種類ごとの音の大きさを示す情報を含む、前記(1)〜(10)のいずれか一項に記載の情報処理装置。
(12)
前記情報処理装置は、前記複数の地点のうちのいずれかの選択を受け付ける受付部をさらに備え、
前記出力制御部は、さらに、選択された地点を含む領域内で録音された音声に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に前記表示画面に表示させる、前記(1)〜(11)のいずれか一項に記載の情報処理装置。
(13)
前記受付部は、さらに、音の種類の選択を受け付け、
前記出力制御部は、前記録音された音声のうち前記選択された種類の音に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に前記表示画面に表示させる、前記(12)に記載の情報処理装置。
(14)
前記受付部は、さらに、期間の選択を受け付け、
前記出力制御部は、前記録音された音声のうち前記選択された期間の音声に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に前記表示画面に表示させる、前記(12)または(13)に記載の情報処理装置。
(15)
前記出力制御部は、前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声に基づいて推定された、当該地点を含む領域における交通量に対応する表示を前記表示画面にさらに表示させる、前記(1)〜(14)のいずれか一項に記載の情報処理装置。
(16)
前記出力制御部は、前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声に基づいて推定された、当該地点における天候に関する情報に対応する表示を前記表示画面にさらに表示させる、前記(1)〜(15)のいずれか一項に記載の情報処理装置。
(17)
前記天候に関する情報は、雨量、風速、または、雷に関する情報を含む、前記(16)に記載の情報処理装置。
(18)
所定の地点で録音された音声に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に表示画面に表示させる出力制御部、
を備える、情報処理装置。
(19)
複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けてプロセッサが表示画面に表示させること、
を含み、
前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含む、情報処理方法。
(20)
コンピュータを、
複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて表示画面に表示させる出力制御部、
として機能させるための、プログラムであって、
前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含む、プログラム。The following configurations also belong to the technical scope of the present disclosure.
(1)
An output control unit that displays on the display screen a display corresponding to information indicating the characteristics of the voice recorded in the area including the point for each of the plurality of points in association with the information about the point.
With
The information indicating the characteristics of the recorded voice is an information processing device including information indicating the magnitude of the recorded voice.
(2)
The information processing device according to (1) above, wherein the information indicating the loudness of the recorded voice includes the noise level of the recorded voice.
(3)
The information about the point includes the identification information of the real estate located at the point or the position information of the real estate.
The information processing device according to (2) above, wherein the information indicating the loudness of the recorded voice includes the noise level of the voice recorded outdoors or indoors of the real estate.
(4)
The information about the point includes the identification information of the real estate located at the point or the position information of the real estate.
The information processing device according to any one of (1) to (3) above, wherein the information indicating the loudness of the recorded voice includes a value indicating the soundproofing performance of the real estate.
(5)
The output control unit displays, in a list format, a combination of information indicating the characteristics of the voice recorded in the area including the point and the information about the point for each of the plurality of points. ) To the information processing apparatus according to any one of (4).
(6)
For each of the plurality of points, the output control unit determines the magnitude of the recorded voice by combining information indicating the characteristics of the voice recorded in the area including the point and the information about the point. The information processing apparatus according to (5) above, which is arranged in one direction in an order according to the information to be shown and displayed on the display screen.
(7)
The display screen is a map screen.
The information about the point includes the position information of the point.
For each of the plurality of points, the output control unit displays a display corresponding to information indicating the characteristics of the voice recorded in the area including the point, and a display corresponding to the position information of the point on the map screen. The information processing apparatus according to any one of (1) to (4) above, which is displayed at a position.
(8)
For each of the plurality of points, the output control unit displays a display corresponding to information indicating the characteristics of the sound recorded in the area including the points in a display mode corresponding to the information indicating the magnitude of the sound. The information processing device according to (7) above, which is displayed on the map screen.
(9)
The plurality of points include a first point and a second point located around the first point.
The output control unit further indicates the magnitude of the voice recorded in the area including the first point with respect to the display position between the first point and the second point on the map screen. The information and the information indicating the magnitude of the sound recorded in the area including the second point are interpolated according to the positional relationship between the first point, the second point, and the display position. The information processing apparatus according to (8) above, wherein a display corresponding to the interpolated information is displayed at the display position.
(10)
The output control unit provides information indicating the volume of the voice recorded in the area including the first point and information indicating the volume of the sound recorded in the area including the second point. The information processing apparatus according to (9), further comprising interpolating according to the enlargement ratio of the map screen and displaying a display corresponding to the interpolated information at the display position.
(11)
The information indicating the characteristics of the recorded voice is described in any one of (1) to (10) above, which includes information indicating the loudness of each type of sound included in the recorded voice. Information processing equipment.
(12)
The information processing device further includes a reception unit that accepts selection of any of the plurality of points.
The output control unit further displays information indicating the loudness of each recording time on the display screen in the order of recording time with respect to the sound recorded in the area including the selected point. The information processing apparatus according to any one of (11).
(13)
The reception unit further accepts the selection of the sound type,
The output control unit displays information indicating the loudness of each recording time on the display screen in the order of recording time with respect to the selected type of sound among the recorded sounds, as described in (12) above. Information processing equipment.
(14)
The reception department further accepts the selection of the period,
The output control unit displays information indicating the loudness of each recording time on the display screen in the order of recording time with respect to the voice of the selected period among the recorded voices (12) or ( The information processing apparatus according to 13).
(15)
The output control unit further displays on the display screen a display corresponding to the traffic volume in the area including the point, which is estimated based on the voice recorded in the area including the point for each of the plurality of points. The information processing apparatus according to any one of (1) to (14) above, which is displayed.
(16)
The output control unit further displays on the display screen a display corresponding to information on the weather at the point, which is estimated based on the voice recorded in the area including the point for each of the plurality of points. , The information processing apparatus according to any one of (1) to (15) above.
(17)
The information processing device according to (16) above, wherein the information regarding the weather includes information regarding rainfall, wind speed, or lightning.
(18)
Output control unit that displays information indicating the loudness of each recording time on the display screen in the order of recording time for the voice recorded at a predetermined point.
Information processing device.
(19)
For each of the plurality of points, the processor displays the display corresponding to the information indicating the characteristics of the sound recorded in the area including the point on the display screen in association with the information about the point.
Including
The information processing method including information indicating the magnitude of the recorded voice includes the information indicating the characteristics of the recorded voice.
(20)
Computer,
An output control unit that displays on the display screen a display corresponding to information indicating the characteristics of the voice recorded in the area including the point for each of the plurality of points in association with the information about the point.
It is a program to function as
The information indicating the characteristics of the recorded voice is a program including information indicating the loudness of the recorded voice.
10 録音提示サーバ
20 録音蓄積サーバ
30 録音解析サーバ
40 録音端末
42 通信網
50 ユーザ端末
100、200、300、400 制御部
102 出力制御部
104 入力受付部
120、220、320、420 通信部
122、222、322、428 記憶部
202、404 録音保存部
204、306、406 送信制御部
302 特徴情報特定部
304 特徴情報保存部
402 録音部
422 マイクロフォン
424 GPS受信部
426 日時情報取得部10
Claims (13)
前記地点の位置情報を含む前記地点に関する情報を取得し、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて地図画面に表示させる出力制御部と、
を備え、
前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含み、
前記複数の地点は、第1の地点と、前記第1の地点の周囲に位置する第2の地点とを含み、
前記出力制御部は、
前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、前記地図画面における、前記地点に関する情報に含まれる前記地点の位置情報に対応する表示位置に、前記音声の大きさを示す情報に応じた表示態様で前記地図画面に表示させ、
さらに、前記地図画面における前記第1の地点と前記第2の地点との間の表示位置に関して、前記第1の地点を含む領域内で録音された音声の大きさを示す情報と、前記第2の地点を含む領域内で録音された音声の大きさを示す情報とを、前記第1の地点と前記第2の地点と前記表示位置との位置関係に応じて補間し、かつ、前記地図画面の拡大率に応じて補間し、補間した情報に対応する表示を前記表示位置に表示させる、
情報処理装置。 An analysis unit that acquires and analyzes the voice recorded in the area including each of a plurality of points and acquires information indicating the characteristics of the recorded voice.
Output that acquires information about the point including the position information of the point and displays a display corresponding to the information indicating the characteristics of the voice recorded in the area including the point on the map screen in association with the information about the point. Control unit and
With
Information indicating characteristics of the recorded speech is viewed contains information indicating the size of the recorded speech,
The plurality of points include a first point and a second point located around the first point.
The output control unit
For each of the plurality of points, the display corresponding to the information indicating the characteristics of the voice recorded in the area including the point corresponds to the position information of the point included in the information about the point on the map screen. The display position is displayed on the map screen in a display mode corresponding to the information indicating the loudness of the sound.
Further, with respect to the display position between the first point and the second point on the map screen, information indicating the magnitude of the sound recorded in the area including the first point and the second point. Information indicating the magnitude of the voice recorded in the area including the point is interpolated according to the positional relationship between the first point, the second point, and the display position, and the map screen. Interpolates according to the enlargement ratio of, and displays the display corresponding to the interpolated information at the display position.
Information processing device.
前記録音された音声の大きさを示す情報は、前記不動産の屋外または屋内で録音された音声の騒音レベルを含む、請求項2に記載の情報処理装置。 The information about the point includes the identification information of the real estate located at the point or the position information of the real estate.
The information processing device according to claim 2, wherein the information indicating the loudness of the recorded voice includes a noise level of the voice recorded outdoors or indoors of the real estate.
前記録音された音声の大きさを示す情報は、前記不動産の防音性能を示す値を含む、請求項1〜3のいずれか一項に記載の情報処理装置。 The information about the point includes the identification information of the real estate located at the point or the position information of the real estate.
The information processing device according to any one of claims 1 to 3, wherein the information indicating the loudness of the recorded voice includes a value indicating the soundproofing performance of the real estate.
前記出力制御部は、さらに、選択された地点を含む領域内で録音された音声に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に表示画面に表示させる、請求項1〜5のいずれか一項に記載の情報処理装置。 The information processing device further includes a reception unit that accepts selection of any of the plurality of points.
The output control unit further, with respect to sound recorded in a region including the selected point, thereby recording the information indicating the size of the sound of each recording time time sequentially displayed in Table示画surface, according to claim 1 to 5 The information processing apparatus according to any one of the above.
前記出力制御部は、前記録音された音声のうち前記選択された種類の音に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に前記表示画面に表示させる、請求項6に記載の情報処理装置。 The reception unit further accepts the selection of the sound type,
The sixth aspect of claim 6, wherein the output control unit displays information indicating the loudness of each recording time on the display screen in the order of recording time with respect to the selected type of sound among the recorded sounds. Information processing device.
前記出力制御部は、前記録音された音声のうち前記選択された期間の音声に関して、録音時刻ごとの音の大きさを示す情報を録音時刻順に前記表示画面に表示させる、請求項6または7に記載の情報処理装置。 The reception department further accepts the selection of the period,
According to claim 6 or 7 , the output control unit displays information indicating the loudness of each recording time on the display screen in the order of recording time with respect to the voice of the selected period among the recorded voices. The information processing device described.
複数の地点の各々を含む領域内で録音された音声を取得し、解析して、前記録音された音声の特徴を示す情報を取得することと、
前記地点の位置情報を含む前記地点に関する情報を取得し、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて地図画面に表示させることと、
を含み、
前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含み、
前記複数の地点は、第1の地点と、前記第1の地点の周囲に位置する第2の地点とを含み、
前記プロセッサは、
前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、前記地図画面における、前記地点に関する情報に含まれる前記地点の位置情報に対応する表示位置に、前記音声の大きさを示す情報に応じた表示態様で前記地図画面に表示させ、
さらに、前記地図画面における前記第1の地点と前記第2の地点との間の表示位置に関して、前記第1の地点を含む領域内で録音された音声の大きさを示す情報と、前記第2の地点を含む領域内で録音された音声の大きさを示す情報とを、前記第1の地点と前記第2の地点と前記表示位置との位置関係に応じて補間し、かつ、前記地図画面の拡大率に応じて補間し、補間した情報に対応する表示を前記表示位置に表示させる、
情報処理方法。 The processor,
Acquiring and analyzing the voice recorded in the area including each of the plurality of points, and acquiring the information indicating the characteristics of the recorded voice,
Acquiring information about the point including the position information of the point, and displaying a display corresponding to the information indicating the characteristics of the voice recorded in the area including the point on the map screen in association with the information about the point. When,
Including
Information indicating characteristics of the recorded speech is viewed contains information indicating the size of the recorded speech,
The plurality of points include a first point and a second point located around the first point.
The processor
For each of the plurality of points, the display corresponding to the information indicating the characteristics of the voice recorded in the area including the point corresponds to the position information of the point included in the information about the point on the map screen. The display position is displayed on the map screen in a display mode corresponding to the information indicating the loudness of the sound.
Further, with respect to the display position between the first point and the second point on the map screen, information indicating the magnitude of the sound recorded in the area including the first point and the second point. Information indicating the magnitude of the voice recorded in the area including the point is interpolated according to the positional relationship between the first point, the second point, and the display position, and the map screen. Interpolates according to the enlargement ratio of, and displays the display corresponding to the interpolated information at the display position.
Information processing method.
複数の地点の各々を含む領域内で録音された音声を取得し、解析して、前記録音された音声の特徴を示す情報を取得する解析部と、
前記地点の位置情報を含む前記地点に関する情報を取得し、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、当該地点に関する情報と関連付けて地図画面に表示させる出力制御部と、
として機能させるための、プログラムであって、
前記録音された音声の特徴を示す情報は、前記録音された音声の大きさを示す情報を含み、
前記複数の地点は、第1の地点と、前記第1の地点の周囲に位置する第2の地点とを含み、
前記出力制御部は、
前記複数の地点の各々に関して、当該地点を含む領域内で録音された音声の特徴を示す情報に対応する表示を、前記地図画面における、前記地点に関する情報に含まれる前記地点の位置情報に対応する表示位置に、前記音声の大きさを示す情報に応じた表示態様で前記地図画面に表示させ、
さらに、前記地図画面における前記第1の地点と前記第2の地点との間の表示位置に関して、前記第1の地点を含む領域内で録音された音声の大きさを示す情報と、前記第2の地点を含む領域内で録音された音声の大きさを示す情報とを、前記第1の地点と前記第2の地点と前記表示位置との位置関係に応じて補間し、かつ、前記地図画面の拡大率に応じて補間し、補間した情報に対応する表示を前記表示位置に表示させる、
プログラム。
Computer,
An analysis unit that acquires and analyzes the voice recorded in the area including each of a plurality of points and acquires information indicating the characteristics of the recorded voice.
Output that acquires information about the point including the position information of the point and displays a display corresponding to the information indicating the characteristics of the voice recorded in the area including the point on the map screen in association with the information about the point. Control unit and
It is a program to function as
Information indicating characteristics of the recorded speech is viewed contains information indicating the size of the recorded speech,
The plurality of points include a first point and a second point located around the first point.
The output control unit
For each of the plurality of points, the display corresponding to the information indicating the characteristics of the voice recorded in the area including the point corresponds to the position information of the point included in the information about the point on the map screen. The display position is displayed on the map screen in a display mode corresponding to the information indicating the loudness of the sound.
Further, with respect to the display position between the first point and the second point on the map screen, information indicating the magnitude of the sound recorded in the area including the first point and the second point. Information indicating the magnitude of the voice recorded in the area including the point is interpolated according to the positional relationship between the first point, the second point, and the display position, and the map screen. Interpolates according to the enlargement ratio of, and displays the display corresponding to the interpolated information at the display position.
program.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016015037 | 2016-01-29 | ||
JP2016015037 | 2016-01-29 | ||
PCT/JP2016/084459 WO2017130537A1 (en) | 2016-01-29 | 2016-11-21 | Information processing device, information processing method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017130537A1 JPWO2017130537A1 (en) | 2018-11-22 |
JP6876926B2 true JP6876926B2 (en) | 2021-05-26 |
Family
ID=59397900
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017563712A Active JP6876926B2 (en) | 2016-01-29 | 2016-11-21 | Information processing equipment, information processing methods, and programs |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6876926B2 (en) |
WO (1) | WO2017130537A1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7163776B2 (en) * | 2019-01-08 | 2022-11-01 | トヨタ自動車株式会社 | Information processing device, information processing system, program, and information processing method |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11223674A (en) * | 1998-02-06 | 1999-08-17 | Honda Motor Co Ltd | Weather condition detecting system |
JP2002135744A (en) * | 2000-10-19 | 2002-05-10 | Nippon Broadband Communications Kk | Housing introducing system utilizing broadband |
JP2009068890A (en) * | 2007-09-11 | 2009-04-02 | Pioneer Electronic Corp | Device, method and program for recording environmental sound pressure |
JP2009300338A (en) * | 2008-06-17 | 2009-12-24 | Ihi Corp | Contour map creating device |
JP2010198502A (en) * | 2009-02-26 | 2010-09-09 | Pioneer Electronic Corp | Device, method, and program for retrieving real estate property and recording medium |
KR101190882B1 (en) * | 2010-11-23 | 2012-10-12 | 서울시립대학교 산학협력단 | Apparatus and method of cloud computing for online visualization of noise map at high speed |
US10045321B2 (en) * | 2010-12-30 | 2018-08-07 | Staton Techiya, Llc | Information processing using a population of data acquisition devices |
JP6017693B2 (en) * | 2013-08-02 | 2016-11-02 | 株式会社日立製作所 | Distribution management apparatus, distribution management method, and distribution management program |
-
2016
- 2016-11-21 JP JP2017563712A patent/JP6876926B2/en active Active
- 2016-11-21 WO PCT/JP2016/084459 patent/WO2017130537A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JPWO2017130537A1 (en) | 2018-11-22 |
WO2017130537A1 (en) | 2017-08-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11481426B2 (en) | Predicting acoustic features for geographic locations | |
EP3766005A1 (en) | Real-to-synthetic image domain transfer | |
CN104657416B (en) | Map-indication method and device | |
US20200302951A1 (en) | Activity recognition system for security and situation awareness | |
US20150186378A1 (en) | System for identifying, monitoring and ranking incidents from social media | |
CN104737523A (en) | Managing a context model in a mobile device by assigning context labels for data clusters | |
Niforatos et al. | Atmos: a hybrid crowdsourcing approach to weather estimation | |
CN204423417U (en) | Movie theatre information acquisition system | |
US20230153916A1 (en) | Predictive analytics for assessing property using external data | |
JPWO2008139717A1 (en) | Display device, display method, display program | |
CN108564274B (en) | Guest room booking method and device and mobile terminal | |
JP2016122373A (en) | Information processing device, information processing system, terminal device, information processing method, and program | |
JP6876926B2 (en) | Information processing equipment, information processing methods, and programs | |
US11379274B2 (en) | Hybrid spatial-temporal event probability prediction method | |
CN112183380B (en) | Passenger flow volume analysis method and system based on face recognition and electronic equipment | |
US20180014158A1 (en) | Mobile Device Recommendation System and Method | |
US11689882B2 (en) | Determining exposure to an outdoor display unit | |
JP2006338577A (en) | Environmental data providing system | |
CA3236887A1 (en) | Identifying regions of interest in an imaging field of view | |
US20230017248A1 (en) | Information providing method | |
KR20230061012A (en) | Big data-based flood warning and prevention system using CCTV and signage | |
Naqvi et al. | Street mapping, object detection and traffic load assessment from SVIs and field data using YOLOv3, machine learning and GIS | |
JP7111397B1 (en) | Program, method and information processing device | |
JP7438791B2 (en) | Anxiety evaluation device and anxiety evaluation program | |
JP7434952B2 (en) | Information processing device, information processing system and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191106 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210126 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210315 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210323 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210405 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6876926 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |