JP5213797B2 - Metadata search device, metadata search method, metadata search program, and metadata search system - Google Patents

Metadata search device, metadata search method, metadata search program, and metadata search system Download PDF

Info

Publication number
JP5213797B2
JP5213797B2 JP2009134452A JP2009134452A JP5213797B2 JP 5213797 B2 JP5213797 B2 JP 5213797B2 JP 2009134452 A JP2009134452 A JP 2009134452A JP 2009134452 A JP2009134452 A JP 2009134452A JP 5213797 B2 JP5213797 B2 JP 5213797B2
Authority
JP
Japan
Prior art keywords
section
metadata
search
content
correspondence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009134452A
Other languages
Japanese (ja)
Other versions
JP2010283542A (en
Inventor
隆行 黒住
隆仁 川西
良 向井
邦夫 柏野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2009134452A priority Critical patent/JP5213797B2/en
Publication of JP2010283542A publication Critical patent/JP2010283542A/en
Application granted granted Critical
Publication of JP5213797B2 publication Critical patent/JP5213797B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、メタデータ検索装置、メタデータ検索方法、メタデータ検索プログラム、及びメタデータ検索システムに関する。   The present invention relates to a metadata search device, a metadata search method, a metadata search program, and a metadata search system.

映像コンテンツや楽曲コンテンツに関連する様々な付随情報を、メタデータとしてコンテンツに対して付与することが行われている。楽曲コンテンツを例にとると、曲名、アーチスト名、ジャンル等がメタデータとしてコンテンツに付与されている。さらに、コンテンツ全体に対するメタデータばかりでなく、歌唱映像に対して時間毎に付随する歌詞のテキスト情報、ドラマの映像に対して時間毎に付随する出演者情報等、コンテンツ中の所定の区間あるいは領域に対するメタデータがコンテンツの所定の区間あるいは領域に対して付与されている。   Various accompanying information related to video content and music content is assigned as metadata to the content. Taking song content as an example, a song name, artist name, genre, and the like are given to the content as metadata. Furthermore, not only metadata for the entire content but also text information of lyrics accompanying the singing video every hour, performer information accompanying the drama video every hour, etc. Is added to a predetermined section or region of the content.

このメタデータを検索する技術として、特許文献1(特開2008−219608)に記載されているものがある。特許文献1に示される表示装置では、再生コンテンツの特徴データの抽出開始時刻となる基準時刻が取得され、再生コンテンツから特徴データが抽出される。そして、その特徴データに基づいて、蓄積コンテンツ中の特徴データが探索され、再生コンテンツから導き出された特徴データに対応する蓄積コンテンツ中の時刻が該当基準時刻として特定され、再生コンテンツの現在の再生時刻が取得される。そして、再生時刻と基準時刻と該当基準時刻とに基づいて再生該当基準時刻が計算され、蓄積コンテンツ中の時刻ごとに対応付けられたメタデータの中から、再生該当基準時刻に該当する時刻に対応付けられたメタデータが選択されて表示される。   As a technique for searching for this metadata, there is one described in Japanese Patent Application Laid-Open No. 2008-219608. In the display device disclosed in Patent Document 1, a reference time that is an extraction start time of feature data of a playback content is acquired, and feature data is extracted from the playback content. Based on the feature data, the feature data in the stored content is searched, the time in the stored content corresponding to the feature data derived from the playback content is specified as the corresponding reference time, and the current playback time of the playback content Is acquired. Then, a playback corresponding reference time is calculated based on the playback time, the reference time, and the corresponding reference time, and corresponds to the time corresponding to the playback corresponding reference time from the metadata associated with each time in the stored content. The attached metadata is selected and displayed.

特開2008−219608号公報JP 2008-219608 A

しかしながら、特許文献1に記載された表示装置では、再生コンテンツの特徴データに基づいた検索の結果、複数の蓄積コンテンツのメタデータが抽出される場合があった。特に、より長い再生コンテンツの区間で検索を行うと、この区間の一部の特徴データに類似する蓄積コンテンツの特徴データが多くなり、より多くの蓄積コンテンツのメタデータが抽出される。複数のメタデータが抽出された場合、特許文献1に記載された表示装置では、どのメタデータを表示すべきかの基準がないため、メタデータを表示することができない、又は、すべてのメタデータを一律に表示してしまう。このため、特許文献1に記載された表示装置では、再生コンテンツに合致するメタデータを選択できない、又は、利用者等がメタデータを選択するのに時間がかかるという欠点があった。   However, in the display device described in Patent Document 1, as a result of search based on feature data of reproduced content, metadata of a plurality of accumulated contents may be extracted. In particular, when a search is performed in a longer playback content section, feature data of the stored content that is similar to part of the feature data in this section increases, and more metadata of the stored content is extracted. When a plurality of metadata is extracted, the display device described in Patent Document 1 does not have a standard for which metadata should be displayed. Therefore, the metadata cannot be displayed, or all metadata is displayed. It will be displayed uniformly. For this reason, the display device described in Patent Document 1 has a drawback that it cannot select metadata that matches the playback content, or that it takes time for a user or the like to select metadata.

本発明は上記の点に鑑みてなされたものであり、その目的は、コンテンツに合致するメタデータを迅速に選択することができるメタデータ検索装置、メタデータ検索方法、メタデータ検索プログラム、及びメタデータ検索システムを提供することにある。   The present invention has been made in view of the above points, and an object of the present invention is to provide a metadata search device, a metadata search method, a metadata search program, and a metadata search program that can quickly select metadata that matches content. To provide a data retrieval system.

本発明は上記の課題を解決するためになされたものであり、本発明は、コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置において、前記コンテンツの区間あるいは領域に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを、当該蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報に基づいて出力する検索結果出力部を備えることを特徴とするメタデータ検索装置である。   The present invention has been made in order to solve the above-described problems. The present invention is a metadata search apparatus that searches for stored content of a signal similar to the content signal and outputs metadata of the searched stored content. Search for outputting metadata of the stored content section or region of a signal similar to a signal included in the content section or region based on storage section length information indicating the size of the stored content section or region A metadata search device comprising a result output unit.

また、本発明は、コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置おいて、前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得部と、前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得部と、前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索部と、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索部が抽出したメタデータを出力する検索結果出力部と、を備えることを特徴とするメタデータ検索装置である。   The present invention also provides a metadata search apparatus that searches for stored content of a signal similar to a content signal and outputs metadata of the searched stored content, and includes information on a query section indicating the section of the content or the area. , A section length correspondence storage unit that prestores section length correspondence information that associates the section of the stored content of the signal similar to the signal included in the query section or the storage section length information indicating the size of the area. A section length correspondence acquisition unit to be read from, a search command acquisition unit for acquiring information on a search section indicating the section or area of the content, and a section or area of the stored content of a signal similar to a signal included in the search section A metadata search unit for extracting the metadata of the section, and storage section length information of the section length correspondence information, the search Based on the accumulated segment length information corresponding to the query section included between a metadata search apparatus characterized by comprising, said metadata search unit outputs the extracted metadata retrieval result output unit.

また、本発明は、上記のメタデータ検索装置において、前記検索結果出力部は、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報が示す区間あるいは領域の大きさの大きい順に、前記メタデータ検索部が抽出したメタデータを出力することを特徴とする。   In the metadata search device according to the present invention, the search result output unit is storage section length information of the section length correspondence information, and storage section length information corresponding to a query section included in the search section. The metadata extracted by the metadata search unit is output in descending order of the size of the section or area indicated by.

また、本発明は、上記のメタデータ検索装置において、前記蓄積区間長情報は、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域を示す蓄積区間の情報であることを特徴とする。   According to the present invention, in the metadata search apparatus, the storage section length information is information on a storage section indicating a section or a region of the stored content of a signal similar to a signal included in the query section. Features.

また、本発明は、上記のメタデータ検索装置において、前記検索結果出力部は、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報を出力することを特徴とする。   In the metadata search device according to the present invention, the search result output unit is storage section length information of the section length correspondence information, and storage section length information corresponding to a query section included in the search section. Is output.

また、本発明は、上記のメタデータ検索装置において、前記検索結果出力部は、前記検索区間内のコンテンツの区間あるいは領域ごとに、蓄積コンテンツの出現頻度を表すヒストグラムを計算し、計算したヒストグラムが示す出現頻度に基づいて前記メタデータ検索部が抽出したメタデータを出力することを特徴とする。   In the metadata search device according to the present invention, the search result output unit calculates a histogram representing the appearance frequency of stored content for each content section or region in the search section. The metadata extracted by the metadata search unit is output based on the appearance frequency shown.

また、本発明は、上記のメタデータ検索装置において、計算したヒストグラムが示す出現頻度に基づいて、前記メタデータ検索部が抽出したメタデータの出力順序を決定することを特徴とする。   Further, the present invention is characterized in that, in the metadata search device, the output order of metadata extracted by the metadata search unit is determined based on the appearance frequency indicated by the calculated histogram.

また、本発明は、上記のメタデータ検索装置において、前記クエリ区間と、当該クエリ区間のコンテンツの信号に類似する信号の前記蓄積区間と、を含む対応関係を複数取得するコンテンツ対応関係取得部と、前記クエリ区間と前記蓄積区間との複数の対応関係を結合して結合対応関係を生成する結合対応関係生成部と、前記結合対応関係生成部が結合した前記クエリ区間と、前記結合対応関係の前記蓄積区間の大きさを示す蓄積区間長情報と、を前記区間長対応関係情報として区間長対応関係記憶部に記憶する区間長対応関係生成部と、を備えることを特徴とする。   In the metadata search device, the present invention provides a content correspondence acquisition unit that acquires a plurality of correspondences including the query interval and the accumulation interval of a signal similar to the content signal of the query interval. , A combined correspondence generation unit that generates a combined correspondence by combining a plurality of correspondences between the query interval and the storage interval, the query interval combined by the combined correspondence generation unit, and the combined correspondence relationship And a section length correspondence generation unit that stores storage section length information indicating the size of the storage section in the section length correspondence storage unit as the section length correspondence information.

また、本発明は、コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置おけるメタデータ検索方法において、区間長対応関係取得部が、前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得過程と、検索命令取得部が、前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得過程と、メタデータ検索部が、前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索過程と、検索結果出力部が、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索過程にて抽出したメタデータを出力する検索結果出力過程と、を有することを特徴とするメタデータ検索方法である。   Further, the present invention provides a metadata search method in a metadata search apparatus that searches for stored content of a signal similar to a content signal and outputs metadata of the searched stored content. Corresponding to the section length, the information of the query section indicating the section or area of the content and the storage section length information indicating the size of the stored content section or area of the signal similar to the signal included in the query section are associated. A section length correspondence acquisition process for reading the relation information in advance from a section length correspondence storage unit, a search command acquisition unit for acquiring information on a search section indicating the section or area of the content, A data search unit stores a section or region of the stored content of a signal similar to the signal included in the search section. A metadata search process for extracting data, and a search result output unit, based on storage section length information corresponding to a query section included in the search section, which is storage section length information of the section length correspondence information, A metadata search method comprising: a search result output process for outputting metadata extracted in the metadata search process.

また、本発明は、コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置のコンピュータに、前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得手段、前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得手段、前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索手段、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索手段にて抽出したメタデータを出力する検索結果出力手段、として機能させるメタデータ検索プログラムである。   In addition, the present invention searches for a stored content of a signal similar to a content signal, and outputs a metadata of the searched stored content to a computer of a metadata search apparatus, and information on a query interval indicating the content interval or the region. And a section length correspondence storage that prestores section length correspondence information that correlates the section of the stored content of the signal similar to the signal included in the query section or the storage section length information indicating the size of the area. Section length correspondence acquisition means for reading out from the section, search command acquisition means for acquiring information on the search section indicating the content section or area, and the stored content section or area of the signal similar to the signal included in the search section Metadata search means for extracting metadata, and storage section length information of the section length correspondence information. Based on the accumulated segment length information corresponding to the query sections included in the search interval, which is the metadata retrieval program metadata search means search result output means for outputting the extracted metadata in, to function as a.

また、本発明は、コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置を具備するメタデータ管理システムにおいて、前記メタデータ管理システムは、メタデータ生成装置を具備し、前記メタデータ検索装置は、前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得部と、前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得部と、前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索部と、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索部が抽出したメタデータを出力する検索結果出力部と、を備え、前記メタデータ生成装置は、前記クエリ区間と、当該クエリ区間のコンテンツの信号に類似する信号の前記蓄積区間と、を含む対応関係を複数取得するコンテンツ対応関係取得部と、前記クエリ区間と前記蓄積区間との複数の対応関係を結合して結合対応関係を生成する結合対応関係生成部と、前記結合対応関係生成部が結合した前記クエリ区間と、前記結合対応関係の前記蓄積区間の大きさを示す蓄積区間長情報と、を前記区間長対応関係情報として区間長対応関係記憶部に記憶する区間長対応関係生成部と、を備えることを特徴とするメタデータ検索システムである。   Further, the present invention is a metadata management system comprising a metadata search device that searches for stored content of a signal similar to a content signal and outputs metadata of the searched stored content, wherein the metadata management system includes: A metadata generation device, wherein the metadata search device includes information on a query interval indicating the content interval or region, and a size of the accumulated content interval or region of a signal similar to a signal included in the query interval. Section length correspondence acquisition unit for reading from section length correspondence storage unit that stores in advance section length correspondence information in association with storage section length information indicating the length, and information on a search section indicating a section or area of the content A search command acquisition unit for acquiring a signal similar to a signal included in the search interval; Based on the metadata search unit that extracts the metadata of the section or region of the tree, and the storage section length information of the section length correspondence information and the storage section length information corresponding to the query section included in the search section, A search result output unit that outputs the metadata extracted by the metadata search unit, and the metadata generation device includes the query interval and the accumulation interval of a signal similar to a content signal of the query interval; , A content correspondence acquisition unit that acquires a plurality of correspondence relationships, a joint correspondence generation unit that generates a joint correspondence by combining a plurality of correspondences between the query section and the storage section, and the joint correspondence Section length as the section length correspondence information including the query section combined by the generation unit and storage section length information indicating the size of the storage section of the connection correspondence A section length corresponding relation creation section for storing the response relation storage unit, a metadata search system comprising: a.

本発明によれば、メタデータ検索装置は、コンテンツの区間あるいは領域に含まれる信号に類似する信号の蓄積コンテンツの区間あるいは領域のメタデータを、当該蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報に基づいて出力するので、コンテンツの類似の度合いに従ってメタデータを出力することができ、利用者等がコンテンツに合致するメタデータを迅速に選択することができる。例えば、蓄積コンテンツの区間あるいは領域の大きさが大きい順にメタデータを出力する場合、メタデータ検索装置は、コンテンツの類似の度合いが高い順にメタデータを出力することができ、利用者等がコンテンツに合致するメタデータを迅速に選択することができる。また、メタデータ検索装置は、出現頻度ヒストグラムを出力するので、出現頻度が高い時間区間のメタデータを選択することができ、検索コンテンツに合致したメタデータを表示することができる。   According to the present invention, the metadata search device stores the metadata of the stored content section or region of the signal similar to the signal included in the content section or region, and indicates the stored content section or region size. Since the data is output based on the section length information, the metadata can be output according to the degree of similarity of the content, and the user or the like can quickly select the metadata that matches the content. For example, in the case of outputting metadata in descending order of stored content sections or areas, the metadata search device can output metadata in descending order of the degree of similarity of content, so that a user or the like can output the content. The matching metadata can be selected quickly. In addition, since the metadata search device outputs an appearance frequency histogram, it is possible to select metadata in a time interval with a high appearance frequency, and display metadata that matches the search content.

本発明の実施形態に係るメタデータ検索システムを示す概念図である。It is a conceptual diagram which shows the metadata search system which concerns on embodiment of this invention. 本実施形態に係るメタデータ生成装置の構成を示す概略ブロック図である。It is a schematic block diagram which shows the structure of the metadata production | generation apparatus which concerns on this embodiment. 本実施形態に係るメタデータ管理装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of operation | movement of the metadata management apparatus which concerns on this embodiment. 本実施形態に係る結合対応関係の一例を示す概念図である。It is a conceptual diagram which shows an example of the coupling | bonding corresponding relationship which concerns on this embodiment. 本実施形態に係るコンテンツ情報の一例を示す概念図である。It is a conceptual diagram which shows an example of the content information which concerns on this embodiment. 本実施形態に係る複数の結合対応関係の一例を示す概念図である。It is a conceptual diagram which shows an example of the some connection correspondence which concerns on this embodiment. 本実施形態に係る区間長対応関係情報の一例を示す概念図である。It is a conceptual diagram which shows an example of the section length correspondence information which concerns on this embodiment. 本実施形態に係るメタデータ検索装置の構成を示す概略ブロック図である。It is a schematic block diagram which shows the structure of the metadata search apparatus which concerns on this embodiment. 本実施形態に係るメタデータ検索装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of operation | movement of the metadata search apparatus which concerns on this embodiment. 本実施形態に係るクエリデータ検索画面の一例を示す概略図である。It is the schematic which shows an example of the query data search screen which concerns on this embodiment. 本実施形態の変形例1に係るクエリデータ検索画面の一例を示す概略図である。It is the schematic which shows an example of the query data search screen which concerns on the modification 1 of this embodiment. 本実施形態の変形例2に係る出現頻度ヒストグラムの一例を示す概略図である。It is the schematic which shows an example of the appearance frequency histogram which concerns on the modification 2 of this embodiment. 本実施形態の変形例2に係る検索結果出力部が表示するメタデータの別の一例を示す図である。It is a figure which shows another example of the metadata which the search result output part which concerns on the modification 2 of this embodiment displays. 本実施形態の変形例2に係る検索結果出力部が表示するメタデータの別の一例を示す図である。It is a figure which shows another example of the metadata which the search result output part which concerns on the modification 2 of this embodiment displays. 本実施形態の変形例2に係る検索結果出力部が表示するメタデータの別の一例を示す図である。It is a figure which shows another example of the metadata which the search result output part which concerns on the modification 2 of this embodiment displays.

(実施形態)
以下、図面を参照しながら本発明の実施形態について詳しく説明する。図1は、本発明の実施形態に係るメタデータ検索システムを示す概念図である。この図において、メタデータ検索システムは、メタデータ生成装置a1、データベースb1、及びメタデータ検索装置c1を含んで構成される。データベースb1は、対応関係記憶部b111、コンテンツ情報記憶部b121、区間長対応関係記憶部b122、及び蓄積コンテンツ記憶部b131を含んで構成される。なお、コンテンツ情報記憶部b121及び区間長対応関係記憶部b122をメタデータ記憶部b12という。
(Embodiment)
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. FIG. 1 is a conceptual diagram showing a metadata search system according to an embodiment of the present invention. In this figure, the metadata search system includes a metadata generation device a1, a database b1, and a metadata search device c1. The database b1 includes a correspondence relationship storage unit b111, a content information storage unit b121, a section length correspondence relationship storage unit b122, and an accumulated content storage unit b131. The content information storage unit b121 and the section length correspondence storage unit b122 are referred to as a metadata storage unit b12.

メタデータ生成装置a1は、新たなコンテンツが入力されると、入力された新たなコンテンツと、そのコンテンツの信号に類似する信号の蓄積コンテンツであって蓄積コンテンツ記憶部b131が予め記憶する蓄積コンテンツと、の結合対応関係情報を生成して対応関係記憶部b111に記憶する(図4参照)。ここで、メタデータ生成装置a1に入力又は記憶されるコンテンツとは、例えば、動画や音楽等のコンテンツであり、利用者がメタデータ生成装置a1にアップロード、又は、コンピュータプログラムによって自動的にウェブサイトからメタデータ生成装置a1にダウンロードされたコンテンツである。
メタデータ生成装置a1は、対応関係記憶部b111が記憶する結合対応関係情報と、メタデータ記憶部b12が記憶する蓄積コンテンツのメタデータと、に基づいて、新たなコンテンツのメタデータを生成する。メタデータ生成装置a1は、生成したメタデータをメタデータ記憶部b12に記憶する。なお、メタデータとは、コンテンツに対する付加情報であり、例えば、コンテンツの種類、タイトル、又は出演者・演奏者等の情報である。また、メタデータ生成装置a1は、メタデータのうち、新たなコンテンツの区間あるいは領域(クエリ区間)と、結合した蓄積コンテンツの区間あるいは領域(蓄積区間;蓄積区間長情報)と、の対応情報である区間長対応関係情報を区間長対応関係記憶部b122に記憶する(図7参照)。メタデータ生成装置a1は、区間長対応関係情報以外のメタデータ(コンテンツ情報という)をコンテンツ情報記憶部b121に記憶する(図5参照)。
When new content is input, the metadata generation device a1 stores the input new content, the stored content of a signal similar to the signal of the content, and the stored content stored in the stored content storage unit b131 in advance. The combined correspondence information is generated and stored in the correspondence storage unit b111 (see FIG. 4). Here, the content input or stored in the metadata generation device a1 is, for example, a content such as a moving image or music, and the user uploads the metadata generation device a1 or automatically creates a website by a computer program. Content downloaded to the metadata generation device a1.
The metadata generation device a1 generates new content metadata based on the combined correspondence information stored in the correspondence storage unit b111 and the stored content metadata stored in the metadata storage unit b12. The metadata generation device a1 stores the generated metadata in the metadata storage unit b12. Note that the metadata is additional information for content, for example, content type, title, or information on performers / performers. Further, the metadata generation device a1 includes correspondence information between a new content section or area (query section) and a combined stored content section or area (storage section; storage section length information) in the metadata. Certain section length correspondence information is stored in the section length correspondence storage unit b122 (see FIG. 7). The metadata generation device a1 stores metadata (referred to as content information) other than the section length correspondence information in the content information storage unit b121 (see FIG. 5).

メタデータ検索装置c1は、利用者等から指定された検索条件を含む検索命令が入力されると、検索条件と一致する蓄積コンテンツのメタデータを出力する。
ここで、本実施形態かかるメタデータ検索装置c1は、区間長対応関係記憶部b122が記憶する区間長対応関係情報に基づいて、検索結果の情報の出力順序を並び換えて出力する。
以下、まず、メタデータ生成装置a1について説明し、その後、メタデータ検索装置c1について説明をする。
When a search command including a search condition designated by a user or the like is input, the metadata search device c1 outputs metadata of stored content that matches the search condition.
Here, the metadata search device c1 according to the present embodiment sorts and outputs the output order of the search result information based on the section length correspondence information stored in the section length correspondence storage unit b122.
Hereinafter, the metadata generation apparatus a1 will be described first, and then the metadata search apparatus c1 will be described.

<メタデータ生成装置a1の構成について>
図2は、本実施形態に係るメタデータ生成装置a1の構成を示す概略ブロック図である。この図において、メタデータ管理装置a1は、コンテンツ対応関係取得部a101、結合対応関係生成部a102、コンテンツ情報生成部a103、及び蓄積区間長対応関係生成部a104を含んで構成される。また、メタデータ管理装置a1は、クエリコンテンツIDおよびクエリコンテンツの区間あるいは領域と、蓄積コンテンツIDおよび蓄積コンテンツの区間あるいは領域を入力とし、クエリデータに付与するクエリメタデータを出力とする。
<About Configuration of Metadata Generation Device a1>
FIG. 2 is a schematic block diagram showing the configuration of the metadata generation apparatus a1 according to this embodiment. In this figure, the metadata management apparatus a1 includes a content correspondence acquisition unit a101, a combined correspondence generation unit a102, a content information generation unit a103, and an accumulation section length correspondence generation unit a104. Further, the metadata management apparatus a1 receives the query content ID and the section or region of the query content, and the stored content ID and the section or region of the stored content, and outputs the query metadata to be added to the query data.

コンテンツ対応関係取得部a101は、図1中の対応関係記憶部b111からクエリ区間と、当該クエリ区間のコンテンツの信号に類似する信号の蓄積区間と、を含む対応関係を複数取得する。
結合対応関係生成部a102は、コンテンツ対応関係取得部a101が取得したクエリ区間と蓄積区間との複数の対応関係を結合して結合対応関係を生成する。具体的には、結合対応関係生成部a102は、複数の対応関係のクエリコンテンツの時間区間(クエリ時間区間という)の差、および当該蓄積コンテンツの時間区間(蓄積時間区間という)の差、を計算する。結合対応関係生成部a102は、計算した差に基づいて、複数の対応関係のクエリ時間区間および蓄積時間区間を結合し、クエリコンテンツIDおよび結合したクエリ時間区間と、蓄積コンテンツIDおよび結合した蓄積時間区間と、からなる結合対応関係を生成する。
The content correspondence acquisition unit a101 acquires a plurality of correspondences including a query interval and a signal accumulation interval similar to the content signal in the query interval from the correspondence relationship storage unit b111 in FIG.
The combined correspondence generation unit a102 generates a combined correspondence by combining a plurality of correspondences between the query interval and the storage interval acquired by the content correspondence acquisition unit a101. Specifically, the combined correspondence generation unit a102 calculates a difference between time intervals (referred to as query time intervals) of query contents having a plurality of correspondence relationships and a difference between time intervals (referred to as accumulation time intervals) of the stored content. To do. The combined correspondence generation unit a102 combines the query time intervals and the accumulation time intervals of a plurality of correspondence relationships based on the calculated difference, the query content ID and the combined query time interval, and the stored content ID and the combined storage time. A connection correspondence consisting of sections is generated.

コンテンツ情報生成部a103は、結合対応関係生成部a102が生成した結合対応関係から、クエリ区間についてのコンテンツ情報、またはクエリコンテンツの全体についてのコンテンツ情報を、対応する蓄積コンテンツの蓄積コンテンツID、メタデータのうちの少なくとも1つ以上に基づいて生成する。コンテンツ情報生成部a103は、生成したコンテンツ情報を、図1中のコンテンツ情報記憶部b121に記憶する。
区間長対応関係生成部a104は、結合対応関係生成部a102が結合したクエリ区間と、その蓄積区間長情報とを、区間長対応関係情報として、図1中の区間長対応関係記憶部b122に記憶する。
The content information generation unit a103 obtains the content information about the query section or the content information about the entire query content from the connection correspondence generated by the connection correspondence generation unit a102, and the stored content ID and metadata of the corresponding stored content. Based on at least one of the above. The content information generation unit a103 stores the generated content information in the content information storage unit b121 in FIG.
The section length correspondence generation unit a104 stores the query section combined by the combination correspondence generation unit a102 and the accumulated section length information as section length correspondence information in the section length correspondence storage unit b122 in FIG. To do.

<メタデータ管理装置a1の動作について>
上述したコンテンツ対応関係取得部a101からコンテンツ情報生成部a103における処理を具体的に説明する。
図3は、本実施形態に係るメタデータ生成装置a1の動作の一例を示すフローチャートである。
<Operation of Metadata Management Device a1>
The processing from the content correspondence acquisition unit a101 to the content information generation unit a103 will be specifically described.
FIG. 3 is a flowchart showing an example of the operation of the metadata generation apparatus a1 according to this embodiment.

(ステップS101)コンテンツ対応関係取得部a101は、クエリコンテンツのクエリコンテンツIDおよびクエリ時間区間と、当該クエリコンテンツに対応するデータベース中の蓄積コンテンツの蓄積コンテンツIDおよび蓄積時間区間を読み込む。そして、クエリコンテンツのクエリコンテンツIDおよびクエリ時間区間と、当該クエリコンテンツに対応するデータベース中の蓄積コンテンツの蓄積コンテンツIDおよび蓄積時間区間との対応関係を複数取得する。 (Step S101) The content correspondence acquisition unit a101 reads the query content ID and query time interval of the query content, and the accumulated content ID and accumulation time interval of the accumulated content in the database corresponding to the query content. Then, a plurality of correspondence relationships between the query content ID and query time interval of the query content and the accumulated content ID and accumulation time interval of the accumulated content in the database corresponding to the query content are acquired.

ここで、コンテンツ対応関係取得部a101は、特開2008−219608号公報の段落「0016」に記載された手法により、音または映像の対応区間を探索して得られた探索結果を使用して、対応関係を取得する。具体的には、コンテンツ対応関係取得部a101は、記憶部(図示せず)が予め記憶する特徴系列であって蓄積コンテンツを3秒毎に16秒の長さに区切ったデータの特徴系列(蓄積特徴系列という)を読み出す。次に、コンテンツ対応関係取得部a101は、クエリコンテンツの信号(入力信号という)中に窓(入力信号注目窓という)をかけ、当該入力信号注目窓内の信号について特徴量系列を生成する(生成した特徴量系列をクエリ特徴量系列という)。コンテンツ対応関係取得部a101は、生成したクエリ特徴量系列と読み出した蓄積特徴系列との類似度合いを示す入力信号類似値を計算する。コンテンツ対応関係取得部a101は、当該計算した入力信号類似値に基づいて、入力信号注目窓を移動できる量を示す移動可能量を計算し、その移動可能量に基づいて、入力信号注目窓の位置を決定し、その位置に該入力信号注目窓を設定する。さらに、コンテンツ対応関係取得部a101は、これらの処理を繰り返すことによって、入力信号注目窓の各位置について、入力信号類似値を計算する。コンテンツ対応関係取得部a101は、入力信号類似値が予め設定された閾値より大きい場合、クエリ特徴量系列と蓄積特徴系列とが一致すると判定(類似すると判定)し、閾値以下の場合、一致しないと判定する。   Here, the content correspondence acquisition unit a101 uses a search result obtained by searching for a corresponding section of sound or video by the method described in paragraph “0016” of JP-A-2008-219608, Get correspondence. Specifically, the content correspondence acquisition unit a101 is a feature sequence stored in advance by a storage unit (not shown), and a feature sequence (accumulation) of stored data divided into 16-second lengths every 3 seconds. (Referred to as feature series). Next, the content correspondence acquisition unit a101 applies a window (referred to as an input signal attention window) to the query content signal (referred to as an input signal), and generates a feature amount sequence for the signal within the input signal attention window (generation). The feature amount series obtained is called a query feature amount series). The content correspondence acquisition unit a101 calculates an input signal similarity value indicating the degree of similarity between the generated query feature quantity sequence and the read accumulated feature sequence. The content correspondence acquisition unit a101 calculates a movable amount indicating the amount by which the input signal attention window can be moved based on the calculated input signal similarity value, and based on the movable amount, the position of the input signal attention window And the input signal attention window is set at that position. Further, the content correspondence acquisition unit a101 calculates the input signal similarity value for each position of the input signal attention window by repeating these processes. The content correspondence acquisition unit a101 determines that the query feature value series and the stored feature series match (determine that they are similar) when the input signal similarity value is greater than a preset threshold value, and does not match when the input feature similarity value is equal to or less than the threshold value. judge.

コンテンツ対応関係取得部a101は、クエリ特徴量系列と蓄積特徴系列とが一致すると判定した場合、次のように対応関係を生成する。コンテンツ対応関係取得部a101は、探索に用いたクエリコンテンツのファイル名をクエリコンテンツIDとし、入力信号注目窓の区間をクエリ時間区間として抽出する。そして、探索の出力として得られた一致する蓄積コンテンツのIDを蓄積コンテンツID、その蓄積コンテンツのうちのクエリ時間区間と対応する箇所として出力された該当区間を、蓄積時間区間として抽出する。なお、蓄積コンテンツID(ファイル名)、クエリ時間区間、及び蓄積特徴系列の記憶場所を示す情報(パス、ファイル名)の対応付け情報は予め記憶部に記憶されている。
コンテンツ対応関係取得部a101は、抽出したクエリコンテンツID、クエリ時間区間、蓄積コンテンツID、及び蓄積時間区間を対応付けた対応関係を生成する。その後、ステップS102に進む。
If the content correspondence acquisition unit a101 determines that the query feature amount series and the stored feature series match, it generates a correspondence as follows. The content correspondence acquisition unit a101 extracts the query content file name used for the search as the query content ID, and extracts the input signal attention window section as the query time section. Then, the ID of the corresponding stored content obtained as the search output is extracted as the stored content ID, and the corresponding section output as a location corresponding to the query time section of the stored content is extracted as the storage time section. Note that association information of information (path, file name) indicating the storage location of the stored content ID (file name), the query time interval, and the stored feature series is stored in advance in the storage unit.
The content correspondence acquisition unit a101 generates a correspondence that associates the extracted query content ID, query time interval, accumulated content ID, and accumulation time interval. Thereafter, the process proceeds to step S102.

なお、ここでは、対応する範囲として、時間区間を使用するが、時間と音の時間伸縮やピッチ変動を組み合わせた空間中の軌跡を区間として使用してもよいし、静止画像の平面中の部分画像のような領域を使用してもよいし、映像中の部分画像と時間を組み合わせた領域を使用してもよい。また、特開2008−219608号公報に記載された手法に代えて特開2006−524545号公報に記載された手法により、対応関係を取得してもよい。また、本実施形態では、クエリコンテンツID及び蓄積コンテンツIDとして、クエリコンテンツ及び蓄積コンテンツのファイル名としているが、クエリコンテンツ及び蓄積コンテンツを識別する情報であればよい。   Here, a time interval is used as the corresponding range, but a trajectory in a space combining time expansion and contraction of time and sound or pitch variation may be used as the interval, or a portion in the plane of the still image A region such as an image may be used, or a region combining a partial image in video and time may be used. Further, the correspondence relationship may be acquired by a method described in Japanese Patent Application Laid-Open No. 2006-524545 instead of the method described in Japanese Patent Application Laid-Open No. 2008-219608. In the present embodiment, the query content ID and the stored content ID are the file names of the query content and the stored content, but any information that identifies the query content and the stored content may be used.

(ステップS102)結合対応関係生成部a102は、ステップS101にて取得した対応関係であって、前回までのステップS102で選択した対応関係以外の対応関係を、1つ選択する(選択した対応関係を第一の対応関係という)。その後、ステップS103に進む。 (Step S102) The combined correspondence generation unit a102 selects one correspondence other than the correspondence selected in Step S102 up to the previous time, which is the correspondence acquired in Step S101 (the selected correspondence is selected). The first correspondence). Thereafter, the process proceeds to step S103.

(ステップS103)結合対応関係生成部a102は、ステップS101にて取得した対応関係であって、あるステップS103〜S106の繰り返しにおいて前回までのステップS103で選択した対応関係以外の対応関係を、1つ選択する(選択した対応関係を第二の対応関係という)。その後、ステップS104に進む。
なお、ステップS103で選択する対応関係は、直前のステップS102で選択された第一の対応関係以外の対応関係である。
(ステップS104)結合対応関係生成部a102は、第一の対応関係と第二の対応関係に基づいて結合条件を判定する。結合条件を満たす場合には、第二の対応関係を第一の対応関係に結合する(結合した対応関係を結合対応関係という)。この結合対応関係の生成処理については後述する。その後、ステップS105に進む。
(Step S103) The combined correspondence generation unit a102 obtains one correspondence relationship other than the correspondence relationship selected in Step S103 up to the previous step in the repetition of Steps S103 to S106, which is the correspondence relationship acquired in Step S101. Select (the selected correspondence is called the second correspondence). Thereafter, the process proceeds to step S104.
The correspondence relationship selected in step S103 is a correspondence relationship other than the first correspondence relationship selected in the immediately preceding step S102.
(Step S <b> 104) The combined correspondence generation unit a <b> 102 determines a combining condition based on the first corresponding relationship and the second corresponding relationship. When the joining condition is satisfied, the second correspondence is joined to the first correspondence (the joined correspondence is referred to as a joint correspondence). The generation process of this connection correspondence will be described later. Thereafter, the process proceeds to step S105.

(ステップS105)コンテンツ情報生成部a103は、ステップS104にて生成された結合対応関係から、クエリ時間区間に対応するコンテンツ情報を生成する。その後、ステップS106に進む。
(ステップS106)区間長対応関係生成部a104は、ステップS104にて結合したクエリ区間と蓄積区間とを、区間長対応関係情報として生成する。なお、このメタデータ(コンテンツ情報、区間長対応関係情報)の生成処理については後述する。その後、ステップS107に進む。
(Step S105) The content information generation unit a103 generates content information corresponding to the query time interval from the combined correspondence generated in step S104. Thereafter, the process proceeds to step S106.
(Step S106) The section length correspondence generation unit a104 generates the query section and the storage section combined in step S104 as section length correspondence information. The generation process of this metadata (content information, section length correspondence information) will be described later. Thereafter, the process proceeds to step S107.

(ステップS107)結合対応関係生成部a102は、全ての第二の対応関係を選択済みか否か、つまり、第二の対応関係を処理済みであるか否かを判定する。全ての第二の対応関係を処理済みであると判定した場合(Yes)、ステップS103に戻る。一方、全ての第二の対応関係を処理済みでないと判定した場合(No)、ステップS108に進む。
(ステップS108)結合対応関係生成部a102は、全ての第一の対応関係を選択済みか否か、つまり、第一の対応関係を処理済みであるか否かを判定する。全ての第一の対応関係を処理済みであると判定した場合(Yes)、ステップS102に戻る。一方、全ての第一の対応関係を処理済みでないと判定した場合(No)、動作を終了する。
このように、図3に示す動作では、結合対応関係生成部a102は、第一の対応関係と、第二の対応関係を読み込んだ全ての対応関係の中からそれぞれ選択し、条件を満足するかどうかの結合判定を行いながら、結合対応関係を生成する。また、区間長対応関係生成部a104は、生成した結合対応関係に基づいて、クエリ区間と、その蓄積区間長情報とを、区間長対応関係情報として生成する。
(Step S107) The combined correspondence generation unit a102 determines whether or not all the second correspondences have been selected, that is, whether or not the second correspondence has been processed. When it is determined that all the second correspondences have been processed (Yes), the process returns to step S103. On the other hand, if it is determined that all the second correspondences have not been processed (No), the process proceeds to step S108.
(Step S108) The combined correspondence generation unit a102 determines whether or not all the first correspondences have been selected, that is, whether or not the first correspondence has been processed. When it is determined that all the first correspondences have been processed (Yes), the process returns to step S102. On the other hand, when it is determined that all the first correspondence relationships have not been processed (No), the operation ends.
As described above, in the operation illustrated in FIG. 3, the combined correspondence generation unit a102 selects each of the first correspondence and the second correspondence from all the correspondences that have been read, and satisfies the condition. A connection correspondence is generated while determining whether or not to combine. Further, the section length correspondence generation unit a104 generates a query section and its accumulation section length information as section length correspondence information based on the generated combined correspondence.

<結合対応関係の生成処理について>
図4は、本実施形態に係る結合対応関係の一例を示す概念図である。なお、結合対応関係の生成処理は、結合対応関係生成部a102が行う。この図は、クエリコンテンツとしてファイル名「C2.mp3」の音楽データが入力された場合の図である。この図は、まず、第一の対応関係A(図4(A))と第二の対応関係B(図4(B))が入力され、結合対応関係(図4(C))が生成されたことを示す。なお、生成された結合対応関係は第二の対応関係(図4(D))として記憶部に記憶される。次に、第一の対応関係C(図4(E))と第二の対応関係(図4(D))とが入力され、結合対応関係(図4(F))が生成されたことを示す。
<About the process for generating the association correspondence>
FIG. 4 is a conceptual diagram illustrating an example of the connection correspondence according to the present embodiment. The generation process of the connection correspondence is performed by the connection correspondence generation unit a102. This diagram is a diagram when music data having a file name “C2.mp3” is input as query content. In this figure, first, the first correspondence A (FIG. 4A) and the second correspondence B (FIG. 4B) are input, and the combined correspondence (FIG. 4C) is generated. It shows that. The generated combined correspondence is stored in the storage unit as a second correspondence (FIG. 4D). Next, the first correspondence relationship C (FIG. 4E) and the second correspondence relationship (FIG. 4D) are input, and the combined correspondence relationship (FIG. 4F) is generated. Show.

結合対応関係生成部a102は、対応関係Aから対応関係Cまでの対応関係について、クエリコンテンツと対応する蓄積時間区間を結合し、結合対応関係を生成する。コンテンツ情報生成部a103は、結合できるかできないかを、qを第一の対応関係のクエリ時間区間の始まり、qを第二の対応関係のクエリ時間区間の始まり、dを第一の蓄積時間区間の始まり、dを第二の蓄積時間区間の始まり、θを予め決めておいた閾値(5秒)として、以下の式(1)を用いて判定する。 The combined correspondence generation unit a102 generates a combined correspondence relationship by combining the storage time intervals corresponding to the query content with respect to the correspondence relationship from the correspondence relationship A to the correspondence relationship C. Content information generating unit a103 is a can or can not bond begins to q 1 of a first corresponding relationship query time interval, start the q 2 of the second corresponding relationship query time interval, the d 1 first the beginning of the accumulation time period, beginning the d 2 of the second accumulation time interval, as a threshold value (5 seconds) that has been predetermined to theta, determines by using the following equation (1).

Figure 0005213797
Figure 0005213797

上記式(1)を満たす場合、結合対応関係生成部a102は、第一の対応関係と第二の対応関係とを結合する。つまり、式(1)は上記の結合条件である。
なお、閾値θが大きくなると、結合する結合対応関係の時間区間が長くなり、この時間区間に対応するメタデータには関連性のないメタデータが多く含まれてしまう。一方、閾値θが小さくなると、結合する結合対応関係の時間区間が短くなり、関連性のあるメタデータを結合できなくなる。本実施形態では、シミュレーションの結果、関連性のあるメタデータが含まれる適切な時間区間となる閾値θとして、5秒を選択している。なお、この閾値は、5秒から数秒前後してもよい。
When the above expression (1) is satisfied, the combined correspondence generation unit a102 combines the first corresponding relationship and the second corresponding relationship. In other words, the expression (1) is the above coupling condition.
As the threshold value θ increases, the time interval of the combined correspondence relationship to be combined becomes longer, and the metadata corresponding to this time interval includes a lot of unrelated metadata. On the other hand, when the threshold value θ decreases, the time interval of the combined correspondence relationship to be combined becomes short, and related metadata cannot be combined. In the present embodiment, as a result of simulation, 5 seconds is selected as the threshold value θ that is an appropriate time interval in which relevant metadata is included. The threshold may be around 5 seconds to several seconds.

図4の例では、図4(A)に示す対応関係Aを第一の対応関係、図4(B)に示す対応関係Bを第二の対応関係として、式(1)の左辺が「0」になるので、式(1)を満たす。この場合、結合対応関係生成部a102は、図4(C)に示すように、対応関係Aと対応関係Bを結合する。
また、図4(D)に示す結合した対応関係を第一の対応関係、図4(E)に示す対応関係Cを第二の対応関係として、式(1)が「0」になるので、式(1)を満たす。この場合、結合対応関係生成部a102は、図4(F)に示すように、対応関係Aと、AとBとの結合対応関係を結合する。その結果、図4(F)に示すように、対応関係Aから対応関係Cまでが結合され1つの結合対応関係となる。例えば、図4(F)は、クエリコンテンツID「C2.mp3」のクエリコンテンツの「3分21秒」から「3分43秒」と、蓄積コンテンツID「C1.wav」の蓄積コンテンツの「14秒」から「30秒」との結合対応関係が生成されたことを示す。
なお、上記の例では、時間区間の始まりを用いて結合可能か判定を行ったが、時間区間の終わりを用いてもよい。
In the example of FIG. 4, the correspondence A shown in FIG. 4A is the first correspondence, the correspondence B shown in FIG. 4B is the second correspondence, and the left side of Expression (1) is “0”. Therefore, the expression (1) is satisfied. In this case, the combined correspondence generation unit a102 combines the correspondence A and the correspondence B as shown in FIG.
Since the combined correspondence shown in FIG. 4D is the first correspondence, and the correspondence C shown in FIG. 4E is the second correspondence, Equation (1) becomes “0”. Equation (1) is satisfied. In this case, the connection correspondence generation unit a102 combines the correspondence A and the connection correspondence between A and B as shown in FIG. As a result, as shown in FIG. 4F, the correspondence relationship A to the correspondence relationship C are combined to form one combined correspondence relationship. For example, FIG. 4F illustrates the query content ID “C2.mp3” having the query content “3:21” to “3:43”, and the stored content ID “C1.wav” having the stored content “14”. This indicates that the connection correspondence from “second” to “30 seconds” has been generated.
In the above example, it is determined whether or not combining is possible using the start of the time interval, but the end of the time interval may be used.

また、結合対応関係生成部a102は、第一、第二の対応関係に加えて、第三の対応関係を選択し、これらの対応関係の時間区間の差分の比を結合条件としてもよい。例えば、結合対応関係生成部a102は、結合条件を、qを第一の対応関係のクエリ時間区間の始まり、qを第二の対応関係のクエリ時間区間の始まり、qを第三の対応関係のクエリ時間区間の始まり、dを第一の蓄積時間区間の始まり、dを第二の蓄積時間区間の始まり、dを第三の蓄積時間区間の始まり、θを予め決めておいた閾値(0.5)として、以下の式(2)を用いて判定する。なお、この閾値θも、シミュレーションの結果、関連性のあるメタデータが含まれる適切な時間区間となる閾値θとして、0.5を選択している。 Further, the combined correspondence generation unit a102 may select the third correspondence relationship in addition to the first and second correspondence relationships, and use the ratio of the difference between the time intervals of these correspondence relationships as the combination condition. For example, binding relationship generation unit a102 is the binding conditions begin to q 1 of a first correspondence between the query time interval, start the q 2 of the second corresponding relationship query time interval, the q 3 third Correspondence start of query time interval, d 1 is start of first accumulation time interval, d 2 is start of second accumulation time interval, d 3 is start of third accumulation time interval, and θ is predetermined. As the set threshold value (0.5), the following equation (2) is used for determination. As the threshold value θ, 0.5 is selected as the threshold value θ that is an appropriate time interval in which relevant metadata is included as a result of simulation.

Figure 0005213797
Figure 0005213797

上記式(2)を満たす場合、結合対応関係生成部a102は、第一の対応関係と第二の対応関係と第三の対応関係とを結合する。なお、結合対応関係生成部a102は、結合の条件を満たす対応関係の時間区間の始まりのうち最も小さい時間を結合後の時間区間の始まりとし、対応関係の時間区間の終わりのうち最も大きい時間を結合後の時間区間の終わりとして、この時間区間を結合対応関係の時間区間にする。   When the above expression (2) is satisfied, the combined correspondence generation unit a102 combines the first corresponding relationship, the second corresponding relationship, and the third corresponding relationship. The combined correspondence generation unit a102 sets the smallest time among the beginnings of the time intervals of the correspondence relationship satisfying the combination condition as the start of the time interval after the combination, and sets the largest time among the end of the time intervals of the correspondence relationship. As the end of the time interval after the combination, this time interval is set as the time interval of the connection correspondence.

また、上記では時間区間に基づいて対応関係を結合する場合について説明をしたが、本発明はこれに限らず、位置領域に基づいて対応関係を結合してもよい。この場合、対応関係として、2次元画像中の部分画像のような領域毎にコンテンツIDと位置領域情報を取得する。この場合、結合対応関係生成部a102は、以下のような結合条件を用いて、結合するかしないかを判定してもよい。例えば、結合対応関係生成部a102は、q=(q11,q12,q13,q14)を第一の対応関係のクエリコンテンツの2次元座標の縦軸の上限値、下限値、横軸の上限値、下限値からなる領域を表すベクトルとし、q=(q21,q22,q23,q24)を第二の対応関係のクエリコンテンツの縦軸の上限値、下限値、横軸の上限値、下限値からなる領域を表すベクトルとし、d=(d11,d12,d13,d14)を第一の蓄積コンテンツの左上の縦軸の上限値、下限値、横軸の上限値、下限値からなる領域を表すベクトルとし、d=(d21,d22,d23,d24)を第二の蓄積コンテンツの左上の縦軸の上限値、下限値、横軸の上限値、下限値からなる領域を表すベクトルとし、θ=(θ,θ,θ,θ)を予め決めておいた閾値として、以下の式(3)〜(6)を用いて判定する。 Moreover, although the case where the corresponding relationship was combined based on the time interval was described above, the present invention is not limited to this, and the corresponding relationship may be combined based on the position area. In this case, as the correspondence relationship, the content ID and the position area information are acquired for each area such as a partial image in the two-dimensional image. In this case, the connection correspondence generation unit a102 may determine whether to combine using the following connection conditions. For example, the combined correspondence generation unit a102 sets q 1 = (q 11 , q 12 , q 13 , q 14 ) to the upper limit value, lower limit value, horizontal value of the vertical axis of the two-dimensional coordinates of the query content having the first correspondence relationship. A vector representing an area composed of the upper limit value and the lower limit value of the axis, and q 2 = (q 21 , q 22 , q 23 , q 24 ) is set as the upper limit value, lower limit value of the vertical axis of the query content of the second correspondence relationship, A vector representing an area composed of an upper limit value and a lower limit value on the horizontal axis, and d 1 = (d 11 , d 12 , d 13 , d 14 ) is set as an upper limit value, a lower limit value, A vector representing an area consisting of an upper limit value and a lower limit value on the horizontal axis, and d 2 = (d 21 , d 22 , d 23 , d 24 ) is an upper limit value, a lower limit value on the upper left vertical axis of the second stored content, A vector representing the area consisting of the upper and lower limit values on the horizontal axis, and θ (Θ 1, θ 2, θ 3, θ 4) as a threshold that has been predetermined to determine using the following equation (3) to (6).

Figure 0005213797
Figure 0005213797

上記式(3)〜(6)のすべてを満たす場合、結合対応関係生成部a102は、第一の対応関係と第二の対応関係とを結合する。   When all of the above formulas (3) to (6) are satisfied, the combined correspondence generation unit a102 combines the first corresponding relationship and the second corresponding relationship.

<メタデータの生成処理について>
以下、メタデータの生成処理について説明をする。
まず、コンテンツ情報の生成処理について説明する。
<About metadata generation processing>
The metadata generation process will be described below.
First, content information generation processing will be described.

図5は、本実施形態に係るコンテンツ情報の一例を示す概念図である。コンテンツ情報生成部a103は、結合対応関係生成部a102が生成した結合対応関係のクエリコンテンツのコンテンツ情報に、対応する蓄積コンテンツのコンテンツ情報を加えたコンテンツ情報を、新たなクエリコンテンツのコンテンツ情報として生成する。この図は、図3(C)に示す結合対応関係に基づいて行うコンテンツ情報の生成処理前後のコンテンツ情報を示す。   FIG. 5 is a conceptual diagram showing an example of content information according to the present embodiment. The content information generation unit a103 generates, as content information of new query content, content information obtained by adding content information of the corresponding stored content to the content information of the query content of the binding correspondence generated by the binding correspondence generation unit a102. To do. This figure shows the content information before and after the content information generation process performed based on the connection correspondence shown in FIG.

図5(A)は、コンテンツ情報の生成処理前のコンテンツ情報を示す概略図である。この図は、生成処理前、クエリコンテンツID「C2.mp3」のクエリ時間区間「03:21−03:40」のクエリコンテンツのコンテンツ情報が「ジャンル1:ドラマ、ジャンル2:サスペンス、出演者:△△花子、放送媒体:テレビ,BS、チャンネルID:348Ch」であることを示す。また、この図は、生成処理前、蓄積コンテンツID「C1.wav」及び「C2.mp3」のコンテンツ情報が、「楽曲名:ABC、ジャンル:ロック、アーチスト:○○太郎、放送媒体:ラジオ,AM、周波数:1079Hz」であることを示す。なお、放送媒体は、例えば、テレビあるいはラジオ等、及び、BS(Broadcasting Satellite;放送衛星)放送あるいは地上波放送等の放送媒体の種類を示す情報である。また、チャンネルや周波数は、放送周波数を識別する情報であり、また、放送局を識別する情報である。
図5(B)は、コンテンツ情報の生成処理後のコンテンツ情報を示す概略図である。この図は、生成処理後、クエリコンテンツID「C8.mpeg」のクエリコンテンツのコンテンツ情報が、「ジャンル1:ドラマ、ジャンル2:サスペンス、出演者:△△花子、楽曲名:ABC、ジャンル:ロック、アーチスト:○○太郎、放送媒体:テレビ,BS、チャンネルID:348Ch」であることを示す。つまり、コンテンツ情報生成部a303が、クエリコンテンツ(C2.mpeg)のコンテンツ情報に、対応する蓄積コンテンツ(C1.wav)のコンテンツ情報を加えたコンテンツ情報を、クエリコンテンツの新たなコンテンツ情報として生成したことを示す。なお、放送媒体、チャンネルIDあるいは周波数のように、予め定めた項目であって、コンテンツに固有の情報は、新たなコンテンツ情報として追加をしなくてもよい。また、メタデータには蓄積コンテンツIDが含まれてもよい。また、本実施形態では、生成するメタデータがクエリ時間区間のメタデータである場合について説明したが、本発明はこれに限らず、クエリコンテンツ全体のメタデータとしてメタデータを生成してもよい。
このように、メタデータ管理装置a1は、蓄積コンテンツのメタデータをクエリコンテンツのメタデータに加えたメタデータを、クエリコンテンツのメタデータとして生成する。これにより、メタデータ管理装置a1は、利用者がメタデータを付与する手間をかけることなく、クエリコンテンツのメタデータを追加し、充実させることができる。例えば、図5の例では、映像のクエリコンテンツに楽曲情報が追加されている。このように、メタデータ管理装置は、例えば、映像のシーンで流れるBGM(BackGround Music)の楽曲を検索し、映像のクエリコンテンツのメタデータに検索した楽曲の情報を追加することができる。
FIG. 5A is a schematic diagram showing content information before content information generation processing. This figure shows that the content information of the query content of the query time interval “03: 21-03: 40” of the query content ID “C2.mp3” is “Genre 1: Drama, Genre 2: Suspense, Performer: ΔΔHanako, broadcast medium: TV, BS, channel ID: 348Ch ”. Also, this figure shows that before the generation process, the content information of the stored content IDs “C1.wav” and “C2.mp3” are “music title: ABC, genre: rock, artist: Taro XX, broadcast medium: radio, AM, frequency: 1079 Hz ”. The broadcast medium is information indicating the type of broadcast medium such as a television or radio, BS (Broadcasting Satellite) broadcast, or terrestrial broadcast. The channel and frequency are information for identifying a broadcast frequency and information for identifying a broadcast station.
FIG. 5B is a schematic diagram showing the content information after the content information generation processing. This figure shows that after the generation process, the content information of the query content with the query content ID “C8.mpeg” is “genre 1: drama, genre 2: suspense, performer: △ Hanako, song name: ABC, genre: rock , Artist: Taro XX, Broadcast Medium: TV, BS, Channel ID: 348Ch ”. That is, the content information generation unit a303 generates content information obtained by adding the content information of the corresponding stored content (C1.wav) to the content information of the query content (C2.mpeg) as new content information of the query content. It shows that. It should be noted that information that is a predetermined item such as a broadcast medium, channel ID, or frequency and that is unique to the content may not be added as new content information. Further, the stored content ID may be included in the metadata. Moreover, although this embodiment demonstrated the case where the metadata to produce | generate was metadata of a query time area, this invention is not restricted to this, You may produce | generate metadata as metadata of the whole query content.
In this way, the metadata management apparatus a1 generates metadata obtained by adding the metadata of the stored content to the metadata of the query content as the metadata of the query content. Thereby, the metadata management apparatus a1 can add and enrich the metadata of the query content without requiring the user to add the metadata. For example, in the example of FIG. 5, music information is added to the query content of the video. In this way, the metadata management device can search for BGM (BackGround Music) music flowing in a video scene, for example, and add the searched music information to the metadata of the video query content.

次に、区間長対応関係情報の生成処理について説明をする。
区間長対応関係生成部a104は、結合対応関係生成部a102が生成した結合対応関係のクエリ時間区間と、結合した蓄積コンテンツ毎の蓄積時間区間であってクエリ時間区間に換算した蓄積時間区間(対応蓄積時間区間という;蓄積区間;蓄積区間長情報)と、を対応付けた区間長対応関係情報を生成する。以下、図6に結合対応関係の一例を示し、図7に図6に示す結合対応関係に基づいて生成される区間長対応関係情報の一例を示す。
Next, the section length correspondence information generation process will be described.
The section length correspondence generation unit a104 includes a query time section of the joint correspondence generated by the joint correspondence generation unit a102, and a storage time section (corresponding to a storage time section for each stored content that has been combined and converted into a query time section. Section length correspondence relationship information in which storage time sections; storage sections; storage section length information) are associated with each other is generated. 6 shows an example of the connection correspondence, and FIG. 7 shows an example of the section length correspondence information generated based on the connection correspondence shown in FIG.

図6は、本実施形態に係る複数の結合対応関係の一例を示す概念図である。この図は、クエリコンテンツに対応する蓄積コンテンツが複数ある場合の結合対応関係の一例である。この図は、クエリコンテンツID「C3.mpeg」のクエリコンテンツに対して、蓄積コンテンツID「C4.mpeg」、「C5.wav」、「C6.wmv」、「C7.mp3」の蓄積コンテンツが対応する場合の結合対応関係を示す。対応関係1〜4は、それぞれ、蓄積コンテンツID「C4.mpeg」、「C5.wav」、「C6.wmv」、「C7.mp3」の蓄積コンテンツに対応する結合対応関係である。例えば、結合対応関係1は、クエリコンテンツID「C3.mpeg」のクエリコンテンツの「0分0秒」から「3分50秒」に、蓄積コンテンツID「C4.mpeg」の蓄積コンテンツの「2分31秒」から「6分31秒」が対応することを示す。   FIG. 6 is a conceptual diagram showing an example of a plurality of connection correspondences according to the present embodiment. This figure is an example of a connection correspondence when there are a plurality of stored contents corresponding to the query contents. In this figure, the stored content with the stored content IDs “C4.mpeg”, “C5.wav”, “C6.wmv”, “C7.mp3” corresponds to the query content with the query content ID “C3.mpeg”. The connection correspondence relationship is shown. Correspondences 1 to 4 are combined correspondences corresponding to the stored content IDs “C4.mpeg”, “C5.wav”, “C6.wmv”, and “C7.mp3”, respectively. For example, the connection correspondence 1 is changed from “0 minutes 0 seconds” to “3 minutes 50 seconds” of the query content ID “C3.mpeg” and “2 minutes” of the stored content ID “C4.mpeg”. “31 seconds” to “6 minutes 31 seconds” corresponds.

図7は、本実施形態に係る区間長対応関係情報の一例を示す概念図である。この図は、図6に示した結合対応関係が入力された場合の区間長対応関係情報を示す。
図7は、クエリコンテンツID「C3.mpeg」の時間区間「00:00−03:00」のクエリコンテンツの区間長対応関係情報を示す。例えば、この図は、クエリコンテンツ「C3.mpeg」の信号と類似する信号の蓄積コンテンツID「C4.mpeg」の対応蓄積時間区間が「00:00−03:00」であることを示す。なお、この対応蓄積時間区間が示す蓄積区間長は「180秒」である。また、例えば、この図は、クエリコンテンツ「C3.mpeg」の信号と類似する信号の蓄積コンテンツID「C5.wav」の対応蓄積時間区間が「00:40−01:30」及び「02:10−03:00」であることを示す。なお、この対応蓄積時間区間が示す蓄積区間長は、対応蓄積時間区間の長さの合計「100秒」である。
FIG. 7 is a conceptual diagram showing an example of section length correspondence information according to the present embodiment. This figure shows the section length correspondence information when the joint correspondence shown in FIG. 6 is input.
FIG. 7 illustrates the section length correspondence information of the query content of the time section “00: 00-03: 0” of the query content ID “C3.mpeg”. For example, this figure shows that the corresponding storage time interval of the storage content ID “C4.mpeg” of the signal similar to the signal of the query content “C3.mpeg” is “00: 00-03: 0”. The storage section length indicated by the corresponding storage time section is “180 seconds”. Further, for example, in this figure, the corresponding storage time intervals of the storage content ID “C5.wav” of the signal similar to the signal of the query content “C3.mpeg” are “00: 40-01: 30” and “02:10”. −03: 00 ”. The storage section length indicated by the corresponding storage time section is the total length of the corresponding storage time section “100 seconds”.

<メタデータ検索装置c1の構成について>
以下、メタデータ検索装置c1について説明をする。
図8は、本実施形態に係るメタデータ検索装置c1の構成を示す概略ブロック図である。この図において、メタデータ検索装置c1は、区間長対応関係取得部c101、検索命令取得部c102、メタデータ検索部c103、及び検索結果出力部c104を含んで構成される。また、メタデータ検索装置c1は、区間長対応関係情報のクエリコンテンツID、クエリコンテンツの時間区間あるいは領域、蓄積コンテンツID、蓄積コンテンツの区間あるいは領域と、蓄積コンテンツのコンテンツ情報と、を入力とする。また、メタデータ検索装置c1は、検索命令が示す検索コンテンツID及び検索コンテンツの区間あるいは領域と、これらに対応する蓄積コンテンツID、蓄積コンテンツの区間あるいは領域、及びコンテンツ情報を出力とする。
<Configuration of Metadata Search Device c1>
Hereinafter, the metadata search device c1 will be described.
FIG. 8 is a schematic block diagram showing the configuration of the metadata search apparatus c1 according to this embodiment. In this figure, the metadata search device c1 includes a section length correspondence acquisition unit c101, a search command acquisition unit c102, a metadata search unit c103, and a search result output unit c104. Also, the metadata search device c1 receives the query content ID of the section length correspondence information, the time section or region of the query content, the stored content ID, the section or region of the stored content, and the content information of the stored content. . Further, the metadata search device c1 outputs the search content ID and the search content section or region indicated by the search command, the corresponding stored content ID, the stored content section or region, and the content information.

区間長対応関係取得部c101は、区間長対応関係記憶部b122から区間長対応関係情報を読み出す。
検索命令取得部c102は、検索するコンテンツ(検索コンテンツという)の時間区間(検索区間という)を取得する。
メタデータ検索部c103は、検索区間に含まれる信号に類似する信号の蓄積コンテンツの区間あるいは領域のメタデータ(区間長対応関係情報、コンテンツ情報)を抽出する。
検索結果出力部c104は、区間長対応関係情報の蓄積区間長情報であって検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、メタデータ検索部c103が抽出したメタデータを並び換えて出力する。
The section length correspondence acquisition unit c101 reads the section length correspondence relation information from the section length correspondence storage unit b122.
The search command acquisition unit c102 acquires a time interval (referred to as a search interval) of content to be searched (referred to as search content).
The metadata search unit c103 extracts metadata (section length correspondence information, content information) of a stored content section or area of a signal similar to a signal included in the search section.
The search result output unit c104 arranges the metadata extracted by the metadata search unit c103 based on the storage section length information of the section length correspondence information and the storage section length information corresponding to the query section included in the search section. Change to output.

<メタデータ検索装置c1の動作について>
上述した区間長対応関係取得部c101から検索結果出力部c104における処理を具体的に説明する。
図9は、本実施形態に係るメタデータ検索装置c1の動作の一例を示すフローチャートである。
<Operation of Metadata Retrieval Device c1>
The processing from the section length correspondence acquisition unit c101 to the search result output unit c104 will be specifically described.
FIG. 9 is a flowchart showing an example of the operation of the metadata search apparatus c1 according to the present embodiment.

(ステップS201)区間長対応関係取得部c101は、区間長対応関係記憶部b122から区間長対応関係情報を読み出す。その後、ステップS202に進む。
(ステップS202)検索命令取得部c102は、検索命令に含まれる検索条件の入力を待つ。その後、ステップS202に進む。
(ステップS203)検索命令取得部c102は、検索命令が入力されると、検索命令に含まれる検索条件を読み込む。ここで、検索条件には、例えば、メタデータ及び検索時間区間が含まれる。その後、ステップS204に進む。
(ステップS204)メタデータ検索部c103は、検索条件に対応するメタデータを選択する。具体的には、まず、メタデータ検索部c103は、ステップS203にて読み込んだ検索条件から検索コンテンツIDを選択する。例えば、検索条件としてメタデータのキーワードが入力された場合、このキーワードを含むメタデータをメタデータ記憶部b12から選択し、そのメタデータに対応するファイル名を検索コンテンツIDとして選択する。次に、メタデータ検索部c103は、クエリコンテンツID及びクエリ時間区間がそれぞれ検索コンテンツID及び検索時間区間である区間長対応関係情報を、区間長対応関係情報b122から選択する。また、選択した区間長対応関係情報の蓄積コンテンツIDに基づいて、この蓄積コンテンツIDのコンテンツ情報を、コンテンツ情報記憶部b121から抽出する。その後、ステップS205に進む。
(Step S201) The section length correspondence acquisition unit c101 reads the section length correspondence information from the section length correspondence storage unit b122. Thereafter, the process proceeds to step S202.
(Step S202) The search command acquisition unit c102 waits for input of a search condition included in the search command. Thereafter, the process proceeds to step S202.
(Step S203) When a search command is input, the search command acquisition unit c102 reads a search condition included in the search command. Here, the search condition includes, for example, metadata and a search time interval. Thereafter, the process proceeds to step S204.
(Step S204) The metadata search unit c103 selects metadata corresponding to the search condition. Specifically, first, the metadata search unit c103 selects a search content ID from the search conditions read in step S203. For example, when a metadata keyword is input as a search condition, metadata including the keyword is selected from the metadata storage unit b12, and a file name corresponding to the metadata is selected as a search content ID. Next, the metadata search unit c103 selects the section length correspondence information in which the query content ID and the query time section are the search content ID and the search time section, respectively, from the section length correspondence information b122. Further, based on the stored content ID of the selected section length correspondence information, the content information of the stored content ID is extracted from the content information storage unit b121. Thereafter, the process proceeds to step S205.

(ステップS205)検索結果出力部c104は、ステップS204にて選択したメタデータを、蓄積区間長が長い順に並び替える。具体的に、検索結果出力部c104は、区間長対応関係情報の対応蓄積時間区間に含まれる時間(蓄積区間長)を計算し、計算した時間が長い順に蓄積コンテンツID及び蓄積区間を並び替える。例えば、図7の一例では、検索結果出力部c104は、蓄積コンテンツID「C4.mpeg」、「C5.wav」、「C6.wmv」及び「C7.mp3」の蓄積区間長を、それぞれ、「180秒」、「100秒」、「80秒」、及び「70秒」と計算する。この場合、検索結果出力部c104は、蓄積コンテンツID「C4.mpeg」、「C5.wav」、「C6.wmv」、「C7.mp3」の順序に並び替える。その後、ステップS206に進む。
(ステップS206)検索結果出力部c104は、ステップS205にて並び替えた順序で、区間長対応関係情報の蓄積コンテンツID、蓄積区間、及び蓄積コンテンツIDのコンテンツ情報を、つまり、メタデータを出力する。出力された情報は、例えば、出力順序でディスプレイ等の表示部に表示される。その後、ステップS207に進む。
(ステップS207)検索結果出力部c104は、全ての検索条件を処理済であるか否かを判定する。全ての検索条件を処理済であると判定した場合(YES)、動作を終了する。全ての検索条件を処理済でないと判定した場合(NO)、ステップS202に戻る。
(Step S205) The search result output unit c104 rearranges the metadata selected in step S204 in descending order of the accumulation section length. Specifically, the search result output unit c104 calculates the time (storage section length) included in the corresponding storage time section of the section length correspondence information, and rearranges the stored content IDs and storage sections in the order of the calculated time. For example, in the example of FIG. 7, the search result output unit c104 sets the storage section lengths of the storage content IDs “C4.mpeg”, “C5.wav”, “C6.wmv”, and “C7.mp3” to “ It is calculated as “180 seconds”, “100 seconds”, “80 seconds”, and “70 seconds”. In this case, the search result output unit c104 rearranges the stored content IDs in the order of the stored content IDs “C4.mpeg”, “C5.wav”, “C6.wmv”, “C7.mp3”. Thereafter, the process proceeds to step S206.
(Step S206) The search result output unit c104 outputs the storage content ID of the section length correspondence information, the storage section, and the content information of the storage content ID, that is, metadata in the order rearranged in Step S205. . The output information is displayed on a display unit such as a display in the output order, for example. Thereafter, the process proceeds to step S207.
(Step S207) The search result output unit c104 determines whether all search conditions have been processed. If it is determined that all search conditions have been processed (YES), the operation is terminated. If it is determined that all the search conditions have not been processed (NO), the process returns to step S202.

図10は、本実施形態に係るクエリデータ検索画面V1の一例を示す概略図である。この図は、放送媒体が「テレビ」、「地上波」、チャンネルIDが「019Ch.」、及び、放送時間帯(検索時間区間)が「2009年4月11日09時00分」から「2009年4月11日10時00分」の検索条件が入力された場合を示す。この場合、メタデータ検索部c103は、放送媒体が「テレビ」、「地上波」、チャンネルIDが「019Ch.」をキーワードとして含むメタデータをメタデータ記憶部b12から選択し、そのメタデータに対応するファイル名を検索コンテンツIDとして選択する。次に、メタデータ検索部c103は、クエリコンテンツIDがこの検索コンテンツID、及びクエリ時間区間が「2009年4月11日09時00分」から「2009年4月11日10時00分」である区間長対応関係情報を、区間長対応関係情報b122から選択する。また、選択した区間長対応関係情報の蓄積コンテンツIDに基づいて、この蓄積コンテンツIDのコンテンツ情報を、コンテンツ情報記憶部b121から抽出する。すなわち、クエリとして指定した時間区間と対応関係が重畳する区間を含む全ての時間区間を含む蓄積コンテンツのメタデータ(区間長対応関係情報及びコンテンツ情報)を取得する。検索結果出力部c104は、メタデータ検索部c103が選択及び抽出したメタデータを、蓄積区間長が長い順に並び替えて表示する。
図10は、上記の検索条件及び処理の結果として、23件の蓄積コンテンツのメタデータを抽出し、そのうち、8件の一覧を表示していることを示す。
FIG. 10 is a schematic diagram illustrating an example of the query data search screen V1 according to the present embodiment. In this figure, the broadcast medium is “TV”, “terrestrial”, the channel ID is “019Ch.”, And the broadcast time zone (search time section) is “2009 April 11, 2009 09:00” to “2009. This shows a case where the search condition “April 11, 10:00” is input. In this case, the metadata search unit c103 selects, from the metadata storage unit b12, metadata including the broadcast medium “TV”, “terrestrial”, and the channel ID “019Ch.” As keywords, and corresponds to the metadata. The file name to be selected is selected as the search content ID. Next, the metadata search unit c103 has the query content ID as the search content ID and the query time interval from “April 11, 2009 09:00” to “April 11, 2009 10:00”. Certain section length correspondence information is selected from the section length correspondence information b122. Further, based on the stored content ID of the selected section length correspondence information, the content information of the stored content ID is extracted from the content information storage unit b121. That is, the metadata (interval length correspondence relationship information and content information) of the accumulated content including all the time intervals including the interval in which the correspondence relationship overlaps with the time interval designated as the query is acquired. The search result output unit c104 rearranges and displays the metadata selected and extracted by the metadata search unit c103 in descending order of accumulation section length.
FIG. 10 shows that metadata of 23 stored contents is extracted as a result of the above search conditions and processing, and a list of 8 of them is displayed.

また、図10は、検索結果の蓄積コンテンツのメタデータが、蓄積区間長が長い順に並び替えられて表示されていることを示す。例えば、符号V11を付した破線で囲まれた蓄積コンテンツのメタデータV11は、放送媒体が「テレビ」、「BS」、チャンネルIDが「348Ch.」であり、蓄積区間が「2009年4月11日09時08分」から「2009年4月11日09時14分」、蓄積区間長が「7分」であることを示す。また、符号V12を付した破線で囲まれた蓄積コンテンツのメタデータV12は、放送媒体が「ラジオ」、「AM」、周波数が「1079Hz」、蓄積区間が「2009年4月11日09時03分」から「2009年4月11日09時05分」及び「2009年4月11日09時45分」から「2009年4月11日09時46分」であり、蓄積区間長が「5分」であることを示す。
なお、メタデータの右隣に表示されたボタンは、蓄積コンテンツのメタデータを選択するラジオボタンを示す。例えば、この図において、符号V13を付した破線で囲まれたラジオボタンが選択されており、メタデータV11の蓄積コンテンツを選択していることを示す。この場合に、視聴ボタンを押下すると、メタデータ検索装置は、このメタデータに対応する蓄積コンテンツを蓄積コンテンツ記憶部b131から読み出して再生し、画面に表示する。
Further, FIG. 10 shows that the metadata of the stored content of the search result is rearranged and displayed in descending order of the storage section length. For example, the metadata V11 of the stored content surrounded by a broken line with the reference symbol V11 has the broadcast medium “TV”, “BS”, the channel ID “348Ch.”, And the storage section “April 11, 2009”. "09:08 on the day" to "09:14 on April 11, 2009" and the accumulation section length is "7 minutes". In addition, the metadata V12 of the stored content surrounded by a broken line with the reference symbol V12 indicates that the broadcast medium is “radio”, “AM”, the frequency is “1079 Hz”, and the storage section is “09 April 03, 2009, 09:03”. From “Minute” to “April 11, 2009 09:05” and “April 11, 2009 09:45” to “April 11, 2009 09:46”, the accumulation section length is “5” "Minute".
The button displayed on the right side of the metadata indicates a radio button for selecting the metadata of the stored content. For example, in this figure, a radio button surrounded by a broken line with reference numeral V13 is selected, indicating that the stored content of the metadata V11 is selected. In this case, when the viewing button is pressed, the metadata search apparatus reads the stored content corresponding to the metadata from the stored content storage unit b131, plays it, and displays it on the screen.

このように、本実施形態によれば、メタデータ検索装置c1は、検索コンテンツの時間区間に含まれる信号に類似する信号の蓄積コンテンツの時間区間のメタデータを、当該蓄積コンテンツの蓄積区間長情報に基づいてメタデータを出力するので、コンテンツの類似の度合いに従ってメタデータを出力することができ、利用者等があるコンテンツに合致するメタデータを迅速に選択することができる。ここで、蓄積区間長が長いと信号の類似する区間も長く、コンテンツの類似の度合いが高いといえる。よって、例えば、蓄積区間長が長い順にメタデータを出力する場合、メタデータ検索装置c1は、コンテンツの類似の度合いが高い順にメタデータを出力することができ、利用者等があるコンテンツに合致するメタデータを迅速に選択することができる。   As described above, according to the present embodiment, the metadata search device c1 uses the storage section length information of the stored content as the metadata of the time section of the stored content of the signal similar to the signal included in the time section of the search content. Therefore, the metadata can be output according to the degree of similarity of the content, and the user or the like can quickly select the metadata that matches the certain content. Here, if the accumulation section length is long, the section where the signal is similar is also long, and it can be said that the degree of similarity of the content is high. Therefore, for example, when outputting metadata in the order of long accumulation interval length, the metadata search device c1 can output metadata in descending order of the degree of similarity of content, and the user or the like matches a certain content. Metadata can be selected quickly.

<変形例1>
上記の実施形態では、検索結果出力部c104が蓄積区間としてクエリ時間区間に換算した対応蓄積時間区間を出力したが、蓄積時間区間をそのまま出力してもよいし、対応蓄積区間と蓄積時間区間との両方を出力してもよい。
図11は、本実施形態の変形例1に係るクエリデータ検索画面V2の一例を示す概略図である。本変形例に係るクエリデータ検索画面V2(図11)と上記の実施形態に係るクエリデータ検索画面V1(図10)とを比較すると、検索結果として表示されるメタデータの項目が異なる。図11は、メタデータとして、蓄積時間区間を表示していることを示す。例えば、符号V21を付した破線で囲まれた蓄積コンテンツのメタデータV21は、放送媒体が「テレビ」、「BS」、チャンネルIDが「348Ch.」であり、蓄積時間区間が「2009年4月10日13時32分」から「2009年4月10日13時38分」、蓄積区間長が「7分」であることを示す。
一般に、映像や音楽には流行があり、ある時期にまとまって放送等がなされ、また、ある時期にまとまって利用者がサーバ等にコンテンツをアップロードする。本変形例1によれば、メタデータ検索装置c1が蓄積時間区間を出力するので、検索時間区間に近い時間の蓄積時間区間を選択することができ、コンテンツに合致したメタデータを選択することができる。
<Modification 1>
In the above embodiment, the search result output unit c104 outputs the corresponding accumulation time interval converted into the query time interval as the accumulation interval. However, the accumulation time interval may be output as it is, or the corresponding accumulation interval, the accumulation time interval, Both may be output.
FIG. 11 is a schematic diagram illustrating an example of a query data search screen V2 according to the first modification of the present embodiment. When the query data search screen V2 (FIG. 11) according to the present modification is compared with the query data search screen V1 (FIG. 10) according to the above embodiment, the items of metadata displayed as search results are different. FIG. 11 shows that an accumulation time interval is displayed as metadata. For example, the metadata V21 of the stored content surrounded by the broken line with the reference symbol V21 has the broadcast medium “TV”, “BS”, the channel ID “348Ch.”, And the storage time interval “April 2009”. 10th 13:32 "to" April 10, 2009 13:38 "and the accumulation section length is" 7 minutes ".
In general, there is a trend in video and music, and broadcasting or the like is performed at a certain time, and a user uploads contents to a server or the like at a certain time. According to the first modification, since the metadata search device c1 outputs the accumulation time interval, it is possible to select an accumulation time interval that is close to the search time interval, and to select metadata that matches the content. it can.

<変形例2>
また、検索結果出力部c104が、検索区間内のコンテンツの区間あるいは領域ごとに、蓄積コンテンツの出現頻度を表すヒストグラムを計算し、計算したヒストグラムが示す出現頻度に基づいてメタデータ検索部c103が抽出したメタデータを出力して表示してもよい。
図12は、本実施形態の変形例2に係る出現頻度ヒストグラムの一例を示す概略図である。この図において、横軸は時間(検索時間区間)を示し、縦軸は出現頻度を示す。なお、この図において、時間は予め定めた時間(1分)毎に区切られている。
例えば、破線H11で囲まれた出現頻度は、「9時10分00秒」から「9時10分59秒」の間の検索コンテンツの信号に類似する信号の蓄積コンテンツの数を示し、その数は「6個」であることを示す。
<Modification 2>
Further, the search result output unit c104 calculates a histogram representing the appearance frequency of the stored content for each section or region of the content in the search section, and the metadata search unit c103 extracts based on the appearance frequency indicated by the calculated histogram. The meta data may be output and displayed.
FIG. 12 is a schematic diagram illustrating an example of an appearance frequency histogram according to the second modification of the present embodiment. In this figure, the horizontal axis indicates time (search time interval), and the vertical axis indicates appearance frequency. In this figure, the time is divided every predetermined time (1 minute).
For example, the appearance frequency surrounded by the broken line H11 indicates the number of accumulated contents of signals similar to the search content signal between “9:10:00” and “9:10:59”, and the number Indicates “6”.

ここで、検索結果出力部c104は、以下のようにして、出現頻度ヒストグラムを生成して出力する。検索結果出力部c104は、まず、ヒストグラム配列を生成し、ヒストグラム配列中の出現頻度を空(「0」回)にする。ここで、ヒストグラム配列は、例えば、検索時間区間を1分間の時間区間(ビンの幅)で区切った区間各々の出現頻度を示す。検索結果出力部c104は、検索時間区間に対応する蓄積区間を区間長対応関係情報から抽出し、抽出した時間区間がヒストグラム配列が示す時間区間に含まれる場合、その時間区間の現頻度を「1」回加算してインクリメントする。
検索結果出力部c104は、検索結果として、メタデータに付与したヒストグラムが示す出現頻度を出力してもよいし、出現頻度からメタデータを検索してもよい。ここで、検索結果出力部c104は、検索結果としてヒストグラムが示す出現頻度が高い時間区間を示す情報を出力してもよいし、ヒストグラムが示す出現頻度が順に従って検索結果(例えば、蓄積コンテンツIDやそのコンテンツ名)を並び換えて出力してもよい。具体的には、検索結果出力部c104は、ヒストグラムのピーク値の高い順に蓄積コンテンツをソートする。また、ヒストグラムの積分値が大きい順にソートしてもよい。
すなわち、検索結果出力部c104は、取得したヒストグラムが示す出現頻度に基づいて、検索結果の出力順序を決定する。このように、出現頻度ヒストグラムの情報を用いて、蓄積コンテンツの優先順位付けを行うことが可能になる。
Here, the search result output unit c104 generates and outputs an appearance frequency histogram as follows. The search result output unit c104 first generates a histogram array and sets the appearance frequency in the histogram array to be empty (“0” times). Here, the histogram arrangement indicates, for example, the appearance frequency of each section obtained by dividing the search time section by a one-minute time section (bin width). The search result output unit c104 extracts an accumulation interval corresponding to the search time interval from the interval length correspondence information, and when the extracted time interval is included in the time interval indicated by the histogram array, the current frequency of the time interval is set to “1”. "Add times and increment.
The search result output unit c104 may output the appearance frequency indicated by the histogram attached to the metadata as the search result, or may search the metadata from the appearance frequency. Here, the search result output unit c104 may output information indicating a time section having a high appearance frequency indicated by the histogram as the search result, or the search results (for example, stored content ID and The content names) may be rearranged and output. Specifically, the search result output unit c104 sorts the stored contents in descending order of the peak value of the histogram. Alternatively, the histogram may be sorted in descending order of integral value.
That is, the search result output unit c104 determines the output order of search results based on the appearance frequency indicated by the acquired histogram. In this way, it becomes possible to prioritize the stored content using the information of the appearance frequency histogram.

人気があるコンテンツなど利用者の嗜好が強いコンテンツは、頻繁に放送等がなされ、また、多くの利用者がサーバ等にコンテンツをアップロードする。つまり、蓄積コンテンツの出現頻度が高い時間区間では、検索コンテンツが嗜好の強い蓄積コンテンツであり、同じ信号の蓄積コンテンツが複数存在する可能性が高い。よって、この出現頻度が高い時間区間では、検索コンテンツに合致した蓄積コンテンツを選択することができ、そのメタデータを選択することができる可能性が高い。本変形例2によれば、メタデータ検索装置c1が出現頻度ヒストグラムを出力するので、出現頻度が高い時間区間のメタデータを選択することができ、検索コンテンツに合致したメタデータを表示することができる。   Content such as popular content that is highly preferred by users is frequently broadcast, and many users upload content to a server or the like. In other words, in a time interval in which the appearance frequency of the stored content is high, the search content is the stored content having a strong preference, and there is a high possibility that a plurality of stored content of the same signal exists. Therefore, in the time interval in which the appearance frequency is high, it is highly possible that the stored content that matches the search content can be selected and the metadata can be selected. According to the second modification, since the metadata search device c1 outputs the appearance frequency histogram, it is possible to select metadata in a time section with a high appearance frequency, and display metadata that matches the search content. it can.

図13〜図15は、本実施形態の変形例2に係る検索結果出力部c104が表示するメタデータの一例を示す図である。
図13は、結合対応関係での蓄積コンテンツIDの数が多い順にその蓄積コンテンツへのパス及び蓄積コンテンツのファイル名(URL)を表示している画面である。具体的には、検索結果出力部c104は、すべての結合対応関係の蓄積コンテンツIDとクエリコンテンツIDとの組を抽出し、重複を排除する。次に、検索結果出力部c104は、重複を排除した組の蓄積コンテンツIDを集計し、集計した蓄積コンテンツIDの数が多い順に、その蓄積コンテンツのURLを表示する。なお、検索結果出力部c104は、重複を排除することで蓄積コンテンツが含まれているクエリコンテンツの数を集計しているが、本発明はこれに限らず、重複を排除しなくてもよい。なお、クエリコンテンツに蓄積コンテンツが含まれていることを、蓄積コンテンツの二次利用という。
この図において、例えば、順位が「1」位の蓄積コンテンツは、二次利用頻度「21」件のクエリコンテンツに含まれ、そのURLが「http://XXXX/database/cid0002931.flv」であることを示す。
13 to 15 are diagrams illustrating examples of metadata displayed by the search result output unit c104 according to the second modification of the present embodiment.
FIG. 13 is a screen displaying the path to the stored content and the file name (URL) of the stored content in descending order of the number of stored content IDs in the combined correspondence. Specifically, the search result output unit c104 extracts pairs of accumulated content IDs and query content IDs of all the connection correspondences, and eliminates duplication. Next, the search result output unit c104 aggregates the stored content IDs of the group from which duplication is eliminated, and displays the URLs of the stored content in descending order of the accumulated content IDs. Note that the search result output unit c104 counts the number of query contents including accumulated content by eliminating duplication, but the present invention is not limited to this, and duplication may not be eliminated. The fact that stored content is included in query content is called secondary use of stored content.
In this figure, for example, the stored content with the rank “1” is included in the query content with the secondary usage frequency “21”, and the URL is “http: //XXXXXX/database/cid0002931.flv”. It shows that.

図14は、図13にて符号P1で示したURLが選択されてクリックされた場合に表示される画面である。図14は、図13にて選択された蓄積コンテンツをクエリコンテンツとして、そのコンテンツの出現頻度ヒストグラムを表示していることを示す。
例えば、図14において、出現頻度が最も高い時間区間は、二次利用頻度が最もの高い「9」件の区間であり、時刻が「00:00:20−00:0040」の区間である。
このように、図14では、検索結果出力部c104が出現頻度ヒストグラムを出力するので、出現頻度が高い時間区間のメタデータを選択することができ、検索コンテンツに合致したメタデータを表示することができる。
FIG. 14 is a screen displayed when the URL indicated by reference numeral P1 in FIG. 13 is selected and clicked. FIG. 14 shows that the appearance frequency histogram of the content is displayed with the stored content selected in FIG. 13 as the query content.
For example, in FIG. 14, the time interval with the highest appearance frequency is the “9” time interval with the highest secondary usage frequency, and the time is “00: 00: 20-00: 0040”.
In this way, in FIG. 14, the search result output unit c104 outputs the appearance frequency histogram, so that it is possible to select the metadata in the time interval with a high appearance frequency, and to display the metadata that matches the search content. it can.

図15は、図14にて符号P2で示した「詳細」が選択されてクリックされた場合に表示される画面である。図15は、図14のクエリコンテンツ(コンテンツIDが「cid0002931」)で選択された時刻(本例では、「00:00:20−00:00:40」)の蓄積コンテンツのメタデータを表示していることを示す。例えば、画面の上部に表示された一覧の下から2番目のメタデータは、コンテンツが「映像」メディア、結合対応関係に含まれるクエリコンテンツ上の時間区間(対応区間1という)が「00:00:00−00:00:23」、蓄積コンテンツのURLが「http://XXXX/database/cid6283258.flv」、対応する蓄積コンテンツ上の区間(対応区間2という)が「00:00:00−00:00:23」であることを示す。   FIG. 15 is a screen displayed when “Details” indicated by reference symbol P2 in FIG. 14 is selected and clicked. FIG. 15 shows the metadata of the stored content at the time (in this example, “00: 00: 20-00: 00: 40”) selected by the query content (content ID is “cid0002931”) in FIG. Indicates that For example, in the second metadata from the bottom of the list displayed at the top of the screen, the content is “video” media, and the time interval (referred to as the corresponding interval 1) on the query content included in the combined correspondence is “00:00”. : 00: 00-00: 23 ", the URL of the stored content is" http: //XXXXXX/database/cid6283258.flv ", and the section (referred to as the corresponding section 2) on the corresponding stored content is" 00: 00: 00- “00:00:23”.

また、図15は、蓄積コンテンツのメタデータが、蓄積区間長(対応区間1の時間区間)が長い順に並び替えられて表示されていることを示す。例えば、画面の上部に表示された一覧の下から1番目、2番目のメタデータは、それぞれ、蓄積区間長が22秒、23秒であることを示す。
また、上から1番目のメタデータと下から1番目のメタデータとを比較すると、同じメディア(「音楽))、同じURL(蓄積コンテンツID「cid0242456.flv」)にもかかわらず、対応区間2が異なる。一般に音楽では、同じメロディと歌詞をくり返すことがある(1回目を1コーラス目、2回目を2コーラス目という)。つまり、上から1番目のメタデータは、cid0242456.flv中の音楽の全体の信号が類似する信号として抽出され、下から1番目のメタデータは、cid0242456.flv中の音楽の2コーラス目の一部の信号が、クエリコンテンツ(cid0002931.flv)の1コーラス目の信号と類似する信号として抽出されていることを示す。
また、画面下部の画像は、符号P3で示した対応区間「00:00:00−00:00:23」がクリックされた場合の動画である。検索対象動画G1は、クエリコンテンツ(コンテンツIDが「cid0002931」)のうち対応区間1の動画が表示されていることを示す。また、一致動画G2は、蓄積コンテンツ(コンテンツID「cid6283258.flv」」)のうち検索対象動画G1として表示されている時刻と対応する時刻の動画が表示されていることを示す。また、図15は、一致動画G2では、検索対象動画G1に文字列(テロップ)が追加された動画であることを示す。このように、クエリコンテンツと対応する蓄積コンテンツを表示することにより、利用者が追加情報を得ることもできる。
Further, FIG. 15 shows that the metadata of the stored content is rearranged and displayed in descending order of the storage section length (the time section of the corresponding section 1). For example, the first and second metadata from the bottom of the list displayed at the top of the screen indicate that the storage section length is 22 seconds and 23 seconds, respectively.
In addition, when the first metadata from the top and the first metadata from the bottom are compared, the corresponding section 2 regardless of the same media (“music”) and the same URL (accumulated content ID “cid02424456.flv”). Is different. In general, in music, the same melody and lyrics may be repeated (the first time is called the first chorus, the second time is called the second chorus). That is, the first metadata from the top is cid02424456. The entire music signal in flv is extracted as a similar signal, and the first metadata from the bottom is cid02424456. It shows that a part of the second chorus signal of the music in flv is extracted as a signal similar to the first chorus signal of the query content (cid0002931.flv).
The image at the bottom of the screen is a moving image when the corresponding section “00: 00: 00-00: 00: 23” indicated by P3 is clicked. The search target video G1 indicates that the video of the corresponding section 1 is displayed in the query content (content ID is “cid0002931”). Further, the matching video G2 indicates that a video at a time corresponding to the time displayed as the search target video G1 is displayed in the stored content (content ID “cid 6283258.flv”). FIG. 15 shows that the matching video G2 is a video in which a character string (telop) is added to the search target video G1. In this way, the user can obtain additional information by displaying the stored content corresponding to the query content.

なお、上記実施形態において、メタデータ検索装置c1は、メタデータ生成装置a1の構成(コンテンツ対応関係取得部a101、結合対応関係生成部a102、コンテンツ情報生成部a103及び蓄積区間長対応関係生成部a104)を含んで構成されてもよい。
また、上記実施形態において、メタデータ検索装置c1は、蓄積区間長が一番長い蓄積コンテンツのメタデータのみを出力してもよい。これにより、メタデータ検索装置c1は、コンテンツの類似の度合いが最も高い蓄積コンテンツのメタデータを選択して出力することができる。また、メタデータ検索装置c1は、蓄積区間長が長い順に、予め定めた個数の蓄積コンテンツのメタデータを出力してもよい。
また、上記実施形態において、メタデータ検索装置c1は、出現頻度ヒストグラムに基づいてメタデータを出力してもよい。例えば、出現頻度が最も高い時間区間のメタデータのみを出力してもよい。
In the above-described embodiment, the metadata search device c1 includes the configuration of the metadata generation device a1 (content correspondence acquisition unit a101, combined correspondence generation unit a102, content information generation unit a103, and storage section length correspondence generation unit a104. ).
In the embodiment, the metadata search device c1 may output only the metadata of the stored content having the longest storage section length. Thereby, the metadata search device c1 can select and output the metadata of the stored content having the highest degree of content similarity. Further, the metadata search device c1 may output metadata of a predetermined number of stored contents in order of increasing storage section length.
In the above embodiment, the metadata search device c1 may output metadata based on the appearance frequency histogram. For example, only the metadata of the time interval with the highest appearance frequency may be output.

なお、上述した実施形態におけるメタデータ生成装置a1、メタデータ検索装置c1の一部、例えば、コンテンツ対応関係取得部a101、結合対応関係生成部a102、コンテンツ情報生成部a103、蓄積区間長対応関係生成部a104、区間長対応関係取得部c101、検索命令取得部c102、メタデータ検索部c103、検索結果出力部c104をコンピュータで実現するようにしても良い。その場合、この制御機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現しても良い。なお、ここでいう「コンピュータシステム」とは、メタデータ生成装置a1又はメタデータ検索装置c1に内蔵されたコンピュータシステムであって、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでも良い。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。   Note that a part of the metadata generation device a1 and the metadata search device c1 in the above-described embodiment, for example, the content correspondence acquisition unit a101, the combined correspondence generation unit a102, the content information generation unit a103, and the storage section length correspondence generation The unit a104, the section length correspondence acquisition unit c101, the search command acquisition unit c102, the metadata search unit c103, and the search result output unit c104 may be realized by a computer. In that case, the program for realizing the control function may be recorded on a computer-readable recording medium, and the program recorded on the recording medium may be read by a computer system and executed. Here, the “computer system” is a computer system built in the metadata generation apparatus a1 or the metadata search apparatus c1, and includes an OS and hardware such as peripheral devices. The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Furthermore, the “computer-readable recording medium” is a medium that dynamically holds a program for a short time, such as a communication line when transmitting a program via a network such as the Internet or a communication line such as a telephone line, In such a case, a volatile memory inside a computer system serving as a server or a client may be included and a program that holds a program for a certain period of time. The program may be a program for realizing a part of the functions described above, and may be a program capable of realizing the functions described above in combination with a program already recorded in a computer system.

以上、図面を参照してこの発明の一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。   As described above, the embodiment of the present invention has been described in detail with reference to the drawings. However, the specific configuration is not limited to the above, and various design changes and the like can be made without departing from the scope of the present invention. It is possible to

a1・・・メタデータ生成装置、b1・・・データベース、c1・・・メタデータ検索装置、b11・・・対応関係記憶部、b121・・・コンテンツ情報記憶部、b122・・・区間長対応関係記憶部、b131・・・蓄積コンテンツ記憶部、b12・・・メタデータ記憶部、a101・・・コンテンツ対応関係取得部、a102・・・結合対応関係生成部、a103・・・コンテンツ情報生成部、a104・・・蓄積区間長対応関係生成部、c101・・・区間長対応関係取得部、c102・・・検索命令取得部、c103・・・メタデータ検索部、c104・・・検索結果出力部   a1 ... metadata generation device, b1 ... database, c1 ... metadata search device, b11 ... correspondence storage unit, b121 ... content information storage unit, b122 ... interval length correspondence Storage unit, b131 ... accumulated content storage unit, b12 ... metadata storage unit, a101 ... content correspondence acquisition unit, a102 ... combined correspondence generation unit, a103 ... content information generation unit, a104: Accumulation section length correspondence generation unit, c101 ... Section length correspondence acquisition unit, c102 ... Search command acquisition unit, c103 ... Metadata search unit, c104 ... Search result output unit

Claims (11)

コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置において、
前記コンテンツの区間あるいは領域に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを、当該蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報に基づいて出力する検索結果出力部を備えることを特徴とするメタデータ検索装置。
In a metadata search device for searching for stored content of a signal similar to a content signal and outputting metadata of the searched stored content,
A search result for outputting metadata of the stored content section or region of a signal similar to a signal included in the content section or region based on storage section length information indicating the size of the stored content section or region A metadata search apparatus comprising an output unit.
コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置おいて、
前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得部と、
前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得部と、
前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索部と、
前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索部が抽出したメタデータを出力する検索結果出力部と、
を備えることを特徴とするメタデータ検索装置。
In a metadata search device that searches for stored content of a signal similar to the content signal and outputs metadata of the searched stored content,
A section length in which information on a query section indicating the section or area of the content is associated with storage section length information indicating a size of the section or area of the stored content of a signal similar to a signal included in the query section A section length correspondence acquisition unit that reads from a section length correspondence storage unit that stores correspondence information in advance;
A search command acquisition unit for acquiring information of a search section indicating the section or area of the content;
A metadata search unit that extracts metadata of a section or region of the stored content of a signal similar to a signal included in the search section;
A search result output unit that outputs the metadata extracted by the metadata search unit based on the storage section length information corresponding to the query section included in the search section, which is the storage section length information of the section length correspondence information When,
A metadata search apparatus comprising:
前記検索結果出力部は、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報が示す区間あるいは領域の大きさの大きい順に、前記メタデータ検索部が抽出したメタデータを出力することを特徴とする請求項2に記載のメタデータ検索装置。   The search result output unit stores the meta data in the descending order of the section or area size indicated by the storage section length information corresponding to the query section included in the search section, which is the storage section length information of the section length correspondence information. 3. The metadata search apparatus according to claim 2, wherein the metadata extracted by the data search unit is output. 前記蓄積区間長情報は、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域を示す蓄積区間の情報であることを特徴とする請求項2又は3に記載のメタデータ検索装置。   The metadata search according to claim 2 or 3, wherein the storage section length information is storage section information indicating a section or a region of the stored content of a signal similar to a signal included in the query section. apparatus. 前記検索結果出力部は、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報を出力することを特徴とする請求項2乃至4のいずれかの項に記載のメタデータ検索装置。   5. The search result output unit outputs accumulation section length information corresponding to a query section included in the search section, which is storage section length information of the section length correspondence information. The metadata search device according to any one of the items. 前記検索結果出力部は、前記検索区間内のコンテンツの区間あるいは領域ごとに、蓄積コンテンツの出現頻度を表すヒストグラムを計算し、計算したヒストグラムが示す出現頻度に基づいて前記メタデータ検索部が抽出したメタデータを出力することを特徴とする請求項2乃至5のいずれかの項に記載のメタデータ検索装置。   The search result output unit calculates a histogram representing the appearance frequency of the stored content for each section or region of the content in the search section, and the metadata search unit extracts based on the appearance frequency indicated by the calculated histogram The metadata search apparatus according to any one of claims 2 to 5, wherein the metadata is output. 前記検索結果出力部は、計算したヒストグラムが示す出現頻度に基づいて、前記メタデータ検索部が抽出したメタデータの出力順序を決定することを特徴とする請求項6に記載のメタデータ検索装置。   The metadata search apparatus according to claim 6, wherein the search result output unit determines an output order of metadata extracted by the metadata search unit based on an appearance frequency indicated by the calculated histogram. 前記クエリ区間と、当該クエリ区間のコンテンツの信号に類似する信号の前記蓄積区間と、を含む対応関係を複数取得するコンテンツ対応関係取得部と、
前記クエリ区間と前記蓄積区間との複数の対応関係を結合して結合対応関係を生成する結合対応関係生成部と、
前記結合対応関係生成部が結合した前記クエリ区間と、前記結合対応関係の前記蓄積区間の大きさを示す蓄積区間長情報と、を前記区間長対応関係情報として区間長対応関係記憶部に記憶する区間長対応関係生成部と、
を備えることを特徴とする請求項2乃至7のいずれかの項に記載のメタデータ検索装置。
A content correspondence acquisition unit that acquires a plurality of correspondences including the query interval and the accumulation interval of a signal similar to the content signal of the query interval;
A combined correspondence generation unit that generates a combined correspondence by combining a plurality of correspondences between the query section and the storage section;
The query section combined by the combined correspondence generation unit and the storage section length information indicating the size of the storage section of the combined correspondence are stored in the section length correspondence storage unit as the section length correspondence information. A section length correspondence generation unit;
The metadata search device according to any one of claims 2 to 7, further comprising:
コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置おけるメタデータ検索方法において、
区間長対応関係取得部が、前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得過程と、
検索命令取得部が、前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得過程と、
メタデータ検索部が、前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索過程と、
検索結果出力部が、前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索過程にて抽出したメタデータを出力する検索結果出力過程と、
を有することを特徴とするメタデータ検索方法。
In a metadata search method in a metadata search apparatus for searching for stored content of a signal similar to a content signal and outputting metadata of the searched stored content,
The section length correspondence acquisition unit includes information on a query section indicating the section or area of the content, and storage section length information indicating the size of the stored content section or area of a signal similar to a signal included in the query section. And a section length correspondence acquisition process that reads from a section length correspondence storage unit that prestores section length correspondence information associated with each other,
A search command acquisition unit acquires a search section information indicating a section or area of the content;
A metadata search process for extracting metadata of a section or region of the stored content of a signal similar to a signal included in the search section;
The metadata extracted by the search result output unit in the metadata search process based on the storage section length information of the section length correspondence information and the storage section length information corresponding to the query section included in the search section A search result output process for outputting
A metadata search method characterized by comprising:
コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置のコンピュータに、
前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得手段、
前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得手段、
前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索手段、
前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索手段にて抽出したメタデータを出力する検索結果出力手段、
として機能させるメタデータ検索プログラム。
In the computer of the metadata search device that searches the stored content of the signal similar to the signal of the content and outputs the metadata of the searched stored content,
A section length in which information on a query section indicating the section or area of the content is associated with storage section length information indicating a size of the section or area of the stored content of a signal similar to a signal included in the query section Section length correspondence acquisition means for reading from the section length correspondence storage unit that stores correspondence information in advance,
Search command acquisition means for acquiring information on a search section indicating the section or area of the content,
Metadata search means for extracting metadata of a section or region of the stored content of a signal similar to a signal included in the search section;
Search result output for outputting metadata extracted by the metadata search means based on storage section length information corresponding to a query section included in the search section, which is storage section length information of the section length correspondence information means,
Metadata search program to function as.
コンテンツの信号に類似する信号の蓄積コンテンツを検索し、検索した蓄積コンテンツのメタデータを出力するメタデータ検索装置を具備するメタデータ管理システムにおいて、
前記メタデータ管理システムは、メタデータ生成装置を具備し、
前記メタデータ検索装置は、
前記コンテンツの区間あるいは領域を示すクエリ区間の情報と、前記クエリ区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域の大きさを示す蓄積区間長情報と、を対応付けた区間長対応関係情報を予め記憶する区間長対応関係記憶部から読み出す区間長対応関係取得部と、
前記コンテンツの区間あるいは領域を示す検索区間の情報を取得する検索命令取得部と、
前記検索区間に含まれる信号に類似する信号の前記蓄積コンテンツの区間あるいは領域のメタデータを抽出するメタデータ検索部と、
前記区間長対応関係情報の蓄積区間長情報であって前記検索区間に含まれるクエリ区間に対応する蓄積区間長情報に基づいて、前記メタデータ検索部が抽出したメタデータを出力する検索結果出力部と、
を備え、
前記メタデータ生成装置は、
前記クエリ区間と、当該クエリ区間のコンテンツの信号に類似する信号の前記蓄積区間と、を含む対応関係を複数取得するコンテンツ対応関係取得部と、
前記クエリ区間と前記蓄積区間との複数の対応関係を結合して結合対応関係を生成する結合対応関係生成部と、
前記結合対応関係生成部が結合した前記クエリ区間と、前記結合対応関係の前記蓄積区間の大きさを示す蓄積区間長情報と、を前記区間長対応関係情報として区間長対応関係記憶部に記憶する区間長対応関係生成部と、
を備えることを特徴とするメタデータ検索システム。
In a metadata management system including a metadata search device that searches for stored content of a signal similar to a content signal and outputs metadata of the searched stored content,
The metadata management system comprises a metadata generation device,
The metadata search device includes:
A section length in which information on a query section indicating the section or area of the content is associated with storage section length information indicating a size of the section or area of the stored content of a signal similar to a signal included in the query section A section length correspondence acquisition unit that reads from a section length correspondence storage unit that stores correspondence information in advance;
A search command acquisition unit for acquiring information of a search section indicating the section or area of the content;
A metadata search unit that extracts metadata of a section or region of the stored content of a signal similar to a signal included in the search section;
A search result output unit that outputs the metadata extracted by the metadata search unit based on the storage section length information corresponding to the query section included in the search section, which is the storage section length information of the section length correspondence information When,
With
The metadata generation device includes:
A content correspondence acquisition unit that acquires a plurality of correspondences including the query interval and the accumulation interval of a signal similar to the content signal of the query interval;
A combined correspondence generation unit that generates a combined correspondence by combining a plurality of correspondences between the query section and the storage section;
The query section combined by the combined correspondence generation unit and the storage section length information indicating the size of the storage section of the combined correspondence are stored in the section length correspondence storage unit as the section length correspondence information. A section length correspondence generation unit;
A metadata search system comprising:
JP2009134452A 2009-06-03 2009-06-03 Metadata search device, metadata search method, metadata search program, and metadata search system Expired - Fee Related JP5213797B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009134452A JP5213797B2 (en) 2009-06-03 2009-06-03 Metadata search device, metadata search method, metadata search program, and metadata search system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009134452A JP5213797B2 (en) 2009-06-03 2009-06-03 Metadata search device, metadata search method, metadata search program, and metadata search system

Publications (2)

Publication Number Publication Date
JP2010283542A JP2010283542A (en) 2010-12-16
JP5213797B2 true JP5213797B2 (en) 2013-06-19

Family

ID=43539912

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009134452A Expired - Fee Related JP5213797B2 (en) 2009-06-03 2009-06-03 Metadata search device, metadata search method, metadata search program, and metadata search system

Country Status (1)

Country Link
JP (1) JP5213797B2 (en)

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3621323B2 (en) * 2000-02-28 2005-02-16 日本電信電話株式会社 Video registration / search processing method and video search device
JP3832706B2 (en) * 2000-03-09 2006-10-11 Kddi株式会社 Moving picture feature screen extraction apparatus and storage medium thereof
JP2002117037A (en) * 2000-10-06 2002-04-19 Nec Corp Device and method for image retrieval and recording medium where the same method is written
JP3999674B2 (en) * 2003-01-16 2007-10-31 日本電信電話株式会社 Similar voice music search device, similar voice music search program, and recording medium for the program
JP4125990B2 (en) * 2003-05-01 2008-07-30 日本電信電話株式会社 Search result use type similar music search device, search result use type similar music search processing method, search result use type similar music search program, and recording medium for the program
JP4109185B2 (en) * 2003-12-01 2008-07-02 日本電信電話株式会社 Video scene section information extraction method, video scene section information extraction device, video scene section information extraction program, and recording medium recording the program
JP2006106964A (en) * 2004-10-01 2006-04-20 Nippon Telegr & Teleph Corp <Ntt> Video structuring information preparation method and device and program
JP2006330795A (en) * 2005-05-23 2006-12-07 Nippon Telegr & Teleph Corp <Ntt> Device, method, and program for creating image topic interval information, and recording medium
JP2007323319A (en) * 2006-05-31 2007-12-13 Nippon Telegr & Teleph Corp <Ntt> Similarity retrieval processing method and device and program
JP2008217701A (en) * 2007-03-07 2008-09-18 Sharp Corp Metadata providing device, metadata providing method, metadata providing program, and recording medium recording metadata providing program
JP4333808B2 (en) * 2008-08-07 2009-09-16 株式会社日立製作所 Video search method and apparatus

Also Published As

Publication number Publication date
JP2010283542A (en) 2010-12-16

Similar Documents

Publication Publication Date Title
CN105979398B (en) Use the system and method for playlist
CN105120304B (en) Information display method, apparatus and system
US10313714B2 (en) Audiovisual content presentation dependent on metadata
US8634944B2 (en) Auto-station tuning
US8230343B2 (en) Audio and video program recording, editing and playback systems using metadata
EP1421792B1 (en) Audio and video program recording, editing and playback systems using metadata
KR101502343B1 (en) A method to provide multimedia for providing contents related to keywords and Apparatus thereof
CN1326075C (en) Automatic video retriever genie
JP2011124656A (en) Video content recommendation management device, method of instructing reproduction of scene in video content, and program thereof
JP4476786B2 (en) Search device
JP2011128981A (en) Retrieval device and retrieval method
JP5303747B2 (en) Metadata management device, metadata management method, and metadata management program
JP2007294020A (en) Recording and reproducing method, recording and reproducing device, recording method, recording device, reproducing method, and reproducing device
JP5213797B2 (en) Metadata search device, metadata search method, metadata search program, and metadata search system
JP2011124655A (en) Video content recommendation management device, method for executing video content recording, and program thereof
EP1546942A2 (en) System and method for associating different types of media content
JP2008099012A (en) Content reproduction system and content storage system
US8131236B2 (en) Method of selecting audio contents received from an audio or audio-visual receiver and receiver selecting the contents in accordance with the method
JP5266981B2 (en) Electronic device, information processing method and program
JP2010113434A (en) Content display device, method, program, and recording medium
JP6647141B2 (en) Keyword list generation device, content viewing device, and keyword list generation program
JP2002325214A (en) Related program referring receiver, related program referring transmitter and related program referring program
KR101995531B1 (en) Method for providing broadcasted music and apparatus using the same
JP2005303840A (en) Moving picture editing apparatus and method therefor
US20090136202A1 (en) Recording/playback device and method, program, and recording medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111111

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130219

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130226

R151 Written notification of patent or utility model registration

Ref document number: 5213797

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160308

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees