JP2005141507A - Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program - Google Patents

Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program Download PDF

Info

Publication number
JP2005141507A
JP2005141507A JP2003377531A JP2003377531A JP2005141507A JP 2005141507 A JP2005141507 A JP 2005141507A JP 2003377531 A JP2003377531 A JP 2003377531A JP 2003377531 A JP2003377531 A JP 2003377531A JP 2005141507 A JP2005141507 A JP 2005141507A
Authority
JP
Japan
Prior art keywords
information
related information
content
search
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003377531A
Other languages
Japanese (ja)
Inventor
Kiyoshi Tanaka
清 田中
Tsutomu Sasaki
努 佐々木
Yoshinobu Tonomura
佳伸 外村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2003377531A priority Critical patent/JP2005141507A/en
Publication of JP2005141507A publication Critical patent/JP2005141507A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To enable even a user who does not have any detail knowledge related to contents to automatically retrieve relevant information without performing any troublesome operation, and to present the relevant information and the contents to the user. <P>SOLUTION: The retrieval of relevant information related to the contents is requested by using meta information applied to contents such as a voice or video or text or the like, and the relevant information is acquired, and presented to a user. As a result, it is possible for even a user who does not have any detail knowledge related to the contents to acquire the relevant information without performing any troublesome operation. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、映像や音声などのコンテンツや閲覧中のWWWホームページの関連情報を、利用者へ提供するための関連情報提示装置、関連情報検索装置、関連情報提示方法、関連情報検索方法、関連情報提示プログラム及び関連情報検索プログラムに関する。   The present invention relates to a related information presentation device, a related information search device, a related information presentation method, a related information search method, and related information for providing users with related information such as video and audio content and a WWW home page being browsed. The present invention relates to a presentation program and related information retrieval program.

近年のFTTH(Fiber To The Home)やxDSL(x Digital Subscriber Line)の普及に伴うネットワークのブロードバンド化や常時接続サービスの一般化によって、ネットワークを利用した情報提供サービスをごく普通の家庭でも利用できるようになってきている。   With the recent widespread use of FTTH (Fiber To The Home) and xDSL (x Digital Subscriber Line), the use of broadband networks and the generalization of always-on services will make it possible to use information provision services using networks even in ordinary homes. It is becoming.

ネットワークを利用した情報提供サービスの代表的なものに、いわゆるホームページと呼ばれるWWW(World Wide Web)の仕組みを利用した文書型コンテンツのオンデマンドサービスがある。このWWWでのオンデマンドサービスは、例えばテレビジョン放送の視聴中に、放送内容に関する情報をネットワークを経由して取得するといった、関連情報の取得にも利用されている。   A typical information providing service using a network is an on-demand service for document-type content using a WWW (World Wide Web) mechanism called a so-called home page. This on-demand service on the WWW is also used for acquiring related information, for example, acquiring information related to broadcast contents via a network while viewing a television broadcast.

また近年では、ネットワークにおいても、ストリーミング技術を用いることにより、文書に加えて映像や音楽等のコンテンツの配信が行われたり、これらのコンテンツを組み合わせた情報の提供も行われている。   In recent years, contents such as video and music are distributed in addition to documents by using streaming technology, and information combining these contents is also provided in networks.

一方、情報としてユーザに提示されるコンテンツには、その情報の再利用や検索を容易にするという観点から、メタ情報(またはメタデータ)と呼ばれるコンテンツを説明する情報が付与されるようになってきた。   On the other hand, information that describes content called meta information (or metadata) has been added to content presented to users as information from the viewpoint of facilitating reuse and search of the information. It was.

非特許文献1には、メタ情報をコンテンツに付与する方法として、GDA(Global Document Annotation)とMPEG−7(Moving Picture Experts Group 7)が示されている。GDAは、言語データにXML(eXtensible Markup Language)を用いて付加情報をマークアップ(文書の一部を「タグ」と呼ばれる特別な文字列で囲うことにより、文章の構造や修飾情報を文章中に記述すること)する方法であり、MPEG−7は動画や音声等のマルチメディアコンテンツを有効に検索するための記述方法である。これらの方法を用いることにより、コンテンツ中へのメタ情報の付与が実現されている。   Non-Patent Document 1 discloses GDA (Global Document Annotation) and MPEG-7 (Moving Picture Experts Group 7) as methods for assigning meta information to content. GDA uses XML (eXtensible Markup Language) as language data to mark up additional information (by enclosing a part of a document with a special character string called a "tag", the structure and modification information of the sentence is included in the sentence. MPEG-7 is a description method for effectively searching multimedia contents such as moving images and sounds. By using these methods, meta information is added to content.

ネットワーク上のコンテンツを情報として利用者が取得する場合、通常、オンデマンドという方式を用いる。このため利用者は、能動的にネットワーク上のサーバヘ働きかける必要がある。例えば、映像の視聴中に映像に映っている出演者に関する情報を知りたいときは、利用者は出演者の名前を検索キーワードとして、ネットワーク上にある検索サーバに対して検索を要求する。検索サーバからは、利用者が指定したキーワードにもとづいて検索したコンテンツのリストが返されてくるので、利用者はそのリストから自分が知りたい出演者の情報を選択することにより、関連情報を閲覧することが可能となる。このような手続を行うことは、利用者にとっては面倒な作業であることは言うまでもない。   When a user acquires content on a network as information, a method called on-demand is usually used. For this reason, the user needs to actively work with the server on the network. For example, when the user wants to know information about a performer shown in the video while viewing the video, the user requests a search from a search server on the network using the name of the performer as a search keyword. The search server returns a list of contents searched based on the keywords specified by the user. Users can browse related information by selecting the performer information they want to know from the list. It becomes possible to do. It goes without saying that performing such procedures is troublesome for the user.

またこのような検索は、出演者の名前を知っていることにより、初めて可能となる。従って、出演者の名前を知らないときには、関連情報を得る術がなかった。   Such a search is possible only when the name of the performer is known. Therefore, there was no way to obtain relevant information when the name of the performer was not known.

さらに検索の手続をしているうちに映像はどんどん進行していくので、利用者が見ている映像に合わせて関連情報が提示されるわけではなかった。このため利用者は、映像の関連情報を効果的に閲覧することはできなかった。   In addition, as the search process proceeded, the video progressed steadily, so relevant information was not presented according to the video that the user was watching. For this reason, the user has not been able to browse the related information of the video effectively.

さらに関連情報そのものが動的に変化する場合には、前記したような方法ではその時点で必要とする関連情報を取得できない。例えば出演者の出演に比べて検索するタイミングが遅れれば、所望とする関連情報とは異なった関連情報しか得られず、タイムリーな関連情報の取得が困難になる。
橋田浩一、“インテリジェントコンテンツ”、情報処理、Vol.43、No.7、PP.780−784、2002
Furthermore, when the related information itself changes dynamically, the related information required at that time cannot be acquired by the method described above. For example, if the search timing is delayed compared to the performer's appearance, only related information different from the desired related information can be obtained, and it is difficult to obtain timely related information.
Koichi Hashida, “Intelligent Content”, Information Processing, Vol.43, No.7, PP.780-784, 2002

前記したような問題を解決する方法として、近年、デジタル放送やネットワーク放送では、映像を詳細に説明した関連情報を予め用意し、それを映像の放送と同時に配信するサービスが実現されている。しかし予め関連情報を定義する必要があり、また映像の放送と関連情報の配信を行う事業者が同じでないとサービスの実現が困難であった。   As a method for solving the above-described problems, in recent years, in digital broadcasting and network broadcasting, a service has been realized in which related information describing in detail video is prepared in advance and distributed simultaneously with video broadcasting. However, it is necessary to define the related information in advance, and it is difficult to realize the service unless the business operators that broadcast the video and distribute the related information are the same.

本発明は、前記したような課題を鑑みてなされたものであり、視聴中または閲覧中のコンテンツに付与されているメタ情報を用いることにより、利用者が面倒な作業を行うことなく、またコンテンツに関する詳しい知識がなくても、関連情報の検索を実行でき、利用者に対してコンテンツと共に関連情報を提示する装置、方法またはプログラムを提供することを目的とする。   The present invention has been made in view of the above-described problems. By using meta information given to content being viewed or browsed, the user can perform the content without troublesome work. It is an object of the present invention to provide an apparatus, a method, or a program that can execute a search for related information without providing detailed knowledge about the content and present related information together with content to a user.

前記課題を解決するため、本発明は以下のような構成に係るものとした。
請求項1に記載の発明は、関連情報提示装置を、メタ情報を付与されたコンテンツを受信するコンテンツ受信部と、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでメタ情報を抽出する抽出部と、抽出したメタ情報を送信する送信部と、メタ情報を抽出した後のコンテンツを提示する提示部と、関連情報を受信する関連情報受信部と、受信した関連情報を提示する提示部とを備える構成とした。
In order to solve the above-described problems, the present invention has the following configuration.
According to the first aspect of the present invention, the related information presentation device extracts the meta information at the instructed timing from the content receiving unit that receives the content to which the meta information is added and the content to which the received meta information is added. An extracting unit that transmits the extracted meta information, a presenting unit that presents the content after extracting the meta information, a related information receiving unit that receives the related information, and a presentation that presents the received related information Part.

このように発明を構成することにより、関連情報提示装置は、メタ情報が付与されたコンテンツをコンテンツ受信部において受信し、指示されたタイミングで抽出部において受信したコンテンツからメタ情報を抽出し、抽出したメタ情報を送信部から関連情報検索装置に対して送信する。また提示部において、受信したコンテンツからメタ情報を抽出した後のコンテンツを提示する。その後、関連情報提示装置は、関連情報検索装置から関連情報を関連情報受信部において受信し、受信した関連情報を提示部において提示する。   By configuring the invention in this way, the related information presentation device receives the content to which the meta information is added at the content receiving unit, and extracts and extracts the meta information from the content received at the extracting unit at the instructed timing. The transmitted meta information is transmitted from the transmission unit to the related information retrieval apparatus. Also, the presentation unit presents the content after extracting the meta information from the received content. Thereafter, the related information presentation device receives the related information from the related information search device in the related information reception unit, and presents the received related information in the presentation unit.

請求項2に記載の発明は、関連情報提示装置で用いるメタ情報として、コンテンツ全体に関する情報と、コンテンツの部分を時間的に特定する情報と、時間的に特定する情報により特定されたコンテンツの部分に関する情報と、コンテンツの部分を空間の位置として特定する情報と、空間の位置として特定する情報により特定されたコンテンツの部分に関する情報のうち少なくとも一つ以上を備える構成とした。   According to the second aspect of the present invention, as meta information used in the related information presenting device, information on the entire content, information for specifying a part of the content in time, and a part of the content specified by the information specified in time And at least one of information related to the content part specified by the information specifying the position of the space and the information specifying the position of the space.

このように発明を構成することにより、関連情報提示装置は、メタ情報として、コンテンツ全体に関する情報と、コンテンツの部分を時間的に特定する情報と、時間的に特定する情報により特定されたコンテンツの部分に関する情報と、コンテンツの部分を空間の位置として特定する情報と、空間の位置として特定する情報により特定されたコンテンツの部分に関する情報とを利用することが可能となる。   By configuring the invention in this way, the related information presentation device can use meta information as information about the entire content, information for specifying a part of the content in time, and information specified by the information specified in time. It is possible to use information relating to the part, information specifying the content part as the position of the space, and information relating to the part of the content specified by the information specifying the position of the space.

請求項3に記載の発明は、関連情報提示装置で用いる、指示されたタイミングとして、コンテンツが提示部に提示されたこと、コンテンツの部分が時間的に特定されたこと、コンテンツの部分が空間の位置として特定されたことのうち少なくとも一つ以上を用いる構成とした。   According to the third aspect of the present invention, as the instructed timing used by the related information presentation device, the content is presented to the presentation unit, the part of the content is specified in time, the part of the content is a space It was set as the structure which uses at least 1 or more among what was specified as a position.

このように発明を構成することにより、関連情報提示装置は、コンテンツが提示部に提示されたことや、コンテンツの部分の時間的な特定や、コンテンツの部分の空間的な位置の特定により、メタ情報を抽出を指示するタイミングを生成することができる。   By configuring the invention in this way, the related information presentation device can perform meta-data processing based on the content being presented to the presentation unit, the temporal specification of the content portion, and the spatial position of the content portion. Timing for instructing extraction of information can be generated.

請求項4に記載の発明は、関連情報提示装置が受信するメタ情報を付与されたコンテンツとして、関連情報検索装置から受信した関連情報を用いる構成とした。   The invention described in claim 4 is configured to use the related information received from the related information search device as the content to which the meta information received by the related information presentation device is added.

このように発明を構成することにより、関連情報提示装置は、受信した関連情報からそれに付与されたメタ情報を抽出し、抽出したメタ情報を送信部から関連情報検索装置に送信する。その後、関連情報提示装置は、関連情報検索装置で検索され、送信された関連情報を関連情報受信部において受信し、受信した関連情報を提示部において提示することにより、関連情報に関する関連情報をさらに利用者へ提示することが可能となる。   By configuring the invention in this manner, the related information presentation device extracts the meta information attached thereto from the received related information, and transmits the extracted meta information from the transmission unit to the related information search device. Thereafter, the related information presentation device receives the related information that is searched for and transmitted by the related information search device at the related information receiving unit, and presents the received related information at the presenting unit. It can be presented to the user.

請求項5に記載の発明は、関連情報提示装置が、抽出したメタ情報に記載されている時間情報と、関連情報提示装置に付属している時計が示す時間情報とが一致するタイミングで、コンテンツとその関連情報とを提示部において提示する構成とした。   According to the fifth aspect of the present invention, the related information presenting device is configured so that the time information described in the extracted meta information matches the time information indicated by the clock attached to the related information presenting device. And the related information are presented in the presentation unit.

このように発明を構成することにより、関連情報提示装置は、コンテンツの提示にタイミングを合わせて、その関連情報を提示することが可能となる。   By configuring the invention in this way, the related information presentation device can present the related information in synchronization with the presentation of the content.

請求項6に記載の発明は、関連情報検索装置を、メタ情報を受信する受信部と、受信したメタ情報を解析し、メタ情報に含まれる種別と個々の情報(以後、個別情報と略称する)とを抽出する解析部と、抽出した種別を検索で利用する情報(以後、検索情報と略称する)へ変換する種別変換部と、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベースから関連情報を検索する検索部と、検索により得た関連情報を送信する送信部とを備える構成とした。   According to the sixth aspect of the present invention, the related information search device includes a receiving unit that receives meta information, and analyzes the received meta information, and includes types and individual information included in the meta information (hereinafter abbreviated as individual information). ), A type conversion unit that converts the extracted type into information (hereinafter abbreviated as search information) used in the search, and at least the extracted individual information, and if possible, Using the search information obtained by the conversion, a search unit that searches for related information from the related information database and a transmission unit that transmits the related information obtained by the search are provided.

このように発明を構成することにより、関連情報検索装置は、関連情報提示装置からメタ情報を受信部において受信して解析部へ送る。次に解析部では、受信したメタ情報からメタ情報が含む種別と個別情報とを抽出して、種別を種別変換部へ送り、個別情報を検索部へ送る。種別変換部では、種別を検索情報に変換して検索部へ送る。その後、検索部において、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて関連情報を検索し、検索により得た関連情報を送信部から関連情報提示装置へ送信する。   By configuring the invention in this way, the related information search device receives the meta information from the related information presentation device at the reception unit and sends it to the analysis unit. Next, the analysis unit extracts the type and individual information included in the meta information from the received meta information, sends the type to the type conversion unit, and sends the individual information to the search unit. The type conversion unit converts the type into search information and sends it to the search unit. Thereafter, in the search unit, at least the extracted individual information is used, and if possible, the related information is searched using the search information obtained by conversion, and the related information obtained by the search is transmitted from the transmission unit to the related information presentation device. Send to.

請求項7に記載の発明は、関連情報検索装置の種別変換部において、種別を前記検索情報に変換する際に、関連情報提示装置より送られた利用者の利用履歴情報と、IDと、性別と、年齢と、居所と、住所と、利用した時期と、時刻と、契約したサービス内容とのうち少なくとも一つ以上より構成される情報(以後、状況情報と略記する)を利用することとした。   In the invention according to claim 7, when the type conversion unit of the related information search device converts the type into the search information, the user's usage history information, the ID, and the gender sent from the related information presentation device And information consisting of at least one of age, residence, address, time of use, time, and contracted service content (hereinafter abbreviated as status information). .

このように発明を構成することにより、関連情報検索装置は、利用者にさらに特化した検索情報を取得することが可能となる。   By configuring the invention in this way, the related information search device can acquire search information further specialized for the user.

請求項8に記載の発明は、関連情報検索装置の種別変換部において、メタ情報に含まれる種別を検索キーワードと検索カテゴリの少なくとも一つに変換して検索情報とすることとした。   In the invention according to claim 8, the type conversion unit of the related information search apparatus converts the type included in the meta information into at least one of the search keyword and the search category to obtain the search information.

このように発明を構成することにより、関連情報検索装置は、キーワードを用いた検索や限定されたカテゴリ内での検索を実現できる。   By configuring the invention in this way, the related information search device can realize a search using a keyword or a search within a limited category.

請求項9に記載の発明は、関連情報提示方法が、コンテンツ受信機能と、抽出機能と、提示機能と、送信機能と、関連情報受信機能とを備え、コンテンツ受信機能が、メタ情報を付与されたコンテンツを受信する手順と、抽出機能が、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでメタ情報を抽出する手順と、送信機能が、抽出したメタ情報を送信する手順と、提示機能が、メタ情報を抽出した後のコンテンツを提示する手順と、関連情報受信機能が、関連情報を受信する手順と、提示機能が、受信した関連情報を提示する手順とを実行する構成とした。   In the invention according to claim 9, the related information presentation method includes a content reception function, an extraction function, a presentation function, a transmission function, and a related information reception function, and the content reception function is given meta information. A procedure for receiving the received content, a procedure for extracting the meta information at the instructed timing from the content provided with the received meta information, a procedure for transmitting the extracted meta information, A configuration in which a presentation function performs a procedure for presenting content after extracting meta information, a procedure for receiving related information by a related information reception function, and a procedure for presenting related information by the presentation function; did.

このように発明を構成することにより、関連情報提示方法は、メタ情報が付与されたコンテンツをコンテンツ受信機能を用いて受信し、指示されたタイミングで、抽出機能を用いて受信したコンテンツからメタ情報を抽出し、抽出したメタ情報を送信機能を用いて送信する。また提示部において、受信したコンテンツからメタ情報を抽出した後のコンテンツを提示する。その後、関連情報提示方法は、関連情報を関連情報受信機能を用いて受信し、受信した関連情報を提示機能を用いて提示する。   By configuring the invention in this way, the related information presentation method receives the content to which the meta information is added using the content reception function, and at the instructed timing, the meta information from the content received using the extraction function. Is extracted, and the extracted meta information is transmitted using the transmission function. Also, the presentation unit presents the content after extracting the meta information from the received content. Thereafter, the related information presentation method receives the related information using the related information receiving function, and presents the received related information using the presentation function.

請求項10に記載の発明は、関連情報検索方法が、受信機能と、解析機能と、種別変換機能と、検索機能と、関連情報データベース機能と、送信機能とを備え、受信機能が、メタ情報を受信する手順と、解析機能が、受信したメタ情報を解析し、メタ情報が含む個別情報と種別とを抽出する手順と、抽出した種別を種別変換機能を用いて検索情報へ変換する手順と、検索機能が、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース機能から関連情報を検索する手順と、送信機能が、検索により得た関連情報を送信する手順とを実行する構成とした。   The related information search method includes a reception function, an analysis function, a type conversion function, a search function, a related information database function, and a transmission function, and the reception function is meta information. And a procedure for the analysis function to analyze the received meta information and extract the individual information and type included in the meta information, and a procedure for converting the extracted type into search information using the type conversion function, The search function uses at least the extracted individual information, and if possible, the search information obtained from the conversion is used to search the related information from the related information database function and the transmission function. And a procedure for transmitting related information.

このように発明を構成することにより、関連情報検索方法は、メタ情報を受信機能を用いて受信し、受信したメタ情報から解析機能を用いてメタ情報が含む個別情報と種別とを抽出し、抽出した種別を種別変換機能を用いて検索情報に変換し、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース機能から検索機能を用いて関連情報を検索し、検索により得た関連情報を送信機能を用いて送信する。   By configuring the invention in this way, the related information search method receives the meta information using the reception function, extracts the individual information and the type included in the meta information from the received meta information using the analysis function, Convert the extracted type into search information using the type conversion function, use at least the extracted individual information, and if possible, use the search information from the related information database function using the search information obtained by conversion The related information is searched for, and the related information obtained by the search is transmitted using the transmission function.

請求項11に記載の発明は、関連情報提示プログラムが、コンピュータに、メタ情報を付与されたコンテンツを受信するコンテンツ受信機能と、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでメタ情報を抽出する抽出機能と、抽出したメタ情報を送信する送信機能と、メタ情報を抽出した後のコンテンツを提示する提示機能と、関連情報を受信する関連情報受信機能と、受信した関連情報を提示する提示機能とを実現させる構成とした。   According to the eleventh aspect of the present invention, the related information presentation program causes the computer to receive the meta at a timing instructed from the content receiving function for receiving the content to which the meta information is added and the content to which the received meta information is added. An extraction function that extracts information, a transmission function that transmits extracted meta information, a presentation function that presents content after extracting meta information, a related information reception function that receives related information, and a received related information The presenting function to be presented is realized.

このように発明を構成することにより、関連情報提示プログラムは、コンピュータに、メタ情報を付与されたコンテンツの受信と、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでのメタ情報の抽出と、抽出したメタ情報の送信と、メタ情報を抽出した後のコンテンツの提示と、関連情報の受信と、受信した関連情報の提示とを実現させる。   By configuring the invention in this way, the related information presentation program receives the content to which the meta information is added to the computer and the meta information at the instructed timing from the received content to which the meta information is assigned. Extraction, transmission of extracted meta information, presentation of content after extracting meta information, reception of related information, and presentation of received related information are realized.

請求項12に記載の発明は、関連情報検索プログラムが、コンピュータに、メタ情報を受信する受信機能と、受信したメタ情報を解析し、メタ情報が含む個別情報と種別とを抽出する解析機能と、抽出した種別を検索情報へ変換する種別変換機能と、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース機能から関連情報を検索する検索機能と、検索により得た関連情報を送信する送信機能とを実現させる構成とした。   According to a twelfth aspect of the present invention, the related information search program causes the computer to receive meta information, analyze the received meta information, and extract individual information and type included in the meta information; Using the type conversion function for converting the extracted type into search information and at least the extracted individual information, and if possible, using the search information obtained by the conversion, the related information database function is searched for related information. The search function and the transmission function for transmitting related information obtained by the search are realized.

このように発明を構成することにより、関連情報検索プログラムは、コンピュータに、関連情報提示装置より送られたメタ情報の受信と、受信したメタ情報の解析による、メタ情報が含む個別情報と種別との抽出と、抽出した種別の検索情報への変換と、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いた関連情報データベース機能からの関連情報の検索と、検索により得た関連情報の送信とを実現させる。   By configuring the invention in this way, the related information search program can receive the meta information sent from the related information presentation device to the computer, and the individual information and type included in the meta information by analyzing the received meta information. , Extraction of the extracted type into search information, and at least using the extracted individual information, and if possible, searching related information from the related information database function using the search information obtained by conversion And transmission of related information obtained by the search.

請求項1、請求項9、請求項11に記載の発明には、以下の効果がある。まず音声や映像等のコンテンツに付与されたメタ情報を用いて、そのコンテンツに関する関連情報の検索を依頼して、関連情報を取得し、利用者に提示することができる。このため利用者は、面倒な作業をすることなく、またコンテンツに関する詳しい知識がなくても、関連情報を取得することが可能となる。また関連情報が動的に変化する場合であっても、コンテンツに合わせて関連情報を取得できるので、タイムリーな関連情報の取得が可能となる。さらに本発明によれば、検索を行って関連情報を提供するので、映像や文書等のコンテンツの提供事業者とその関連情報の提供事業者とが異なっていてもサービスの提供は可能である。   The inventions according to claims 1, 9, and 11 have the following effects. First, using meta information attached to content such as audio and video, it is possible to request a search for related information related to the content, acquire the related information, and present it to the user. For this reason, the user can acquire related information without troublesome work and without detailed knowledge about the content. Further, even when the related information changes dynamically, the related information can be acquired in accordance with the content, so that the related information can be acquired in a timely manner. Further, according to the present invention, since the related information is provided by performing the search, it is possible to provide the service even if the provider of contents such as video and documents is different from the provider of the related information.

請求項2に記載の発明によれば、関連情報を取得するためのメタ情報として、コンテンツ全体に関する情報と、コンテンツの部分を時間的に特定する情報と、時間的に特定する情報により特定されたコンテンツの部分に関する情報と、コンテンツの部分を空間の位置として特定する情報と、空間の位置として特定する情報により特定されたコンテンツの部分に関する情報とを利用することにより、例えば映像のはじめから30分後の場面の左上に映っていた山の名前の特定などが可能となる。   According to the second aspect of the present invention, the meta information for acquiring the related information is specified by the information on the entire content, the information for specifying the part of the content in time, and the information for specifying in time. By using the information about the content part, the information specifying the content part as the spatial position, and the information regarding the content part specified by the information specifying the spatial position, for example, 30 minutes from the beginning of the video It becomes possible to specify the name of the mountain in the upper left of the later scene.

請求項3に記載の発明によれば、関連情報提示装置は、コンテンツが提示部に提示されたことや、コンテンツの部分の時間的な特定や、コンテンツの部分の空間的な位置の特定により、メタ情報を抽出を指示するタイミングを生成することができる。   According to the invention described in claim 3, the related information presenting apparatus is configured such that the content is presented to the presentation unit, the time portion of the content portion is specified, or the spatial position of the content portion is specified. Timing for instructing extraction of meta information can be generated.

請求項4に記載の発明によれば、コンテンツだけでなく関連情報からも、さらに関連情報を取得することができ、コンテンツに関する関連情報を取得する領域を大幅に拡大することが可能となる。   According to the invention described in claim 4, it is possible to further acquire related information not only from the content but also from the related information, and it is possible to greatly expand the area for acquiring the related information related to the content.

請求項5に記載の発明によれば、コンテンツとその関連情報とを、タイミングを合わせて効果的に提示することが可能となる。   According to the fifth aspect of the present invention, it is possible to effectively present the content and the related information at the same time.

請求項6、請求項10、請求項12に記載の発明によれば、メタ情報を用いて、メタ情報が付与されていたコンテンツの関連情報を効率良く検索することが可能となる。   According to the sixth, tenth, and twelfth aspects of the present invention, it is possible to efficiently search related information of content to which meta information is assigned using meta information.

請求項7に記載の発明によれば、利用者にさらに特化した検索情報を取得することが可能となる。   According to the seventh aspect of the invention, it is possible to acquire search information further specialized for the user.

請求項8に記載の発明によれば、キーワードを用いた検索や限定されたカテゴリ内での検索を実現できる。   According to the invention described in claim 8, it is possible to realize a search using a keyword or a search within a limited category.

次に本発明の実施形態について、適宜図面を参照しながら詳細に説明する。
[第1の実施形態]
第1の実施形態では、コンテンツサーバから配信されたコンテンツをクライアントで提示すると共に、その関連情報も提示する場合を例として説明する。ここで「提示」とは、映像、音声、テキスト等のコンテンツを利用者へ視聴、閲覧させるために示すことを言う。
図1は、本発明をクライアントと関連情報サーバに適用した場合のシステム全体を示す構成図である。システムは、コンテンツサーバ10とクライアント20と関連情報サーバ30とそれらを相互に接続するネットワーク40とから構成される。またネットワーク40は、例えば、インターネットや地域IP網に代表されるIPネットワークや、電話網に代表される公衆網、もしくは専用回線であり、有線無線の別は問わない。ここで、請求項における関連情報提示装置はクライアントに相当し、関連情報検索装置は関連情報サーバに相当する。
Next, embodiments of the present invention will be described in detail with reference to the drawings as appropriate.
[First Embodiment]
In the first embodiment, a case where the content distributed from the content server is presented by the client and the related information is also presented will be described as an example. Here, “presentation” refers to showing content such as video, audio, and text for the user to view and browse.
FIG. 1 is a block diagram showing the entire system when the present invention is applied to a client and a related information server. The system includes a content server 10, a client 20, a related information server 30, and a network 40 that interconnects them. The network 40 is, for example, an IP network typified by the Internet or a regional IP network, a public network typified by a telephone network, or a dedicated line. Here, the related information presentation device in the claims corresponds to a client, and the related information search device corresponds to a related information server.

コンテンツサーバ10とクライアント20との組み合わせは、事前の契約やサービスによって決まり、クライアント20は、一意に情報をやり取りするサーバを決定できるものとする。また、コンテンツの実体を送信するサーバは、ここでのコンテンツサーバ10と異なるものであっても構わない。   The combination of the content server 10 and the client 20 is determined by a prior contract or service, and the client 20 can uniquely determine a server that exchanges information. Further, the server that transmits the content entity may be different from the content server 10 here.

コンテンツサーバ10は、利用者にコンテンツを提示するクライアント20に対して、コンテンツを配信するための装置であり、コンテンツを配信するサービスを行う事業者等により管理されている。コンテンツの配信には、コンテンツを一括して転送するダウンロードや先頭から徐々に転送するストリーミングを利用することができる。   The content server 10 is a device for distributing content to the client 20 that presents the content to the user, and is managed by a business entity that provides a service for distributing content. For content distribution, it is possible to use download that transfers content in a batch or streaming that gradually transfers from the beginning.

またコンテンツサーバ10は、コンテンツの配信と共に、コンテンツへのメタ情報の付与を行う。コンテンツへのメタ情報の付与の方法には、メタ情報をコンテンツ自体に内包する方法と、メタ情報をコンテンツとは別のファイルやストリームに格納する方法がある。メタ情報の記述には、例えば、映像の標準的な記述であるMPEG−7やXMLが利用
され、映像全体の記述や映像の部分、すなわち、場面やショットの記述が可能である。
Further, the content server 10 adds meta information to the content along with the distribution of the content. There are two methods for adding meta information to content: a method in which the meta information is included in the content itself, and a method in which the meta information is stored in a file or stream separate from the content. For the description of the meta information, for example, MPEG-7 or XML, which is a standard description of a video, is used, and a description of the entire video or a video portion, that is, a scene or a shot can be described.

クライアント20は、図2に示すように、コンテンツ受信部21と送信部22と関連情報受信部23と抽出部24と提示部25とから構成される。コンテンツ受信部21は、コンテンツサーバ10からメタ情報を付与されたコンテンツを受信する。抽出部24は、コンテンツからのメタ情報を抽出する。送信部22は、抽出したメタ情報を関連情報サーバ30へ送信し、関連情報の検索を依頼する。関連情報受信部23は、関連情報サーバ30より検索の結果である関連情報を受信する。提示部25は、コンテンツと関連情報を提示する。   As shown in FIG. 2, the client 20 includes a content reception unit 21, a transmission unit 22, a related information reception unit 23, an extraction unit 24, and a presentation unit 25. The content receiving unit 21 receives content provided with meta information from the content server 10. The extraction unit 24 extracts meta information from the content. The transmission unit 22 transmits the extracted meta information to the related information server 30 and requests a search for the related information. The related information receiving unit 23 receives related information as a search result from the related information server 30. The presentation unit 25 presents content and related information.

抽出部24でのメタデータを含んだコンテンツからのメタ情報の抽出の方法は、メタ情報をコンテンツ自体に内包している場合、例えば、コンテンツがMPEG−2で圧縮された映像であり、メタ情報がMPEG−2システム層のユーザ領域に記述されているときには、そのユーザ領域を抽出することによって行なわれ、また電子透かしを利用して埋め込まれているときには、専用の電子透かしの抽出方法によって抽出される。またメタ情報が別のファイルやストリームに格納されている場合は、そのファイルやストリームから抽出する。   The method of extracting meta information from content including metadata in the extracting unit 24 is, for example, when the meta information is included in the content itself, for example, the content is a video compressed by MPEG-2, and the meta information Is described in the user area of the MPEG-2 system layer, and is extracted by extracting the user area. When it is embedded using a digital watermark, it is extracted by a dedicated digital watermark extraction method. The If the meta information is stored in another file or stream, it is extracted from that file or stream.

関連情報サーバ30は、図3に示すように、受信部31と、送信部32と、解析部33と、種別変換部34と、検索部35と、関連情報データベース(DB)36とから構成される。受信部31は、クライアント20からメタ情報を受信する。解析部33は、受信したメタ情報を解析し、メタ情報が含む種別と個別情報を抽出する。種別変換部34は、解析により得た種別を検索情報に変換する。検索部35は、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース36から関連情報を検索する。関連情報データベース36には、関連情報が記憶されている。送信部32は、クライアント20へ関連情報を送信する。   As shown in FIG. 3, the related information server 30 includes a reception unit 31, a transmission unit 32, an analysis unit 33, a type conversion unit 34, a search unit 35, and a related information database (DB) 36. The The receiving unit 31 receives meta information from the client 20. The analysis unit 33 analyzes the received meta information and extracts the type and individual information included in the meta information. The type conversion unit 34 converts the type obtained by the analysis into search information. The search unit 35 searches for related information from the related information database 36 using at least the extracted individual information and, if possible, using the search information obtained by conversion. The related information database 36 stores related information. The transmission unit 32 transmits related information to the client 20.

ネットワーク40は、コンテンツサーバ10とクライアント20と関連情報サーバとを相互に接続し、その間のデータ伝送を行う。   The network 40 connects the content server 10, the client 20, and the related information server to each other and performs data transmission therebetween.

次に図1、図2及び図3を参照して、関連情報提示装置であるクライアント20と関連情報検索装置である関連情報サーバ30の動作を図4のフローチャートに従って説明する。   Next, operations of the client 20 as the related information presentation device and the related information server 30 as the related information search device will be described with reference to the flowchart of FIG. 4 with reference to FIGS.

クライアント20は、コンテンツサーバ10が送信したメタ情報を付与したコンテンツをコンテンツ受信部21で受信し、抽出部24へ送る(S10)。抽出部24では、指示されたタイミングでコンテンツからメタ情報を抽出し、メタ情報を送信部22へ送る(S20)。このとき、コンテンツの部分に関するメタ情報だけではなく、コンテンツ全体に関わるメタ情報を送る場合もある。   The client 20 receives the content to which the meta information transmitted by the content server 10 is added by the content receiving unit 21 and sends it to the extracting unit 24 (S10). The extraction unit 24 extracts meta information from the content at the instructed timing, and sends the meta information to the transmission unit 22 (S20). At this time, not only meta information related to the content portion but also meta information related to the entire content may be sent.

ここで「指示されたタイミング」とは、例えば、コンテンツに付与されたメタ情報の記述を用いて、提示部25が特定の出演者が登場する場面でタイミングを生成し、抽出部24へ指示する。また事前に定めた一定の間隔毎にタイミングを生成し、抽出部24へ指示してもよいし、センサや場面を認識するプログラム等によってタイミングを生成し、それを利用することも可能である。さらに利用者がタッチパネル式の画面にタッチするとか、キーボードから入力するとか、リモコンのボタンを押す等の操作を行うことにより、タイミングを生成することも可能である。   Here, the “instructed timing” means, for example, using the description of meta information given to the content, the presentation unit 25 generates timing in a scene where a specific performer appears, and instructs the extraction unit 24 . In addition, timing may be generated at predetermined intervals and instructed to the extraction unit 24, or timing may be generated by a sensor or a program for recognizing a scene and used. Furthermore, timing can be generated by performing operations such as a user touching a touch panel screen, inputting from a keyboard, or pressing a button on a remote controller.

送信部22では、メタ情報を関連情報サーバ30へ送り、関連情報の検索を依頼する(30)。   The transmission unit 22 sends the meta information to the related information server 30 and requests a search for the related information (30).

ここで、送信部22からメタ情報を関連情報サーバ30に送る際、同時に、ユーザの操作履歴や、ユーザのID、性別、年齢、居所、住所、及び、時刻、時期、契約サービス等の状況情報をサーバに送信することもある。   Here, when sending the meta information from the transmission unit 22 to the related information server 30, at the same time, the operation history of the user, the user ID, gender, age, residence, address, status information such as time, time, contract service, etc. May be sent to the server.

メタ情報を抽出した後のコンテンツは提示部25へ送られ、利用者へ提示される。   The content after extracting the meta information is sent to the presentation unit 25 and presented to the user.

次に関連情報サーバ30は、クライアント20が送信したメタ情報を受信部31で受信し、解析部33へ送る(S40)。解析部33では、メタ情報を解析して、メタ情報に含まれる種別と個別情報を抽出し、種別を種別変換部34へ送り、個別情報を検索部35へ送る(S50)。   Next, the related information server 30 receives the meta information transmitted by the client 20 by the receiving unit 31 and sends it to the analyzing unit 33 (S40). The analysis unit 33 analyzes the meta information, extracts the type and individual information included in the meta information, sends the type to the type conversion unit 34, and sends the individual information to the search unit 35 (S50).

メタ情報がMPEG−7やXMLで記述されている場合、種別はメタ情報のタグに記載
されている。例えば、図5は映像の場面に関するメタ情報をXMLで表現した例である。
MediaTimePointタグ及びMediaDurationタグで囲まれた部分が、その場面の時間位置と場面の長さに関する情報を示し、StructuredAnnotationタグで囲まれた部分が、構造化されたメタ情報が含まれていることを示し、Whoタグで囲まれた部分に個別情報が記載されている。どの部分にどの情報が記載されているのかという情報は、事前に解析部33に与えられている。この例では、個別情報が「水野ひろみ」であり、その種別が「Who」であることがわかる。
When the meta information is described in MPEG-7 or XML, the type is described in the meta information tag. For example, FIG. 5 is an example in which meta information related to a video scene is expressed in XML.
The part enclosed by the MediaTimePoint tag and the MediaDuration tag indicates the information about the time position of the scene and the length of the scene, and the part enclosed by the StructuredAnnotation tag indicates that the structured meta information is included. Individual information is described in a portion surrounded by Who tags. Information indicating which information is described in which part is given to the analysis unit 33 in advance. In this example, it can be seen that the individual information is “Hiromi Mizuno” and the type is “Who”.

種別変換部34では、種別を検索キーワードや検索カテゴリ等の検索情報へ変換し、検索部35へ送る(S60)。   The type conversion unit 34 converts the type into search information such as a search keyword and a search category, and sends it to the search unit 35 (S60).

種別変換部34での変換は、例えば、種別「Who」を検索キーワードや検索カテゴリ名に変換する。変換は事前に定義された表や事前に与えられた辞書を用いて行なわれる。例えば、「Who」は「出演者」というキーワードや「人物」という検索カテゴリに変換される。ここで、キーワードに変換されるか、検索カテゴリに変換されるか、それとも両方に変換されるかは、種別変換部34の実装に依存する。以下の説明では両方に変換された場合について説明する。   For example, the type conversion unit 34 converts the type “Who” into a search keyword or a search category name. The conversion is performed using a pre-defined table or a predetermined dictionary. For example, “Who” is converted into a keyword “performer” and a search category “person”. Here, whether it is converted into a keyword, a search category, or both depends on the implementation of the type conversion unit 34. In the following description, a case where both are converted will be described.

クライアント20から状況情報が送られてきた場合、その状況情報が種別変換部34における変換に利用される。例えば利用者の年齢が3歳であった場合、「幼児向け」に限定された検索カテゴリが指定される。   When status information is sent from the client 20, the status information is used for conversion in the type conversion unit 34. For example, when the user is 3 years old, a search category limited to “for infants” is designated.

検索部35では、少なくとも個別情報を用い、さらに可能な場合には、検索キーワードや検索カテゴリ等の検索情報を用いて、関連情報データベースから検索を行い、関連情報を得て、送信部32へ送られる(S70)。例えば、検索カテゴリ「人物」と検索キーワード「出演者」と個別情報「水野ひろみ」から、最も適合した関連情報を得る。   The search unit 35 uses at least individual information, and if possible, uses search information such as a search keyword and a search category to perform a search from the related information database, obtains related information, and sends it to the transmission unit 32. (S70). For example, the most relevant related information is obtained from the search category “person”, the search keyword “performer”, and the individual information “Hiromi Mizuno”.

送信部32では、関連情報をクライアント20へ送信する(S80)。   The transmission unit 32 transmits the related information to the client 20 (S80).

前記では、関連情報データベース36と検索部35は、関連情報サーバ30内に実装されているものとして説明したが、検索サーバとして別のサーバを用いて構成してもよい。また関連情報データベース36は、関連情報の実体を管理している場合もあるし、関連情報のインデックスとURLを管理している場合がある。特に関連情報データベース36が、動的に変化するコンテンツの関連情報をも管理している場合には、検索が行なわれた時点の新鮮なコンテンツから関連情報を検索することが可能となる。   In the above description, the related information database 36 and the search unit 35 have been described as being implemented in the related information server 30, but may be configured using another server as the search server. The related information database 36 may manage the entity of the related information, or may manage the index and URL of the related information. In particular, when the related information database 36 also manages related information of dynamically changing content, it is possible to search related information from fresh content at the time of the search.

クライアント20は、関連情報サーバ30が送信した関連情報を関連情報受信部23で受信し、提示部25へ送る(S90)。提示部25は、コンテンツと共に関連する関連情報を利用者に提示する(S100)。   The client 20 receives the related information transmitted from the related information server 30 by the related information receiving unit 23 and sends it to the presentation unit 25 (S90). The presentation unit 25 presents related information together with the content to the user (S100).

検索部35が検索した関連情報が、XMLで記述されたコンテンツであった場合、提示
部25では、元のコンテンツと受信したXMLで記述されたコンテンツを、例えばホーム
ページ等の文書型のコンテンツとして、利用者に提示することができる。つまり利用者は、コンテンツとそのコンテンツの関連情報であるXMLコンテンツを同時に視聴すること
ができる。
When the related information searched by the search unit 35 is content described in XML, the presentation unit 25 uses the original content and the content described in XML received as document-type content such as a home page, for example. Can be presented to the user. That is, the user can view the content and the XML content that is related information of the content at the same time.

また関連情報にメタ情報が付与されている場合には、関連情報からメタ情報が抽出部24で抽出される。その後、前記の方法と同様の方法によって、関連情報サーバ30で関連情報が検索されて、クライアント20ヘ送信される。このように関連情報に関する関連情報を検索により得ることもでき、より広い範囲で関連情報を得ることも可能となる。   When meta information is added to the related information, the meta information is extracted from the related information by the extraction unit 24. Thereafter, related information is searched in the related information server 30 by the same method as described above, and transmitted to the client 20. In this way, related information related to related information can be obtained by searching, and related information can be obtained in a wider range.

このようにして、視聴中の映像や閲覧中の文書等のコンテンツの関連情報を取得し、利用者へ提示することが可能である。   In this way, it is possible to acquire related information of content such as a video being viewed and a document being browsed and present it to the user.

[第2の実施形態]
第2の実施形態では、コンテンツサーバと関連情報サーバを兼ね備えたサーバ(以後、コンテンツ/関連情報サーバと略称する)からクライアントヘコンテンツと関連情報を提供する例について説明する。
[Second Embodiment]
In the second embodiment, an example in which content and related information are provided to a client from a server having both a content server and a related information server (hereinafter abbreviated as a content / related information server) will be described.

図6は、本発明を関連情報提示装置であるクライアントと関連情報検索装置であるコンテンツ/関連情報サーバに適用した場合のシステム全体を示す構成図である。システムは、コンテンツ/関連情報サーバ50とクライアント60とそれらを相互に接続するネットワーク40とから構成される。またネットワーク40には、第1の実施形態で用いた同様のネットワークを利用することができる。   FIG. 6 is a block diagram showing the entire system when the present invention is applied to a client as a related information presentation device and a content / related information server as a related information search device. The system includes a content / related information server 50, a client 60, and a network 40 that interconnects them. The network 40 can be the same network used in the first embodiment.

コンテンツ/関連情報サーバ50は、図7に示すように、抽出部51と、送信部52と、解析部53と、種別変換部54と、検索部55と、関連情報データベース56とから構成される。抽出部51は、コンテンツからのメタ情報を抽出する。解析部53は、抽出したメタ情報を解析し、メタ情報が含む種別と個別情報を抽出する。種別変換部54は、解析により得た種別を検索情報に変換する。検索部55は、少なくとも個別情報を用い、さらに可能な場合には検索情報を用いて、関連情報データベース56から関連情報の検索を行う。関連情報データベース56には、関連情報が記憶されている。検索部55は、検索により得た関連情報を送信部52へ送る。また検索部55は、関連情報を抽出部51へ送り、同様の方法で関連情報をさらに検索することができる。送信部52は、クライアント20へ関連情報を送信する。   As shown in FIG. 7, the content / related information server 50 includes an extraction unit 51, a transmission unit 52, an analysis unit 53, a type conversion unit 54, a search unit 55, and a related information database 56. . The extraction unit 51 extracts meta information from the content. The analysis unit 53 analyzes the extracted meta information, and extracts the type and individual information included in the meta information. The type conversion unit 54 converts the type obtained by the analysis into search information. The search unit 55 searches for related information from the related information database 56 using at least the individual information and, if possible, using the search information. The related information database 56 stores related information. The search unit 55 sends related information obtained by the search to the transmission unit 52. In addition, the search unit 55 can send the related information to the extraction unit 51 and further search for the related information by the same method. The transmission unit 52 transmits related information to the client 20.

クライアント60は、コンテンツを要求する際に、もしくはそれ以前に、利用者の操作履歴、ユーザのID、性別、年齢、居所、住所、及び、時刻、時期、契約サービス等の状況情報をサーバに送信することがある。この場合、第1の実施携帯の場合と同様に、検索情報への変換にその状況情報が利用される。   The client 60 sends status information such as the user's operation history, user ID, gender, age, whereabouts, address, time, time, contract service, etc. to the server when requesting the content or before that. There are things to do. In this case, as in the case of the first embodiment mobile phone, the status information is used for conversion into search information.

クライアント60は、図8に示すように、受信部61と、提示部62、タイマー63とから構成される。   As shown in FIG. 8, the client 60 includes a receiving unit 61, a presentation unit 62, and a timer 63.

受信部61は、コンテンツ/関連情報サーバ50から送られてくるコンテンツと関連情報を受信する。受信したコンテンツと関連情報は、提示部62へ送られる。提示部62は送られてきたコンテンツと関連情報とを提示する。   The receiving unit 61 receives content and related information sent from the content / related information server 50. The received content and related information are sent to the presentation unit 62. The presentation unit 62 presents the sent content and related information.

コンテンツと関連情報とをタイミングを一致させて提示部62で提示するには、コンテンツのメタ情報に含まれる時間情報とタイマー63から得られる時間情報を利用して、コンテンツに同期させて関連情報を提示部62で提示する。   In order for the presentation unit 62 to present the content and the related information at the same timing, the time information included in the meta information of the content and the time information obtained from the timer 63 are used to synchronize the content with the related information. Presented by the presentation unit 62.

[第3の実施形態]
第3の実施形態では、放送局から放送された映像と音声のコンテンツをテレビ受像機で提示中に、その関連情報も提示する場合を例として説明する。
[Third Embodiment]
In the third embodiment, a case where video and audio contents broadcast from a broadcasting station are presented on a television receiver and related information is also presented as an example.

図9は、本発明を関連情報提示装置であるテレビ受像機と関連情報検索装置である関連情報サーバに適用した場合のシステム全体を示す構成図である。ここでテレビ受像機は、放送を受信する本来の機能の他に、クライアントとしての機能も備えているものとする。
システムは、放送局70とテレビ受像機80と関連情報サーバ30とそれらを相互に接続するネットワーク40とから構成される。またネットワーク40には、第1の実施形態で用いた同様のネットワークを利用することができる。
FIG. 9 is a block diagram showing the entire system when the present invention is applied to a television receiver as a related information presentation device and a related information server as a related information search device. Here, it is assumed that the television receiver has a function as a client in addition to an original function of receiving a broadcast.
The system includes a broadcasting station 70, a television receiver 80, a related information server 30, and a network 40 that interconnects them. The network 40 can be the same network used in the first embodiment.

放送局70は、利用者が利用するテレビ受像機80に対して、映像や音声のコンテンツを放送するための施設であり、テレビ放送を行う事業者等により管理されている。また放送局70は、コンテンツの放送と共に、コンテンツへのメタ情報の付与を行う。   The broadcasting station 70 is a facility for broadcasting video and audio content to the television receiver 80 used by the user, and is managed by a business operator who performs the television broadcasting. The broadcast station 70 also gives meta information to the content along with the content broadcast.

テレビ受像機80は、図10に示すように、第1の実施形態におけるクライアントと同様に構成され、コンテンツ受信部81は、放送局70からメタ情報を付与されたコンテンツを受信する。コンテンツ受信部81での受信には、通常のテレビ受信機の受信機能を利用することができる。抽出部84は、コンテンツからのメタ情報を抽出する。送信部82は、抽出したメタ情報を関連情報サーバ30へ送信し、関連情報の検索の依頼する。関連情報受信部83は、関連情報サーバ30より関連情報を受信する。提示部85は、コンテンツと関連情報を提示する。これにも、通常のテレビ受信機の画像と音声を提示する機能を利用することができる。   As shown in FIG. 10, the television receiver 80 is configured in the same manner as the client in the first embodiment, and the content receiving unit 81 receives content to which meta information is given from the broadcast station 70. A reception function of a normal television receiver can be used for reception by the content reception unit 81. The extraction unit 84 extracts meta information from the content. The transmission unit 82 transmits the extracted meta information to the related information server 30 and requests a search for related information. The related information receiving unit 83 receives related information from the related information server 30. The presentation unit 85 presents content and related information. Also for this, a function of presenting an image and sound of a normal television receiver can be used.

関連情報サーバ30は、第1の実施形態と同様の構成と機能を有しており、テレビ受信機80から受信したメタ情報を用いて、メタ情報の付与されていたコンテンツの関連情報の検索を行い、その結果をテレビ受信機80へ送信する。   The related information server 30 has the same configuration and function as in the first embodiment, and uses the meta information received from the television receiver 80 to search for related information of the content to which the meta information has been added. The result is transmitted to the television receiver 80.

ネットワーク40は、テレビ受像機80と関連情報検索サーバ30との間を接続し、データを伝送する。   The network 40 connects between the television receiver 80 and the related information search server 30 to transmit data.

本実施形態において関連情報提示装置としてテレビ受像機を用い、関連情報検索装置として関連情報サーバを用いた場合の動作は、クライアントがネットワークを介してコンテンツを受信することを除き、第1の実施形態におけるクライアントと関連情報サーバの動作と同様であるので、ここでの説明は省略する。   In the present embodiment, the operation when a television receiver is used as the related information presentation device and the related information server is used as the related information search device is the same as that in the first embodiment except that the client receives the content via the network. The operations of the client and the related information server in FIG.

第1の実施形態において、本発明をクライアントと関連情報サーバに適用した場合のシステム全体を示す構成図である。In 1st Embodiment, it is a block diagram which shows the whole system at the time of applying this invention to a client and a related information server. 第1の実施形態におけるクライアントの構成を示す図である。It is a figure which shows the structure of the client in 1st Embodiment. 第1の実施形態における関連情報サーバの構成を示す図である。It is a figure which shows the structure of the related information server in 1st Embodiment. クライアント(関連情報提示装置)と関連情報サーバ(関連情報検索装置)の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a client (related information presentation apparatus) and a related information server (related information search apparatus). 映像の場面に関するメタ情報をXMLで表現した例である。This is an example in which meta information related to a video scene is expressed in XML. 第2の実施形態において、本発明をクライアントとコンテンツ/関連情報サーバに適用した場合のシステム全体を示す構成図である。In 2nd Embodiment, it is a block diagram which shows the whole system at the time of applying this invention to a client and a content / related information server. 第2の実施形態におけるコンテンツ/関連情報サーバの構成を示す図である。It is a figure which shows the structure of the content / related information server in 2nd Embodiment. 第2の実施形態におけるクライアントの構成を示す図である。It is a figure which shows the structure of the client in 2nd Embodiment. 第3の実施形態において、本発明をテレビ受像機と関連情報サーバに適用した場合のシステム全体を示す構成図である。In 3rd Embodiment, it is a block diagram which shows the whole system at the time of applying this invention to a television receiver and a related information server. 第3の実施形態におけるテレビ受像機の構成を示す図である。It is a figure which shows the structure of the television receiver in 3rd Embodiment.

符号の説明Explanation of symbols

10 コンテンツサーバ
20 クライアント(関連情報提示装置)
30 関連情報サーバ(関連情報検索装置)
40 ネットワーク
50 コンテンツ/関連情報サーバ(関連情報検索装置)
60 クライアント(関連情報提示装置)
70 放送局
80 テレビ受像機(関連情報提示装置)
10 content server 20 client (related information presentation device)
30 Related Information Server (Related Information Search Device)
40 network 50 content / related information server (related information search device)
60 client (related information presentation device)
70 Broadcasting station 80 Television receiver (related information presentation device)

Claims (12)

音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を利用者に提供する関連情報提供装置であって、
メタ情報を付与されたコンテンツを受信するコンテンツ受信部と、
受信したメタ情報を付与されたコンテンツから、指示されたタイミングで前記メタ情報を抽出する抽出部と、
抽出したメタ情報を関連情報検索装置へ送信する送信部と、
コンテンツを提示する提示部と、
前記関連情報を関連情報検索装置から受信する関連情報受信部と、
受信した関連情報を提示する提示部と
を備えることを特徴とする関連情報提供装置。
A related information providing device that provides related information of content including at least one of audio, video, and text to a user,
A content receiving unit for receiving content to which meta information is given;
An extraction unit that extracts the meta information at the instructed timing from the received content with the meta information;
A transmission unit for transmitting the extracted meta information to the related information retrieval device;
A presentation unit for presenting content;
A related information receiving unit that receives the related information from the related information search device;
A related information providing apparatus comprising: a presentation unit that presents received related information.
前記メタ情報として、
コンテンツ全体に関する情報と、
コンテンツの部分を時間的に特定する情報と、
前記時間的に特定する情報により特定されたコンテンツの部分に関する情報と
コンテンツの部分を空間の位置として特定する情報と、
前記空間の位置として特定する情報により特定されたコンテンツの部分に関する情報
のうち少なくとも一つ以上を備えることを特徴とする請求項1に記載の関連情報提供装置。
As the meta information,
Information about the entire content,
Information that identifies the part of the content in time,
Information relating to the part of the content specified by the information specified in terms of time and information specifying the part of the content as a spatial position;
The related information providing apparatus according to claim 1, further comprising at least one piece of information related to a part of the content specified by the information specified as the position of the space.
前記指示されたタイミングとして、
コンテンツが提示部に提示されたこと、
コンテンツの部分が時間的に特定されたこと、
コンテンツの部分が空間の位置として特定されたこと
のうち少なくとも一つ以上を用いることを特徴とする請求項1に記載の関連情報提供装置。
As the instructed timing,
That the content was presented to the presentation unit,
That the part of the content was identified in time,
The related information providing apparatus according to claim 1, wherein at least one of the content portions identified as the position of the space is used.
前記メタ情報を付与されたコンテンツとして、
前記受信した関連情報を用いること
を特徴とする請求項1に記載の関連情報提供装置。
As content given the meta information,
The related information providing apparatus according to claim 1, wherein the received related information is used.
前記抽出したメタ情報に記載されている時間情報と、
関連情報提供装置に付属している時計が示す時間情報とが一致するタイミングで、
コンテンツとその関連情報とを提示部において提示する手段
を備えることを特徴とする請求項1に記載の関連情報提供装置。
Time information described in the extracted meta information; and
At the timing when the time information indicated by the clock attached to the related information providing device matches,
The related information providing apparatus according to claim 1, further comprising means for presenting content and related information thereof in a presentation unit.
利用者に提供する音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を検索する関連情報検索装置であって、
メタ情報を関連情報提示装置から受信する受信部と、
受信したメタ情報を解析し、前記メタ情報が含む種別と個別情報とを抽出する解析部と、
抽出した種別を検索情報へ変換する種別変換部と、
抽出した個別情報と変換により得た検索情報とのうち少なくとも一つを用いて関連情報データベースから関連情報を検索する検索部と、
検索により得た前記関連情報を関連情報提示装置へ送信する送信部と
を備えることを特徴とする関連情報検索装置。
A related information search device for searching related information of content including at least one of audio, video, and text provided to a user,
A receiving unit that receives the meta information from the related information presentation device;
Analyzing the received meta information and extracting the type and individual information included in the meta information;
A type conversion unit that converts the extracted type into search information;
A search unit for searching related information from the related information database using at least one of the extracted individual information and the search information obtained by the conversion;
A related information search device comprising: a transmission unit that transmits the related information obtained by the search to a related information presentation device.
前記種別変換部において
前記種別を前記検索情報に変換する際に、
前記関連情報提示装置から送られた利用者の利用履歴情報と、IDと、性別と、年齢と、居所と、住所と、利用した時期と、時刻と、契約したサービス内容とのうち少なくとも一つ以上から構成される情報を利用すること
を特徴とする請求項6に記載に関連情報検索装置。
When the type conversion unit converts the type into the search information,
At least one of user usage history information, ID, sex, age, residence, address, time of use, time of use, and contracted service content sent from the related information presentation device The related information search device according to claim 6, wherein the information configured as described above is used.
前記種別変換部において
前記種別を検索キーワードと検索カテゴリの少なくとも一つに変換して検索情報とすること
を特徴とする請求項6に記載の関連情報検索装置。
7. The related information search apparatus according to claim 6, wherein the type conversion unit converts the type into at least one of a search keyword and a search category to obtain search information.
コンテンツ受信機能と、抽出機能と、提示機能と、送信機能と、関連情報受信機能とを備え、
音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を提供する関連情報提供方法であって、
コンテンツ受信機能が、メタ情報を付与されたコンテンツを受信する手順と、
抽出機能が、受信したメタ情報を付与されたコンテンツから、指示されたタイミングで前記メタ情報を抽出する手順と、
送信機能が、抽出したメタ情報を送信する手順と、
提示機能が、コンテンツを提示する手順と、
関連情報受信機能が、関連情報を受信する手順と、
提示機能が、受信した関連情報を提示する手順と
を実行することを特徴とする関連情報提供方法。
It has a content reception function, an extraction function, a presentation function, a transmission function, and a related information reception function,
A related information providing method for providing related information of content including at least one of audio, video, and text,
The content receiving function receives the content given the meta information,
A procedure in which the extraction function extracts the meta information at the instructed timing from the received content with the meta information;
The sending function sends the extracted meta information,
The presentation function presents the content,
The related information receiving function receives the related information, and
A related information providing method, wherein the presentation function executes a procedure for presenting received related information.
受信機能と、解析機能と、種別変換機能と、検索機能と、関連情報データベース機能と、送信機能とを備え、
利用者に提供する音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を検索する関連情報検索方法であって、
受信機能が、メタ情報を受信する手順と、
解析機能が、受信したメタ情報を解析し、前記メタ情報が含む個別情報と種別とを抽出する手順と、
種別変換機能が、抽出した種別を検索情報へ変換する手順と、
検索機能が、抽出した個別情報と変換により得た検索情報とのうち少なくとも一つを用いて関連情報データベース機能から関連情報を検索する手順と、
送信機能が、検索により得た前記関連情報を送信する手順と
を実行することを特徴とする関連情報検索方法。
It has a reception function, an analysis function, a type conversion function, a search function, a related information database function, and a transmission function.
A related information search method for searching related information of content including at least one of audio, video, and text provided to a user,
The reception function receives the meta information, and
A procedure in which the analysis function analyzes the received meta information and extracts individual information and type included in the meta information;
The type conversion function converts the extracted type into search information;
A procedure for searching for related information from the related information database function using at least one of the extracted individual information and the search information obtained by the conversion by the search function;
A related information search method, wherein the transmission function executes a procedure of transmitting the related information obtained by the search.
音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を提供する関連情報提供プログラムであって、
コンピュータに、
メタ情報を付与されたコンテンツを受信するコンテンツ受信機能と、
受信したメタ情報を付与されたコンテンツから、指示されたタイミングで前記メタ情報を抽出する抽出機能と、
抽出したメタ情報を送信する送信機能と、
コンテンツを提示する提示機能と、
関連情報を受信する関連情報受信機能と、
受信した関連情報を提示する提示機能と
を実現させることを特徴とする関連情報提供プログラム。
A related information providing program for providing related information of content including at least one of audio, video, and text,
On the computer,
A content receiving function for receiving content with meta information;
An extraction function for extracting the meta information from the content given the received meta information at an instructed timing;
A send function to send the extracted meta information;
A presentation function to present content;
A related information receiving function for receiving related information;
A related information providing program for realizing a presentation function for presenting received related information.
利用者に提供する音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を検索する関連情報検索プログラムであって、
コンピュータに、
メタ情報を受信する受信機能と、
受信したメタ情報を解析し、メタ情報が含む個別情報と種別とを抽出する解析機能と、
抽出した種別を検索情報へ変換する種別変換機能と、
抽出した個別情報と変換により得た検索情報とのうち少なくとも一つを用いて関連情報データベース機能から関連情報を検索する検索機能と、
検索により得た前記関連情報を送信する送信機能と
を実現させることを特徴とする関連情報検索プログラム。
A related information search program for searching related information of content including at least one of audio, video, and text provided to a user,
On the computer,
A receiving function for receiving meta information;
An analysis function that analyzes the received meta information and extracts individual information and types included in the meta information;
A type conversion function for converting the extracted type into search information;
A search function for searching related information from the related information database function using at least one of the extracted individual information and search information obtained by conversion;
A related information search program for realizing a transmission function for transmitting the related information obtained by the search.
JP2003377531A 2003-11-06 2003-11-06 Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program Pending JP2005141507A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003377531A JP2005141507A (en) 2003-11-06 2003-11-06 Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003377531A JP2005141507A (en) 2003-11-06 2003-11-06 Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program

Publications (1)

Publication Number Publication Date
JP2005141507A true JP2005141507A (en) 2005-06-02

Family

ID=34688217

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003377531A Pending JP2005141507A (en) 2003-11-06 2003-11-06 Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program

Country Status (1)

Country Link
JP (1) JP2005141507A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008282322A (en) * 2007-05-14 2008-11-20 Sony Ericsson Mobilecommunications Japan Inc Information processor and information processing method
JP2008295028A (en) * 2007-05-23 2008-12-04 Samsung Electronics Co Ltd Method of searching for supplementary data related to content data, and apparatus therefor
JP2009038502A (en) * 2007-07-31 2009-02-19 Toshiba Corp Information processing device, and information display method
WO2009139254A1 (en) * 2008-05-13 2009-11-19 日本電気株式会社 Search system, device used for the same, search method, and recording medium containing search program
JP2011508319A (en) * 2007-12-19 2011-03-10 グーグル・インコーポレーテッド Video quality measurement
US8108482B2 (en) 2008-02-29 2012-01-31 Fujitsu Limited Data relaying apparatus, data relaying method, and data relay processing program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06295312A (en) * 1993-04-06 1994-10-21 Fujitsu Sooshiaru Sci Raboratori:Kk Method for retrieving data
JPH08287107A (en) * 1995-03-20 1996-11-01 Internatl Business Mach Corp <Ibm> System and method for establishment of link between provision of seller information and seller during display of movie
JP2002373175A (en) * 2001-06-14 2002-12-26 Nec Corp Method and system for retrieving service
JP2003044508A (en) * 2001-08-03 2003-02-14 Access Media International Inc Url conversion server system and real url server
JP2003308328A (en) * 2002-04-16 2003-10-31 Nippon Telegr & Teleph Corp <Ntt> Regenerator and method for regenerating content link, program therefor, and recording medium

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06295312A (en) * 1993-04-06 1994-10-21 Fujitsu Sooshiaru Sci Raboratori:Kk Method for retrieving data
JPH08287107A (en) * 1995-03-20 1996-11-01 Internatl Business Mach Corp <Ibm> System and method for establishment of link between provision of seller information and seller during display of movie
JP2002373175A (en) * 2001-06-14 2002-12-26 Nec Corp Method and system for retrieving service
JP2003044508A (en) * 2001-08-03 2003-02-14 Access Media International Inc Url conversion server system and real url server
JP2003308328A (en) * 2002-04-16 2003-10-31 Nippon Telegr & Teleph Corp <Ntt> Regenerator and method for regenerating content link, program therefor, and recording medium

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008282322A (en) * 2007-05-14 2008-11-20 Sony Ericsson Mobilecommunications Japan Inc Information processor and information processing method
JP2008295028A (en) * 2007-05-23 2008-12-04 Samsung Electronics Co Ltd Method of searching for supplementary data related to content data, and apparatus therefor
KR101439841B1 (en) * 2007-05-23 2014-09-17 삼성전자주식회사 Method for searching supplementary data related to contents data and apparatus thereof
JP2009038502A (en) * 2007-07-31 2009-02-19 Toshiba Corp Information processing device, and information display method
JP2011508319A (en) * 2007-12-19 2011-03-10 グーグル・インコーポレーテッド Video quality measurement
US8402025B2 (en) 2007-12-19 2013-03-19 Google Inc. Video quality measures
US8108482B2 (en) 2008-02-29 2012-01-31 Fujitsu Limited Data relaying apparatus, data relaying method, and data relay processing program
WO2009139254A1 (en) * 2008-05-13 2009-11-19 日本電気株式会社 Search system, device used for the same, search method, and recording medium containing search program
JP5609640B2 (en) * 2008-05-13 2014-10-22 日本電気株式会社 SEARCH SYSTEM, DEVICE USED FOR THE SAME, SEARCH METHOD, AND SEARCH PROGRAM

Similar Documents

Publication Publication Date Title
JP6082946B2 (en) Receiving apparatus, receiving method, program, and information processing system
JP5138810B2 (en) Bookmark using device, bookmark creating device, bookmark sharing system, control method, control program, and recording medium
CN1230753C (en) System and method for providing and watching information, program for providing medium and operation controlling device for television
KR100322371B1 (en) Broadcasting portal service system
EP2475146B1 (en) Anchoring and sharing time positions and media reception information on a presentation timeline for multimedia content streamed over a network
US20100162164A1 (en) Method and apparatus for providing search service during program broadcasting
US20030097301A1 (en) Method for exchange information based on computer network
CN103141111B (en) For shared data and the method making broadcast data synchronous with additional information
WO2001071558A1 (en) Image retrieval/distribution system and image retrieval/distribution method
KR101404596B1 (en) System and method for providing video service based on image data
TW200926813A (en) Method for retrieving content accessible to television receiver and system for retrieving content accessible to television receiver
JP2006270869A (en) Associated information acquisition system and method, management apparatus, and associated information transmission program
CN103686409B (en) The method and system that desktop background synchronously plays with live interface
JP5487299B2 (en) Operation information generation apparatus and operation information generation method
US8756630B2 (en) Imaging distribution apparatus and imaging distribution method
JP2005141507A (en) Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program
JP2009021933A (en) Apparatus for streaming distribution of audio-visual data, program, recording medium and method
JP2005222369A (en) Information providing device, information providing method, information providing program and recording medium with the program recorded thereon
WO2016017451A1 (en) Reception device, reception method, transmission device, and transmission method
WO2015178218A1 (en) Reception apparatus, reception method, transmission apparatus, and transmission method
KR102611253B1 (en) Receiving devices, transmitting devices and data processing methods
US20030070173A1 (en) Digital image information device
JP7094461B2 (en) Content modification system with transmission delay-based functionality
JP7058497B2 (en) Delivery status provision device and program
KR100943447B1 (en) Interface device intended to be used with a multimedia content restitution device to perform searches on a multimedia content being restored

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060404

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090319

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090324

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090525

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090714