JP2000242661A - Relating information retrieval device and storage medium recording program for executing relating information retrieval processing - Google Patents

Relating information retrieval device and storage medium recording program for executing relating information retrieval processing

Info

Publication number
JP2000242661A
JP2000242661A JP11044888A JP4488899A JP2000242661A JP 2000242661 A JP2000242661 A JP 2000242661A JP 11044888 A JP11044888 A JP 11044888A JP 4488899 A JP4488899 A JP 4488899A JP 2000242661 A JP2000242661 A JP 2000242661A
Authority
JP
Japan
Prior art keywords
information
search
unit
reproduction
extracting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP11044888A
Other languages
Japanese (ja)
Inventor
Hiroshi Ishikawa
Kouki Katou
光幾 加藤
博 石川
Original Assignee
Fujitsu Ltd
富士通株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd, 富士通株式会社 filed Critical Fujitsu Ltd
Priority to JP11044888A priority Critical patent/JP2000242661A/en
Publication of JP2000242661A publication Critical patent/JP2000242661A/en
Withdrawn legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To provide a relating information retrieval device capable of dynamically retrieving information relating to provided information at the time of passively receiving the provided information. SOLUTION: This relating information retrieval device which is provided in information provision terminal equipment provided with an information reproduction means 101 for successively reproducing the provided information and is for retrieving relating information relating to the provided information is provided with an information extraction means 111 for receiving reproduction position information for indicating a position where a reproduction processing for the provision information is completed from the information reproduction means 101 and extracting at least a part of the provided information as evaluation object information based on the reproduction position information, a feature evaluation means 112 for receiving the evaluation object information from the information extraction means 111 and evaluating a feature amount for indicating the feature, a retrieval means 113 for retrieving the relating information from an accessible retrieval server based on the feature amount and a relating information output means 114 for outputting a retrieved result obtained by the retrieval means 113 and presenting it to a user.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION
【0001】[0001]
【発明の属する技術分野】本発明は、デジタル映像配信
サービスや電子図書館サービスなどによって提供される
情報に関連する情報を自動的に検索する関連情報検索装
置および関連情報検索処理を実行するプログラムを記録
した記憶媒体に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a related information retrieval apparatus for automatically retrieving information related to information provided by a digital video distribution service or an electronic library service, and a program for executing a related information retrieval process. It relates to a storage medium that has been used.
【0002】[0002]
【従来の技術】ネットワークを介して情報を提供するサ
ービスにおいて、提供対象の情報に関連する情報を利用
者に提供するための技術としては、次に挙げるような方
法がある。まず、WWW(World Wide Web)に代表される
ハイパーテキストシステムにおいて、提供対象の情報と
関連する情報との間にリンクを設定しておく方法があ
る。
2. Description of the Related Art In a service for providing information via a network, there are the following methods for providing a user with information related to information to be provided. First, in a hypertext system represented by the WWW (World Wide Web), there is a method of setting a link between information to be provided and related information.
【0003】図8に、ハイパーテキストシステムを適用
した情報提供端末の構成例を示す。この情報提供端末装
置において、情報提供処理部401は、情報提供者側の
サーバ402によってネットワークに送出された提供対
象の情報(以下、提供情報と称する)を、ネットワーク
制御部403を介して受け取り、入出力制御部404を
介してディスプレイ装置405やスピーカ406などの
出力装置を介して利用者に提供する構成となっている。
FIG. 8 shows a configuration example of an information providing terminal to which a hypertext system is applied. In this information providing terminal device, the information providing processing unit 401 receives, via the network control unit 403, information to be provided (hereinafter referred to as provided information) transmitted to the network by the server 402 on the information provider side, A configuration is provided to the user via an output device such as a display device 405 or a speaker 406 via an input / output control unit 404.
【0004】この情報提供処理部401において、再生
制御部411は、ネットワーク制御部403を介して受
け取った提供情報の種類に応じて、表示処理部412お
よび音声処理部413の処理に供する構成となってい
る。また、再生制御部411により、提供情報を情報蓄
積部407に一旦蓄積し、この情報蓄積部407から提
供情報を読み出して、表示処理部412および音声処理
部413の処理に供する場合もある。
[0004] In the information provision processing unit 401, the reproduction control unit 411 is provided for the processing of the display processing unit 412 and the audio processing unit 413 in accordance with the type of the provision information received via the network control unit 403. ing. In some cases, the reproduction control unit 411 temporarily stores the provided information in the information storage unit 407, reads the provided information from the information storage unit 407, and provides the read information to the display processing unit 412 and the audio processing unit 413.
【0005】図8に示した表示処理部412は、提供情
報に含まれるテキスト情報や静止画像情報および動画像
情報を受け取って、ディスプレイ装置405に表示する
ための表示情報を作成し、入出力制御部404の処理に
供する構成となっている。一方、提供情報に含まれる音
声情報は、音声処理部413を介して入出力制御部40
4に送出され、スピーカ406により音声の再生動作が
行われる。
[0005] The display processing unit 412 shown in FIG. 8 receives text information, still image information, and moving image information included in the provided information, creates display information to be displayed on the display device 405, and controls input / output. The configuration is provided for the processing of the unit 404. On the other hand, the audio information included in the provided information is transmitted to the input / output control unit 40 via the audio processing unit 413.
4 and a sound reproduction operation is performed by the speaker 406.
【0006】また、リンク解析部414は、入力受付部
415からの指示に応じて、指定されたリンクを解析
し、ネットワーク制御部403を介して情報提供者側の
サーバ402に対して、リンク先の情報を要求する構成
となっている。この場合は、利用者がキーボード408
やマウス409などの入力装置を操作して、リンクが設
定された情報要素を指定することにより、入力受付部4
15およびリンク解析部414の動作を起動して、設定
されたリンクをたどっていき、情報提供者側のサーバ4
02から関連情報の提供を受けることが可能である。
A link analysis unit 414 analyzes a designated link in response to an instruction from the input reception unit 415, and sends a link destination to the server 402 on the information provider side via the network control unit 403. Is required. In this case, the user enters the keyboard 408
By operating an input device such as a mouse or a mouse 409 to specify an information element to which a link is set, the input receiving unit 4
15 and the operation of the link analysis unit 414 are started to follow the set link, and the server 4 on the information provider side is started.
02 can be provided with related information.
【0007】また、デジタル映像配信サービスでは、情
報提供者が予めスクリプトを作成し、動画情報の再生動
作とともに関連情報の提供処理を時系列的な手順として
記述しておくことにより、映画やニュースなどの映像の
再生に同期して、関連情報を利用者に提供することが可
能である。図9に、従来のデジタル映像配信サービス用
の情報提供端末装置の構成例を示す。
In the digital video distribution service, an information provider prepares a script in advance, and describes a process of reproducing moving image information and a process of providing related information as a time-series procedure. Related information can be provided to the user in synchronization with the reproduction of the video. FIG. 9 shows a configuration example of a conventional information providing terminal device for a digital video distribution service.
【0008】この情報提供端末装置は、図8に示したリ
ンク解析部414に代えてスクリプト解析部416を備
えて構成されており、このスクリプト解析部416が、
再生制御部411を介して受け取った提供情報に含まれ
るスクリプトを解析し、この解釈結果に応じて、再生制
御部411が表示処理部412および音声処理部413
の動作を制御する構成となっている。
[0008] This information providing terminal device is provided with a script analysis unit 416 in place of the link analysis unit 414 shown in FIG.
The script included in the provided information received via the reproduction control unit 411 is analyzed, and the reproduction control unit 411 operates the display processing unit 412 and the audio processing unit 413 in accordance with the interpretation result.
Is controlled.
【0009】このように、スクリプトに記述された手順
の連なりによって提供対象の映像情報と関連情報とのリ
ンクが示されている場合は、利用者は、単に、提供対象
の映像情報の再生に同期して関連情報を受け取ることが
でき、特別な行動をとる必要はない。上述した二つの方
法は、いずれも、情報提供者が設定したリンクによっ
て、予め用意された関連情報が利用者に提供されてお
り、静的なリンクを利用した方法である。
As described above, when the link between the video information to be provided and the related information is indicated by the sequence of procedures described in the script, the user simply synchronizes with the reproduction of the video information to be provided. And receive relevant information without having to take any special action. In each of the above two methods, related information prepared in advance is provided to the user by a link set by the information provider, and the method uses a static link.
【0010】これに対して、提供対象の情報に含まれる
任意の情報要素に関連する情報を動的に検索して提供す
るための技術として、特開平9−91307号公報「関
連情報表示装置および関連情報表示方法」が提案されて
いる。図10、特開平9−91307号の技法を適用し
た情報提供端末装置の構成例を示す。
On the other hand, as a technique for dynamically retrieving and providing information related to an arbitrary information element included in information to be provided, Japanese Patent Application Laid-Open No. 9-91307, “Related Information Display Device and Related information display method "has been proposed. FIG. 10 shows a configuration example of an information providing terminal device to which the technique of JP-A-9-91307 is applied.
【0011】図10に示した情報提供端末装置は、図8
に示したリンク解析部414に代えて情報要素抽出部4
21と検索制御部422とを備えて構成されており、情
報要素抽出部421が、入力受付部415を介して利用
者が指定した表示位置を受け取り、表示処理部412に
よって生成された表示情報からこの表示位置に表示され
た情報要素を抽出して、検索制御部422の処理に供す
る構成となっている。
The information providing terminal device shown in FIG.
Information element extracting unit 4 in place of the link analyzing unit 414 shown in FIG.
21 and a search control unit 422. The information element extraction unit 421 receives the display position specified by the user via the input reception unit 415, and receives information from the display information generated by the display processing unit 412. The information element displayed at this display position is extracted and provided to the processing of the search control unit 422.
【0012】また、この検索制御部422は、情報要素
抽出部421によって抽出された情報要素に基づいて、
検索サーバ423に対して関連情報の検索を要求し、得
られた関連情報を表示処理部412および音声処理部4
13の処理に供する構成となっている。
[0012] Further, the search control unit 422 performs a search based on the information element extracted by the information element extraction unit 421.
The search server 423 is requested to search for related information, and the obtained related information is displayed by the display processing unit 412 and the voice processing unit 4.
13 is provided.
【0013】この技法によれば、利用者がマウス409
やキーボード408を操作して注視点を移動させたとき
に、指定された注視点に表示されている情報要素に関連
する関連情報を検索サーバ423に備えられたデータベ
ースなどから検索し、ディスプレイ装置405やスピー
カ406を介して利用者に提供することができる。
According to this technique, the user can use the mouse 409
When the gazing point is moved by operating the keyboard or the keyboard 408, related information related to the information element displayed at the designated gazing point is searched from a database or the like provided in the search server 423, and the display device 405 is searched. And the user via the speaker 406.
【0014】[0014]
【発明が解決しようとする課題】ところで、従来のハイ
パーテキストシステムを利用して関連情報を提供する方
法やスクリプトによって関連情報を提供する方法は、い
ずれも、情報提供者が設定した静的なリンクによって、
情報提供者側で予め用意した関連情報を提供するもので
ある。
The conventional method of providing related information using a hypertext system and the method of providing related information by using a script are all based on a static link set by an information provider. By
The information provider provides related information prepared in advance.
【0015】したがって、関連情報の範囲は情報提供者
が設定したリンクに限定されており、リンクの設定を変
更しない限り、汎用のデータベースなどに登録された情
報の変化にかかわらず、関連情報として新規な情報を追
加して提供することができない。一方、特開平9−91
307号公報記載の技法によれば、提供対象の情報に含
まれる任意の情報要素に関連する情報を動的に検索する
ことが可能であるが、関連情報を引き出すためには、利
用者が積極的に情報要素を指定することが必要である。
Therefore, the range of the related information is limited to the link set by the information provider, and as long as the setting of the link is not changed, regardless of the change of the information registered in a general-purpose database or the like, the related information is newly set. Cannot provide additional information. On the other hand, JP-A-9-91
According to the technique described in Japanese Patent Publication No. 307, it is possible to dynamically search for information related to an arbitrary information element included in the information to be provided. It is necessary to specify the information element.
【0016】したがって、デジタル映像配信サービスな
どによる動画情報の提供を受けている場合や、プッシュ
技術を利用した情報提供サービスを受けている場合のよ
うに、自動的に供給される情報を画面を介して受動的に
受け取っている場合には、利用者による注視点の指定が
行われないために、新たな関連情報を検索することがで
きない。
Therefore, automatically supplied information is displayed on the screen, such as when receiving moving picture information by a digital video distribution service or when receiving an information providing service using a push technology. If the information is passively received, the user cannot specify a gazing point and cannot search for new related information.
【0017】本発明は、自動的に供給される情報を受動
的に受け取る場合においても、提供対象の情報に関連す
る情報を動的に検索することが可能な関連情報検索装置
および関連情報検索プログラムを記録した記憶媒体を提
供することを目的とする。
The present invention relates to a related information search apparatus and a related information search program capable of dynamically searching for information related to information to be provided, even when passively receiving automatically supplied information. It is an object of the present invention to provide a storage medium on which is recorded.
【0018】[0018]
【課題を解決するための手段】図1に、本発明の関連情
報検索装置の原理ブロック図を示す。請求項1の発明
は、情報提供者側によって提供される提供情報を順次に
再生する情報再生手段101を有する情報提供端末装置
に備えられ、提供情報に関連する関連情報を検索する関
連情報検索装置において、情報再生手段101から提供
情報についての再生処理が完了している位置を示す再生
位置情報を受け取り、この再生位置情報に基づいて、提
供情報の少なくとも一部を評価対象情報として抽出する
情報抽出手段111と、情報抽出手段111から評価対
象情報を受け取り、その特徴を表す特徴量を評価する特
徴評価手段112と、特徴量に基づいて、アクセス可能
な検索サーバから関連情報を検索する検索手段113
と、検索手段113によって得られた検索結果を出力し
て、利用者に提示する関連情報出力手段114とを備え
たことを特徴とする。
FIG. 1 is a block diagram showing the principle of a related information retrieval apparatus according to the present invention. The invention according to claim 1 is provided in an information providing terminal device having information reproducing means 101 for sequentially reproducing provided information provided by an information provider side, and a related information search device for searching related information related to the provided information. , Receiving reproduction position information indicating a position where reproduction of the provided information is completed from the information reproducing means 101, and extracting at least a part of the provided information as evaluation target information based on the reproduction position information Means 111, feature evaluation means 112 which receives evaluation target information from the information extraction means 111, and evaluates a feature amount representing the feature, and a search means 113 which searches related information from an accessible search server based on the feature amount.
And a related information output unit 114 that outputs a search result obtained by the search unit 113 and presents it to the user.
【0019】請求項1の発明は、情報抽出手段111
が、情報再生手段101から受け取った再生位置情報に
基づいて、提供情報の少なくとも一部を評価対象情報と
して抽出し、特徴評価手段112の処理に供することに
より、提供情報の特徴を自動的に解析して、検索手段1
13を介して関連情報を検索し、関連情報出力手段11
4によって利用者に提供することができる。
According to the first aspect of the present invention, the information extracting means
Automatically analyzes the features of the provided information by extracting at least a part of the provided information as evaluation target information based on the playback position information received from the information playback unit 101 and providing the extracted information to the processing of the feature evaluation unit 112. And search means 1
13 to search for related information, and to output related information
4 can be provided to the user.
【0020】請求項2の発明は、請求項1に記載の関連
情報検索装置において、情報抽出手段111は、再生さ
れた情報が空間的に連続して表示され、所定の期間に渡
って維持される情報形態の提供情報についての再生位置
情報に基づいて、再生位置情報で示される再生位置と所
定の関係を有する範囲を評価対象情報の範囲として求め
る第1範囲決定手段121と、提供情報から評価対象情
報の範囲に対応する情報を抽出する範囲抽出手段122
とを備えた構成であることを特徴とする。
According to a second aspect of the present invention, in the related information retrieval apparatus according to the first aspect, the information extracting means 111 displays the reproduced information spatially continuously and maintains the information for a predetermined period. Range determining means 121 for determining a range having a predetermined relationship with the reproduction position indicated by the reproduction position information as a range of the evaluation target information based on the reproduction position information of the provision information in the information form, Range extracting means 122 for extracting information corresponding to the range of the target information
And a configuration comprising:
【0021】請求項2の発明は、第1範囲決定手段12
1と範囲抽出手段122との動作により、提供情報が情
報再生手段101によって再生される際の空間的な連続
性に注目して特徴評価対象情報を抽出することができ
る。例えば、現時点に再生された提供情報と空間的に近
傍にある所定の範囲に再生されるテキスト情報を特徴評
価手段112の処理に供することができるから、利用者
に現在提供されつつある情報の特徴に基づいて、関連情
報の検索を行うことが可能である。
According to a second aspect of the present invention, the first range determining means 12
1 and the operation of the range extracting unit 122, the feature evaluation target information can be extracted by paying attention to the spatial continuity when the provided information is reproduced by the information reproducing unit 101. For example, text information reproduced in a predetermined range spatially adjacent to the provided information reproduced at the present time can be provided to the processing of the characteristic evaluation unit 112. , It is possible to search for related information.
【0022】請求項3の発明は、請求項1に記載の関連
情報検索装置において、情報抽出手段111は、時間的
に連続的に再生される情報形態の提供情報についての再
生位置情報に基づいて、再生位置情報で示される再生位
置の提供情報が再生された時点と時間的に所定の関係を
有する範囲を評価対象情報の範囲として求める第2範囲
決定手段125と、提供情報から評価対象情報の範囲に
対応する情報を抽出する範囲抽出手段122とを備えた
構成であることを特徴とする。
According to a third aspect of the present invention, in the related information retrieving apparatus according to the first aspect, the information extracting means 111 is provided based on the reproduction position information of the provided information in the information form which is reproduced continuously in time. A second range determination unit 125 for determining, as the range of the evaluation target information, a range having a predetermined relationship with the point in time at which the provision information of the reproduction position indicated by the reproduction position information is reproduced; It is characterized by comprising a range extracting means 122 for extracting information corresponding to the range.
【0023】請求項3の発明は、第2範囲決定手段12
5と範囲抽出手段122との動作により、提供情報が情
報再生手段101によって再生される際の時間的な連続
性に注目して、例えば、現時点と時間的に近傍にある所
定の範囲に再生される動画像を特徴評価対象情報として
特徴評価手段112の処理に供することができるから、
利用者に現在提供されつつある情報の特徴に基づいて、
関連情報の検索を行うことが可能である。
According to a third aspect of the present invention, the second range determining means 12
5 and the operation of the range extracting means 122, paying attention to the temporal continuity when the provided information is reproduced by the information reproducing means 101, for example, reproducing the information in a predetermined range which is temporally close to the present time. Can be provided to the processing of the feature evaluation unit 112 as feature evaluation target information.
Based on the characteristics of the information currently being provided to users,
It is possible to search for related information.
【0024】請求項4の発明は、請求項1に記載された
関連情報検索装置において、情報抽出手段111は、提
供情報に副情報として含まれたヒント情報を抽出するヒ
ント情報抽出手段126を備えた構成であり、検索手段
113は、ヒント情報で示された検索サーバをアクセス
可能な検索サーバの集合に含め、これらの検索サーバを
指定して検索動作を指示する検索指示を送出する第1検
索指示手段131と、検索指示に応じて、指定された検
索サーバに対する検索処理を実行する検索実行手段13
2とを備えた構成であることを特徴とする。
According to a fourth aspect of the present invention, in the related information retrieval apparatus according to the first aspect, the information extracting unit 111 includes a hint information extracting unit 126 for extracting hint information included as sub-information in the provided information. The search means 113 includes a search server indicated by the hint information in a set of accessible search servers, and sends a search instruction for designating a search operation by designating these search servers. Instructing means 131 and search executing means 13 for executing a search process for a specified search server in response to a search instruction
2 is provided.
【0025】請求項4の発明は、ヒント情報抽出手段1
26によって抽出されたヒント情報に応じて、第1検索
指示手段131により、アクセス可能な検索サーバの集
合にヒント情報で示された検索サーバを追加することが
できる。したがって、情報提供者側が、有効な関連情報
が得られると考える推奨検索サーバを示すヒント情報を
提供情報に埋め込んでおけば、このヒント情報に応じ
て、利用者側の検索手段113の検索実行手段132に
より、この推奨検索サーバに対する検索処理が行われる
ので、有効な関連情報を確実に検索することが可能とな
る。
The invention according to claim 4 is a method for extracting hint information 1
In accordance with the hint information extracted by 26, the search server indicated by the hint information can be added to the set of accessible search servers by the first search instruction unit 131. Therefore, if the information provider embeds hint information indicating a recommended search server which is considered to provide valid related information in the provided information, the search execution means of the search means 113 on the user side according to the hint information 132, the search processing for the recommended search server is performed, so that valid related information can be reliably searched.
【0026】請求項5の発明は、請求項1に記載された
関連情報検索装置において、利用者が頻繁に利用する検
索サーバを示す指定情報を保持する指定情報保持手段1
15を備え、検索手段113は、指定情報で示された検
索サーバをアクセス可能な検索サーバの集合に含め、こ
れらの検索サーバを指定して検索動作を指示する検索指
示を送出する第2検索指示手段133と、検索指示に応
じて、指定された検索サーバに対する検索処理を実行す
る検索実行手段132とを備えた構成であることを特徴
とする。
According to a fifth aspect of the present invention, there is provided the related information search device according to the first aspect, wherein a designated information holding unit for holding designated information indicating a search server frequently used by a user.
The search means 113 includes a search server indicated by the designated information in a set of accessible search servers, and sends a search instruction for designating a search operation by designating these search servers. It is characterized by comprising a means 133 and a search executing means 132 for executing a search process for a specified search server in response to a search instruction.
【0027】請求項5の発明は、第2検索指示手段13
3の動作により、指定情報保持手段115に保持された
指定情報で示された検索サーバをアクセス可能な検索サ
ーバの集合に追加し、検索実行手段132により、これ
らの検索サーバから関連情報を検索することにより、利
用者の好みを反映した関連情報の検索結果を得ることが
可能である。
According to a fifth aspect of the present invention, the second search instruction means 13
By the operation of 3, the search server indicated by the designated information held in the designated information holding unit 115 is added to the set of accessible search servers, and the search execution unit 132 searches for related information from these search servers. As a result, it is possible to obtain a search result of related information reflecting the user's preference.
【0028】請求項6の発明は、情報提供者側によって
提供される提供情報を順次に再生する情報再生手段10
1を有する情報提供端末装置に備えられ、提供情報に関
連する関連情報を検索する関連情報検索プログラムを記
録した記憶媒体において、情報再生手段101から提供
情報についての再生処理が完了している位置を示す再生
位置情報を受け取り、この再生位置情報に基づいて、提
供情報の少なくとも一部を評価対象情報として抽出する
情報抽出手順と、情報抽出手順で得られた評価対象情報
を受け取り、その特徴を表す特徴量を評価する特徴評価
手順と、特徴量に基づいて、アクセス可能な検索サーバ
から関連情報を検索する検索手順と、検索手順において
得られた検索結果を出力して、利用者に提示する関連情
報出力手順とをコンピュータに実行させることを特徴と
する。
According to a sixth aspect of the present invention, there is provided an information reproducing means for sequentially reproducing information provided by an information provider.
In a storage medium provided with the information providing terminal device having No. 1 and recording a related information search program for searching for related information related to the provided information, the position at which the reproduction process of the provided information from the information reproducing means 101 has been completed is determined. Receiving the reproduction position information shown in the table, and extracting, based on the reproduction position information, at least a part of the provided information as the evaluation target information, and receiving the evaluation target information obtained in the information extraction procedure, and expressing the characteristic. A feature evaluation procedure for evaluating the feature quantity, a search procedure for searching for related information from an accessible search server based on the feature quantity, and a search result obtained in the search procedure being output and presented to a user. And causing the computer to execute the information output procedure.
【0029】請求項6の発明は、情報再生手順から受け
取った再生位置情報に基づいて、情報抽出手順におい
て、提供情報の少なくとも一部を評価対象情報として抽
出し、この評価対象情報について特徴評価手順を実行す
ることにより、提供情報の特徴を自動的に解析して、検
索手順において関連情報を検索し、関連情報出力手順に
よって利用者に提供することができる。
According to a sixth aspect of the present invention, in the information extracting step, at least a part of the provided information is extracted as information to be evaluated based on the reproduction position information received from the information reproducing step. , The characteristics of the provided information are automatically analyzed, the related information is searched in the search procedure, and the related information can be provided to the user by the related information output procedure.
【0030】[0030]
【発明の実施の形態】以下、図面に基づいて、本発明の
実施形態について詳細に説明する。図2に、請求項1の
関連情報検索装置を適用した情報提供端末装置の実施形
態を示す。図2に示した情報提供端末装置は、図8に示
したリンク解析部414に代えて、特徴抽出処理部21
0と請求項1で述べた検索手段112に相当する検索制
御部220とを備えて構成されており、特徴抽出処理部
210が、後述する特徴抽出と評価処理を行い、評価結
果として得られた特徴量を検索制御部220の処理に供
する構成となっている。
Embodiments of the present invention will be described below in detail with reference to the drawings. FIG. 2 shows an embodiment of an information providing terminal device to which the related information search device of claim 1 is applied. The information providing terminal device shown in FIG. 2 has a feature extraction processing unit 21 instead of the link analysis unit 414 shown in FIG.
0, and a search control unit 220 corresponding to the search unit 112 described in claim 1. The feature extraction processing unit 210 performs feature extraction and evaluation processing described later, and is obtained as an evaluation result. The feature amount is provided to the processing of the search control unit 220.
【0031】また、この検索制御部220は、ネットワ
ーク制御部403を介してネットワークに接続されてお
り、受け取った特徴量に基づいて、情報提供端末装置内
に備えられたローカル検索サーバ202あるいはネット
ワークに接続された外部の文書検索サーバ203および
画像検索サーバ204に対する検索処理を行う構成とな
っている。
The search control unit 220 is connected to the network via the network control unit 403, and is connected to the local search server 202 or the network provided in the information providing terminal device based on the received feature amount. It is configured to perform a search process on the connected external document search server 203 and image search server 204.
【0032】また、図2に示した関連情報表示制御部2
30は、請求項1で述べた関連情報出力手段114に相
当するものであり、上述した検索制御部220によって
得られた関連情報を受け取って、表示処理部412を介
してこの関連情報の表示処理を行う構成となっている。
The related information display control unit 2 shown in FIG.
Numeral 30 corresponds to the related information output means 114 described in claim 1, receives the related information obtained by the above-described search control unit 220, and displays the related information via the display processing unit 412. Is performed.
【0033】図3に、特徴抽出処理部の詳細構成を示
す。図3に示した特徴評価処理部210において、テキ
スト評価部211、静止画像評価部212、動画像評価
部213および音声評価部214は、再生制御部411
からそれぞれ対応する形態の提供情報に関する再生処理
が完了している再生完了位置を示す再生位置情報を受け
取り、それぞれ該当する形態の提供情報の少なくとも一
部について、後述する特徴評価処理を行う構成となって
いる。
FIG. 3 shows a detailed configuration of the feature extraction processing unit. In the feature evaluation processing unit 210 illustrated in FIG. 3, the text evaluation unit 211, the still image evaluation unit 212, the moving image evaluation unit 213, and the audio evaluation unit 214 include a reproduction control unit 411.
The reproduction position information indicating the reproduction completion position at which the reproduction processing for the corresponding information of the corresponding form is completed is received from the corresponding form, and the feature evaluation processing described later is performed on at least a part of the provision information of the corresponding form. ing.
【0034】図3に示したテキスト評価部211におい
て、テキスト抽出部221は、請求項1で述べた情報抽
出手段111の一部の機能を果たすものであり、再生制
御部411から受け取ったテキスト情報に関する再生位
置情報に基づいて、例えば、情報蓄積部407にテキス
ト情報ファイルとして保持された提供情報から再生完了
位置の近傍のテキスト情報を抽出し、テキスト解析部2
22の処理に供する構成となっている。
In the text evaluation section 211 shown in FIG. 3, the text extraction section 221 fulfills a part of the function of the information extraction means 111 described in claim 1, and the text information received from the reproduction control section 411. For example, text information near the reproduction completion position is extracted from the provided information held as a text information file in the information storage unit 407 based on the reproduction position information related to
22.
【0035】このテキスト解析部222は、請求項1で
述べた特徴評価手段112の機能の一部を果たすもので
あり、受け取ったテキスト情報を形態素解析し、この解
析結果に基づいて、統計的な性質を表す特徴量を求め
て、検索制御部220の処理に供する構成となってい
る。このとき、テキスト解析部222は、例えば、テキ
スト情報に含まれる形態素の中でも情報要素となりうる
形態素に注目し、該当する形態素の出現頻度分布を求め
ればよい。
The text analysis unit 222 fulfills a part of the function of the feature evaluation unit 112 described in claim 1, performs a morphological analysis of the received text information, and performs a statistical analysis based on the analysis result. The configuration is such that a feature amount representing a property is obtained and used for processing of the search control unit 220. At this time, for example, the text analysis unit 222 may focus on a morpheme that can be an information element among morphemes included in the text information, and obtain the appearance frequency distribution of the morpheme.
【0036】一方、静止画像評価部212において、静
止画像抽出部223は、請求項1で述べた情報抽出手段
111の一部の機能を果たすものであり、再生制御部4
11から受け取った静止画像情報に関する再生位置情報
に基づいて、例えば、情報蓄積部407に静止画像情報
ファイルとして保持された提供情報から再生完了位置の
近傍の静止画像情報を抽出し、静止画像解析部224の
処理に供する構成となっている。
On the other hand, in the still image evaluation unit 212, the still image extraction unit 223 performs a part of the function of the information extraction unit 111 described in claim 1, and the reproduction control unit 4
For example, based on the reproduction position information on the still image information received from 11, the still image information in the vicinity of the reproduction completion position is extracted from the provision information held as the still image information file in the information storage unit 407, and the still image analysis unit 224.
【0037】この画像解析部224は、請求項1で述べ
た特徴評価手段112の機能の一部を果たすものであ
り、例えば、静止画像抽出部223から受け取った静止
画像情報について各色の分布状態を調べ、これを静止画
像の特徴を表す特徴量として、検索制御部220の処理
に供する構成となっている。また、動画像評価部213
において、動画像抽出部225は、請求項1で述べた情
報抽出手段111の一部の機能を果たすものであり、再
生制御部411から受け取った動画像情報に関する再生
位置情報に基づいて、例えば、情報蓄積部407に動画
像情報ファイルとして保持された提供情報から再生完了
位置の近傍の動画像情報を抽出し、動画像解析部226
の処理に供する構成となっている。
The image analysis unit 224 fulfills a part of the function of the feature evaluation unit 112 described in claim 1. For example, the image analysis unit 224 determines the distribution state of each color in the still image information received from the still image extraction unit 223. The search control unit 220 examines the search result as a feature amount representing the feature of the still image and supplies the feature amount to the search control unit 220. Also, the moving image evaluation unit 213
In, the moving image extracting unit 225 performs a part of the function of the information extracting unit 111 described in claim 1, and, for example, based on the reproduction position information on the moving image information received from the reproduction control unit 411, The moving image information in the vicinity of the reproduction completion position is extracted from the provided information held as the moving image information file in the information storage unit 407, and the moving image analysis unit 226
Is provided.
【0038】この動画像解析部226は、請求項1で述
べた特徴評価手段112の機能の一部を果たすものであ
り、例えば、受け取った動画像情報に対して文字認識処
理を行うことにより、字幕や映像中の看板などを表すパ
ターンからそこに表された文字を認識し、得られた文字
からなるテキスト情報を転送処理部216を介して、テ
キスト解析部222の処理に供する構成とすればよい。
The moving image analysis unit 226 fulfills a part of the function of the feature evaluation unit 112 described in claim 1. For example, by performing a character recognition process on the received moving image information, If a configuration is adopted in which characters represented there are recognized from a pattern representing a caption or a signboard in a video, and text information composed of the obtained characters is provided to the processing of the text analysis unit 222 via the transfer processing unit 216. Good.
【0039】このようにして得られたテキスト情報は、
評価対象の動画像情報に含まれている情報要素を適切に
反映しているから、このテキスト情報について、テキス
ト解析部222によって、上述した特徴評価処理を行う
ことにより、動画像情報によって表される映像によって
利用者に伝えられる意味に注目してその特徴を評価する
ことが可能である。
The text information obtained in this way is
Since the information elements included in the moving image information to be evaluated are appropriately reflected, the text information is represented by the moving image information by performing the above-described feature evaluation processing by the text analysis unit 222. It is possible to evaluate the feature by paying attention to the meaning conveyed to the user by the video.
【0040】また、このようにして求められた特徴量
は、通常の検索サーバなどでの検索処理に適しているか
ら、得られた特徴量を検索制御部220の処理に供する
ことにより、有効な関連情報を容易に検索することが可
能である。また一方、音声評価部214において、音声
抽出部227は、請求項1で述べた情報抽出手段111
の一部の機能を果たすものであり、再生制御部411か
ら受け取った音声情報に関する再生位置情報に基づい
て、例えば、情報蓄積部407に音声情報ファイルとし
て保持された提供情報から再生完了位置の近傍の音声情
報を抽出し、音声解析部228の処理に供する構成とな
っている。
Since the feature amount obtained in this manner is suitable for a search process in a normal search server or the like, by providing the obtained feature amount to the process of the search control unit 220, an effective feature amount can be obtained. Related information can be easily searched. On the other hand, in the voice evaluation unit 214, the voice extraction unit 227 is the information extraction unit 111 described in claim 1.
Based on the reproduction position information on the audio information received from the reproduction control unit 411, for example, the vicinity of the reproduction completion position is determined from the provided information held as the audio information file in the information storage unit 407. Is extracted and provided to the processing of the voice analysis unit 228.
【0041】この音声解析部228は、請求項1で述べ
た特徴評価手段112の機能の一部を果たすものであ
り、受け取った音声情報に対して音声認識処理を行い、
音声によって表された言葉に相当するテキスト情報に変
換し、得られたテキスト情報を転送処理部216を介し
て、テキスト解析部222の処理に供する構成とすれば
よい。
The voice analysis unit 228 fulfills a part of the function of the feature evaluation means 112 described in claim 1 and performs voice recognition processing on the received voice information.
The configuration may be such that the text information is converted into text information corresponding to words expressed by voice, and the obtained text information is provided to the processing of the text analysis unit 222 via the transfer processing unit 216.
【0042】このようにして得られたテキスト情報は、
評価対象の音声情報に含まれている情報要素を適切に反
映しているから、このテキスト情報について、テキスト
解析部222によって、上述した特徴評価処理を行うこ
とにより、音声情報によって表される音声によって伝え
られる意味に注目してその特徴を評価することが可能で
ある。
The text information obtained in this way is
Since the information elements included in the audio information to be evaluated are appropriately reflected, the text information is subjected to the above-described feature evaluation processing by the text analysis unit 222, so that the text represented by the audio information It is possible to evaluate the characteristics by paying attention to the conveyed meaning.
【0043】また、このようにして求められた特徴量
は、通常の検索サーバなどでの検索処理に適しているか
ら、得られた特徴量を検索制御部220の処理に供する
ことにより、有効な関連情報を容易に検索することが可
能である。ここで、提供対象の情報は、様々な種類の情
報が結合した構成を持っている場合がある。
Since the feature amount obtained in this way is suitable for a search process in a normal search server or the like, by providing the obtained feature amount to the process of the search control unit 220, an effective feature amount can be obtained. Related information can be easily searched. Here, the information to be provided may have a configuration in which various types of information are combined.
【0044】例えば、ハイパーテキスト情報は、テキス
ト情報とともに静止画像情報や動画像情報などを含んで
おり、このようなハイパーテキストを提供情報として受
け取った場合には、再生制御部411により、テキスト
情報に関する再生位置情報とともに、静止画像情報およ
び動画像情報に関する再生位置情報が、それぞれテキス
ト評価部211、静止画像評価部212および動画像評
価部213に送出され、これらの各部による特徴評価処
理が行われる。
For example, the hypertext information includes still image information and moving image information as well as text information. When such hypertext is received as provided information, the reproduction control unit 411 causes the reproduction control unit 411 to perform processing on the text information. Along with the reproduction position information, reproduction position information regarding the still image information and the moving image information is sent to the text evaluation unit 211, the still image evaluation unit 212, and the moving image evaluation unit 213, respectively, and these units perform a characteristic evaluation process.
【0045】同様に、映画やニュースなどのビデオ情報
が提供対象の情報である場合は、再生制御部411によ
り、動画像情報と音声情報とに関する再生位置情報がそ
れぞれ送出され、動画像評価部213および音声評価部
214による特徴評価処理が行われる。更に、クローズ
ドキャプションと呼ばれるテキスト情報が添付されたビ
デオ情報の場合は、動画像情報および音声情報について
の特徴評価処理に加えて、再生制御部411により、テ
キスト情報に関する再生位置情報が送出され、テキスト
評価部211により特徴評価処理も合わせて行われる。
Similarly, when video information such as a movie or news is the information to be provided, the reproduction control unit 411 sends reproduction position information relating to moving image information and audio information, and the moving image evaluation unit 213. Then, a feature evaluation process is performed by the voice evaluation unit 214. Further, in the case of video information to which text information called closed caption is attached, in addition to the feature evaluation processing on moving image information and audio information, the reproduction control unit 411 sends reproduction position information on the text information and outputs the text information. The characteristic evaluation processing is also performed by the evaluation unit 211.
【0046】また、上述したようにして、提供情報を構
成する部分情報のいずれかに対応して、テキスト解析部
222によって得られた特徴量を受け取った場合に、検
索制御部220は、ローカル検索サーバ202あるいは
外部の文書検索サーバ203に対する検索処理を行い、
例えば、形態素の出現頻度分布が類似している文書や出
現頻度の高い形態素に関する詳細情報などを表すテキス
ト情報を関連情報として検索し、関連情報表示制御部2
30に送出すればよい。
As described above, when the feature amount obtained by the text analysis unit 222 is received corresponding to one of the partial information constituting the provided information, the search control unit 220 A search process is performed on the server 202 or an external document search server 203,
For example, the related information display control unit 2 searches for text information indicating detailed information on a morpheme having a similar appearance frequency distribution or a morpheme having a high appearance frequency as related information.
30.
【0047】これに応じて、関連情報表示制御部230
は、表示処理部412に対して、例えば、提供情報が表
示されているウィンドウとは別のウィンドウを開く旨を
指示し、表示処理部412を介して、この新たなウィン
ドウに関連情報を表示すればよい。一方、提供情報を構
成する部分情報のいずれかに対応して、静止画像解析部
224によって得られた特徴量を受け取った場合に、検
索制御部220は、ネットワーク制御部403を介して
外部の画像検索サーバ204に対する検索処理を行い、
受け取った特徴量に類似する画像を関連情報として検索
して、関連情報表示制御部230の処理に供すればよ
い。
In response, the related information display controller 230
Instructs the display processing unit 412 to open, for example, a window different from the window in which the provided information is displayed, and displays the relevant information in the new window via the display processing unit 412. I just need. On the other hand, when the feature amount obtained by the still image analysis unit 224 is received corresponding to any of the partial information constituting the provided information, the search control unit 220 transmits the external image via the network control unit 403. Perform search processing for the search server 204,
What is necessary is just to search for an image similar to the received feature amount as related information and to provide the related information display control unit 230 with the processing.
【0048】これに応じて、関連情報表示制御部230
は、上述したテキスト情報の場合と同様にして、表示処
理部412を介して新たなウィンドウを開き、関連情報
として得られた画像情報を表示すればよい。
In response, the related information display control unit 230
As in the case of the text information described above, a new window may be opened via the display processing unit 412, and the image information obtained as the related information may be displayed.
【0049】このようにして、映画やニュース映像の配
信サービスやプッシュ技術を適用した情報提供サービス
などによって、利用者が受動的に情報提供を受けている
場合に、利用者に現時点で提供されている情報に関連す
る情報を自動的にかつ動的に検索し、得られた関連情報
を利用中のサービスによる提供情報と合わせて、利用者
に提供することができる。
As described above, when a user is passively receiving information through a movie or news video distribution service or an information providing service to which the push technology is applied, the information is currently provided to the user. It is possible to automatically and dynamically search for information related to the existing information, and to provide the obtained related information to the user together with information provided by the service being used.
【0050】この場合は、現時点に利用者に提供されて
いる情報に関する関連情報を、各検索サーバで利用可能
なデータベースから検索するので、データベースに登録
された最新の情報を得ることが可能である。また、上述
した特徴抽出処理部210、検索制御部220および関
連情報表示制御部230の各部の機能は、ソフトウェア
によって実現可能であり、これらの各部の機能を果たす
プログラムをフロッピー(登録商標)ディスクやCD−
ROMなどの記憶媒体に記録して、頒布することも可能
である。
In this case, since the related information relating to the information currently provided to the user is searched from the databases available at each search server, the latest information registered in the database can be obtained. . Also, the functions of the above-described feature extraction processing unit 210, search control unit 220, and related information display control unit 230 can be realized by software, and a program that performs the functions of these units is stored in a floppy (registered trademark) disk or the like. CD-
It is also possible to record it on a storage medium such as a ROM and distribute it.
【0051】なお、上述した特徴抽出処理部210の機
能を果たすプログラムは、請求項6で述べた情報抽出手
順および特徴評価手順を実行するプログラムに相当し、
また、検索制御部220および関連情報表示制御部23
0それぞれの機能を果たすプログラムは、請求項6で述
べた検索手順および関連情報出力手順をそれぞれ実行す
るプログラムに相当している。
The program that performs the function of the feature extraction processing unit 210 corresponds to the program that executes the information extraction procedure and the feature evaluation procedure described in claim 6.
The search control unit 220 and the related information display control unit 23
The programs that perform the respective functions correspond to the programs that respectively execute the search procedure and the related information output procedure described in claim 6.
【0052】ところで、上述したように、本発明は、利
用者が、ディスプレイ装置やスピーカなどの出力装置に
よって現時点で再生中の情報に注目していることを前提
として、表示処理部412や音声処理部413による再
生位置の近傍の情報を、現時点において利用者に提供さ
れている情報として特徴抽出処理に供している。このと
き、再生位置の近傍の情報として、意味的にまとまった
情報を抽出することができれば、特徴評価処理によって
得られた特徴量は、利用者が注目している情報の特徴を
忠実に示す指標となるから、有効な関連情報を効率よく
検索することができる。
As described above, the present invention is based on the premise that the user is paying attention to the information currently being reproduced by the output device such as the display device or the speaker, and the display processing unit 412 and the audio processing The information in the vicinity of the reproduction position by the unit 413 is provided to the feature extraction process as information currently provided to the user. At this time, if information that is semantically collected can be extracted as information near the reproduction position, the feature amount obtained by the feature evaluation process is an index that faithfully indicates the feature of the information that the user is paying attention to. Therefore, effective related information can be searched efficiently.
【0053】例えば、テキスト情報は、少なくとも1つ
の話題に関する情報がそれぞれある程度の広がりを持っ
て結合されており、また、関連する話題を記述した部分
が連続して結合されている場合が多い。したがって、図
3に示すテキスト抽出部221は、再生制御部411か
ら受け取った再生位置情報に基づいて、例えば、ディス
プレイ装置に表示中のページに対応するテキスト情報の
範囲を求め、この範囲のテキスト情報を情報蓄積部40
7に保持されたテキスト情報ファイルから読み出して、
テキスト解析部222の処理に供すればよい。
For example, in text information, information on at least one topic is connected to each other with a certain extent, and portions describing related topics are often connected continuously. Therefore, the text extracting unit 221 shown in FIG. 3 obtains, for example, a range of text information corresponding to the page being displayed on the display device based on the reproduction position information received from the reproduction control unit 411, and Information storage unit 40
7 from the text information file stored in
What is necessary is just to provide for the process of the text analysis part 222.
【0054】このように、テキスト抽出部211が、表
示処理部412からの再生位置情報に応じて動作するこ
とにより、請求項2で述べた第1範囲決定手段121お
よび範囲抽出手段122の機能を実現し、提供情報の表
示位置の空間的な連続性に着目して、再生完了位置の近
傍のテキスト情報を特徴評価対象として抽出し、テキス
ト情報について特徴評価手段112の機能を果たすテキ
スト解析部222の処理に供することができる。
As described above, the text extracting unit 211 operates in accordance with the reproduction position information from the display processing unit 412, so that the functions of the first range determining unit 121 and the range extracting unit 122 described in claim 2 are achieved. Focusing on the spatial continuity of the display position of the provided information, the text analysis unit 222 extracts text information near the reproduction completion position as a feature evaluation target, and performs a function of the feature evaluation unit 112 on the text information. Can be provided.
【0055】このようにして抽出したテキスト情報は、
1つの話題について記述したテキスト情報あるいは関連
性のある複数の話題について記述したテキスト情報の集
合であると期待できるから、これを特徴評価処理対象と
してテキスト解析部222の処理に供することにより、
利用者が現在において注目している情報の特徴を忠実に
示す特徴量を得ることが可能である。
The text information extracted in this way is
Since it can be expected to be a set of text information describing one topic or a plurality of related topics, the text information is subjected to the processing of the text analysis unit 222 as a feature evaluation processing target.
It is possible to obtain a feature amount that faithfully indicates the feature of the information that the user is currently paying attention to.
【0056】この場合に、再生制御部411は、例え
ば、ディスプレイ装置の1画面に表示可能な行数n分の
テキスト情報の再生処理が完了するごとに、再生処理済
みのテキスト情報の末尾を示す再生位置情報をテキスト
抽出部221に送出せばよい。また、これに応じて、テ
キスト抽出部221は、再生位置情報で示されたテキス
ト情報位置からさかのぼって、上述したn行分のテキス
ト情報を情報蓄積部407から読みだして、テキスト解
析部222を介して検索制御部220の処理に供すれば
よい。
In this case, the reproduction control unit 411 indicates the end of the reproduced text information, for example, every time the reproduction processing of the text information of n lines which can be displayed on one screen of the display device is completed. The playback position information may be sent to the text extraction unit 221. In response to this, the text extracting unit 221 reads the above-described n lines of text information from the information storage unit 407, going back from the text information position indicated by the reproduction position information, and sends the text analysis unit 222 What is necessary is just to provide to the process of the search control unit 220 via the.
【0057】このようにして、テキスト情報の再生の進
捗に応じて、随時に、表示中のテキスト情報に関連する
有効な関連情報を検索することができる。一方、テキス
ト情報は、少なくとも1つの「段落」から構成されてお
り、また、「章」や「節」などによって区切られた構造
を備えているものもある。次に、このようなテキスト情
報の構造を利用して、適切な範囲のテキスト情報を特徴
評価処理対象として抽出する方法について説明する。
In this manner, valid related information related to the text information being displayed can be searched at any time according to the progress of the reproduction of the text information. On the other hand, text information is composed of at least one “paragraph”, and some text information has a structure separated by “chapter” or “section”. Next, a description will be given of a method of extracting text information in an appropriate range as a target of feature evaluation processing using such a structure of text information.
【0058】この場合は、図3に示すように、構造情報
検索部241および構造テキスト読出部242を備えて
テキスト抽出部221を構成し、後に追加開示項(1)で
述べる構造情報抽出手段123に相当する構造情報検索
部241により、情報蓄積部407に保持されたテキス
ト情報から構造情報を検索し、この検索結果に応じて、
構造テキスト読出部242が、構造情報で区切られたテ
キスト情報の範囲を上述したテキスト情報から読み出し
て、テキスト解析部222の処理に供する構成となって
いる。
In this case, as shown in FIG. 3, a text extracting section 221 is provided with a structural information retrieving section 241 and a structural text reading section 242, and the structural information extracting means 123 described later in the additional disclosure item (1). Is searched for structural information from the text information held in the information storage unit 407, and according to the search result,
The structure text reading unit 242 reads the range of the text information delimited by the structure information from the above-described text information, and supplies the range to the processing of the text analysis unit 222.
【0059】このとき、構造情報検索部241は、例え
ば、再生制御部411から受け取った再生位置情報で示
された再生完了位置から前後に構造情報を検索し、構造
テキスト読出部242は、この構造情報検索部241に
よって得られた構造情報に基づいて、情報蓄積部407
に保持されたテキスト情報から、上述した再生完了位置
を含み、検索された構造情報で区切られた範囲のテキス
ト情報を読み出して、特徴評価処理対象のテキスト情報
としてテキスト解析部222の処理に供する構成となっ
ている。
At this time, the structure information search unit 241 searches for structure information before and after the reproduction completion position indicated by the reproduction position information received from the reproduction control unit 411, for example. An information storage unit 407 based on the structure information obtained by the information search unit 241
Reads out text information including the above-mentioned reproduction completion position and divided by the searched structural information from the text information held in, and supplies the read text information to the text analysis unit 222 as text information to be subjected to feature evaluation processing. It has become.
【0060】このように、再生位置情報に基づいて構造
情報検索部241および構造テキスト読出部242が動
作することにより、後に追加開示項(1)で述べる構造解
析手段124および範囲抽出手段122の機能を実現
し、段落や章、節などのように所定の構造を持つテキス
ト情報の区分を抽出し、確実に、意味的にまとまったテ
キスト情報を特徴評価処理の対象とすることが可能とな
る。
As described above, the structure information retrieval unit 241 and the structure text reading unit 242 operate based on the reproduction position information, and thereby the functions of the structure analysis unit 124 and the range extraction unit 122 described in the additional disclosure item (1) later. Is realized, and sections of text information having a predetermined structure, such as paragraphs, chapters, and sections, are extracted, and semantically organized text information can be reliably targeted for feature evaluation processing.
【0061】これにより、利用者が現時点で注目してい
ると推定される情報の特徴を忠実に示す特徴量を検索制
御部220の処理に供することができるから、関連情報
の検索精度を向上し、より有効な関連情報を利用者に提
供することができる。一方、映画やニュース映像などの
ように連続的に再生される情報は、それぞれある程度の
長さを持つシーンを再生するための情報が連なった構成
を持っており、更に、連続するシーンは互いに関連して
いる場合が多いと考えられる。
As a result, it is possible to provide a feature amount faithfully indicating a feature of information which is presumed to be of interest to the user at the present time to the processing of the search control unit 220, thereby improving the search accuracy of the related information. Thus, more effective related information can be provided to the user. On the other hand, information that is continuously reproduced, such as a movie or a news video, has a configuration in which information for reproducing scenes each having a certain length is linked, and further, continuous scenes are related to each other. It is thought that there are many cases.
【0062】したがって、連続的に再生される情報につ
いては、再生位置情報で示される現在提供中の情報と時
間的に近傍にある情報を抽出すればよい。図4に、請求
項3の発明を適用した関連情報検索装置の主要部の構成
を示す。図4に示した表示処理部412において、動画
像デコーダ243は、ネットワーク制御部403がスト
リームとして受け取った符号化された動画像情報を再生
制御部411を介して受け取り、これを復号化して得ら
れた画像情報を入出力制御部404を介してディスプレ
イ装置による表示処理に供する構成となっている。
Therefore, as for the information to be continuously reproduced, information that is temporally close to the currently provided information indicated by the reproduction position information may be extracted. FIG. 4 shows a configuration of a main part of a related information search apparatus to which the invention of claim 3 is applied. In the display processing unit 412 shown in FIG. 4, the moving image decoder 243 receives the encoded moving image information received as a stream by the network control unit 403 via the reproduction control unit 411, and decodes the information. The displayed image information is used for display processing by the display device via the input / output control unit 404.
【0063】また、図4に示した動画像評価部213
は、動画像抽出部225の機能を果たすものとしてバッ
ファメモリ244を備え、このバッファメモリ244に
より、上述した動画像デコーダ243によるデコード処
理結果を保持し、動画像解析部226の処理に供する構
成となっている。この場合に、所定の期間T1に再生され
る動画像情報に相当する容量を有するFIFOなどを用
いてバッファメモリ244を構成すれば、このバッファ
メモリ244によって、請求項3で述べた第2範囲決定
手段125および範囲抽出手段122の機能を動画像情
報について実現し、現時点から上述した所定の期間T1を
さかのぼるまでの期間に再生された動画像を、特徴評価
対象の情報として抽出することができる。
The moving image evaluation unit 213 shown in FIG.
Is provided with a buffer memory 244 that fulfills the function of the moving image extracting unit 225, the buffer memory 244 holds the decoding processing result by the moving image decoder 243 described above, and provides the processing result to the moving image analyzing unit 226. Has become. In this case, if the buffer memory 244 is configured using a FIFO having a capacity corresponding to the moving image information reproduced in the predetermined period T1, the second range determination described in claim 3 is performed by the buffer memory 244. The functions of the unit 125 and the range extracting unit 122 are realized for the moving image information, and the moving image reproduced from the present time to the above-mentioned predetermined period T1 can be extracted as the information of the feature evaluation target.
【0064】このようにして抽出された一連の動画像情
報は、上述したように、現時点でディスプレイ装置に表
示され利用者に提供されている動画像情報と同一のシー
ンあるいは関連するシーンを構成している可能性が高
く、この一連の動画像情報によって表示される各フレー
ムの画像は、同一あるいは関連する文字パターンを含ん
でいると期待することができる。
As described above, a series of moving image information extracted in this manner constitutes the same scene or related scene as the moving image information currently displayed on the display device and provided to the user. It is highly probable that the image of each frame displayed by this series of moving image information can be expected to include the same or related character pattern.
【0065】例えば、ニュース映像や映画の字幕など
は、一連のフレームに渡って表示されているから、これ
らのフレームに相当する動画像情報を抽出して動画像解
析部226の処理に供すれば、これらのフレームに共通
する文字パターンの連なりから字幕で述べられた内容を
示すテキスト情報を得ることができる。このテキスト情
報は、現時点で利用者に提供されている動画像に密接に
関連しているから、このテキスト情報をテキスト解析部
222を介して検索制御部220の処理に供することに
より、有効な関連情報を検索することが可能である。
For example, since a news video or a subtitle of a movie is displayed over a series of frames, if moving image information corresponding to these frames is extracted and provided to the processing of the moving image analyzing unit 226, From the sequence of character patterns common to these frames, text information indicating the content described in the caption can be obtained. Since this text information is closely related to the moving image currently provided to the user, the text information is provided to the processing of the search control unit 220 via the text analysis unit 222, so that the effective related information can be obtained. It is possible to search for information.
【0066】一方、ネットワーク制御部403が、符号
化された音声情報(以下、符号化音声情報と称する)を
ストリームとして受け取った場合は、この符号化音声情
報が、再生制御部411を介して音声処理部413に送
出され、この音声処理部413による復号化処理によっ
て得られたデコード結果が、入出力制御部404を介し
てスピーカによる出力処理に供される。
On the other hand, when the network control unit 403 receives encoded audio information (hereinafter referred to as “encoded audio information”) as a stream, the encoded audio information is transmitted to the audio through the reproduction control unit 411. The decoding result sent to the processing unit 413 and obtained by the decoding processing by the audio processing unit 413 is supplied to an output process by a speaker via the input / output control unit 404.
【0067】この場合に、図4に示すように、音声抽出
部227の機能を果たすものとしてバッファメモリ24
6を備えて音声評価部214を構成し、このバッファメ
モリ246により、上述した音声処理部413によるデ
コード結果を受け取る構成とすれば、バッファメモリ2
46の容量分の音声情報を評価対象情報として音声解析
部228の処理に供することができる。
In this case, as shown in FIG. 4, the buffer memory 24 is assumed to perform the function of the sound extracting unit 227.
6, the buffer evaluation unit 214 is provided, and the buffer memory 246 receives the decoding result of the above-described audio processing unit 413.
Forty-six pieces of voice information can be provided to the processing of the voice analysis unit 228 as evaluation target information.
【0068】この場合に、所定の期間T2に再生される音
声情報に相当する容量を有するFIFOなどを用いてバ
ッファメモリ246を構成すれば、このバッファメモリ
246によって、請求項3で述べた第2範囲決定手段1
25および範囲抽出手段122の機能を音声情報につい
て実現し、現時点から上述した所定の期間T2をさかのぼ
るまでの期間に再生された音声情報を特徴評価対象の情
報として抽出することができる。
In this case, if the buffer memory 246 is formed by using a FIFO having a capacity corresponding to the audio information reproduced during the predetermined period T2, the buffer memory 246 allows the second buffer described in claim 3 to be used. Range determining means 1
25 and the functions of the range extracting means 122 are realized for the audio information, and the audio information reproduced during the period from the present time to the above-mentioned predetermined period T2 can be extracted as the information to be evaluated.
【0069】このようにして抽出された一連の音声情報
は、上述したように、現時点でスピーカによって出力さ
れて利用者に提供されている音声と同一のシーンあるい
は関連するシーンを構成している可能性が高く、この一
連の音声情報によって表現される言葉は、意味的にまと
まりのあるテキストを表していると期待することができ
る。
As described above, the series of audio information extracted as described above can constitute the same scene or the related scene as the audio currently output from the speaker and provided to the user. It is highly probable that words expressed by this series of audio information can be expected to represent semantically coherent text.
【0070】例えば、ニュース映像のアナウンスや映画
のナレーションなどは、ある程度の時間に渡って1つの
事柄について述べているから、適切な期間に再生された
音声情報を抽出して音声解析部228の処理に供すれ
ば、アナウンスやナレーションで述べられた内容を示す
テキスト情報を得ることができる。このテキスト情報
は、現時点で利用者に提供されている音声情報の意味を
示すものであるから、このテキスト情報をテキスト解析
部222を介して検索制御部220の処理に供すること
により、有効な関連情報を検索することが可能である。
For example, an announcement of a news video or a narration of a movie describes one matter over a certain period of time, so that audio information reproduced during an appropriate period is extracted and processed by the audio analysis unit 228. , It is possible to obtain text information indicating the contents described in the announcement or narration. Since this text information indicates the meaning of the voice information currently provided to the user, by providing this text information to the processing of the search control unit 220 via the text analysis unit 222, an effective related information can be obtained. It is possible to search for information.
【0071】この場合は、提供情報の再生処理の際に得
られたデコード結果をそのまま利用するので、資源の利
用効率が高く、ネットワークを介してストリームとして
提供を受ける場合にも対応することができる。もちろ
ん、図4に示した構成は、提供情報を一旦ファイルとし
て情報蓄積部407に蓄積する場合にも適用することが
できる。
In this case, since the decoding result obtained at the time of reproducing the provided information is used as it is, the efficiency of resource utilization is high, and it is possible to cope with the case where the information is provided as a stream via a network. . Of course, the configuration shown in FIG. 4 can also be applied to a case where the provided information is temporarily stored in the information storage unit 407 as a file.
【0072】その一方、提供情報をファイルとして情報
蓄積部407に蓄積している場合は、連続的に再生され
る形態の提供情報についての時間的な近傍として、現時
点における再生位置を中心として、過去と未来とにまた
がる範囲を採用することも可能である。図5に、請求項
3の発明を適用した関連情報検索装置の別構成例を示
す。
On the other hand, when the provided information is stored as a file in the information storage unit 407, the provided information in the form of continuous playback is temporally near the playback position at the present time. It is also possible to adopt a range that spans the future. FIG. 5 shows another configuration example of the related information search device to which the invention of claim 3 is applied.
【0073】図5に示した動画像評価部213は、上述
した動画像デコーダ243と同等の動画像デコーダ24
7とともに動画像読出部248を備えて構成されてお
り、動画像読出部248が、再生制御部411から受け
取った再生位置情報に基づいて、情報蓄積部407から
後述する所定の範囲に対応する符号化動画像情報を読み
出して、動画像デコーダ247を介して動画像解析部2
26の処理に供する構成となっている。
The moving image evaluation unit 213 shown in FIG.
7 and a moving image reading unit 248. The moving image reading unit 248, based on the reproduction position information received from the reproduction control unit 411, outputs a code corresponding to a predetermined range described later from the information storage unit 407. Read out the converted moving image information, and read the moving image analyzing unit 2 via the moving image decoder 247.
26.
【0074】この動画像読出部248は、例えば、再生
位置情報で示された再生完了位置を中心として、過去n
秒間に再生された動画像情報に対応する符号化情報と次
のm秒間に再生される予定の動画像情報に対応する符号
化情報とを読み出して、動画像デコーダ247の処理に
供すればよい。この場合は、再生位置情報に応じて、動
画像読出部248および動画像デコーダ247が動作す
ることにより、請求項3で述べた第2範囲決定手段12
5および範囲抽出手段122の機能を動画像情報につい
て実現し、再生完了位置を含み、過去と未来とにまたが
る範囲の動画像情報を評価対象情報として抽出すること
ができる。
The moving image reading unit 248 stores, for example, the past n times around the reproduction completion position indicated by the reproduction position information.
The coded information corresponding to the moving picture information reproduced in the second and the coded information corresponding to the moving picture information to be reproduced in the next m seconds are read out and provided to the processing of the moving picture decoder 247. . In this case, the moving image reading unit 248 and the moving image decoder 247 operate according to the reproduction position information, so that the second range determining unit 12 described in claim 3 is operated.
5 and the function of the range extracting means 122 are realized for the moving image information, and the moving image information including the reproduction completion position and extending over the past and the future can be extracted as the evaluation target information.
【0075】また、図5に示した音声評価部214は、
音声読出部249と音声デコーダ250とを備えて構成
されており、音声読出部249は、再生制御部411か
ら受け取った再生位置情報に基づいて、情報蓄積部40
7から後述する所定の範囲に対応する音声情報を読み出
して、音声デコーダ250の処理に供する構成となって
いる。
Further, the voice evaluation unit 214 shown in FIG.
The audio reading unit 249 includes an audio reading unit 249 and an audio decoder 250. The audio reading unit 249 is configured to store information based on the reproduction position information received from the reproduction control unit 411.
7, audio information corresponding to a predetermined range described later is read and provided to the audio decoder 250 for processing.
【0076】この音声読出部249は、例えば、再生位
置情報で示された再生完了位置を中心として、過去n秒
間に再生された音声に対応する符号化音声情報と次のm
秒間に再生される予定の音声に対応する符号化音声情報
とを読み出して、音声デコーダ250の処理に供すれば
よい。また、図5に示した音声デコーダ250は、図4
に示した音声処理部413と同様にして、音声読出部2
49から受け取った符号化音声情報を復号化して、得ら
れた音声情報を音声解析部228の処理に供する構成と
なっている。
The audio reading section 249 stores, for example, the encoded audio information corresponding to the audio reproduced for the past n seconds and the next m with the reproduction completion position indicated by the reproduction position information as the center.
What is necessary is just to read out the coded audio information corresponding to the audio to be reproduced in the second, and to provide it to the processing of the audio decoder 250. Further, the audio decoder 250 shown in FIG.
In the same manner as the audio processing unit 413 shown in FIG.
The coded audio information received from 49 is decoded, and the obtained audio information is provided to the processing of the audio analysis unit 228.
【0077】この場合は、再生位置情報に応じて、音声
読出部249および音声デコーダ250が動作すること
により、請求項3で述べた第2範囲決定手段125およ
び範囲抽出手段122の機能を音声情報について実現
し、再生完了位置を含み、過去と未来とにまたがる範囲
の音声情報を評価対象情報として抽出することができ
る。上述したようにして、再生完了位置の前後の動画像
情報および音声情報を評価対象情報とした場合は、現時
点で利用者に提供されている動画像あるいは音声の特徴
をより忠実に表す特徴量を求めることが可能である。
In this case, the function of the second range determining means 125 and the range extracting means 122 described in claim 3 is performed by operating the audio reading section 249 and the audio decoder 250 in accordance with the reproduction position information. And audio information in a range including the reproduction completion position and extending between the past and the future can be extracted as the evaluation target information. As described above, when the moving image information and the sound information before and after the reproduction completion position are set as the evaluation target information, the feature amount that more faithfully represents the feature of the moving image or the sound currently being provided to the user is determined. It is possible to ask.
【0078】ところで、提供情報についての特徴評価処
理や得られた特徴量に基づく関連情報の検索処理には、
それぞれ相当の処理時間が必要であり、これらの処理に
要する時間においても提供情報の再生処理は続行されて
いる。このため、提供情報の再生と関連情報の表示との
間に時間的なずれが発生し、検索結果として得られた関
連情報が関連情報表示制御部230によって表示された
ときには、検索処理のよりどころとなった情報とは全く
異なる情報に利用者が注目している可能性がある。
By the way, the feature evaluation process for the provided information and the related information search process based on the obtained feature amount include:
A considerable processing time is required for each, and the reproduction processing of the provided information is continued even during the time required for these processings. For this reason, a time lag occurs between the reproduction of the provided information and the display of the related information, and when the related information obtained as the search result is displayed by the related information display control unit 230, the search processing is performed. There is a possibility that the user is paying attention to information completely different from the information that has become.
【0079】次に、上述したような時間的なずれを考慮
して、関連情報を適切なタイミングで利用者に提供する
方法について説明する。図6に、請求項3の発明を適用
した関連情報検索装置の主要部の別構成を示す。図6に
示した動画像評価部213において、動画像再生位置修
正部251は、再生制御部411から受け取った再生位
置情報に基づいて、関連情報の提供タイミングにおける
予想再生完了位置を推定し、この予想再生完了位置を示
す再生位置情報を動画像読出部248の処理に供する構
成となっている。
Next, a method of providing relevant information to a user at an appropriate timing in consideration of the above-described time lag will be described. FIG. 6 shows another configuration of the main part of the related information search device to which the invention of claim 3 is applied. In the moving image evaluation unit 213 shown in FIG. 6, the moving image reproduction position correction unit 251 estimates an expected reproduction completion position at the provision timing of the related information based on the reproduction position information received from the reproduction control unit 411. The playback position information indicating the expected playback completion position is provided to the processing of the moving image reading unit 248.
【0080】この動画像再生位置修正部251は、例え
ば、動画像情報の特徴評価処理に要する時間の平均値と
関連情報の検索処理に要する時間の平均値とに基づいて
平均処理時間T2を求めておき、この平均処理時間T2の間
に、動画像デコーダ243によって再生処理される動画
像情報の量を考慮して、予想再生完了位置を求めればよ
い。
The moving image reproduction position correcting section 251 calculates the average processing time T2 based on, for example, the average value of the time required for the characteristic evaluation processing of the moving image information and the average value of the time required for the search processing of the related information. In advance, during the average processing time T2, an expected reproduction completion position may be obtained in consideration of the amount of moving image information reproduced by the moving image decoder 243.
【0081】なお、動画像情報の特徴評価処理に要する
時間の平均値および関連情報の検索処理に要する時間の
平均値は、予め、実験などによって求めておけばよい。
このように、再生制御部411からの再生位置情報に応
じて、動画像再生位置修正部251および動画像読出部
248が動作することにより、後に追加開示項(2)で述
べる第2範囲決定手段125および範囲抽出手段122
の機能を実現し、予想再生位置の時間的な近傍にあたる
動画像情報を抽出して、動画像解析部226の処理に供
することができる。
The average value of the time required for the characteristic evaluation processing of the moving image information and the average value of the time required for the search processing of the related information may be obtained in advance by experiments or the like.
As described above, the moving image reproduction position correcting unit 251 and the moving image reading unit 248 operate according to the reproduction position information from the reproduction control unit 411, so that the second range determination unit described later in the additional disclosure item (2). 125 and range extracting means 122
Is realized, and the moving image information corresponding to the temporal vicinity of the expected reproduction position can be extracted and provided to the processing of the moving image analysis unit 226.
【0082】また、図6に示した音声評価部214にお
いて、音声再生位置修正部252は、再生制御部411
から受け取った再生位置情報に基づいて、関連情報の提
供タイミングにおける予想再生完了位置を推定し、この
予想再生完了位置を示す再生位置情報を音声読出部24
9の処理に供する構成となっている。この音声再生位置
修正部252は、例えば、音声情報の特徴評価処理に要
する時間の平均値と関連情報の検索処理に要する時間の
平均値とに基づいて平均処理時間T3を求めておき、この
平均処理時間T3の間に、音声処理部413によって再生
処理される音声情報の量を考慮して、予想再生完了位置
を求めればよい。
In the sound evaluation section 214 shown in FIG. 6, the sound reproduction position correction section 252 includes a reproduction control section 411.
Of the predicted reproduction completion position at the provision timing of the related information, based on the reproduction position information received from the
9 is provided. The audio reproduction position correcting unit 252 obtains an average processing time T3 based on, for example, an average value of a time required for a characteristic evaluation process of audio information and an average value of a time required for a search process of related information. During the processing time T3, the expected reproduction completion position may be obtained in consideration of the amount of audio information to be reproduced by the audio processing unit 413.
【0083】なお、音声情報の特徴評価処理に要する時
間の平均値および関連情報の検索処理に要する時間の平
均値は、予め、実験などによって求めておけばよい。こ
のように、再生制御部411からの再生位置情報に応じ
て、音声再生位置修正部252および音声読出部249
が動作することにより、後に追加開示項(2)で述べる第
2範囲決定手段125および範囲抽出手段122の機能
を実現し、予想再生位置の時間的な近傍にあたる音声情
報を抽出して、音声解析部228の処理に供することが
できる。
The average value of the time required for the process of evaluating the characteristics of audio information and the average value of the time required for the process of searching for related information may be determined in advance by experiments or the like. Thus, according to the reproduction position information from the reproduction control unit 411, the audio reproduction position correction unit 252 and the audio read unit 249
Operates to realize the functions of the second range determining means 125 and the range extracting means 122 described later in the additional disclosure item (2), and extract audio information corresponding to a temporal vicinity of the predicted reproduction position, and perform audio analysis. The processing of the unit 228 can be provided.
【0084】この場合は、予想再生完了位置を含む所定
の範囲の動画像符号化情報および音声符号化情報が特徴
評価対象の情報として、それぞれ動画像デコーダ247
および音声デコーダ250を介して動画像解析部226
および音声解析部228の処理に供される。このように
して抽出された動画像情報や音声情報について、特徴評
価処理および関連情報の検索処理を完了したときには、
表示処理部412および音声処理部413により、それ
ぞれの予想再生完了位置に対応する動画像および音声が
再生されていると期待できる。
In this case, the moving picture decoder 247 includes the moving picture coded information and the voice coded information in a predetermined range including the expected reproduction completion position as the information to be evaluated.
And a video analysis unit 226 via the audio decoder 250
And the processing of the voice analysis unit 228. When the feature evaluation process and the related information search process are completed for the moving image information and audio information thus extracted,
It can be expected that the display processing unit 412 and the audio processing unit 413 are reproducing the moving image and the audio corresponding to the respective predicted reproduction completion positions.
【0085】したがって、得られた関連情報を関連情報
表示制御部230(図2)の処理に供すれば、その時点
で再生されている動画像および音声に同期して、関連情
報を利用者にタイミングよく提供することができる。と
ころで、関連情報検索装置に備えられた検索制御部22
0(図2)は、ネットワークを介して多種多様な検索サ
ーバにアクセス可能である。
Therefore, if the obtained related information is subjected to the processing of the related information display control unit 230 (FIG. 2), the related information is provided to the user in synchronization with the moving image and the sound being reproduced at that time. It can be provided with good timing. By the way, the search control unit 22 provided in the related information search device
0 (FIG. 2) can access a wide variety of search servers via the network.
【0086】しかし、全ての検索サーバから関連情報を
検索するのは現実的ではないし、また、任意の検索サー
バから有効な関連情報が確実に検索できるとは限らな
い。その一方、利用者が特定の検索サーバを好んで利用
している場合は、この特定の検索サーバから得られた関
連情報が利用者が有効と考える関連情報であり、情報提
供者側が提供対象の情報に関連する情報が登録されてい
る特定の検索サーバに関する情報を持っている場合に
は、この特定の検索サーバから得られた検索情報が情報
提供者が有効と考える関連情報である。
However, it is not realistic to search for related information from all search servers, and it is not always possible to reliably search for valid related information from any search server. On the other hand, if the user prefers a specific search server, the related information obtained from the specific search server is the relevant information that the user considers to be valid, and the information provider side determines the information to be provided. If the information related to the information has information on a specific search server in which the information is registered, the search information obtained from the specific search server is the relevant information that the information provider considers effective.
【0087】次に、このような利用者の好みや情報提供
者側の知識を利用して、有効な関連情報を検索し提供す
る方法について説明する。ここで、提供対象の情報が、
HTML(Hypertext Markup Language)やXML(Ext
ensible Markup Language)などのタグ付き文書によっ
て記述されている場合は、情報提供者側が推奨する検索
サーバを示すヒント情報をタグ情報として埋め込むこと
ができる。
Next, a description will be given of a method of searching for and providing valid related information using such user's preference and knowledge of the information provider. Here, the information to be provided is
HTML (Hypertext Markup Language) or XML (Ext
When the information is described by a tagged document such as an ensible markup language, hint information indicating a search server recommended by the information provider can be embedded as tag information.
【0088】また、MPEG−2のフォーマットに含ま
れている副情報として、情報提供者側が推奨する検索サ
ーバを示すヒント情報を埋め込んでおけば、動画像や音
声と同期して、上述したヒント情報を利用者側の情報提
供端末装置に渡すことができる。図7に、請求項4およ
び請求項5の発明を適用した関連情報検索装置の実施形
態を示す。
If hint information indicating a search server recommended by the information provider is embedded as sub-information included in the MPEG-2 format, the hint information described above can be synchronized with moving images and audio. Can be passed to the information providing terminal device on the user side. FIG. 7 shows an embodiment of a related information search apparatus to which the inventions of claims 4 and 5 are applied.
【0089】図7に示すテキスト評価部211は、図3
に示した構造情報検索部241および構造テキスト読出
部242に加えて、請求項4で述べたヒント情報抽出手
段126に相当するタグ情報解析部253を備え、この
タグ情報解析部253が、構造テキスト読出部242に
よって情報蓄積部407(図6)から読み出されたテキ
スト情報に含まれているタグ情報からヒント情報を抽出
し、検索制御部220の処理に供する構成となってい
る。
The text evaluation unit 211 shown in FIG.
In addition to the structure information retrieval unit 241 and the structure text reading unit 242 shown in FIG. 5, a tag information analysis unit 253 corresponding to the hint information extraction unit 126 described in claim 4 is provided. The hint information is extracted from the tag information included in the text information read from the information storage unit 407 (FIG. 6) by the reading unit 242, and is provided to the processing of the search control unit 220.
【0090】また、動画像評価部213は、図6に示し
た動画像再生位置修正部251、動画像読出部248お
よび動画像デコーダ247に加えて、請求項4で述べた
ヒント情報抽出手段126に相当する副情報解析部25
4を備え、この副情報解析部254が、動画像デコーダ
247によって復元された副情報を受け取って、この副
情報からヒント情報を抽出し、検索制御部220の処理
に供する構成となっている。
The moving image evaluation unit 213 includes the hint information extracting unit 126 described in claim 4 in addition to the moving image reproduction position correcting unit 251, the moving image reading unit 248, and the moving image decoder 247 shown in FIG. Information analysis unit 25 corresponding to
The sub-information analysis unit 254 receives the sub-information restored by the video decoder 247, extracts the hint information from the sub-information, and supplies the hint information to the processing of the search control unit 220.
【0091】一方、図7に示した検索制御部220にお
いて、サーバ選択部255は、上述したタグ情報解析部
253あるいは副情報解析部254から受け取ったヒン
ト情報と、請求項5で述べた指定情報保持手段115に
相当する利用者情報保持部256に保持された指定情報
とに基づいて、関連情報の検索を実行する検索サーバを
選択し、請求項4で述べた検索実行手段132に相当す
る検索実行部257に指示する構成となっている。
On the other hand, in the search control section 220 shown in FIG. 7, the server selecting section 255 includes the hint information received from the tag information analyzing section 253 or the sub information analyzing section 254 and the designation information described in claim 5. A search server that executes a search for related information is selected based on the designated information held in the user information holding unit 256 corresponding to the holding unit 115, and a search corresponding to the search execution unit 132 described in claim 4 is performed. It is configured to instruct the execution unit 257.
【0092】このように、サーバ選択部255が、ヒン
ト情報と指定情報とに基づいて検索サーバを選択する構
成とすることにより、請求項4で述べた第1検索指示手
段131および請求項5で述べた第2検索指示手段13
3の機能を実現し、ヒント情報で指定された検索サーバ
と指定情報で示された検索サーバとから関連情報を検索
することができる。
As described above, the server selection unit 255 selects the search server based on the hint information and the designation information. Second search instruction means 13 described
The third function is realized, and related information can be searched from the search server specified by the hint information and the search server specified by the specified information.
【0093】この場合は、利用者が、利用者情報保持部
256に好みの検索サーバを示す指定情報を設定してお
けば、上述したサーバ選択部255により、ヒント情報
で指定された検索サーバとともに、利用者が指定した検
索サーバを選択し、検索実行部257に、これらの検索
サーバに対する検索処理を指示することができる。この
ようにして、利用者が好んで利用する検索サーバや情報
提供者が推奨する検索サーバから優先的に関連情報の検
索を行うことにより、利用者が有効と考える関連情報や
情報提供者が有効と考える関連情報を確実に検索するこ
とが可能である。
In this case, if the user sets designation information indicating a favorite search server in the user information holding unit 256, the server selection unit 255 described above together with the search server designated by the hint information. The user can select a search server designated by the user and instruct the search execution unit 257 to perform a search process on these search servers. In this way, by preferentially searching for the related information from the search server that the user prefers to use or the search server recommended by the information provider, the related information or the information provider that the user considers to be effective is effective. It is possible to reliably search for related information considered to be.
【0094】また、図7に示した検索制御部220にお
いて、重み設定部258は、後に追加開示項(3)で述べ
る重み設定手段134に相当するものであり、上述した
ヒント情報および指定情報に基づいて、検索実行部25
7が検索処理を実行した検索サーバそれぞれについて、
その重要度を示す適切な重みを設定し、重要度算出手段
135に相当する重要度調整部259の処理に供する構
成となっている。
In the search control unit 220 shown in FIG. 7, the weight setting unit 258 corresponds to the weight setting unit 134 described later in the additional disclosure item (3). Based on the search execution unit 25
7 for each search server that performed the search process,
An appropriate weight indicating the importance is set and provided to the processing of the importance adjustment unit 259 corresponding to the importance calculation means 135.
【0095】この重要度調整部259は、後に追加開示
項(3)で述べる重要度算出手段135に相当するもので
あり、検索実行部257による検索処理で得られた検索
結果に付加された類似度と上述した重みとに基づいて、
得られた関連情報それぞれについての重要度を求め、こ
の重要度を関連情報とともに関連情報表示制御部230
の処理に供する構成となっている。
The importance adjusting section 259 corresponds to the importance calculating means 135 described in the additional disclosure item (3), and the similarity added to the search result obtained by the search processing by the search execution section 257. Based on the degrees and the weights described above,
The degree of importance of each of the obtained related information is obtained, and the importance is displayed together with the related information on the related information display control unit 230.
Is provided.
【0096】このように、重み設定部258で与えられ
た重みを用いて、重要度調整部259によって各検索サ
ーバから得られた関連情報の重要度を求めることによ
り、推奨検索サーバや利用者の好みの検索サーバから得
られた関連情報の重要度を調整することができる。
As described above, by using the weight given by the weight setting unit 258 to obtain the importance of the related information obtained from each search server by the importance adjustment unit 259, the recommended search server and the user The importance of the related information obtained from the favorite search server can be adjusted.
【0097】また、図7に示した関連情報表示制御部2
30において、ソート処理部261は、検索制御部22
0から受け取った関連情報を上述した重要度に基づいて
並べ替え、表示データ作成部262は、このソート処理
部261による処理結果に従った順序で検索結果の関連
情報を並べて表示するための表示データを作成し、表示
処理部412の処理に供する構成となっている。
The related information display control unit 2 shown in FIG.
At 30, the sort processing unit 261
The display data creation unit 262 sorts the relevant information received from 0 on the basis of the importance described above, and displays the display data for arranging and displaying the relevant information of the search result in the order according to the processing result by the sort processing unit 261. Is created and provided to the processing of the display processing unit 412.
【0098】ここで、各検索サーバから得られた関連情
報に付加された類似度は、それぞれの検索サーバにおい
て得られた関連情報の重要度を示す指標であり、重み設
定部258によって各検索サーバに与えられた重みは、
各検索サーバの重要度を示している。したがって、上述
した重要度調整部259によって得られた重要度は、各
検索サーバで得られた検索結果の重要度と検索サーバそ
れぞれの重要度との双方を反映した指標であるから、こ
の重要度に従って、各検索サーバから得られた関連情報
を表示することにより、関連情報の有効さを適切に示す
指標を利用者に提示することができる。
Here, the similarity added to the related information obtained from each search server is an index indicating the importance of the related information obtained in each search server. Is given by
It shows the importance of each search server. Therefore, the importance obtained by the importance adjustment unit 259 described above is an index reflecting both the importance of the search result obtained by each search server and the importance of each search server. Accordingly, by displaying the related information obtained from each search server, an index appropriately indicating the validity of the related information can be presented to the user.
【0099】[0099]
【発明の効果】以上に説明したように、請求項1および
請求項6の発明によれば、提供情報についての再生処理
の進捗に応じて随時に更新される再生位置情報に基づい
て、再生完了位置の近傍の提供情報を評価対象情報とし
て自動的に抽出し、この評価対象情報の特徴に基づいて
関連情報を検索することができるので、利用者が受動的
に提供情報を受け取っている場合にも、各時点で再生さ
れている提供情報の特徴に応じた関連情報を動的に検索
して提供することができる。
As described above, according to the first and sixth aspects of the present invention, the reproduction is completed based on the reproduction position information which is updated as needed in accordance with the progress of the reproduction processing of the provided information. The information provided near the position is automatically extracted as the information to be evaluated, and the related information can be searched based on the characteristics of the information to be evaluated. Also, it is possible to dynamically search and provide related information according to the characteristics of the provided information reproduced at each time.
【0100】請求項2の発明は、再生される情報の特徴
が空間的な連続性を持っていることを利用して、再生完
了位置の空間的な近傍を評価対象情報として抽出するこ
とにより、利用者に現時点において提供されている情報
の特徴を忠実に反映した関連情報を検索し、利用者に提
供することが可能である。
According to a second aspect of the present invention, by utilizing the fact that the characteristics of information to be reproduced have spatial continuity, a spatial neighborhood of a reproduction completion position is extracted as information to be evaluated. It is possible to search for related information that faithfully reflects the characteristics of the information currently provided to the user, and provide the related information to the user.
【0101】請求項3の発明は、再生される情報の特徴
が時間的な連続性を持っていることを利用して、再生完
了位置の時間的な近傍を評価対象情報として抽出するこ
とにより、利用者に現時点において提供されている情報
の特徴を忠実に反映した関連情報を検索し、利用者に提
供することが可能である。また、請求項4および請求項
5の発明は、情報提供者側から与えられたヒント情報お
よび利用者によって設定された指定情報に応じて、関連
情報の検索処理を行う検索サーバを選択することができ
るので、情報提供者が持っている提供情報に関する知識
や利用者の好みを反映した関連情報を得ることができ
る。
According to a third aspect of the present invention, by utilizing the fact that the characteristics of information to be reproduced have temporal continuity, a temporal neighborhood of a reproduction completion position is extracted as information to be evaluated. It is possible to search for related information that faithfully reflects the characteristics of the information currently provided to the user, and provide the related information to the user. According to the fourth and fifth aspects of the present invention, it is possible to select a search server that performs search processing of related information in accordance with hint information given by an information provider and designated information set by a user. Therefore, it is possible to obtain related information that reflects the knowledge of the information provider provided by the information provider and the preference of the user.
【0102】以上の説明に関して、更に、以下の項を開
示する。追加開示項(1)請求項2に記載の関連情報検索
装置において、第1範囲決定手段121は、提供情報に
付加された意味的なまとまりを持つ範囲を示す構造情報
を抽出する構造情報抽出手段123と、構造情報抽出手
段123によって得られた構造情報に基づいて、再生位
置情報で示される再生位置を含む意味的なまとまりを持
つ範囲を求め、範囲抽出手段122の処理に供する構造
解析手段124を備えた構成であることを特徴とする関
連情報検索装置。
With respect to the above description, the following items are further disclosed. 3. The related information search device according to claim 2, wherein the first range determination unit 121 extracts structure information indicating a range having a semantic unit added to the provided information. Based on the structure information obtained by the structure information extracting means 123 and the structure information extracting means 123, a range having a meaningful unit including the reproduction position indicated by the reproduction position information is obtained, and the structure analyzing means 124 is provided to the processing of the range extracting means 122 A related information search device characterized by having a configuration including:
【0103】この関連情報検索装置は、構造情報抽出手
段123と構造解析手段124との動作により、提供情
報に含まれる構造情報に注目して、意味的にまとまった
範囲の提供情報を特徴評価対象情報として特徴評価手段
112の処理に供することができるから、利用者に現在
提供されつつある情報の特徴を正確に評価することが可
能である。
The related information search apparatus operates the structure information extracting means 123 and the structure analyzing means 124 to pay attention to the structure information included in the provided information, and to provide the provided information in a semantically integrated range as a feature evaluation target. Since the information can be provided to the processing of the characteristic evaluation unit 112 as information, it is possible to accurately evaluate the characteristics of the information currently being provided to the user.
【0104】追加開示項(2)請求項3に記載の関連情報
検索装置において、第2範囲決定手段125は、受け取
った再生位置情報に基づいて、現時点から所定の時間が
経過した後に再生される所定の範囲を評価対象情報の範
囲として範囲抽出手段122の処理に供する構成である
ことを特徴とする関連情報検索装置。
[0104] In the related information search device according to the third aspect of the present invention, the second range determining means 125 reproduces the information after a predetermined time has elapsed from the present time based on the received reproduction position information. A related information search apparatus characterized in that a predetermined range is provided as a range of the evaluation target information to be processed by the range extracting means 122.
【0105】この関連情報検索装置は、第2範囲決定手
段125により、現時点から所定の時間が経過した後の
未来に再生される予定の提供情報の範囲を特徴評価対象
情報の範囲として指定して、この範囲の提供情報が再生
されるのに先立ってその特徴評価処理および関連情報の
検索処理を行っておくことができる。したがって、上述
した所定の時間を適切に設定することにより、特徴評価
対象情報として抽出された提供情報が情報再生手段10
1によって再生されるタイミングに同期して、この提供
情報に対応する関連情報を利用者に提示することが可能
である。
In the related information search device, the second range determining means 125 designates the range of the provided information to be reproduced in the future after a predetermined time has elapsed from the present time as the range of the feature evaluation target information. Before the provided information in this range is reproduced, the characteristic evaluation process and the related information search process can be performed. Therefore, by appropriately setting the above-mentioned predetermined time, the provided information extracted as the information for feature evaluation can be provided to the information reproducing unit 10.
1, the related information corresponding to the provided information can be presented to the user in synchronization with the timing of the reproduction by the user.
【0106】追加開示項(3)請求項4または請求項5に
記載の関連情報検索装置において、検索手段113は、
検索指示で指定された検索サーバそれぞれについて、適
切な重みを設定する重み設定手段134と、検索実行手
段132によって得られた各検索サーバからの検索結果
に付加された類似度情報と、各検索サーバについて設定
された重みとに基づいて、検索結果の重要度を算出し、
検索結果とともに関連情報出力手段114の処理に供す
る重要度算出手段135とを備えた構成であり、関連情
報出力手段114は、各検索結果に対応する重要度に応
じて、出力する検索結果の取捨選択および出力順序を決
定する構成であることを特徴とする関連情報検索装置。
(3) In the related information search device according to claim 4 or claim 5, the search means 113 comprises:
Weight setting means 134 for setting an appropriate weight for each search server specified by the search instruction; similarity information added to the search result from each search server obtained by the search execution means 132; Calculates the importance of search results based on the weight set for,
The related information output unit 114 is configured to discard the search results to be output in accordance with the importance corresponding to each search result. A related information search device characterized in that the selection and output order are determined.
【0107】この関連情報検索装置は、重み設定手段1
34と重要度算出手段135との動作により、各検索サ
ーバについて設定された重みに応じて、得られた関連情
報それぞれの重要度を調整することができ、この調整さ
れた重要度に基づいて、関連情報出力手段114が動作
することにより、検索結果として得られた関連情報とと
もに、利用者が有効な関連情報を取捨選択するための指
標を提供することができるので、特に、有効な関連情報
を利用者に提供することができる。
The related information search device is provided with a weight setting means 1
34 and the operation of the importance calculation means 135, the importance of each piece of related information obtained can be adjusted according to the weight set for each search server, and based on the adjusted importance, By operating the related information output unit 114, it is possible to provide an index for the user to select valid related information together with the related information obtained as a search result. Can be provided to users.
【図面の簡単な説明】[Brief description of the drawings]
【図1】本発明の関連情報検索装置の原理ブロック図で
ある。
FIG. 1 is a principle block diagram of a related information search device of the present invention.
【図2】請求項1の関連情報検索装置を適用した情報提
供端末装置の構成を示す図である。
FIG. 2 is a diagram showing a configuration of an information providing terminal device to which the related information search device of claim 1 is applied.
【図3】特徴抽出処理部の詳細構成を示す図である。FIG. 3 is a diagram illustrating a detailed configuration of a feature extraction processing unit.
【図4】請求項3の発明を適用した関連情報検索装置の
主要部の構成を示す図である。
FIG. 4 is a diagram showing a configuration of a main part of a related information search device to which the invention of claim 3 is applied.
【図5】請求項3の発明を適用した関連情報検索装置の
主要部の別構成例を示す図である。
FIG. 5 is a diagram showing another configuration example of a main part of a related information search device to which the invention of claim 3 is applied.
【図6】請求項3の発明を適用した関連情報検索装置の
主要部の別構成例を示す図である。
FIG. 6 is a diagram showing another configuration example of a main part of a related information search device to which the invention of claim 3 is applied.
【図7】請求項4および請求項5の発明を適用した関連
情報検索装置の主要部の構成を示す図である。
FIG. 7 is a diagram showing a configuration of a main part of a related information search device to which the inventions of claims 4 and 5 are applied.
【図8】ハイパーテキストシステムを利用した従来の情
報提供端末装置の構成例を示す図である。
FIG. 8 is a diagram illustrating a configuration example of a conventional information providing terminal device using a hypertext system.
【図9】従来のデジタル映像配信サービス用情報提供端
末装置の構成例を示す図である。
FIG. 9 is a diagram illustrating a configuration example of a conventional digital video distribution service information providing terminal device.
【図10】特開平9−91307号公報記載の技法を適
用した情報提供端末装置の構成例を示す図である。
FIG. 10 is a diagram showing a configuration example of an information providing terminal device to which the technique described in Japanese Patent Application Laid-Open No. 9-91307 is applied.
【符号の説明】[Explanation of symbols]
101 情報再生手段 111 情報抽出手段 112 特徴評価手段 113 検索手段 114 関連情報出力手段 115 指定情報保持手段 121 第1範囲決定手段 122 範囲抽出手段 123 構造情報抽出手段 124 構造解析手段 125 第2範囲決定手段 126 ヒント情報抽出手段 131 第1検索指示手段 132 検索実行手段 133 第2検索指示手段 134 重み設定手段 135 重要度算出手段 202 ローカル検索サーバ 203 文書検索サーバ 204 画像検索サーバ 210 特徴抽出処理部 211 テキスト評価部 212 静止画像評価部 213 動画像評価部 214 音声評価部 216 転送処理部 220 検索制御部 221 テキスト抽出部 222 テキスト解析部 223 静止画像抽出部 224 静止画像解析部 225 動画像抽出部 226 動画像解析部 227 音声抽出部 228 音声解析部 230 関連情報表示制御部 241 構造情報検索部 242 構造テキスト読出部 243、247 動画像デコーダ 244、246 バッファメモリ 248 動画像読出部 249 音声読出部 250 音声デコーダ 251 動画像再生位置修正部 252 音声再生位置修正部 253 タグ情報解析部 254 副情報解析部 255 サーバ選択部 256 利用者情報保持部 257 検索実行部 258 重み設定部 259 重要度調整部 401 情報提供処理部 402 情報提供者側サーバ 403 ネットワーク制御部 404 入出力制御部 405 ディスプレイ装置(CRT) 406 スピーカ 407 情報蓄積部 408 キーボード 409 マウス 411 再生制御部 412 表示処理部 413 音声処理部 414 リンク解析部 415 入力受付部 416 スクリプト解析部 421 情報要素抽出部 422 ローカル検索サーバ DESCRIPTION OF SYMBOLS 101 Information reproduction means 111 Information extraction means 112 Feature evaluation means 113 Search means 114 Related information output means 115 Designated information holding means 121 First range determination means 122 Range extraction means 123 Structural information extraction means 124 Structural analysis means 125 Second range determination means 126 hint information extraction means 131 first search instruction means 132 search execution means 133 second search instruction means 134 weight setting means 135 importance calculation means 202 local search server 203 document search server 204 image search server 210 feature extraction processing unit 211 text evaluation Unit 212 still image evaluation unit 213 moving image evaluation unit 214 audio evaluation unit 216 transfer processing unit 220 search control unit 221 text extraction unit 222 text analysis unit 223 still image extraction unit 224 still image analysis unit 225 moving image extraction 226 Video analysis unit 227 Voice extraction unit 228 Voice analysis unit 230 Related information display control unit 241 Structure information search unit 242 Structure text read unit 243, 247 Video decoder 244, 246 Buffer memory 248 Video read unit 249 Voice read unit 250 Audio decoder 251 Moving image reproduction position correction unit 252 Audio reproduction position correction unit 253 Tag information analysis unit 254 Sub-information analysis unit 255 Server selection unit 256 User information holding unit 257 Search execution unit 258 Weight setting unit 259 Importance adjustment unit 401 Information Provision processing unit 402 Information provider server 403 Network control unit 404 Input / output control unit 405 Display device (CRT) 406 Speaker 407 Information storage unit 408 Keyboard 409 Mouse 411 Reproduction control unit 412 Display processing unit 413 Audio Processing section 414 link analysis unit 415 input receiving unit 416 the script analysis unit 421 information element extractor 422 local search server
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G06F 15/419 320 Fターム(参考) 5B075 KK07 KK34 KK40 ND02 ND16 NK06 NK08 NK37 NK39 PP10 PP28 PQ02 PQ32 PQ42 PR08 QM05 UU40 ──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. 7 Identification symbol FI Theme coat ゛ (Reference) G06F 15/419 320 F term (Reference) 5B075 KK07 KK34 KK40 ND02 ND16 NK06 NK08 NK37 NK39 PP10 PP28 PQ02 PQ32 PQ42 PR08 QM05 UU40

Claims (6)

    【特許請求の範囲】[Claims]
  1. 【請求項1】 情報提供者側によって提供される提供情
    報を順次に再生する情報再生手段を有する情報提供端末
    装置に備えられ、前記提供情報に関連する関連情報を検
    索する関連情報検索装置において、 前記情報再生手段から前記提供情報についての再生処理
    が完了している位置を示す再生位置情報を受け取り、こ
    の再生位置情報に基づいて、前記提供情報の少なくとも
    一部を評価対象情報として抽出する情報抽出手段と、 前記情報抽出手段から評価対象情報を受け取り、その特
    徴を表す特徴量を評価する特徴評価手段と、 前記特徴量に基づいて、アクセス可能な検索サーバから
    関連情報を検索する検索手段と、 前記検索手段によって得られた検索結果を出力して、利
    用者に提示する関連情報出力手段とを備えたことを特徴
    とする関連情報検索装置。
    1. A related information search device provided in an information providing terminal device having information reproducing means for sequentially reproducing provided information provided by an information provider side, wherein the related information searching device searches for related information related to the provided information. Information extraction for receiving, from the information reproducing means, reproduction position information indicating a position at which reproduction of the provided information has been completed, and extracting at least a part of the provided information as evaluation target information based on the reproduced position information. Means, receiving evaluation target information from the information extracting means, a characteristic evaluation means for evaluating a characteristic amount representing the characteristic, a search means for searching related information from an accessible search server based on the characteristic amount, Related information output means for outputting a search result obtained by the search means and presenting the search result to a user. Search equipment.
  2. 【請求項2】 請求項1に記載の関連情報検索装置にお
    いて、 情報抽出手段は、 再生された情報が空間的に連続して表示され、所定の期
    間に渡って維持される情報形態の提供情報についての再
    生位置情報に基づいて、前記再生位置情報で示される再
    生位置と所定の関係を有する範囲を評価対象情報の範囲
    として求める第1範囲決定手段と、 前記提供情報から前記評価対象情報の範囲に対応する情
    報を抽出する範囲抽出手段とを備えた構成であることを
    特徴とする関連情報検索装置。
    2. The related information search device according to claim 1, wherein the information extracting means displays the reproduced information spatially continuously and provides the information in an information form maintained for a predetermined period. First range determining means for determining, as the range of the evaluation target information, a range having a predetermined relationship with the reproduction position indicated by the reproduction position information, based on the reproduction position information of And a range extracting means for extracting information corresponding to the related information.
  3. 【請求項3】 請求項1に記載の関連情報検索装置にお
    いて、 情報抽出手段は、 時間的に連続的に再生される情報形態の提供情報につい
    ての再生位置情報に基づいて、前記再生位置情報で示さ
    れる再生位置の提供情報が再生された時点と時間的に所
    定の関係を有する範囲を評価対象情報の範囲として求め
    る第2範囲決定手段と、 前記提供情報から前記評価対象情報の範囲に対応する情
    報を抽出する範囲抽出手段とを備えた構成であることを
    特徴とする関連情報検索装置。
    3. The related information search device according to claim 1, wherein the information extracting means determines the reproduction position information based on the reproduction position information of the provided information in the information form which is reproduced continuously in time. Second range determining means for determining, as the range of the evaluation target information, a range having a predetermined relationship in time with the point in time at which the provided information of the indicated reproduction position is reproduced; A related information search apparatus characterized by comprising a range extracting means for extracting information.
  4. 【請求項4】 請求項1に記載された関連情報検索装置
    において、 情報抽出手段は、提供情報に副情報として含まれたヒン
    ト情報を抽出するヒント情報抽出手段を備えた構成であ
    り、 検索手段は、 前記ヒント情報で示された検索サーバをアクセス可能な
    検索サーバの集合に含め、これらの検索サーバを指定し
    て検索動作を指示する検索指示を送出する第1検索指示
    手段と、 前記検索指示に応じて、指定された検索サーバに対する
    検索処理を実行する検索実行手段とを備えた構成である
    ことを特徴とする関連情報検索装置。
    4. The related information search device according to claim 1, wherein the information extraction means includes hint information extraction means for extracting hint information included as sub-information in the provided information. A first search instructing unit that includes a search server indicated by the hint information in a set of accessible search servers, and sends a search instruction instructing a search operation by designating these search servers; And a search execution means for executing a search process for a specified search server in accordance with the related information search apparatus.
  5. 【請求項5】 請求項1に記載された関連情報検索装置
    において、 利用者が頻繁に利用する検索サーバを示す指定情報を保
    持する指定情報保持手段を備え、 検索手段は、 前記指定情報で示された検索サーバをアクセス可能な検
    索サーバの集合に含め、これらの検索サーバを指定して
    検索動作を指示する検索指示を送出する第2検索指示手
    段と、 前記検索指示に応じて、指定された検索サーバに対する
    検索処理を実行する検索実行手段とを備えた構成である
    ことを特徴とする関連情報検索装置。
    5. The related information search device according to claim 1, further comprising: a designated information holding unit that holds designated information indicating a search server frequently used by a user, wherein the search unit is configured to store the designated information indicated by the designated information. A second search instructing unit that includes the searched search server in a set of accessible search servers, sends a search instruction designating these search servers and instructing a search operation; A related information search device, comprising: a search execution unit that executes a search process for a search server.
  6. 【請求項6】 情報提供者側によって提供される提供情
    報を順次に再生する情報再生手段を有する情報提供端末
    装置に備えられ、前記提供情報に関連する関連情報を検
    索する関連情報検索プログラムを記録した記憶媒体にお
    いて、 前記情報再生手段から前記提供情報についての再生処理
    が完了している位置を示す再生位置情報を受け取り、こ
    の再生位置情報に基づいて、前記提供情報の少なくとも
    一部を評価対象情報として抽出する情報抽出手順と、 前記情報抽出手順で得られた評価対象情報を受け取り、
    その特徴を表す特徴量を評価する特徴評価手順と、 前記特徴量に基づいて、アクセス可能な検索サーバから
    関連情報を検索する検索手順と、 前記検索手順において得られた検索結果を出力して、利
    用者に提示する関連情報出力手順とをコンピュータに実
    行させる関連情報検索プログラムを記録した記憶媒体。
    6. An information providing terminal device having information reproducing means for sequentially reproducing provided information provided by an information provider side, and records a related information search program for searching for related information related to the provided information. Receiving, from the information reproducing unit, reproduction position information indicating a position at which reproduction of the provided information has been completed, and, based on the reproduced position information, converting at least a part of the provided information into information to be evaluated. Information extraction procedure to extract as, receiving the evaluation target information obtained in the information extraction procedure,
    A feature evaluation procedure for evaluating a feature quantity representing the feature, a search procedure for searching for relevant information from an accessible search server based on the feature quantity, and a search result obtained in the search procedure, A storage medium storing a related information search program for causing a computer to execute a related information output procedure presented to a user.
JP11044888A 1999-02-23 1999-02-23 Relating information retrieval device and storage medium recording program for executing relating information retrieval processing Withdrawn JP2000242661A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP11044888A JP2000242661A (en) 1999-02-23 1999-02-23 Relating information retrieval device and storage medium recording program for executing relating information retrieval processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11044888A JP2000242661A (en) 1999-02-23 1999-02-23 Relating information retrieval device and storage medium recording program for executing relating information retrieval processing

Publications (1)

Publication Number Publication Date
JP2000242661A true JP2000242661A (en) 2000-09-08

Family

ID=12704035

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11044888A Withdrawn JP2000242661A (en) 1999-02-23 1999-02-23 Relating information retrieval device and storage medium recording program for executing relating information retrieval processing

Country Status (1)

Country Link
JP (1) JP2000242661A (en)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004348241A (en) * 2003-05-20 2004-12-09 Hitachi Ltd Information providing method, server, and program
JP2007325282A (en) * 2007-06-15 2007-12-13 Nec Corp Content distribution system, distribution server and display terminal for content distribution system, and content distribution program
JP2008276737A (en) * 2007-04-25 2008-11-13 Samsung Electronics Co Ltd Method and system for providing access to information of user's potential interest
US7555195B2 (en) 2002-04-16 2009-06-30 Nippon Telegraph And Telephone Corporation Content combination reproducer, content combination reproduction method, program executing the method, and recording medium recording therein the program
JP2012194697A (en) * 2011-03-15 2012-10-11 Toshiba Corp Information distribution system, information distribution device, information communication terminal and information distribution method
JP2013529325A (en) * 2010-04-01 2013-07-18 株式会社ソニー・コンピュータエンタテインメント Media fingerprint for determining and searching content
US8782056B2 (en) 2007-01-29 2014-07-15 Samsung Electronics Co., Ltd. Method and system for facilitating information searching on electronic devices
US8874575B2 (en) 2010-04-01 2014-10-28 Sony Computer Entertainment Inc. Media fingerprinting for social networking
KR101472931B1 (en) * 2007-02-28 2014-12-15 삼성전자주식회사 Method and device for extracting information from content metadata
US9143699B2 (en) 2010-07-13 2015-09-22 Sony Computer Entertainment Inc. Overlay non-video content on a mobile device
US9159165B2 (en) 2010-07-13 2015-10-13 Sony Computer Entertainment Inc. Position-dependent gaming, 3-D controller, and handheld as a remote
US9286385B2 (en) 2007-04-25 2016-03-15 Samsung Electronics Co., Ltd. Method and system for providing access to information of potential interest to a user
US9814977B2 (en) 2010-07-13 2017-11-14 Sony Interactive Entertainment Inc. Supplemental video content on a mobile device
US9832441B2 (en) 2010-07-13 2017-11-28 Sony Interactive Entertainment Inc. Supplemental content on a mobile device

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7555195B2 (en) 2002-04-16 2009-06-30 Nippon Telegraph And Telephone Corporation Content combination reproducer, content combination reproduction method, program executing the method, and recording medium recording therein the program
JP2004348241A (en) * 2003-05-20 2004-12-09 Hitachi Ltd Information providing method, server, and program
US8782056B2 (en) 2007-01-29 2014-07-15 Samsung Electronics Co., Ltd. Method and system for facilitating information searching on electronic devices
KR101472931B1 (en) * 2007-02-28 2014-12-15 삼성전자주식회사 Method and device for extracting information from content metadata
JP2008276737A (en) * 2007-04-25 2008-11-13 Samsung Electronics Co Ltd Method and system for providing access to information of user's potential interest
US9286385B2 (en) 2007-04-25 2016-03-15 Samsung Electronics Co., Ltd. Method and system for providing access to information of potential interest to a user
JP2007325282A (en) * 2007-06-15 2007-12-13 Nec Corp Content distribution system, distribution server and display terminal for content distribution system, and content distribution program
JP4655065B2 (en) * 2007-06-15 2011-03-23 日本電気株式会社 Content distribution system, content distribution system distribution server and display terminal, and content distribution program
US9264785B2 (en) 2010-04-01 2016-02-16 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
JP2013529325A (en) * 2010-04-01 2013-07-18 株式会社ソニー・コンピュータエンタテインメント Media fingerprint for determining and searching content
US8874575B2 (en) 2010-04-01 2014-10-28 Sony Computer Entertainment Inc. Media fingerprinting for social networking
US9473820B2 (en) 2010-04-01 2016-10-18 Sony Interactive Entertainment Inc. Media fingerprinting for content determination and retrieval
US9113217B2 (en) 2010-04-01 2015-08-18 Sony Computer Entertainment Inc. Media fingerprinting for social networking
US9159165B2 (en) 2010-07-13 2015-10-13 Sony Computer Entertainment Inc. Position-dependent gaming, 3-D controller, and handheld as a remote
US9143699B2 (en) 2010-07-13 2015-09-22 Sony Computer Entertainment Inc. Overlay non-video content on a mobile device
US10981055B2 (en) 2010-07-13 2021-04-20 Sony Interactive Entertainment Inc. Position-dependent gaming, 3-D controller, and handheld as a remote
US9762817B2 (en) 2010-07-13 2017-09-12 Sony Interactive Entertainment Inc. Overlay non-video content on a mobile device
US9814977B2 (en) 2010-07-13 2017-11-14 Sony Interactive Entertainment Inc. Supplemental video content on a mobile device
US9832441B2 (en) 2010-07-13 2017-11-28 Sony Interactive Entertainment Inc. Supplemental content on a mobile device
US10279255B2 (en) 2010-07-13 2019-05-07 Sony Interactive Entertainment Inc. Position-dependent gaming, 3-D controller, and handheld as a remote
JP2012194697A (en) * 2011-03-15 2012-10-11 Toshiba Corp Information distribution system, information distribution device, information communication terminal and information distribution method
US8972522B2 (en) 2011-03-15 2015-03-03 Kabushiki Kaisha Toshiba Information distribution system, information distribution apparatus, information communication terminal, and information distribution method

Similar Documents

Publication Publication Date Title
US9888279B2 (en) Content based video content segmentation
JP6015568B2 (en) Method, apparatus, and program for generating content link
US9122754B2 (en) Intelligent video summaries in information access
US20170201793A1 (en) TV Content Segmentation, Categorization and Identification and Time-Aligned Applications
US9462038B2 (en) Methods for seamlessly providing content to a client system and devices thereof
KR102112973B1 (en) Estimating and displaying social interest in time-based media
US5664227A (en) System and method for skimming digital audio/video data
US6222532B1 (en) Method and device for navigating through video matter by means of displaying a plurality of key-frames in parallel
US9734407B2 (en) Videolens media engine
US7367043B2 (en) System and method for generating metadata for programming events
US6571054B1 (en) Method for creating and utilizing electronic image book and recording medium having recorded therein a program for implementing the method
CA2704142C (en) Deep tag cloud associated with streaming media
US7131059B2 (en) Scalably presenting a collection of media objects
KR100321839B1 (en) Method and apparatus for integrating hyperlinks in video
US9202523B2 (en) Method and apparatus for providing information related to broadcast programs
KR101715971B1 (en) Method and system for assembling animated media based on keyword and string input
JP4905103B2 (en) Movie playback device
KR100654455B1 (en) Apparatus and method for providing addition information using extension subtitle file
TWI381325B (en) Method and computer-readable medium for delayed advertisement insertion in videos
JP4188889B2 (en) Video browsing method using information about relations between segments of multimedia stream
US7587673B2 (en) Information processing apparatus, method and program
JP5178109B2 (en) Search device, method and program
US7698721B2 (en) Video viewing support system and method
JP4987907B2 (en) Metadata processing device
CN103702039B (en) image editing apparatus and image editing method

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20060509