JP4270117B2 - Viewers between the communication method and apparatus and program - Google Patents

Viewers between the communication method and apparatus and program Download PDF

Info

Publication number
JP4270117B2
JP4270117B2 JP2004347274A JP2004347274A JP4270117B2 JP 4270117 B2 JP4270117 B2 JP 4270117B2 JP 2004347274 A JP2004347274 A JP 2004347274A JP 2004347274 A JP2004347274 A JP 2004347274A JP 4270117 B2 JP4270117 B2 JP 4270117B2
Authority
JP
Japan
Prior art keywords
scene
scene section
comments
section
comment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004347274A
Other languages
Japanese (ja)
Other versions
JP2006157687A (en
Inventor
弾 三上
和 宮川
聡 嶌田
正志 森本
誠 武藤
Original Assignee
日本電信電話株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電信電話株式会社 filed Critical 日本電信電話株式会社
Priority to JP2004347274A priority Critical patent/JP4270117B2/en
Publication of JP2006157687A publication Critical patent/JP2006157687A/en
Application granted granted Critical
Publication of JP4270117B2 publication Critical patent/JP4270117B2/en
Application status is Expired - Fee Related legal-status Critical
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、視聴者間コミュニケーション方法及び装置及びプログラムに係り、特に、視聴者が付与したコメント情報からコミュニケーションの対象となるシーン区間を生成、または変更するための視聴者間コミュニケーション方法及び装置及びプログラム関する。 The present invention relates to a communication method and apparatus and a program among viewers, in particular, viewing among persons are subject to communication from the grant the comment information generate scene section, or for changing viewer communication method and apparatus and a program about.

従来、映像を視聴中のコミュニケーションの方法として、映像をシーンという小さな区間に分割して、区間毎に掲示板を設置し、区間の切り替わりと連動して掲示板も切り替わって表示されるシステムがある(例えば、非特許文献1参照)。 Conventionally, as a method of communication in view video, by dividing the image into small sections called scene, set up a bulletin board for each section, there is a system that appears also switched bulletin board in conjunction with the switching of the section (e.g. see non-Patent Document 1).

シーン区間の分割方法としては、映像の画像情報が大きく変わるカット点を検出し、当該カット点を手動で統合することにより映像の中で意味的なまとまりをもつ区間をシーン区間として設定する方法がある。 The method of dividing the scene section detecting a cut point that the image information of the image greatly changes, a method of setting the intervals with the semantic collection in the video as a scene period by integrating the cut point manually is there.

映像の中で意味的なまとまりをもつ区間をシーン区間として設定し、シーン区間誤とに電子掲示板を設置することにより、映像の途中にある見たいシーンから視聴すること、及び映像に複数のトピックがある場合には書くトピックに応じたコミュニケーションを誘導することができるようになる。 Set the intervals with the semantic collection in the video as a scene period, by placing the electronic bulletin board to preparative erroneous scene period, to watch from a desired scene in the middle of the image, and a plurality of topics in the video is to be able to induce the communication in accordance with the topics to write in some cases.

しかしながら、上記従来の技術では、コミュニケーションを活性化させるために、事前に映像を同じ話題のシーンに分割する必要がある。 However, in the conventional art, in order to activate the communication, it is necessary to divide the pre-image the scene of the same topic. シーン分割を行うときに、映像情報の変わり目や音声や音楽の出現などの自動抽出したイベント情報を参考にするとしても、シーンの区切りを決定するには映像内容を把握して手動で修正や確認作業が必須であり、手間と時間がかかるという問題がある。 When performing a scene division, as well as Sankounisuru automatic extracted event information, such as the emergence of the turn and voice and music of the video information, manually modified to determine the division of the scene is to understand the video content and confirmation work is essential, there is a problem that it takes time and effort.

時間と手間を省くために、一定時間間隔でシーン分割する方法も考えられるが、この場合には、シーン区間の映像内容がまとまっていないため、シーン単位での電子掲示板に対して視聴者がコメントを付与しにくいという問題がある。 In order to save time and effort, but is also considered a method of scene segmentation at a certain time interval, in this case, because it does not organized the video content of the scene section, the viewer to the electronic bulletin board at the scene units Comments there is a problem that it is difficult to grant.

また、事前に設定するシーン区間は、サービス提供者の判断により、まとまった内容を区間として定義することになるが、システムが運用された後、コミュニケーションに参加した視聴者にとってまとまりのある区間が、事前に設定されたシーン区間と異なる場合には、運用中にシーン区間を変更する必要がある。 In addition, the scene section to be set in advance is, by the service provider of the decision, but will define a cohesive content as the section, after the system is operational, the section in which a cohesive to viewers who participated in the communication, if different from the pre-set scene period, it is necessary to change the scene section during operation. 前述の従来の技術では、このようなシーン区間のメンテナンスについても手動で行う必要があり、手間がかかるといいう問題がある。 In the above-mentioned prior art, such must be done manually or for the maintenance of the scene section, there is a good cormorant problem and time-consuming.

本発明は、上記の点に鑑みなされたもので、視聴者から寄せられたコメントからシーン区間を自動的に抽出し、既にシーン区間が設定されている場合には、視聴者から寄せられたコメントに基づいて適切に更新することが可能な視聴者間コミュニケーション方法及び装置及びプログラムを提供することを目的とする。 Comments The present invention has been made in view of the above, automatically extracting scene segments from comments received from a viewer, already when it is set the scene section, which were received from the viewer and to provide a suitably between updates it capable of viewer communication method and apparatus and a program based on.

図1は、本発明の原理説明図である。 Figure 1 is a diagram for explaining the principle of the present invention.

本発明(請求項1)は、映像を視聴している視聴者からコメント付与の指示を取得するとコメントを付与(登録)することができ、また、視聴者から映像視聴をする指示を取得すると、映像と視聴者が付与(登録)したコメントとを同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The present invention (claim 1) obtains the instruction comment attachment from viewers who are viewing the video can give a comment (registration), also acquires an instruction to the video viewing from a viewer, a video viewer Communication method to be presented to the terminal device of the video that the viewer is assigned (registered) the comments and viewers to synchronize,
映像、コメント及び少なくとも該コメントが付与された時刻及び該コメントの識別番号を含むコメント情報が格納されている記憶手段からコメント情報を取得するコメント取得ステップ(ステップ1)と、 Video, and comments and at least comment obtaining step of said comment comment information including the identification number of the time and the comments given to obtain comment information from the storage means is stored (Step 1),
コメントが付与された時刻に基づいて、コメントを分類するコメント付与時刻グルーピングステップ(ステップ2)と、 Comments based on the time that has been given, the comment attachment time grouping step of classifying the comment (step 2),
コメント付与時刻グルーピングステップでグルーピングされたコメント群の付与時刻の中で最初と最後の時刻を基準として映像のシーン区間を定義し、記憶手段に格納するシーン区間検出ステップ(ステップ3)と、 The first and last time defines the scene section of the image as a reference in the grant time grouped group comment in the comment imparting time grouping step, the scene section detecting step of storing in the storage means (step 3),
シーン区間を単位として、記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示ステップ(ステップ4)と、 The scene section as a unit, from the storage means is read comments and images corresponding to the scene periods, display step of displaying to the viewer's terminal in synchronization (step 4),
を行う。 I do.

本発明(請求項2)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The present invention (claim 2), in advance by dividing the movies image to the scene may be stored and scene section, and comments entered from the viewer with respect to the scene section in the storage means, the comments and the a video viewer Communication method to be presented to the terminal device of the viewer by synchronized video,
記憶手段に格納されているシーン区間及び該シーン区間のコメント及び該コメントが付与された時刻を含むコメント情報を取得するコメント取得ステップと、 And comments acquisition step of comments and the comments scene section and the scene section is stored in the storage means to obtain the comment information including the time granted,
シーン区間内のコメントに対して、 コメントが付与された時刻に基づいてコメントを分類するコメント付与時刻グルーピングステップと、 Against comments in the scene section, and comment attachment time grouping step of classifying the comment based on the time a comment is granted,
コメント付与時刻グルーピングステップでグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出ステップと、 Based on the first and last time in the time grouped comment in the comment imparting time grouping step has been applied, the scene section detecting step of defining the scene section of the video,
シーン区間検出ステップで定義されたシーン区間に基づいて、記憶手段に格納されている先に設定されているシーン区間を分割するシーン区間分割ステップと、 Based on the defined scene period in the scene section detecting step, the scene section dividing step of dividing a scene section that is set previously stored in the storage means,
シーン区間分割ステップで分割されたシーン区間を用いて記憶手段のシーン区間を更新するシーン区間更新ステップと、 A scene section updating step of updating the scene section of the storage means by using the divided scene period with scene section dividing step,
シーン区間を単位として、記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示ステップと、 The scene section as a unit, a display step from the storage means is read comments and images corresponding to the scene periods, is displayed on the viewer's terminal in synchronization,
を行う。 I do.

本発明(請求項3)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The present invention (claim 3), advance to divide the movies image to the scene may be stored and scene section, and comments entered from the viewer with respect to the scene section in the storage means, the comments and the a video viewer Communication method to be presented to the terminal device of the viewer by synchronized video,
記憶手段に格納されているシーン区間及びシーン区間内のコメントを取得するコメント取得ステップと、 And comments acquiring the comments of scene section and scene section is stored in the storage means,
シーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出ステップと、 Based on the tendency of appearance of words in comments in the scene section, and scene section similarity calculation step of calculating a similarity between adjacent scene section,
シーン区間類似度算出ステップで求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間の統合するシーン区間統合ステップと、 Similarity obtained in scene period similarity calculation step, in the case of more than a predetermined value, the scene section integration step of integrating the adjacent scene section,
シーン区間統合ステップで統合されたシーン区間で、記憶手段のシーン区間を更新するシーン区間更新ステップと、 In scene period, which is integrated in the scene section integration step, the scene section updating step of updating the scene section of the storage means,
シーン区間を単位として、記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示ステップと、 The scene section as a unit, a display step from the storage means is read comments and images corresponding to the scene periods, is displayed on the viewer's terminal in synchronization,
を行う。 I do.

本発明(請求項4)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The present invention (Claim 4), in advance by dividing the movies image to the scene may be stored and scene section, and comments entered from the viewer with respect to the scene section in the storage means, the comments and the a video viewer Communication method to be presented to the terminal device of the viewer by synchronized video,
記憶手段に格納されているシーン区間及び該シーン区間内のコメント及び該コメントが付与された時刻を含むコメント情報を取得するコメント取得ステップと、 And comments acquisition step of comments and the comments in the scene section, and the scene section is stored in the storage means to obtain the comment information including the time granted,
シーン区間内のコメントに対してコメントが付与された時刻に基づいて、該コメントを分類するコメント付与時刻グルーピングステップと、 Against comments in the scene section based on the time a comment is granted, the comment attachment time grouping step of classifying the comment,
コメント付与時刻グルーピングステップでグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出ステップと、 Based on the first and last time in the time grouped comment in the comment imparting time grouping step has been applied, the scene section detecting step of defining the scene section of the video,
シーン区間検出ステップで定義されたシーン区間に基づいて、記憶手段に格納されている先に設定されているシーン区間を分割し、分割されたシーン区間をメモリに格納するシーン区間分割ステップと、 Based on the defined scene period in the scene section detecting step, the scene section dividing step of dividing the scene section that is set previously stored in the storage means, for storing the divided scene period in the memory,
メモリに格納されているシーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出ステップと、 Based on the tendency of appearance of words in comments in scene segments that are stored in the memory, the scene section similarity calculation step of calculating a similarity between adjacent scene section,
シーン区間類似度算出ステップで求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間を統合するシーン区間統合ステップと、 Similarity obtained in scene period similarity calculating step, when more than a predetermined value, the scene section integration step of integrating the adjacent scene section,
シーン区間統合ステップで統合されたシーン区間で、記憶手段のシーン区間を更新するシーン区間更新ステップと、 In scene period, which is integrated in the scene section integration step, the scene section updating step of updating the scene section of the storage means,
シーン区間を単位として、記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示ステップと、 The scene section as a unit, a display step from the storage means is read comments and images corresponding to the scene periods, is displayed on the viewer's terminal in synchronization,
を行う。 I do.

図2は、本発明の原理構成図である。 Figure 2 is a conceptual view of the present invention.

本発明(請求項5)は、映像を視聴している視聴者からコメント付与の指示を取得するとコメントを付与(登録)することができ、また、視聴者から映像視聴をする指示を取得すると、映像と視聴者が付与(登録)したコメントとを同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The present invention (claim 5) obtains the instruction comment attachment from viewers who are viewing the video can give a comment (registration), also acquires an instruction to the video viewing from a viewer, a video that the viewer is granted (registered) and video viewers between the communication device comments and to synchronize are presented to the viewer's terminal device,
映像、コメント及び少なくとも該コメントが付与された時刻及び該コメントの識別番号を含むコメント情報が格納されているデータ記憶手段2と、 Video, and data storage means 2 for comments and comment information including at least said comment identification number of times and the comments that have been granted are stored,
データ記憶手段からコメント情報を取得するコメント取得手段3と、 And Comments acquisition means 3 to get the comment information from the data storage means,
コメントが付与された時刻に基づいて、コメントを分類するコメント付与時刻グルーピング手段41と、 Comments based on the time that has been given, the comment attachment time grouping means 41 to classify the comment,
コメント付与時刻グルーピング手段41でグルーピングされたコメント群の付与時刻の中で最初と最後の時刻を基準として映像のシーン区間を定義し、データ記憶手段に格納するシーン区間検出手段42と、 The first and last time defines the scene section of the image as a reference in the grant time grouped group comment in the comment imparting time grouping means 41, the scene section detecting means 42 to be stored in the data storage means,
シーン区間を単位として、記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置10に表示する表示手段1と、 The scene section as a unit, from the storage means is read comments and images corresponding to the scene periods, and display means 1 to be displayed on the terminal device 10 of the viewer in synchronization,
を有する。 Having.

本発明(請求項6)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The present invention (Claim 6), in advance by dividing the movies image to the scene may be stored and scene section, and comments entered from the viewer with respect to the scene section in the storage means, the comments and the a video viewer Communication device to be presented to the terminal device of the viewer by synchronized video,
シーン毎に分割された映像、シーン区間、該シーン区間に対して入力された視聴者のコメントを格納するデータ記憶手段と、 And data storage means for storing images that are divided for each scene, scene section, viewers comments entered for the scene section,
データ記憶手段に格納されているシーン区間及び該シーン区間内のコメントと該コメントが付与された時刻を含むコメント情報を取得するコメント取得手段と、 And comments acquisition means for data storing means has been the scene section and within the scene period are stored in the comment and the comment is acquired comment information including the time granted,
シーン区間内のコメントに対してコメントが付与された時刻に基づいて、該コメントを分類するコメント付与時刻グルーピング手段と、 Against comments in the scene section based on the time a comment is granted, the comment attachment time grouping means for classifying the comment,
コメント付与時刻グルーピング手段でグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出手段と、 Based on the first and last time in the time grouped comment comment attachment time grouping means is assigned, and a scene section detecting means for defining the scene section of the video,
シーン区間検出手段で定義されたシーン区間に基づいて、データ記憶手段に格納されている先に設定されているシーン区間を分割するシーン区間分割手段と、 Based on the defined scene period in the scene section detecting means, and scene section dividing means for dividing the scene section that is set previously stored in the data storage means,
シーン区間分割手段で分割されたシーン区間を用いてデータ記憶手段のシーン区間を更新するシーン区間更新手段と、 A scene period updating means for updating the scene section data storage means using a scene section divided by scene section dividing means,
シーン区間を単位として、データ記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示手段と、 The scene section as a unit, and display means from the data storage means reads the comments and images corresponding to the scene periods, is displayed on the viewer's terminal in synchronization,
を有する。 Having.

本発明(請求項7)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The present invention (Claim 7), in advance by dividing the movies image to the scene may be stored and scene section, and comments entered from the viewer with respect to the scene section in the storage means, the comments and the a video viewer Communication device to be presented to the terminal device of the viewer by synchronized video,
シーン毎に分割された映像、シーン区間、該シーン区間に対して入力された視聴者のコメントを格納するデータ記憶手段と、 And data storage means for storing images that are divided for each scene, scene section, viewers comments entered for the scene section,
データ記憶手段に格納されているシーン区間及び該シーン区間内のコメントを取得するコメント取得手段と、 And comments acquisition means for acquiring a comment in the scene section, and the scene section is stored in the data storage means,
シーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出手段と、 Based on the tendency of appearance of words in comments in the scene section, and scene section similarity calculation means for calculating the similarity of adjacent scene section,
シーン区間類似度算出手段で求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間を統合するシーン区間統合手段と、 Similarity obtained in scene period similarity calculating means, in the case of more than a predetermined value, the scene section integrating means for integrating the adjacent scene section,
シーン区間統合手段で統合されたシーン区間で、データ記憶手段のシーン区間を更新するシーン区間更新手段と、 In integrated scene period with scene section integrating means, a scene section updating means for updating the scene section data storage means,
シーン区間を単位として、データ記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示手段と、 The scene section as a unit, and display means from the data storage means reads the comments and images corresponding to the scene periods, is displayed on the viewer's terminal in synchronization,
を有する。 Having.

本発明(請求項8)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The present invention (claim 8), leave divides Film image to the scene may be stored and scene section, and comments entered from the viewer with respect to the scene section in the storage means, the comments and the a video viewer Communication device to be presented to the terminal device of the viewer by synchronized video,
シーン毎に分割された映像、シーン区間、該シーン区間に対して入力された視聴者のコメントを格納するデータ記憶手段と、 And data storage means for storing images that are divided for each scene, scene section, viewers comments entered for the scene section,
データ記憶手段に格納されているシーン区間及び該シーン区間内のコメント及び該コメントが付与された時刻を含むコメント情報を取得するコメント取得手段と、 And comments acquisition means for data storage means in the scene section, and the scene section are stored in the comment and the comment is acquired comment information including the time granted,
シーン区間内のコメントに対して、コメントが付与された時刻に基づいてコメントを分類するコメント付与時刻グルーピング手段と、 Against comments in the scene section, and comment attachment time grouping means for classifying the comment based on the time a comment is granted,
コメント付与時刻グルーピング手段でグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出手段と、 Based on the first and last time in the time grouped comment in the comment imparting time grouping means is assigned, and a scene section detecting means for defining the scene section of the video,
シーン区間検出手段で定義されたシーン区間に基づいて、データ記憶手段に格納されている先に設定されているシーン区間を分割し、分割されたシーン区間をメモリに格納するシーン区間分割手段と、 Based on the defined scene period in the scene section detecting means, and scene section dividing means for storing dividing the scene section that is set previously stored in the data storage means, the divided scene period in the memory,
メモリに格納されているシーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出手段と、 Based on the tendency of appearance of words in comments in scene segments that are stored in the memory, the scene section similarity calculation means for calculating the similarity of adjacent scene section,
シーン区間類似度算出手段で求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間を統合するシーン区間統合手段と、 Similarity obtained in scene period similarity calculating means, in the case of more than a predetermined value, the scene section integrating means for integrating the adjacent scene section,
シーン区間統合手段で統合されたシーン区間で、データ記憶手段のシーン区間を更新するシーン区間更新手段と、 In integrated scene period with scene section integrating means, a scene section updating means for updating the scene section data storage means,
シーン区間を単位として、データ記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて視聴者の端末装置に表示する表示手段と、 The scene section as a unit, and display means from the data storage means reads the comments and images corresponding to the scene periods, is displayed on the viewer's terminal in synchronization,
を有する。 Having.

本発明(請求項9)は、 映像を視聴している視聴者からコメント付与の指示を取得するとコメントを付与(登録)することができ、また、視聴者から映像視聴をする指示を取得すると、映像と視聴者が付与(登録)したコメントとを同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーションプログラムであって、前記請求項1記載の映像視聴者間コミュニケーション方法を実現するための処理をコンピュータに実行させるプログラムである。 The present invention (claim 9) obtains the instruction comment attachment from viewers who are viewing the video can give a comment (registration), also acquires an instruction to the video viewing from a viewer, a video viewer Communication program video that the viewer presents to the terminal device of the grant register to comment the viewer by synchronizing, for implementing the communication method between the claim 1, wherein the image viewer is a program for executing the processing on the computer.

本発明(請求項10)は、映像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントを映像と同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーションプログラムであって、 The present invention (claim 10), previously divided the movies image to the scene, and scene periods may be stored and comments entered from the viewer with respect to the scene section in the storage means, the comment said a video viewer between communication programs to be presented to the viewer's terminal device in synchronization with the video,
請求項2乃至4記載の映像視聴者間コミュニケーション方法を実現するための処理をコンピュータに実行させるプログラムである。 It is claims 2 to program to be executed 4 processing for realizing a communication method between the image viewer according to the computer.

上記のように、本発明によれば、映像視聴と連動したコミュニケーションシステムにおいて、視聴者から寄せられたコメントからシーン区間を自動的に定義することが可能となり、また、既にシーン区間が設定されている場合には、適切に更新することが可能であるため、事前に映像をシーン区間に分割する手間と時間を省くことができる。 As described above, according to the present invention, in a communication system in conjunction with the video viewing, it is possible to automatically define scene segments from comments received from the viewer, also already set the scene section If you are, since it is possible to appropriately updated, it is possible to save labor and time to split the pre-image into scene segments.

また、映像視聴と連動したコミュニケーションシステムを運用する中で、シーン区間の変更に対するメンテナンスをする必要がなくなる。 In addition, in operating a communication system in conjunction with video viewing, it is not necessary to the maintenance for a change of scene section.

さらに、視聴者の視点で適切にシーンが区切られるので、視聴者にとって必要なシーンやコメントがよりフォーカスされることとなり、映像視聴しながらコメント内容を把握したり、コメント一覧を見ながら所望のシーンを検索したりすることが容易になる。 In addition, since properly scene is separated from the perspective of the viewer, it is that the necessary scenes and comments for the viewer is more focus, or to understand the comment content while video viewing, of the desired while watching a comment List scene it is easy to or search for.

以下、図面と共に本発明の実施の形態を説明する。 Hereinafter, an embodiment of the present invention in conjunction with the accompanying drawings.

図3は、本発明の一実施の形態におけるコミュニケーション装置の構成を示す。 Figure 3 shows a configuration of a communication apparatus according to an embodiment of the present invention. 同図に示すコミュニケーション装置は、視聴者間コミュニケーション部1、データ記憶部2、コメント取得部3、コメント分析によるシーン区間検出部4、シーン区間情報更新部5、及び設定ファイル6から構成される。 Communication apparatus shown in FIG. Viewer Communication unit 1, the data storage unit 2, comments acquisition unit 3, the scene section detecting portion 4 commented analysis, the scene section information update unit 5, and a configuration file 6.

データ記憶部2は、映像を格納した映像ファイルと、視聴者が付与したコメントに関する情報を格納するコメント情報管理テーブルと、シーン区間に関する情報を管理するシーン区間情報テーブルを有する。 Data storage unit 2 includes a video file that stores an image, and the comment information management table that stores information about comments viewer granted, the scene section information table for managing information about the scene section. 本実施の形態では、コメント情報は、図4に示すようにコメント情報の管理テーブルで管理され、コメントの識別番号、コメントが付与された時刻、コメント付与者名、コメント内容、コメント種別(最初に付与したコメントであるか、誰かのコメントに対して返信したコメント(スレッド)であるかを識別するもの)で構成される。 In this embodiment, comment information is managed by the management table of the comment information as shown in FIG. 4, comments identification number, the time the comment is granted, comment attachment's name, comment contents, comment type (first whether it is granted the comment, made in reply to the comment which identifies whether the (thread)) with respect to someone's comment. シーン区間情報は、図5に示すように、シーン区間情報テーブルで管理され、シーンID、シーンの開始時刻、シーンの終了時刻及び、当該シーンの開始時刻−シーンの終了時刻内に付与されたコメントのコメント識別番号から構成される。 Scene section information, as shown in FIG. 5, is managed by the scene section information table, scene ID, start time of the scene, the end of the scene time and the onset of the scene time - comments added to the end time of the scene consisting of the comment identification number.

設定ファイル6は、データ記憶部2にシーン区間情報が存在する場合には、当該シーン区間情報(シーンID,シーンの開始時刻、シーンの終了時刻)が格納されており、存在しない場合には、「NULL」が格納されている。 Configuration file 6, when there is a scene section information in the data storage unit 2, the scene section information (scene ID, start time of the scene, the end time of the scene) are stored, if not, "NULL" is stored.

視聴者間コミュニケーション部1は、データ記憶部2から映像と視聴者から寄せられたコメントとを同期させて提示する。 Viewers between the communication unit 1, from the data storage unit 2 is synchronized with the comments received from the video that the viewer is presented. ここで、設定ファイル6を参照して、対象とする映像に対するシーン区間情報がある(シーン開始時刻、シーン終了時刻)がある場合には、データ記憶部2にシーン区間情報があると判断し、データ記憶部2からシーン区間の映像の代表画像、例えば、シーン区間の先頭のフレーム画像と共に、当該シーン区間に付与されたコメントを一覧表示させて、どのようなシーン区間があり、また、各シーン区間にどのようなコメントが付与されているかを概観できるようにする。 Here, with reference to the configuration file 6, there is a scene section information for the video of interest (scene start time, a scene end time) when there is, it is determined that there is a scene section information in the data storage unit 2, representative image of the video of the scene segments from the data storage unit 2, for example, with the head of the frame image of scene section, the comments added to the scene section to display the list, there is what scene period, and each scene what kind of comment is to be able to outline what has been granted to the interval. 視聴者がシーン区間を選択したときには、その区間に対する映像を、シーン区間に基づいてデータ記憶部2を検索し、再生すると共に、その区間に付与されたコメントを表示する。 When the viewer selects the scene section, an image for the interval, it searches the data storage unit 2 based on the scene section, reproduces and displays the comments added to the section.

また、視聴者が視聴しながらコメント付与の指示を行うことによりメントを入力したときには、コメント入力の対象となるシーン区間と共に、入力されたコメントを受け付ける。 Also, when you enter a comment by carrying out the instructions of the comment attachment while watching the viewer, along with the scene section to be subjected to the comment input, it accepts a comment that has been input. 受け付けたコメントはシーンIDと共にデータ記憶部2に書き込む。 It received comments written to the data storage unit 2 along with the scene ID.

コメント取得部3は、予め設定したタイミングでデータ記憶部2のコメント情報管理テーブルからコメント情報を読み取り、読み取ったコメント情報をコメント分析し、シーン区間検出部4に出力する。 Comments acquisition unit 3 reads the comment information from the comment information management table data storage section 2 at the timing set in advance, the read comment information commented analysis, and outputs the scene section detecting unit 4.

シーン区間検出部4は、コメント取得部3より取得したコメント情報からシーン区間を検出し、検出したシーン区間をシーン区間情報更新部5に出力する。 Scene section detecting unit 4 detects a scene section based on the acquired comment information from the comment acquisition unit 3, and outputs the detected scene period to the scene section information update unit 5.

シーン区間情報更新部5は、シーン区間検出部4より受け取ったシーン区間に応じてデータ記憶部2に記憶されているシーン区間情報テーブルを更新する。 The scene section information update unit 5 updates the scene section information table stored in accordance with the scene section received from the scene section detecting portion 4 in the data storage unit 2.

以上の構成により、コメント分析によるシーン区間検出部4で検出されたシーン区間に従って、映像視聴者のコミュニケーション機能が提供されることになる。 With the above configuration, according to the detected scene period in the scene section detecting portion 4 commented analysis, so that the communication function of video viewers is provided.

図6は、本発明の一実施の形態におけるコミュニケーション装置の動作の概要を示すフローチャートである。 Figure 6 is a flowchart showing an outline of the operation of the communication device in the embodiment of the present invention.

ステップ101) 視聴者間コミュニケーション部1は、設定ファイル6を参照する。 Step 101) viewer Communication unit 1 refers to the configuration file 6.

ステップ102) 設定ファイル6を参照することにより、データ記憶部2にシーン区間が既に設定されているかを判定する。 Step 102) by referring to the configuration file 6, whether the data storage unit 2 scene section has already been set is determined. 例えば、設定ファイル6には、設定されている場合には、シーン区間情報(例えば、シーンID,シーンの開始時刻/終了時刻)または、設定されていることを示すフラグ(例えば「1」)等が設定されているものとする。 For example, the configuration file 6, if it is set, the scene section information (e.g., scene ID, start time / end time of the scene) or a flag indicating that is set (for example, "1") or the like There is assumed to be set. また、設定されていない場合には、「NULL」または、設定されていないことを示すフラグ(例えば「0」)等が設定されているものとする。 Further, if it is not set, "NULL" or intended to such flag indicating that it has not been set (for example, "0") is set. 設定されていない場合には、ステップ103に移行し、後述する第1の実施の形態の処理を行う。 If it is not set, the process proceeds to step 103, performs the processing of the first embodiment to be described later. 設定されている場合には、ステップ110に移行し、後述する第2〜第5の実施の形態の処理を行う。 If it is set, the process proceeds to step 110 to process the second to fifth embodiments to be described later.

ステップ103) 第1の実施の形態として、データ記憶部2に格納されている映像とコメントを同期させてユーザ端末に表示する。 Step 103) as the first embodiment, displays are synchronized video and comments stored in the data storage unit 2 to the user terminal.

ステップ104) 視聴者からコメントが入力された場合には、当該コメントをデータ記憶部2に格納する。 Step 104) When the comment from the viewer is inputted, it stores the comment data storage unit 2.

ステップ105) コメント取得部3が、コメント情報をデータ記憶部2から取得して分析し、分析結果をシーン区間検出部4に渡す。 Step 105) Comments acquisition unit 3, and analyzed to obtain the comment information from the data storage unit 2, and passes the analysis result to the scene section detecting unit 4.

ステップ106) シーン区間検出部4は、取得した分析結果に基づいてシーン区間を検出する。 Step 106) the scene section detecting unit 4 detects a scene section based on the obtained analysis result. 詳細な処理は、第1の実施の形態で説明する。 Detailed process will be described in the first embodiment.

ステップ107) シーン区間情報更新部5が、検出されたシーン区間をデータ記憶部2に格納する。 Step 107) the scene section information update unit 5 stores the detected scene period to the data storage unit 2.

ステップ108) シーン区間情報更新部5が、設定ファイル6にシーン区間がデータ記憶部2に設定されたことを示すフラグまたは、シーン区間情報を設定する。 Step 108) the scene section information update unit 5, a flag indicating that the scene section is set in the data storage unit 2 in the configuration file 6 or sets the scene section information.

ステップ109) 視聴者間コミュニケーション部1がデータ記憶部2からシーン区間に対応する映像及びコメントをユーザ端末に表示する。 Step 109) viewer Communication unit 1 displays images and comments to the user terminal corresponding from the data storage unit 2 in the scene section.

ステップ110) ステップ102において、データ記憶部にシーン区間が存在する場合には、シーン区間の代表映像を一覧表示する。 In Step 110) Step 102, when there is the scene section data storage unit, list the representative image of the scene section.

ステップ111) コメントが視聴者から入力された場合には、シーン区間に対応付けてデータ記憶部2に格納する。 Step 111) comments when input from the viewer, and stores in association with the scene section in the data storage unit 2.

ステップ112) コメント取得部3が、コメント情報をデータ記憶部2から取得して分析し、分析結果をシーン区間検出部4に渡す。 Step 112) Comments acquisition unit 3, and analyzed to obtain the comment information from the data storage unit 2, and passes the analysis result to the scene section detecting unit 4.

ステップ113) シーン区間検出部4は、取得した分析結果に基づいてシーン区間を検出する。 Step 113) the scene section detecting unit 4 detects a scene section based on the obtained analysis result. 詳細な処理は、第2〜5の実施の形態で説明する。 Detailed processing will be described in the 2-5 embodiment.

ステップ114) シーン区間情報更新部5が、検出されたシーン区間をデータ記憶部2に格納する。 Step 114) the scene section information update unit 5 stores the detected scene period to the data storage unit 2. ステップ109に移行する。 The process proceeds to step 109.

[第1の実施の形態] First Embodiment
本実施の形態では、シーン区間情報がデータ記憶部2に設定されていない状態であり、新たにシーン区間を検出してデータ記憶部2に設定する処理を説明する。 In this embodiment, a state in which the scene section information is not set in the data storage unit 2, the processing to be newly set by detecting the scene section to the data storage unit 2.

図7は、本発明の第1の実施の形態におけるコメント分析によるシーン区間検出部の処理のフローチャートである。 Figure 7 is a flowchart of the processing of the scene section detecting portion commented analysis in the first embodiment of the present invention.

同図に示す動作は、シーン区間が未定義、すなわち、データ記憶部2で管理されているシーン区間情報が、映像の先頭と終了が1つのシーンとなっている状態から、コメント分析により、新たなシーン区間を定義するものである。 The operation shown in the figure, undefined scene section, i.e., from a state in which the scene section information that is managed by the data storage unit 2, the head and end of the video has become one scene, a comment analysis, new it is intended to define a scene section.

ステップ201) シーン区間検出部4は、データ記憶部2のコメント情報の管理テーブルより、コメントが付与された時刻を読み出し、コメントを分類する。 Step 201) the scene section detecting unit 4, from the management table of the comment information data storage unit 2 reads the time that comment was granted to classify the comment. このとき、コメント種別が「返信」であるものを除いたコメントについて、付与された時刻が予め設定された値よりも短いものを同一のグループとする処理を行う。 In this case, the comment except those comment type is "Reply", performs processing for the same group shorter even than granted time preset value. このときに、返信の数やコメント文字総数が大きいほどコメント間の時間間隔が小さくなるように処理を追加してもよい。 At this time, it may be added to the process so that the time interval between the greater the number and comments character total number of reply is large comment is reduced. また、分類した各グループのコメント数が予め設定された値以下の場合には、そのグループを削除する処理を行うことで、映像全体に対するコメント数が少ない場合に、短い区間に数多く分割されることを防止することができる。 Also, if the number of comments each group were classified below a predetermined value, by performing the process of deleting the group, if comments for the entire image is small, a number divided by that in the short section it is possible to prevent.

シーン区間検出部4は、メモリ内に、N個のコメントグループを、付与された時刻が早い順に、n=1,2,…,Nの番号で管理する。 Scene section detecting unit 4, in the memory, the N number of comments group, is in chronological order granted time, n = 1,2, ..., to manage the number of the N.

ステップ202) n=1とし、1番目のグループに対応するシーン区間を順次、検出する。 Step 202) and n = 1, sequentially detects a scene section corresponding to the first group.

ステップ203) グループ番号nに属するコメントの中で、最初に付与された時刻ts(n)を検出する。 Step 203) in the belonging comments to the group number n, detects the first given the time ts (n).

ステップ204) グループ番号nに属するコメントの中で、最後に付与された時刻te(n)を検出する。 Step 204) belong in the comment to the group number n, to detect the last to be given the time te (n).

ステップ205) シーン区間を定義するときのマージンとして、区間の開始に対するマージン時間aと、区間終了に対するマージン時間bを事前に設定しておき、時刻ts(n)−aと時刻te(n)+bをシーン区間時刻として検出する。 As a margin for defining a step 205) the scene section, and margins time a relative to the beginning of the section, it may be set in advance a margin time b for section end time ts (n) -a and time te (n) + b It is detected as a scene interval time.

ステップ206) 全てのコメントグループに対して処理を行ったかを判断する。 Step 206) to determine whether the processing has been performed for all the comment group. 行っている場合には、ステップ205の処理へ移行し、行っていない場合には、ステップ207の処理を実行する。 If you are done, the process proceeds to step 205, if not done, executes the process of step 207.

ステップ207) 次のコメントグループに対する処理を行う。 Step 207) performs the process for the next comment group.

ステップ208) 全てのコメントグループに対してシーン区間時刻の設定処理を行った場合には、下記の区間をシーン区間として検出する。 When performing the setting process of the scene segments time for the step 208) all comments group, it detects a section below the scene section.

映像時刻の先頭から時刻ts(1)−aまでの区間; Interval from the beginning of the video time to time ts (1) -a;
時刻te(n)−aから時刻te(n)+b (n=1,2,…,N−1) Time te (n) time from -a te (n) + b (n = 1,2, ..., N-1)
時刻te(n)+bから時刻ts(n+1)−a (n=1,2,…,N−1) Time te (n) + b from the time ts (n + 1) -a (n = 1,2, ..., N-1)
時刻ts(N)−aから時刻te(N)+b Time ts (N) time from -a te (N) + b
時刻te(N)+bから映像時刻の最後 以上の処理により、シーン区間が定義される様子を図8に示す。 By the time te (N) + b above processing last video time from, showing how the scene section is defined in FIG. 同図では、コメントグループが3つに分類され、最終的に7つのシーン区間が定義されたことを示す。 In the figure, it indicates that the comment group is classified into three, finally seven scene section is defined.

シーンが定義されると、当該シーン区間をシーン区間更新部5に転送し、シーン区間更新部5がデータ記憶部2のシーン区間情報を更新する。 When a scene is defined, and transfers the scene period to the scene section updating unit 5, the scene section updating unit 5 updates the scene section information of the data storage unit 2. シーン区間更新部5は、上記で得られたシーン毎にシーンIDを付与し、そのシーン毎の開始時刻(ts)と終了時刻(te)、及び、当該開始時刻・終了時刻内のコメントの識別番号をデータ記憶部2のシーン区間情報テーブルに格納する。 The scene section updating unit 5, and imparts a scene ID for each scene obtained above, the start time (ts) and the end time for each scene (te), and the identification of the comments in the start time and end time stores the number of the data storage unit 2 in the scene section information table.

[第2の実施の形態] Second Embodiment
本実施の形態におけるコミュニケーション装置の構成は、図3に示す構成と同様である。 Configuration of communication device in the present embodiment is the same as that shown in FIG.

以下では、シーン区間が既に定義されている場合に(図6、ステップ102、Yes)、コメント分析により、新たなシーン区間が定義される手順を示す。 Hereinafter, when a scene period have already been defined (Figure 6, step 102, Yes), the comment analysis, it shows a procedure for a new scene section is defined.

図9は、本発明の第2の実施の形態におけるコメント分析によるシーン区間検出部の処理のフローチャートである。 Figure 9 is a flowchart of the processing of the scene section detecting portion commented analysis in the second embodiment of the present invention. なお、以下の処理において、図7に示すフローチャート同様の動作については同一のステップ番号を付し、その説明を省略する。 Incidentally, in the following processing, the same step numbers are used for flow similar operation shown in FIG. 7, a description thereof will be omitted.

ステップ301) 既存のシーン区間の識別番号であるs(s=1,2,…,S)に対してs=1に設定する。 Step 301) s (s = 1,2 is the identification number of an existing scene period, ... is set to s = 1 with respect to S).

ステップ302) データ記憶部2から識別番号sのシーン区間に対して付与されたコメント情報を読み取る。 Step 302) reads the comment information granted to scene section identification number s from the data storage unit 2.

ステップ201) ステップ302で取得したコメント情報を対象に、図7のステップ201のコメント分類処理を施す。 Targeting the comment information acquired in step 201) Step 302 performs comments classification process in step 201 of FIG.

ステップ303) 分類されたコメントグループの数が1より大きいかを判定し、大きい場合には、ステップ202の処理に移行し、大きくない場合には、ステップ305に移行する。 Step 303) The number of classified comment group determines whether greater than 1, is greater, the process proceeds to the process of step 202, if not, the process proceeds to step 305.

以下、図7のステップ202,203,204、206,207の処理を実行する。 Hereinafter, it executes the processing of steps 202,203,204,206,207 of FIG.

ステップ304) シーン区間sをコメントグループ数のN個の区間に分割する。 Step 304) to split the scene section s comments number of groups of the N number of sections. n個目とn+1個目のシーン区間の区切りは、 Delimited of the n-th and (n + 1) th of the scene section,
te(n)+(ts(n+1)−te(n))/2 te (n) + (ts (n + 1) -te (n)) / 2
とする。 To.

ステップ305) 既存の全てのシーン区間に対して処理を行ったかを判断する。 Step 305) It is determined whether processing has been performed for all the existing scene section. 行っている場合には、全体の処理を終了し、行っていない場合には、ステップ304の処理を実行する。 If you are done, and the entire process ends, if not done, it executes the process of step 304.

ステップ306) 既存の次のシーン区間に対する処理を行う。 Step 306) performs processing on existing next scene section.

以上述べた処理により、既存のシーン区間が分割される様子を図10に示す。 By the processing described above is shown in FIG. 10 how the existing scene period is divided. 同図における既存の「シーン区間2」が2つのコメントグループに分類されたため、処理終了後に定義されたシーン区間に示すように分割される。 Since "scene period 2" existing in the drawing is divided into two comments groups are divided as shown in the defined scene period after treatment completion. このように、長いシーン区間がある場合には、適切に分割されるようになる。 Thus, if there is a long scene period it will be properly divided.

[第3の実施の形態] Third Embodiment
本実施の形態におけるコミュニケーション装置の構成は、前述の図3に示す構成と同様である。 Configuration of communication device in the present embodiment is the same as that shown in Figure 3 described above.

以下では、同図を用いてシーン区間が既に設定されている場合に(図6、ステップ102、Yes)、コメント分析により新たなシーン区間が定義される手順を示す。 Hereinafter, it shows a procedure when the scene section using the same figure has already been set (Fig. 6, step 102, Yes), a new scene section by comment analysis is defined.

本実施の形態では、既存のシーン区間の中に視聴者にとっては同一の話題である区間が複数の区間に分割されていた場合に、シーン区間検出部4において、それらの区間を類似度を用いて統合する処理について説明する。 In this embodiment, when the interval for the viewer in an existing scene section of the same topic has been divided into a plurality of sections, the scene section detecting unit 4, the degree of similarity with those of the section process of integrating Te will be described.

図11は、本発明の第3の実施の形態におけるコメント分析によるシーン区間検出部の処理のフローチャートである。 Figure 11 is a flowchart of the processing of the scene section detecting portion commented analysis in the third embodiment of the present invention.

ステップ401) 既存のシーン区間の識別番号であるs(s=1,2,…,S)に対して、s=1を設定する。 Step 401) is an identification number of an existing scene section s (s = 1,2, ..., with respect to S), sets the s = 1.

ステップ402) データ記憶部2から、識別番号sとs+1のシーン区間に対して付与されたコメント情報を読み取る。 From step 402) data storage unit 2 to read the comment information granted to the identification number s and s + 1 of the scene section.

ステップ403) ステップ402で取得したコメント情報のコメント分に対して形態素解析を行う。 Performing morphological analysis on comment content of the acquired comment information in step 403) Step 402.

ステップ404) 形態素解析の結果から、識別番号sのシーン区間に対する名詞の頻度分布、及び、識別番号、s+1のシーン区間に対する名詞の頻度分布をそれぞれ求める。 Step 404) As a result of the morphological analysis, the frequency distribution of the noun for the scene segment identification number s, and obtains the identification number, s + 1 of the frequency distribution of the noun for the scene section, respectively. 頻度分布を求めるときに、意味が類似した名詞の辞書データを用意しておくことで、類似した名詞をまとめてカウントする方法も有効である。 When determining the frequency distribution, meaning by preparing the dictionary data nouns similar, it is also effective to count together similar nouns.

ステップ405) 予め設定しておいた以上の頻度の名詞について、識別番号sと識別番号s+1のシーン区間で共通した名詞の数ns(s,s+1)を算出する。 Step 405) The noun preset which had been more frequently, to calculate the number ns of common nouns in the identification number s identification number s + 1 of scene section (s, s + 1).

ステップ406) 共通した名詞の数ns(s,s+1)が予め設定しておいた値NSより大きいかを判定する。 Step 406) The number ns (s common nouns, s + 1) is determined value or NS greater than a preset. 大きい場合にはステップ407の処理に移行し、大きくない場合には、ステップ408の処理を実行する。 If large shifts to the process of step 407, if not greater, executes the process of step 408.

ステップ407) 識別番号sと識別番号s+1のシーン区間を統合して1つの区間とする。 Step 407) by integrating the identification number s and the identification number s + 1 of scene section and one section.

ステップ408) データ記憶部2に存在する既存の全てのシーン区間に対して処理を行ったかを判断する。 Step 408) It is determined whether processing has been performed for all the scene section of existing that present in the data storage unit 2. 行っている場合には、全体の処理を終了し、行っていない場合にはステップ409の処理を実行する。 If it is done, and the entire process ends, and if not going to perform the process of step 409.

ステップ409)既存の次のシーン区間に対する処理を行う。 Step 409) performs processing on existing next scene section.

上記の処理により既存のシーン区間が統合される例を図12に示す。 An example of existing scene period are integrated by the processing shown in FIG. 12. 同図における既存の「シーン区間2」と「シーン区間3」の類似度が大きいと判定され、これらが統合された例を示す。 It is determined that the similarity of "scene section 3" existing between "scene section 2" in the figure is large, showing an example in which they have been integrated. このように、既存のシーン区間の中に視聴者にとっては同一の話題である区間が複数の区間に分割されていた場合には、それらの区間が統合されるようになる。 Thus, if the interval for viewers in the existing scene section of the same topic has been divided into a plurality of sections is as their sections are integrated.

[第4の実施の形態] Fourth Embodiment
本実施の形態におけるコミュニケーション装置の構成は、図3に示す構成と同様である。 Configuration of communication device in the present embodiment is the same as that shown in FIG.

本実施の形態では、コメント分析によるシーン区間検出処理部4によるシーン区間の分割処理及びシーン区間の統合処理について説明する。 In this embodiment, will be described division processing and integration processing of the scene section scene period by the scene section detecting unit 4 commented analysis. つまり、前述の第2の実施の形態のシーン区間の分割と、第3の実施の形態のシーン区間の統合処理を組み合わせた例である。 That is, an example of combining and splitting the scene section of the second embodiment described above, the integration process of the scene segments of the third embodiment.

前述の図9で説明した処理によりシーン区間の分割処理を行い、分割されたシーン区間をメモリに格納しておき、当該分割処理が行われた後のメモリに格納されているシーン区間について、図11に示すシーン区間の統合処理を行う。 Performs division processing of scene segments by the process described in FIG. 9 described above, the divided scene section may be stored in memory, the scene section stored in the memory after the division processing has been performed, FIG. It performs integration processing of the scene segments shown in 11.

当該処理により、既存シーン区間の中に視聴者にとってシーン区間が長い区間と同一の話題である区間が複数の区間に分割されている区間が混在する場合には、それらの区間が分割・統合されるようになる。 By this processing, when the interval period scene period are the same topic and long sections viewer in an existing scene section is divided into a plurality of sections are mixed, their section is flattened Become so.

ここで、重要なのは、コメント内容に基づいて、シーン区間を統合する処理を後に行うことにより、話題が同一区間は必ず同一のシーン区間として定義されることにある。 Here, important is based on the comment content, by performing the following operations to consolidate scene section, the topic is that the same section, which is defined without fail as the same scene section.

[第5の実施の形態] Fifth Embodiment
本実施の形態におけるコミュニケーション装置の構成を図13に示す。 The configuration of the communication apparatus in this embodiment is shown in FIG. 13. 同図に示す構成は、前述の第1の実施の形態の図3に示す構成に視聴者ビュー区間記憶部7を付加した構成である。 Configuration shown in the figure is a configuration obtained by adding a viewer views interval storage portion 7 to the configuration shown in FIG. 3 of the first embodiment described above.

本実施の形態では、コメント分析によるシーン区間検出処理部4によるシーン区間の分割処理及びシーン区間の統合処理について説明する。 In this embodiment, will be described division processing and integration processing of the scene section scene period by the scene section detecting unit 4 commented analysis.

上記に示した既にシーン区間が定義されている場合に、既存のシーン区間を分割、または、統合する処理において、シーン区間を分割、または、統合すると判定されたときには、既存のシーン区間はデータ記憶部2にそのまま保持し、分割または、統合されるシーン区間を視聴者ビュー区間として別に視聴者ビュー区間記憶部7に格納する。 If already scene period indicated above are defined, it split an existing scene section, or in the process of integrating, divides the scene section, or when it is determined to integrate the existing scene section data storage parts as it is held in the 2, split or be stored separately in the viewer views interval storage unit 7 the scene section to be integrated as a viewer views section.

これにより、ステップ150において、視聴者コミュニケーション部1は、視聴者ビュー区間記憶部7に視聴者ビュー区間が定義されていて、かつ、ユーザ操作の指示により視聴者ビューをシーン区間に置き換えるように設定された場合には、視聴者ビュー区間記憶部7の視聴者ビュー区間をデータ記憶部2のシーン区間に置き換えて、対応する映像とコメントをデータ記憶部2から読み出して提示する。 Thus, in step 150, the viewer communication unit 1 defines the viewer views section to the viewer views interval storage unit 7, and configured to replace a viewer views the scene section in accordance with a user instruction operation If it is, replacing the viewers view section of a viewer views interval storage unit 7 in the scene section data storage unit 2, presents reads the corresponding video and comments from the data storage unit 2.

上記で述べた処理により、サービス提供者は、既存のシーン区間を固定的に使用したく、視聴者の中には、コメントの付与に基づいたシーン区間に変更したい要望があったときに、両者の要望を満足することができる。 By the process described above, the service provider, want to use an existing scene section in a fixed manner, at the time in the audience, there was a desire to want to change the scene section based on the grant of comments, both it is possible to satisfy the requirements.

また、上記の第1〜第5の実施の形態において、映像における画像情報が大きく変化するカット点から次のカット点までの区間、発話区間、音の発生区間のいずれかをイベント区間として検出しておき、検出したシーン区間がイベント区間と重なる場合には、区間の開始は、イベント区間の直前に、区間の終了はイベント区間の終了直後に変更する。 Further, in the first to fifth embodiments described above, detects a section from the cut point to the image information in the image is largely changed to the next cut point, speech segment, one of the generation interval of the sound as event section advance, in the case where the detected scene section overlaps with the event period, the start of the section, just before the event period, the end of the section is to change immediately after the end of the event section. なお、映像におけるイベント区間の検出方法については、既存の技術を用いるものとする。 Incidentally, the detection method of the event section in the video shall be used existing technology.

また、上記の第1〜第5の実施の形態の各動作をプログラムとして構築し、コミュニケーション装置として利用されるコンピュータにインストールして実行する、または、ネットワークを介して流通させることも可能である。 Moreover, to construct each operation of the first to fifth embodiments described above as a program to be installed and run on computers utilized as a communication device, or, it is also possible to be distributed via the network.

なお、本発明は、上記の実施の形態に限定されることなく、特許請求の範囲内において種々変更・応用が可能である。 The present invention is not limited to the above embodiments, and variations and modifications may be made within the scope of the appended claims.

本発明は、映像中のシーンとコメントを表示するシステムに適用可能である。 The present invention is applicable to a system for displaying a scene and comments in a video.

本発明の原理構成図である。 It is a principle diagram of the present invention. 本発明の原理説明図である。 It is an explanatory view of the principle of the present invention. 本発明の一実施の形態におけるコミュニケーション装置の構成図である。 It is a configuration diagram of a communication device in the embodiment of the present invention. 本発明の一実施の形態におけるシーン定義処理のフローチャートである。 It is a flowchart of a scene definition processing according to an embodiment of the present invention. 本発明の一実施の形態におけるシーン定義処理の詳細なフローチャートである。 In one embodiment of the present invention is a detailed flow chart of the scene definition process. 本発明の一実施の形態における多重シーン定義の状態を説明するための図である。 It is a diagram for explaining a state of the multi-scene definition in one embodiment of the present invention. 本発明の一実施の形態におけるシーン定義ファイルの例である。 It is an example of a scene definition file according to an embodiment of the present invention. 本発明の一実施の形態における映像・コメント同期再生処理のフローチャートである。 It is a flowchart of the video comment synchronized playback processing according to an embodiment of the present invention. 本発明の一実施の形態における映像コメント同期再生処理のフローチャートである。 It is a flowchart of the video comment synchronized playback processing according to an embodiment of the present invention. 本発明の一実施の形態におけるユーザコメント記憶部に格納されるコメントの例である。 It is an example of a comment stored in the user comment storage unit in the embodiment of the present invention. 本発明の一実施の形態におけるコメント受付処理のフローチャートである。 It is a flowchart of the comment reception processing according to an embodiment of the present invention. 本発明の一実施の形態におけるユーザからシーンに対するコメントを取得する画面例である。 From the user in one embodiment of the present invention is a screen example of obtaining a comment on the scene. 本発明の一実施の形態におけるコメント取得時のシーンIDの判断方法の例である。 It is an example of a method of determining the scene ID of the comment at acquisition in one embodiment of the present invention.

符号の説明 DESCRIPTION OF SYMBOLS

10 ユーザ入力端末11 シーン定義部12 シーン定義手段、シーン定義登録部20 表示手段、ユーザ表示端末21 映像・コメント同期再生手段、映像・コメント同期配信部22 ユーザコメント受け取り部31 映像記憶手段、映像記憶部32 シーン定義情報記憶手段、シーン定義情報記憶部33 ユーザコメント記憶手段、ユーザコメント記憶部 10 User input terminal 11 scene definition unit 12 scene definition means, scene definition registering unit 20 display unit, a user display terminal 21 the video and comments synchronous playback means, video and comments synchronous distribution unit 22 user comments receiving unit 31 the video storage unit, the video storage part 32 scene definition information storage means, scene definition information storage unit 33 the user comment storage means, a user comment storage unit

Claims (10)

  1. 映像を視聴している視聴者からコメント付与の指示を取得するとコメントを付与(登録)することができ、また、視聴者から映像視聴をする指示を取得すると、映像と視聴者が付与(登録)したコメントとを同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 When you get an indication of the comment grant from viewers who are viewing the video giving a comment (registration) it is possible to, also, when you get an instruction to the video viewing from the viewer, the video and the viewer is granted (registered) in the comments and video viewers between the communication method to be presented to the viewer's terminal device to synchronize,
    映像、コメント及び少なくとも該コメントが付与された時刻及び該コメントの識別番号を含むコメント情報が格納されている記憶手段からコメント情報を取得するコメント取得ステップと、 Video, and comments acquiring a comment and comment information from the storage means comment information is stored which includes at least identification numbers of the comments granted time and the comments,
    前記コメントが付与された時刻に基づいて、前記コメントを分類するコメント付与時刻グルーピングステップと、 Based on the time the comment is granted, the comment attachment time grouping step of classifying the comment,
    前記コメント付与時刻グルーピングステップでグルーピングされたコメント群の付与時刻の中で最初と最後の時刻を基準として映像のシーン区間を定義し、前記記憶手段に格納するシーン区間検出ステップと、 A scene section detecting step of the first and last time defines the scene section of the image as a reference in the grant time grouped group comment in the comment imparting time grouping step and stored in said storage means,
    前記シーン区間を単位として、前記記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示ステップと、 A unit of the scene section, and a display step of the from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を行うことを特徴とする映像視聴者間コミュニケーション方法。 Video viewer Communication method and performing.
  2. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer by synchronizing the comments and the video terminal in the video viewers between the communication method to be presented to the apparatus,
    前記記憶手段に格納されているシーン区間及び該シーン区間のコメント及び該コメントが付与された時刻を含むコメント情報を取得するコメント取得ステップと、 And comments acquiring comment information including a time the comment and the comments scene section and the scene section is stored in the storage means is assigned,
    前記シーン区間内のコメントに対して、 前記コメントが付与された時刻に基づいてコメントを分類するコメント付与時刻グルーピングステップと、 And comment attachment time grouping step of classifying the comments above with respect to comments scene section based on the time the comment is applied,
    前記コメント付与時刻グルーピングステップでグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出ステップと、 Based on the first and last time in the time that comments that are grouped by the comment attachment time grouping step has been applied, the scene section detecting step of defining the scene section of the video,
    前記シーン区間検出ステップで定義されたシーン区間に基づいて、前記記憶手段に格納されている先に設定されているシーン区間を分割するシーン区間分割ステップと、 On the basis of the defined scene period in the scene section detecting step, the scene section dividing step of dividing a scene section that is set previously stored in the storage means,
    前記シーン区間分割ステップで分割されたシーン区間を用いて前記記憶手段のシーン区間を更新するシーン区間更新ステップと、 A scene section updating step of updating the scene section of the storage means using a scene section said divided in scene segments dividing step,
    前記シーン区間を単位として、前記記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示ステップと、 A unit of the scene section, and a display step of the from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を行うことを特徴とする映像視聴者間コミュニケーション方法。 Video viewer Communication method and performing.
  3. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer by synchronizing the comments and the video terminal in the video viewers between the communication method to be presented to the apparatus,
    前記記憶手段に格納されているシーン区間及びシーン区間内のコメントを取得するコメント取得ステップと、 And comments acquiring the comments in the scene section and scene section stored in said storage means,
    前記シーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出ステップと、 Based on the tendency of appearance of words in comments in the scene section, and scene section similarity calculation step of calculating a similarity between adjacent scene section,
    前記シーン区間類似度算出ステップで求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間の統合するシーン区間統合ステップと、 The degree of similarity calculated by the scene period similarity calculation step, in the case of more than a predetermined value, the scene section integration step of integrating the adjacent scene section,
    前記シーン区間統合ステップで統合されたシーン区間で、前記記憶手段のシーン区間を更新するシーン区間更新ステップと、 In the scene section integrated scene segments in integration step, the scene section updating step of updating the scene section of said storage means,
    前記シーン区間を単位として、前記記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示ステップと、 A unit of the scene section, and a display step of the from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を行うことを特徴とする映像視聴者間コミュニケーション方法。 Video viewer Communication method and performing.
  4. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション方法において、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer by synchronizing the comments and the video terminal in the video viewers between the communication method to be presented to the apparatus,
    前記記憶手段に格納されているシーン区間及び該シーン区間内のコメント及び該コメントが付与された時刻を含むコメント情報を取得するコメント取得ステップと、 And comments acquiring comment information including a time the comment and the comments in the scene section, and the scene section is stored in the storage means is assigned,
    前記シーン区間内のコメントに対して前記コメントが付与された時刻に基づいて、該コメントを分類するコメント付与時刻グルーピングステップと、 The relative comments scene section based on the time the comment is granted, the comment attachment time grouping step of classifying the comment,
    前記コメント付与時刻グルーピングステップでグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出ステップと、 Based on the first and last time in the time that comments that are grouped by the comment attachment time grouping step has been applied, the scene section detecting step of defining the scene section of the video,
    前記シーン区間検出ステップで定義されたシーン区間に基づいて、前記記憶手段に格納されている先に設定されているシーン区間を分割し、分割されたシーン区間をメモリに格納するシーン区間分割ステップと、 On the basis of the defined scene period in the scene section detecting step, dividing the scene section that is set previously stored in the storage means, and scene section divided storing the divided scene period in the memory ,
    前記メモリに格納されている前記シーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出ステップと、 Based on the tendency of appearance of word in comment of the scene in a section that is stored in the memory, the scene section similarity calculation step of calculating a similarity between adjacent scene section,
    前記シーン区間類似度算出ステップで求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間を統合するシーン区間統合ステップと、 The degree of similarity calculated by the scene period similarity calculating step, when more than a predetermined value, the scene section integration step of integrating the adjacent scene section,
    前記シーン区間統合ステップで統合されたシーン区間で、前記記憶手段のシーン区間を更新するシーン区間更新ステップと、 In the scene section integrated scene segments in integration step, the scene section updating step of updating the scene section of said storage means,
    前記シーン区間を単位として、前記記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示ステップと、 A unit of the scene section, and a display step of the from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を行うことを特徴とする映像視聴者間コミュニケーション方法。 Video viewer Communication method and performing.
  5. 映像を視聴している視聴者からコメント付与の指示を取得するとコメントを付与(登録)することができ、また、視聴者から映像視聴をする指示を取得すると、映像と視聴者が付与(登録)したコメントとを同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 When you get an indication of the comment grant from viewers who are viewing the video giving a comment (registration) it is possible to, also, when you get an instruction to the video viewing from the viewer, the video and the viewer is granted (registered) a communication device between the image viewer to be presented to the comments and the viewer of the terminal device to synchronize,
    映像、コメント及び少なくとも該コメントが付与された時刻及び該コメントの識別番号を含むコメント情報が格納されているデータ記憶手段と、 Video, and data storage means for comments and comment information including at least said comment identification number of granted time and the comment are stored,
    前記データ記憶手段からコメント情報を取得するコメント取得手段と、 And comments acquisition means for acquiring comment information from said data storage means,
    前記コメントが付与された時刻に基づいて、前記コメントを分類するコメント付与時刻グルーピング手段と、 Based on the time the comment is granted, the comment attachment time grouping means for classifying the comment,
    前記コメント付与時刻グルーピング手段でグルーピングされたコメント群の付与時刻の中で最初と最後の時刻を基準として映像のシーン区間を定義し、前記データ記憶手段に格納するシーン区間検出手段と、 The first and the last time defines the scene section of the image as a reference, the scene section detecting means for storing in said data storage means within a grouped comment group imparting time in the comment attachment time grouping means,
    前記シーン区間を単位として、前記記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示手段と、 A unit of the scene section, and a display unit operable from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を有することを特徴とする映像視聴者間コミュニケーション装置。 Video viewer Communication apparatus characterized by having a.
  6. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer by synchronizing the comments and the video terminal a communication device between the image viewer to be presented to the apparatus,
    シーン毎に分割された映像、シーン区間、該シーン区間に対して入力された視聴者のコメントを格納するデータ記憶手段と、 And data storage means for storing images that are divided for each scene, scene section, viewers comments entered for the scene section,
    前記データ記憶手段に格納されているシーン区間及び該シーン区間内のコメントと該コメントが付与された時刻を含むコメント情報を取得するコメント取得手段と、 And comments acquisition means for acquiring comment information including comments and time to which the comment is applied in the data storage means in the scene section, and the scene section is stored,
    前記シーン区間内のコメントに対して前記コメントが付与された時刻に基づいて、該コメントを分類するコメント付与時刻グルーピング手段と、 The relative comments scene section based on the time the comment is granted, the comment attachment time grouping means for classifying the comment,
    前記コメント付与時刻グルーピング手段でグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出手段と、 Based on the first and last time in the time grouped comment by the comment attachment time grouping means is assigned, and a scene section detecting means for defining the scene section of the video,
    前記シーン区間検出手段で定義されたシーン区間に基づいて、前記データ記憶手段に格納されている先に設定されているシーン区間を分割するシーン区間分割手段と、 On the basis of the defined scene period in the scene section detecting means, and scene section dividing means for dividing said data storage means stored with that scene period that is set previously,
    前記シーン区間分割手段で分割されたシーン区間を用いて前記データ記憶手段のシーン区間を更新するシーン区間更新手段と、 A scene period updating means for updating the scene section of the data storage means using a scene section the divided scene section dividing means,
    前記シーン区間を単位として、前記データ記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示手段と、 A unit of the scene section, and a display means for the data from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を有することを特徴とする映像視聴者間コミュニケーション装置。 Video viewer Communication apparatus characterized by having a.
  7. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer by synchronizing the comments and the video terminal a communication device between the image viewer to be presented to the apparatus,
    シーン毎に分割された映像、シーン区間、該シーン区間に対して入力された視聴者のコメントを格納するデータ記憶手段と、 And data storage means for storing images that are divided for each scene, scene section, viewers comments entered for the scene section,
    前記データ記憶手段に格納されているシーン区間及び該シーン区間内のコメントを取得するコメント取得手段と、 And comments acquisition means for acquiring a comment of the data scene section in the storage means is stored and within the scene section,
    前記シーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出手段と、 Based on the tendency of appearance of words in comments in the scene section, and scene section similarity calculation means for calculating the similarity of adjacent scene section,
    前記シーン区間類似度算出手段で求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間を統合するシーン区間統合手段と、 Similarity calculated by the scene section similarity calculation means, in the case of more than a predetermined value, the scene section integrating means for integrating the adjacent scene section,
    前記シーン区間統合手段で統合されたシーン区間で、前記データ記憶手段のシーン区間を更新するシーン区間更新手段と、 In integrated scene period in the scene section integrating means, a scene section updating means for updating the scene section of the data storage means,
    前記シーン区間を単位として、前記データ記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示手段と、 A unit of the scene section, and a display means for the data from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を有することを特徴とする映像視聴者間コミュニケーション装置。 Video viewer Communication apparatus characterized by having a.
  8. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントと映像を同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーション装置であって、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer by synchronizing the comments and the video terminal a communication device between the image viewer to be presented to the apparatus,
    シーン毎に分割された映像、シーン区間、該シーン区間に対して入力された視聴者のコメントを格納するデータ記憶手段と、 And data storage means for storing images that are divided for each scene, scene section, viewers comments entered for the scene section,
    前記データ記憶手段に格納されているシーン区間及び該シーン区間内のコメント及び該コメントが付与された時刻を含むコメント情報を取得するコメント取得手段と、 And comments acquisition means for acquiring comment information including a time the comment and the comment is given of the data scene section in the storage means is stored and within the scene section,
    前記シーン区間内のコメントに対して、 前記コメントが付与された時刻に基づいてコメントを分類するコメント付与時刻グルーピング手段と、 And comment attachment time grouping means for classifying the comments above with respect to comments scene section based on the time the comment is applied,
    前記コメント付与時刻グルーピング手段でグルーピングされたコメントが付与された時刻の中で最初と最後の時刻を基準として、映像のシーン区間を定義するシーン区間検出手段と、 Based on the first and last time in the time that comments that are grouped by the comment attachment time grouping means is assigned, and a scene section detecting means for defining the scene section of the video,
    前記シーン区間検出手段で定義されたシーン区間に基づいて、前記データ記憶手段に格納されている先に設定されているシーン区間を分割し、分割されたシーン区間をメモリに格納するシーン区間分割手段と、 On the basis of the defined scene period in the scene section detecting means, the data stored in the storage means are divided into a scene section that is set previously, the scene section dividing means for storing the divided scene period in the memory When,
    前記メモリに格納されている前記シーン区間内のコメント中の単語の出現傾向に基づいて、隣接するシーン区間の類似度を算出するシーン区間類似度算出手段と、 Based on the tendency of appearance of word in comment of the scene in a section that is stored in the memory, the scene section similarity calculation means for calculating the similarity of adjacent scene section,
    前記シーン区間類似度算出手段で求めた類似度が、予め設定された値以上の場合には、隣接するシーン区間を統合するシーン区間統合手段と、 Similarity calculated by the scene section similarity calculation means, in the case of more than a predetermined value, the scene section integrating means for integrating the adjacent scene section,
    前記シーン区間統合手段で統合されたシーン区間で、前記データ記憶手段のシーン区間を更新するシーン区間更新手段と、 In integrated scene period in the scene section integrating means, a scene section updating means for updating the scene section of the data storage means,
    前記シーン区間を単位として、前記データ記憶手段から該シーン区間に対応するコメントと映像を読み出して、同期させて前記視聴者の端末装置に表示する表示手段と、 A unit of the scene section, and a display means for the data from the storage unit read comments and images corresponding to the scene periods, is displayed on the terminal device of the viewer in synchronization,
    を有することを特徴とする映像視聴者間コミュニケーション装置。 Video viewer Communication apparatus characterized by having a.
  9. 映像を視聴している視聴者からコメント付与の指示を取得するとコメントを付与(登録)することができ、また、視聴者から映像視聴をする指示を取得すると、映像と視聴者が付与(登録)したコメントとを同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーションプログラムであって、 When you get an indication of the comment grant from viewers who are viewing the video giving a comment (registration) it is possible to, also, when you get an instruction to the video viewing from the viewer, the video and the viewer is granted (registered) a video viewers between the communication program to be presented to the comments and the viewer of the terminal device to synchronize,
    前記請求項1記載の映像視聴者間コミュニケーション方法を実現するための処理をコンピュータに実行させることを特徴とする映像視聴者間コミュニケーションプログラム。 Claim 1 video viewers between communication programs, characterized in that to execute a process for realizing a communication method between the image viewer on the computer according.
  10. 像をシーンに分割しておき、シーン区間と、該シーン区間に対して視聴者から入力されたコメントとを記憶手段に格納しておき、該コメントを映像と同期させて視聴者の端末装置に提示する映像視聴者間コミュニケーションプログラムであって、 The movies image previously divided into scenes, a scene section may be stored and comments entered from the viewer with respect to the scene section in the storage unit, the viewer the comments in synchronization with the video terminal a video viewers between the communication program to be presented to the apparatus,
    前記請求項2乃至4記載の映像視聴者間コミュニケーション方法を実現するための処理をコンピュータに実行させることを特徴とする映像視聴者間コミュニケーションプログラム。 The claims 2 to video viewers between communication programs, characterized in that to execute 4 processing for realizing a communication method between the image viewer according to the computer.
JP2004347274A 2004-11-30 2004-11-30 Viewers between the communication method and apparatus and program Expired - Fee Related JP4270117B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004347274A JP4270117B2 (en) 2004-11-30 2004-11-30 Viewers between the communication method and apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004347274A JP4270117B2 (en) 2004-11-30 2004-11-30 Viewers between the communication method and apparatus and program

Publications (2)

Publication Number Publication Date
JP2006157687A JP2006157687A (en) 2006-06-15
JP4270117B2 true JP4270117B2 (en) 2009-05-27

Family

ID=36635393

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004347274A Expired - Fee Related JP4270117B2 (en) 2004-11-30 2004-11-30 Viewers between the communication method and apparatus and program

Country Status (1)

Country Link
JP (1) JP4270117B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100703705B1 (en) * 2005-11-18 2007-03-29 삼성전자주식회사 Multimedia comment process apparatus and method for movie
WO2008120638A1 (en) * 2007-03-30 2008-10-09 Dwango Co., Ltd. Comment delivery system, terminal, comment delivery method, and recording medium containing program
JP5475259B2 (en) * 2008-09-25 2014-04-16 株式会社東芝 Text information sharing method, server device, and client device
JP5755843B2 (en) * 2010-04-22 2015-07-29 シャープ株式会社 Electronic device, display method, and display program
JP2013045274A (en) * 2011-08-24 2013-03-04 Nec Corp Cache server, content distribution method, content distribution system, and content distribution program
JP5197841B1 (en) 2011-12-22 2013-05-15 株式会社東芝 Video playback apparatus and video playback method
JP5867230B2 (en) * 2012-03-28 2016-02-24 富士通株式会社 Information providing method, information providing program, and information providing apparatus
JP6411274B2 (en) * 2015-04-10 2018-10-24 日本電信電話株式会社 Timing correction system, method and program thereof

Also Published As

Publication number Publication date
JP2006157687A (en) 2006-06-15

Similar Documents

Publication Publication Date Title
US9554176B2 (en) Media content fingerprinting system
US8392183B2 (en) Character-based automated media summarization
US7672864B2 (en) Generating and displaying level-of-interest values
US7437296B2 (en) Speech recognition dictionary creation apparatus and information search apparatus
KR101944469B1 (en) Estimating and displaying social interest in time-based media
US9875229B2 (en) Template-based page layout for web content
CN102027473B (en) Method and system for media access by tag cloud
US20070124752A1 (en) Video viewing support system and method
US5572728A (en) Conference multimedia summary support system and method
Merialdo et al. Automatic construction of personalized TV news programs
KR100672296B1 (en) Method for calculating program rating using both direction TV
JP4088131B2 (en) Synchronization content information generation program, synchronization content information generating apparatus and the synchronization content information generation method
US9218367B2 (en) Method and interface for indexing related media from multiple sources
US20090150784A1 (en) User interface for previewing video items
US20020051077A1 (en) Videoabstracts: a system for generating video summaries
US6295092B1 (en) System for analyzing television programs
US6148304A (en) Navigating multimedia content using a graphical user interface with multiple display regions
US20030048289A1 (en) Assembling verbal narration for digital display images
US9202523B2 (en) Method and apparatus for providing information related to broadcast programs
JP2005533398A (en) System and method for multi-media data objects in real-time slide presentation, as well as to record the multimedia data object browsing
EP1581893A2 (en) System and method for annotating multi-modal characteristics in multimedia documents
CN100462975C (en) Information presentation method and information presentation apparatus
WO2004031911A2 (en) Methods and apparatus to present survey information
US8812311B2 (en) Character-based automated shot summarization
JPH09237264A (en) Multimedia based reporting system and method for preparing multimedia based report

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060414

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080715

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080807

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090203

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090216

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120306

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130306

Year of fee payment: 4

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees