JP2023180357A - Specific control device, distribution system, specific control method, and specific control program - Google Patents
Specific control device, distribution system, specific control method, and specific control program Download PDFInfo
- Publication number
- JP2023180357A JP2023180357A JP2022093590A JP2022093590A JP2023180357A JP 2023180357 A JP2023180357 A JP 2023180357A JP 2022093590 A JP2022093590 A JP 2022093590A JP 2022093590 A JP2022093590 A JP 2022093590A JP 2023180357 A JP2023180357 A JP 2023180357A
- Authority
- JP
- Japan
- Prior art keywords
- video
- information
- partial
- person
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000009826 distribution Methods 0.000 title claims description 19
- 238000000034 method Methods 0.000 title claims description 12
- 238000003860 storage Methods 0.000 claims abstract description 164
- 239000000284 extract Substances 0.000 claims description 6
- 238000000605 extraction Methods 0.000 description 44
- 230000006870 function Effects 0.000 description 14
- 230000010365 information processing Effects 0.000 description 9
- 238000004519 manufacturing process Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 238000013518 transcription Methods 0.000 description 7
- 230000035897 transcription Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Abstract
Description
本発明は、特定制御装置等に関する。 The present invention relates to a specific control device and the like.
特定の人物が登場している動画を視聴したい場合、一般的には、視聴者は、まず、特定の人物が登場している動画の名称などを、情報検索サイトなどで検索する。そして、視聴者は、動画配信サイトなどを利用して、特定の人物が登場している動画を視聴する。動画配信サイトは、映画や放送番組などの動画を配信する。 When a viewer wants to watch a video in which a specific person appears, the viewer typically first searches for the name of the video in which the specific person appears on an information search site or the like. Then, the viewer uses a video distribution site or the like to watch a video in which a specific person appears. Video distribution sites distribute videos such as movies and broadcast programs.
特定の人物が登場している部分だけを視聴したい場合、まず、視聴者は、視聴する動画を始点から再生する。そして、視聴者は、特定の人物が登場していないシーンを、早送り再生する。視聴者は、特定の人物が登場しているシーンを発見すると、通常再生を行う。しかし、早送り再生の際、特定の人物が登場していることに気づかず、視聴者が登場シーンを早送り再生してしまう可能性がある。 If the viewer wants to view only the portion in which a specific person appears, the viewer first plays back the video to be viewed from the starting point. The viewer then fast-forwards and plays back scenes in which a specific person does not appear. When a viewer discovers a scene in which a specific person appears, the viewer performs normal playback. However, during fast-forward playback, there is a possibility that the viewer will not notice that a specific person appears and will fast-forward playback the scene in which the character appears.
そのため、特定の人物が登場していない部分をスキップして、特定の人物が登場している部分を視聴できることが望まれている。この機能は、動画提供元（放送局など）にとっても、多くの動画が視聴されることにつながり、収入増につながる可能性がある。 Therefore, it is desired to be able to skip the parts where a specific person does not appear and watch the part where the specific person appears. For video providers (broadcasting stations, etc.), this feature may also lead to more videos being viewed, leading to increased revenue.
これに関連する技術として、特許文献１から特許文献３に記載された技術がある。これらの技術では、動画の中から、検出対象の人物が撮像されている場面を検出し、検出された場面の再生を行う。 Techniques related to this include those described in Patent Documents 1 to 3. In these techniques, a scene in which a person to be detected is imaged is detected from a video, and the detected scene is played back.
特許文献１から特許文献３に記載されている技術では、検出対象の人物の顔画像に基づいて、人物が撮像されている場面が検出される。そのため、その人物の顔が撮像されていない場面や動画、たとえば、その人物の声だけが登場している場面、その人物が後ろ向きで話している場面、アニメ作品などは、検出されない。 In the techniques described in Patent Documents 1 to 3, a scene in which a person is imaged is detected based on a face image of the person to be detected. Therefore, scenes and videos in which the person's face is not captured, such as scenes in which only the person's voice appears, scenes in which the person is backwards talking, and animation works are not detected.
本発明の目的は、上記課題を鑑み、特定の人物の顔が撮像されていない場面や特定の人物の顔が撮像されていない動画についても、特定の人物の登場部分を視聴者に提供することを可能にする特定制御装置等を提供することにある。 In view of the above-mentioned problems, an object of the present invention is to provide viewers with the portion where a specific person appears even in scenes where the specific person's face is not captured or videos in which the specific person's face is not captured. The objective is to provide a specific control device etc. that makes it possible.
本発明の一態様において、特定制御装置は、人物を示す情報である人物情報を受信する受信部と、映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得する動画取得部と、取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定する映像特定部と、取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定する音声特定部と、取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる制御部とを備える。 In one aspect of the present invention, the specific control device receives the personal information from a receiving unit that receives personal information that is information indicating a person, and a video storage device that stores a video including video information and audio information. a video acquisition unit that acquires the video related to the person shown in the video, and a video acquisition unit that specifies a partial video that is a portion including the video of the person from the acquired video, and in which position of the video the partial video is included. a video specifying unit that specifies partial video position information, which is information indicating whether the person an audio specifying unit that specifies partial audio position information, which is information indicating whether the partial audio is included; Appearance part information indicating which position in the video is included is associated with the person information and video information that is information related to the video, and the partial video position information and the partial audio position information are associated with the appearance part. and a control unit that causes the appearance part information to be stored in the appearance part information storage means for storing the appearance part information in the information.
また、本発明の他の態様において、特定制御方法は、人物を示す情報である人物情報を受信し、映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得し、取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定し、取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定し、取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる。 In another aspect of the present invention, the identification control method includes receiving person information that is information indicating a person, and selecting the person information from a video storage device that stores a video including video information and audio information. acquiring the video related to the person shown, identifying a partial video that is a portion including the video of the person from the acquired video, and indicating at which position in the video the partial video is included. identifying partial video position information, which is information, identifying partial audio, which is a portion including the voice of the person, from the acquired video, and information indicating at which position in the video the partial audio is included; , and indicates, with respect to the acquired video, in which position of the video the appearance portion that corresponds to at least either the partial video or the partial audio is included. The partial information is associated with the person information and video information that is information related to the video, and the partial video position information and the partial audio position information are included in the appearance partial information and the appearance partial information is stored. The information is stored in the appearance portion information storage means.
また、本発明の他の態様において、特定制御プログラムは、コンピュータに、人物を示す情報である人物情報を受信する受信機能と、映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得する動画取得機能と、取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定する映像特定機能と、取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定する音声特定機能と、取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる制御機能とを実現させる。 In another aspect of the present invention, the specific control program includes a receiving function for receiving person information, which is information indicating a person, in the computer, and a video storage device storing a video including video information and audio information. A video acquisition function that acquires the video related to the person indicated by the person information, and a video acquisition function that identifies a partial video that is a portion that includes the video of the person from the acquired video, and determines where in the video it is located. A video identification function that identifies partial video position information that is information indicating whether the partial video is included; and a video identification function that identifies partial audio that is a portion that includes the voice of the person from the acquired video; an audio identification function that specifies partial audio position information that is information indicating where the partial audio is included; and a portion of the acquired video that corresponds to at least one of the partial video and the partial audio. Appearance part information indicating where in the video the appearance part is included is associated with the person information and video information that is information related to the video, and the partial video position information and the partial audio position are information is included in the appearance part information and stored in the appearance part information storage means for storing the appearance part information.
本発明によれば、特定の人物の顔が撮像されていない場面や特定の人物の顔が撮像されていない動画についても、特定の人物の登場部分を視聴者に提供することが可能になる。 According to the present invention, it is possible to provide a viewer with a portion in which a specific person appears even in a scene where a specific person's face is not captured or a video in which a specific person's face is not captured.
［第一の実施形態］
本発明の第一の実施形態について説明する。第一の実施形態における特定制御装置１０の具体的な一例が、後述する第二の実施形態における特定制御装置２０である。
[First embodiment]
A first embodiment of the present invention will be described. A specific example of the
図１に本実施形態の特定制御装置１０の構成例を示す。本実施形態の特定制御装置１０は、受信部１１と動画取得部１２と映像特定部１３と音声特定部１４と制御部１５とを含む。
FIG. 1 shows a configuration example of a
受信部１１は、人物情報を受信する。人物情報は、人物を示す情報である。
The
動画取得部１２は、動画記憶装置から、人物情報が示す人物に関連する動画を取得する。動画記憶装置は、動画を記憶している。動画は、映像情報と音声情報とを含む。
The
映像特定部１３は、取得された動画から、部分映像を特定する。部分映像は、人物情報が示す人物の映像を含む部分である。また、映像特定部１３は、部分映像位置情報を特定する。部分映像位置情報は、動画のどの位置に部分映像が含まれているかを示す情報である。
The
音声特定部１４は、取得された動画から、部分音声を特定する。部分音声は、人物情報が示す人物の音声を含む部分である。また、音声特定部１４は、部分音声位置情報を特定する。部分音声位置情報は、動画のどの位置に部分音声が含まれているかを示す情報である。
The
制御部１５は、取得された動画について、登場部分情報を登場部分情報記憶手段に記憶させる。登場部分情報は、登場部分が動画のどの位置に含まれているかを示す情報である。登場部分は、部分映像および部分音声の少なくともいずれかに該当する部分である。登場部分情報記憶手段は、登場部分情報を記憶する。このとき、制御部１５は、人物情報と動画情報とに対応付けて、登場部分情報を登場部分情報記憶手段に記憶させる。動画情報は、動画に関する情報である。また、制御部１５は、登場部分情報に、部分映像位置情報と部分音声位置情報とを含めて、登場部分情報記憶手段に記憶させる。
The
次に、図２に本実施形態の特定制御装置１０の動作フローの例を示す。
Next, FIG. 2 shows an example of the operation flow of the
受信部１１は、人物情報を受信する（ステップＳ１０１）。
The receiving
動画取得部１２は、動画記憶装置から、人物情報が示す人物に関連する動画を取得する（ステップＳ１０２）。
The
映像特定部１３は、取得された動画から、部分映像を特定する。また、映像特定部１３は、部分映像位置情報を特定する（ステップＳ１０３）。
The
音声特定部１４は、取得された動画から、部分音声を特定する。また、音声特定部１４は、部分音声位置情報を特定する（ステップＳ１０４）。
The
制御部１５は、取得された動画について、登場部分情報を登場部分情報記憶手段に記憶させる（ステップＳ１０５）。このとき、制御部１５は、登場部分情報に、部分映像位置情報と部分音声位置情報とを含めて、登場部分情報記憶手段に記憶させる。
The
以上で説明したように、本発明の第一の実施形態では、特定制御装置１０は、受信部１１と動画取得部１２と映像特定部１３と音声特定部１４と制御部１５とを含む。受信部１１は、人物情報を受信する。人物情報は、人物を示す情報である。動画取得部１２は、動画記憶装置から、人物情報が示す人物に関連する動画を取得する。動画記憶装置は、動画を記憶している。動画は、映像情報と音声情報とを含む。映像特定部１３は、取得された動画から、部分映像を特定する。部分映像は、人物情報が示す人物の映像を含む部分である。また、映像特定部１３は、部分映像位置情報を特定する。部分映像位置情報は、動画のどの位置に部分映像が含まれているかを示す情報である。音声特定部１４は、取得された動画から、部分音声を特定する。部分音声は、人物情報が示す人物の音声を含む部分である。また、音声特定部１４は、部分音声位置情報を特定する。部分音声位置情報は、動画のどの位置に部分音声が含まれているかを示す情報である。制御部１５は、取得された動画について、登場部分情報を登場部分情報記憶手段に記憶させる。登場部分情報は、動画のどの位置に登場部分が含まれているかを示す情報である。登場部分は、部分映像および部分音声の少なくともいずれかに該当する部分である。登場部分情報記憶手段は、登場部分情報を記憶する。このとき、制御部１５は、人物情報と動画情報とに対応付けて、登場部分情報を登場部分情報記憶手段に記憶させる。動画情報は、動画に関する情報である。また、制御部１５は、登場部分情報に、部分映像位置情報と部分音声位置情報とを含めて、登場部分情報記憶手段に記憶させる。
As described above, in the first embodiment of the present invention, the
このように、特定制御装置１０は、部分映像位置情報と部分音声位置情報とを特定し、部分映像位置情報と部分音声位置情報とを登場部分情報に含めて、登場部分情報記憶手段に記憶させる。これにより、表示制御装置は、登場部分情報記憶手段に記憶されている登場部分情報を参照して、登場部分情報に関する情報を視聴者端末に表示させることが可能になる。また、表示制御装置は、登場部分情報を参照して、登場部分を視聴者に提供することができる。そのため、特定の人物の顔が撮像されていない場面や特定の人物の顔が撮像されていない動画についても、特定の人物の登場部分を視聴者に提供することが可能になる。
In this way, the
［第二の実施形態］
次に、本発明の第二の実施形態における特定制御装置２０について説明する。第一の実施形態における特定制御装置１０の具体的な一例が、第二の実施形態における特定制御装置２０である。
[Second embodiment]
Next, a
まず、図３に、本実施形態の特定制御装置２０を含む配信システム８０の構成例を示す。配信システム８０は、特定制御装置２０、抽出エンジン３０、登場部分情報記憶手段４０および表示制御装置５０を含む。特定制御装置２０は、抽出エンジン３０と登場部分情報記憶手段４０とに接続される。また、特定制御装置２０は、動画記憶装置６０－ｉ（ｉは１以上Ｎ以下の整数）に接続される。表示制御装置５０は、登場部分情報記憶手段４０に接続される。また、表示制御装置５０は、動画記憶装置６０－ｉに接続される。視聴者端末７０は、表示制御装置５０に接続されることができる。
First, FIG. 3 shows a configuration example of a
動画記憶装置６０－ｉは、動画を蓄積している。動画は、映像情報と音声情報とを含む。動画は、たとえば、映画や放送番組などであるが、これらに限られない。また、動画記憶装置６０－ｉは、特定制御装置２０から要求された動画を、特定制御装置２０へ送信する。また、動画記憶装置６０－ｉは、表示制御装置５０から要求された動画を、表示制御装置５０へ送信する。動画記憶装置６０－ｉは、たとえば、放送局や映画配信事業者などによって提供される。動画記憶装置６０－ｉを提供する事業者を、配信事業者とよぶことがある。
The video storage device 60-i stores videos. A video includes video information and audio information. Videos include, for example, movies and broadcast programs, but are not limited to these. Further, the video storage device 60-i transmits the video requested by the
視聴者端末７０は、動画を視聴したい視聴者によって利用される端末である。視聴者端末７０は、たとえば、スマートフォン、携帯電話機、パーソナルコンピュータ等の通信装置である。視聴者端末７０は、視聴者によって視聴が希望されている動画の情報、たとえば、視聴が希望されている人物の情報を、表示制御装置５０に入力することができる。また、視聴者端末７０は、再生開始、再生停止といった、動画の再生操作に関する指示を、表示制御装置５０に入力することができる。動画は、表示制御装置５０経由で、動画記憶装置６０－ｉから視聴者端末７０に提供される。
The
特定制御装置２０および抽出エンジン３０については、後述する。
The
登場部分情報記憶手段４０は、登場部分情報を記憶する。登場部分情報は、人物情報と動画情報とに対応付けられている。人物情報は、人物を示す情報である。動画情報は、動画に関する情報である。登場部分情報は、動画のどの位置に登場部分が含まれているかを示す情報である。登場部分は、部分映像および部分音声の少なくともいずれかに該当する部分である。部分映像位置情報は、動画のどの位置に部分映像が含まれているかを示す情報である。部分音声位置情報は、動画のどの位置に部分音声が含まれているかを示す情報である。部分映像は、動画のうち、人物情報が示す人物の映像を含む部分である。部分映像は、動画のうち、人物情報が示す人物の音声を含む部分である。 The appearance part information storage means 40 stores appearance part information. Appearance information is associated with person information and video information. Person information is information indicating a person. The video information is information related to videos. The appearance part information is information indicating at which position in the video the appearance part is included. The appearing portion is a portion corresponding to at least one of partial video and partial audio. Partial video position information is information indicating at which position in a moving image a partial video is included. The partial audio position information is information indicating at which position in the video the partial audio is included. The partial video is a portion of the video that includes the video of the person indicated by the person information. The partial video is a portion of the video that includes the voice of the person indicated by the person information.
表示制御装置５０は、視聴者端末７０から人物情報が入力された場合に、入力された人物情報に対応付けられている登場部分情報を、登場部分情報記憶手段４０から取得する。そして、登場部分情報に関する情報を、視聴者端末７０に提供する。また、表示制御装置５０は、動画を動画記憶装置６０－ｉから取得して視聴者端末７０に再生させる。表示制御装置５０の詳細については後述する。
When character information is input from the
次に、図４に、本実施形態の特定制御装置２０の構成例を示す。特定制御装置２０は、受信部２１、動画取得部２２、映像特定部２３、音声特定部２４および制御部２５を含む。
Next, FIG. 4 shows a configuration example of the
受信部２１は、人物情報を受信する。人物情報は、人物を示す情報である。特定制御装置２０の記憶部（不図示）には、あらかじめ、登場部分情報の作成対象の人物の人物情報のリストが記憶されている。このリストを、以降、抽出人物リストとよぶ。抽出人物リストは、たとえば、有名な俳優、政治家、タレント等の人物情報である。受信部２１は、抽出人物リストから人物情報を読み込むことで、人物情報を受信する。
The receiving
動画取得部２２は、動画記憶装置６０－ｉから、人物情報が示す人物に関連する動画を取得する。ここでの人物情報は、受信部２１が受信した人物情報である。人物情報が示す人物に関連する動画を取得することを、以降、動画取得とよぶことがある。動画取得部２２は、人物情報が示す一人の人物について、関連する動画を取得する。一人の人物について、動画取得部２２が動画取得を行い、後述の映像特定部２３、音声特定部２４および制御部２５の処理が行われると、受信部２１が新たに別の人物の人物情報を受信する。そして、新たな人物について、動画取得部２２、映像特定部２３、音声特定部２４および制御部２５の処理が行われる。
The
動画記憶装置６０－ｉは、動画を記憶している。動画は、映像情報と音声情報とを含む。また、動画記憶装置６０－ｉは、動画と対応付けて、メタデータを記憶している。メタデータは、出演者情報などのテキストデータである。また、動画記憶装置６０－ｉは、動画と対応付けて、動画の作品名、話数、制作年などのデータも記憶している。 The moving image storage device 60-i stores moving images. A video includes video information and audio information. Further, the video storage device 60-i stores metadata in association with the video. Metadata is text data such as performer information. The video storage device 60-i also stores data such as the title of the video, the number of episodes, and the year of production in association with the video.
動画取得部２２は、たとえば、以下のように、動画取得を行う。動画取得部２２は、人物情報として、たとえば、人物名を動画記憶装置６０－ｉに送信する。そして、動画記憶装置６０－ｉから、メタデータに当該人物名が含まれる動画が、動画取得部２２に送信される。動画取得部２２は、動画記憶装置６０－ｉから送信された動画を受信する。
The
なお、古い動画の場合、メタデータが存在しない場合がある。そのため、特定制御装置２０は、さらに、メタデータ抽出部（不図示）を備えていてもよい。メタデータ抽出部は、動画記憶装置６０－ｉの各々から、メタデータがない動画を受信する。そして、メタデータ抽出部は、動画の最後部などに存在するテロップを文字認識し、認識した文字データをメタデータとして動画記憶装置６０－ｉに記憶させてもよい。なお、メタデータ抽出部は、動画取得部２２が動画取得を行うより前に、メタデータの抽出を行うとよい。
Note that in the case of old videos, metadata may not exist. Therefore, the
動画記憶装置６０－ｉには、膨大な数の動画が記憶されている可能性がある。この場合に、動画記憶装置６０－ｉに記憶されているすべての動画から動画取得を行うと、動画取得や、映像特定部２３における部分映像の特定や、音声特定部２４における部分音声の特定に時間がかかる可能性がある。そのため、動画取得部２２は、人物名に加えて制作年を動画記憶装置６０－ｉに対して指定し、指定した制作年に該当する動画の中から動画取得を行ってもよい。たとえば、動画取得部２２は、初めて動画取得を行う場合には、過去１０年分の動画を取得し、次に、さらに１０年分ずつさかのぼって動画を取得するようにしてもよい。また、動画取得部２２は、制作年とは異なる基準で取得する動画の範囲を指定してもよい。たとえば、動画取得部２２は、視聴された回数が多い順や、放送番組の場合には放送した際の視聴率が高い順などで、動画を取得してもよい。この場合、動画記憶装置６０－ｉは。各々の動画に対応付けて、視聴された回数や視聴率の情報を記憶している。
There is a possibility that a huge number of videos are stored in the video storage device 60-i. In this case, if video acquisition is performed from all videos stored in the video storage device 60-i, video acquisition, partial video identification in the
また、動画記憶装置６０－ｉに記憶されているすべての動画を対象とした動画取得が完了しても、その後、新たな動画が動画記憶装置６０－ｉに追加される可能性がある。そのため、動画取得部２２は、所定時間おき（１日１回や１週間に１回など）に、動画取得を再度行ってもよい。この場合、動画取得部２２は、すでに取得されて、人物情報に対応する登場部分情報が登場部分情報記憶手段４０に記憶されている動画については、取得の対象外とするとよい。
Further, even if video acquisition for all videos stored in the video storage device 60-i is completed, a new video may be added to the video storage device 60-i after that. Therefore, the
映像特定部２３は、動画取得部２２によって取得された動画について、部分映像を特定する。部分映像は、人物情報が示す人物の映像を含む部分である。また、映像特定部２３は、部分映像位置情報を特定する。部分映像位置情報は、動画のどの位置に部分映像が含まれているかを示す情報である。
The
より具体的には、映像特定部２３は、動画取得部２２によって取得された動画を、抽出エンジン３０に入力する。抽出エンジン３０は、入力された動画に基づいて、部分映像を特定し、部分映像位置情報を特定する。
More specifically, the
抽出エンジン３０は、たとえば、人物情報が示す人物の顔画像に基づいて部分映像を特定することができる。この場合、たとえば、映像特定部２３は、顔画像と動画とを抽出エンジン３０に入力してもよい。また、この場合、特定制御装置２０の記憶部（不図示）には、抽出人物リストの人物情報と対応付けて、人物情報が示す人物の顔画像が記憶されていてもよい。
For example, the
また、抽出エンジン３０は、たとえば、顔画像の入力を必要としない方法で、部分映像を特定してもよい。この場合、映像特定部２３は、動画取得部２２によって取得された複数の動画を抽出エンジン３０へ入力する。抽出エンジン３０は、たとえば、入力された複数の動画のうち、より多くの動画に登場している人物を部分映像の特定対象の人物として、部分映像を特定してもよい。
Furthermore, the
部分映像位置情報は、たとえば、動画の始点からの再生時間によって、部分映像の位置を示すものであってもよい。なお、動画の始点からの再生時間を、以降、タイムコードとよぶことがある。部分映像位置情報は、たとえば、部分映像の開始位置のタイムコードと、部分映像の終了位置のタイムコードとを含む。 The partial video position information may indicate the position of the partial video, for example, based on the playback time from the starting point of the video. Note that the playback time from the starting point of a video may be referred to as a time code hereinafter. The partial video position information includes, for example, a time code of the start position of the partial video and a time code of the end position of the partial video.
抽出エンジン３０が部分映像位置情報を特定すると、映像特定部２３は、部分映像位置情報を抽出エンジン３０から受信する。
When the
制御部２５は、映像特定部２３が部分映像位置情報を抽出エンジン３０から受信すると、受信した部分映像位置情報を登場部分情報に含める。そして、制御部２５は、登場部分情報を、人物情報および動画情報に対応付けて、登場部分情報記憶手段４０に記憶させる。動画情報は、動画に関する情報である。動画情報は、たとえば、動画の提供元の動画記憶装置名、作品名、話数、制作年などを含む。
When the
図５に、登場部分情報記憶手段４０に記憶される登場部分情報の例を示す。図５の例では、人物情報として人物名「俳優Ａ」が記憶されている。また、動画記憶装置名、作品名、制作年が、動画情報として記憶されている。また、登場部分情報として、タイムコードが記憶されている。登場部分情報は、タイムコードとともに、映像部分であるか、音声部分であるか、映像部分かつ音声部分であるかを示す情報を含んでいてもよい。 FIG. 5 shows an example of the appearance part information stored in the appearance part information storage means 40. In the example of FIG. 5, a person name "actor A" is stored as the person information. Further, the name of the video storage device, the name of the work, and the year of production are stored as video information. Additionally, a time code is stored as the appearance portion information. The appearance part information may include information indicating whether the part is a video part, an audio part, or a video part and an audio part, along with a time code.
また、映像特定部２３は、部分映像から、サムネイル画像を生成してもよい。映像特定部２３は、部分映像の始点における映像、始点から所定時間後の映像、部分映像のうち動きが小さい部分の映像などから、サムネイル画像を生成することができる。また、制御部２５は、登場部分情報と対応付けて、サムネイル画像を登場部分情報記憶手段４０に記憶させてもよい。
Further, the
音声特定部２４は、動画取得部２２によって取得された動画から、部分音声を特定する。部分音声は、人物情報が示す人物の音声を含む部分である。また、音声特定部２４は、部分音声位置情報を特定する。部分音声位置情報は、動画のどの部分に部分音声が含まれているかを示す情報である。
The
たとえば、音声特定部２４は、映像特定部２３で特定された部分映像が存在する場合には、当該部分映像を用いて、人物情報が示す人物の音声特徴情報を取得する。音声特徴情報は、声紋パターンなど、人物の音声を識別可能な情報である。なお、音声特徴情報の取得は、抽出エンジン３０によって実施されてもよい。
For example, if the partial video identified by the
より具体的には、音声特定部２４は、映像特定部２３で特定された部分映像の中から、撮像されている人物が一人である部分を抽出する。そして、抽出された部分の音声に基づいて、音声特徴情報を取得する。抽出エンジン３０が、部分映像の各々について、撮像されている人物の人数の情報を付与できることも考えられる。その場合には、音声特定部２４は、当該情報に基づいて、撮像されている人物が一人である部分を抽出してもよい。また、音声特定部２４は、抽出した音声特徴情報を、人物情報に対応付けて、記憶部に記憶させてもよい。
More specifically, the
そして、音声特定部２４は、取得した音声特徴情報と動画とを抽出エンジン３０に入力する。抽出エンジン３０は、部分音声を特定し、また、部分音声位置情報を特定する。
Then, the
部分音声位置情報は、たとえば、動画の始点からの再生時間によって、部分音声の位置を示すものであってもよい。部分音声位置情報は、たとえば、部分音声の開始位置のタイムコードと、部分音声の終了位置のタイムコードとを含む。 The partial audio position information may indicate the position of the partial audio, for example, based on the playback time from the starting point of the video. The partial audio position information includes, for example, the time code of the starting position of the partial audio and the time code of the ending position of the partial audio.
声優など、部分映像が抽出されない可能性がある人物については、あらかじめ、特定制御装置２０の記憶部に、抽出人物リストの人物情報と対応付けて、人物情報が示す人物の音声特徴情報が記憶されていてもよい。または、音声特定部２４は、一または複数の動画について、音声特徴情報を取得する箇所を指定する情報を受信し、当該情報で指定された箇所の音声から音声特徴情報を取得してもよい。この場合、動画取得部２２は、音声特徴情報を取得する箇所を管理者が指定するための画像を、管理者用端末（不図示）に表示させてもよい。
For people such as voice actors whose partial images may not be extracted, the voice characteristic information of the person indicated by the person information is stored in advance in the storage unit of the
制御部２５は、音声特定部２４が部分音声位置情報を抽出エンジン３０から受信すると、受信した部分音声位置情報を登場部分情報に含めて、登場部分情報記憶手段４０に記憶させる。同じ人物情報および同じ動画情報に対応付けられている登場部分情報が登場部分情報記憶手段４０にすでに記憶されている場合には、制御部２５は、部分音声位置情報を登場部分情報に追加する。人物情報に対応付けられている登場部分情報が登場部分情報記憶手段４０に記憶されていない場合には、制御部２５は、人物情報と動画情報とに対応付けて、部分音声位置情報を登場部分情報に含めて、登場部分情報記憶手段４０に記憶させる。また、制御部２５は、動画情報に対応付けられている登場部分情報が登場部分情報記憶手段４０に記憶されていない場合にも、人物情報と動画情報とに対応付けて、部分音声位置情報を登場部分情報に含めて、登場部分情報記憶手段４０に記憶させる。
When the
また、音声特定部２４は、さらに、部分音声を文字情報に変換してもよい。なお、文字情報への変換は、文字起こしともよばれる。この場合、抽出エンジン３０は、さらに、文字起こしの機能を備えていてもよい。また、抽出エンジン３０は、部分音声の特定に続き、または、部分音声の特定と並行して、文字起こしを行ってもよい。抽出エンジン３０は、部分音声の特定と並行して文字起こしを行う場合、まず、部分音声以外の部分についても文字起こしを行い、部分音声として特定された部分の文字情報を、部分音声の文字情報として出力する。また、音声特定部２４または抽出エンジン３０は、音声特徴情報に基づいて、人物情報が示す人物の音声のみの文字起こしを行ってもよい。
Furthermore, the
制御部２５は、登場部分情報と対応付けて、部分音声の文字情報を登場部分情報記憶手段４０に記憶させる。
The
次に、本実施形態の表示制御装置５０について説明する。
Next, the
表示制御装置５０は、視聴者端末７０からの要求に応じて、動画記憶装置６０－ｉから動画を取得し、視聴者端末７０に表示させる。表示制御装置５０には、視聴者が動画を視聴したい人物の人物情報が入力される。なお、視聴者が動画を視聴したい人物は、視聴対象人物と呼ばれることがある。また、視聴対象人物の人物情報を、視聴対象人物情報と呼ぶことがある。表示制御装置５０は、視聴対象人物情報に対応付けられている登場部分情報を登場部分情報記憶手段４０から取得し、登場部分情報に関する画像を、視聴者端末７０に表示させる。
The
図６に、表示制御装置５０が視聴者端末７０に表示させる動画一覧画像の例を示す。動画一覧画像は、視聴対象人物に関する動画の一覧を含む。動画一覧画像は、図６の例では、視聴対象人物が登場する部分のタイムコードを含む。タイムコードの欄には、登場部分のタイムコードが示される。また、図６の例のように、動画一覧画像は、サムネイル画像を含んでいてもよい。
FIG. 6 shows an example of a video list image displayed on the
また、図６の例のように、動画一覧画像は、視聴者がどこまで動画を視聴したかの情報を含んでいてもよい。この場合、表示制御装置５０は、どこまで動画を視聴したかの情報を、視聴者に関する情報である視聴者情報として、登場部分情報記憶手段４０または表示制御装置５０の記憶部（不図示）に記憶させておく。そして、表示制御装置５０は、視聴済みの動画の情報として、視聴済みであることを示す。また、表示制御装置５０は、登場部分の各々について、視聴済みか否かを示してもよい。
Further, as in the example of FIG. 6, the video list image may include information on how far the viewer has viewed the video. In this case, the
また、動画一覧画像は、図６の例のように、登場部分の合計時間の情報を含んでいてもよい。また、動画一覧画像は、視聴済みの時間の情報や、合計時間から視聴済みの時間を引いた残り時間の情報を含んでいてもよい。 Furthermore, the video list image may include information on the total time of the appearing portions, as in the example of FIG. Further, the video list image may include information on the viewing time and information on the remaining time obtained by subtracting the viewing time from the total time.
また、表示制御装置５０は、図６の例のように、共有された回数や「いいね」の回数を、動画一覧画像に表示させてもよい。なお、「いいね」は、視聴者が動画に好感を持った場合に視聴者端末７０から表示制御装置５０に入力される。この場合、表示制御装置５０は、記憶部に記憶されている共有回数や「いいね」の回数を、動画一覧画像に表示させる。共有や「いいね」の方法については、後述する。
Further, the
なお、動画一覧画像は、たとえば、作品名の順、制作年や注目度によって、動画の情報をソートしたものであってもよい。注目度は、たとえば、共有回数や「いいね」の回数であってもよい。 Note that the video list image may be one in which video information is sorted, for example, by title of work, year of production, or degree of attention. The degree of attention may be, for example, the number of shares or the number of "likes".
また、動画一覧画像は、図６の例のように、新たに見つかった動画があることを示す表示を含んでいてもよい。 Further, the video list image may include a display indicating that there is a newly found video, as in the example of FIG.
表示制御装置５０は、登場部分情報記憶手段４０から、視聴者端末７０によって指定された視聴対象人物の人物情報に対応する登場部分情報を登場部分情報記憶手段４０から取得して、登場部分情報に関する情報を動画一覧画像として視聴者端末７０に表示させる。このとき、表示制御装置５０は、視聴者ごとに、視聴者情報を記憶部に記憶させる。視聴者情報は、登場部分情報記憶手段４０から取得した登場部分情報と、動画がどこまで視聴されたかの情報を含む。視聴者情報に含まれる登場部分情報は、人物情報ごとに記憶される。表示制御装置５０は、登場部分情報を登場部分情報記憶手段４０から取得すると、まず、記憶部に記憶されている視聴者情報に含まれている登場部分情報と比較する。記憶部に記憶されている登場部分情報は、前回登場部分情報を取得したときの情報である。そして、今回取得した登場部分情報に、前回取得した登場部分情報にはない動画が含まれている場合、表示制御装置５０は、新たに見つかった動画があることを示す表示を、動画一覧画像に表示させる。また、表示制御装置５０は、視聴者情報を最新に更新する。
The
表示制御装置５０は、動画一覧画像に動画情報が含まれる動画を動画記憶装置６０－ｉから取得して、視聴者端末７０に再生させる。動画単位での購入またはレンタルの場合には、表示制御装置５０は、登場部分でない部分をスキップしながら、登場部分を視聴者端末７０に再生させる。登場部分単位での購入またはレンタルの場合には、表示制御装置５０は、登場部分の動画を動画記憶装置６０－ｉから取得して、視聴者端末７０に再生させる。
The
また、表示制御装置５０は、視聴者端末７０からの要求に応じて、オプション画像を視聴者端末７０に表示させてもよい。図７にオプション画像の例を示す。オプション画像は、動画再生や動画検索に関する設定のための画像である。表示制御装置５０は、オプション画像の設定に従って動作する。オプション画像は、たとえば、どこから動画を再生するかの設定を含んでいてもよい。
Further, the
また、オプション画像は、ＣＭ（Commercial Message）として、視聴対象人物が登場する映像を使用するか否かの設定を含んでいてもよい。視聴対象人物が登場する映像を使用することが設定されている場合、表示制御装置５０は、ＣＭ配信装置（不図示）から、視聴対象人物が登場しているＣＭを取得して、視聴者端末７０に表示させる。なお、ＣＭの表示のタイミングは、任意であり、あらかじめ表示制御装置５０に設定されている。
Further, the option image may include a setting as to whether or not to use a video in which a person to be viewed appears as a CM (Commercial Message). When it is set to use a video in which the person to be viewed appears, the
また、オプション画像は、後ろ姿やアニメなど、視聴対象人物が声だけで登場している部分（部分音声に該当するが、部分映像には該当しない部分）を飛ばして再生するか否かの設定を含んでいてもよい。また、オプション画像は、通常どおり動画を再生するか、または、文字情報だけ見るかの設定を含んでいてもよい。 In addition, the option image can be used to set whether or not to skip portions where the person to be viewed appears only with voice, such as from the back or in animation (parts that fall under partial audio but do not fall under partial video). May contain. Furthermore, the option image may include settings for whether to play the video normally or to view only text information.
また、表示制御装置５０は、視聴者端末７０からの要求に応じて、操作パネル画像を視聴者端末７０に表示させてもよい。操作パネル画像は、動画の再生に関する操作のための画像である。表示制御装置５０は、操作パネル画像に対する操作に従って動画を再生する。
Further, the
図８に、操作パネル画像の例を示す。「シーン」と表示されている操作アイテムは、登場部分単位で再生操作を行うための操作アイテムである。また「作品」と表示されている操作アイテムは、作品（動画）単位で再生操作を行うための操作アイテムである。 FIG. 8 shows an example of an operation panel image. The operation item displayed as "scene" is an operation item for performing a playback operation for each appearing part. Further, the operation item displayed as "work" is an operation item for performing a playback operation on a work (video) basis.
表示制御装置５０は、操作パネル画像に基づいて入力される操作指示に応じて、動画を動画記憶装置６０－ｉから取得し、再生する。また、登場部分情報記憶手段４０は、動画がどこまで視聴されたかの情報を、記憶部に記憶させる。
The
また、操作パネル画像は、共有のための操作アイテムを含んでいてもよい。共有のための操作アイテムに対する操作が行われたことに応じて、共有の指示が入力されると、表示制御装置５０は、再生中の動画の情報を、共有先へ共有する。共有先は、たとえば、ＳＮＳ（Social Networking Service）である。表示制御装置５０は、共有先として指定された共有先へ、作品名や、タイムコードの情報を送信する。また、記憶部に記憶されている、共有回数の情報を更新する。なお、共有回数は、動画ごとまたは登場部分ごとに記憶される。
Further, the operation panel image may include operation items for sharing. When a sharing instruction is input in response to an operation performed on an operation item for sharing, the
また、操作パネル画像は、「いいね」のための操作アイテムを含んでいてもよい。「いいね」のための操作アイテムに対する操作が行われたことに応じて、「いいね」の指示が入力されると、表示制御装置５０は、再生中の動画について、記憶部に記憶されている「いいね」の回数の情報を更新する。
Further, the operation panel image may include an operation item for "like". When a “like” instruction is input in response to an operation performed on an operation item for “like”, the
また、表示制御装置５０は、視聴者端末７０からの要求に応じて、設定メニュー画像を視聴者端末７０に表示させてもよい。図９に設定メニュー画像の例を示す。設定メニュー画像は、動画配信に関する設定のための画像である。
Further, the
設定メニュー画像は、契約されていない配信事業者によって提供される動画の視聴に関する設定を含んでいてもよい。この設定は、視聴対象人物の登場部分情報に、契約されていない配信事業者が提供する動画記憶装置の動画が含まれる場合の、契約処理に関する設定である。「自動で契約」が設定されている場合、表示制御装置５０は、あらかじめ設定されている契約情報を配信事業者に送信し、契約を行う。「確認してくれ」が設定されている場合、表示制御装置５０は、契約するか否かを視聴者に問い合わせる画像を視聴者端末７０に表示させる。「見ない」が設定されている場合、表示制御装置５０は、契約されていない動画記憶装置の動画については、動画記憶装置から取得しない。なお、この場合、記憶部が記憶する視聴者情報は、さらに、契約に関する情報を含む。
The settings menu image may include settings related to viewing videos provided by a distribution company with which the user does not have a contract. This setting is a setting related to contract processing when the appearance portion information of the person to be viewed includes a video stored in a video storage device provided by a distribution company with which the viewer is not contracted. If "contract automatically" is set, the
また、設定メニュー画像は、配信事業者と視聴者の間の契約の解除に関する設定を含んでいてもよい。この設定は、たとえば、ｎ日以上視聴していない動画記憶装置の契約期限が到来する場合の解約に関する設定である。表示制御装置５０は、「自動で解約」が設定されている場合、解約する旨の情報を配信事業者に送信する。また、「期限切れそうな時、通知してくれ」が設定されている場合、表示制御装置５０は、解約するか否かを視聴者に問い合わせる画像を視聴者端末７０に表示させる。また、「契約したままでいい」が設定されている場合、表示制御装置５０は、契約を継続する旨の情報を配信事業者に送信する。なお、解約されるまで契約が自動で更新される場合には、表示制御装置５０は、契約を継続する旨の情報を配信事業者に送信しなくてもよい。
Further, the settings menu image may include settings regarding cancellation of the contract between the distribution provider and the viewer. This setting is, for example, a setting for canceling a contract when a contract for a video storage device that has not been viewed for n days or more comes to an end. If "automatically cancel" is set, the
また、設定メニュー画像は、現在加入している配信事業者の情報を含んでいてもよい。この場合、設定メニュー画像は、さらに、動画の視聴に関する料金の情報、たとえば、契約月額の情報を含んでいてもよい。 Further, the setting menu image may include information about the distribution company to which the user is currently subscribed. In this case, the setting menu image may further include information on charges related to viewing the video, for example, information on the monthly contract amount.
また、設定メニュー画像は、契約の際に使用される情報、たとえば、契約の際に登録するクレジットカードの情報を含んでいてもよい。 Further, the setting menu image may include information used when making a contract, such as credit card information to be registered when making a contract.
次に、図１０から図１３に、本実施形態の特定制御装置２０に関する動作フローの例を示す。図１０は、特定制御装置２０の動作の概要を示す。図１１は、部分映像位置情報の特定に関する動作フローである。図１２は、部分音声位置情報の特定に関する動作フローである。図１３は、文字起こしに関する動作フローである。図１１から図１３は、図１０のステップＳ２０３の、より具体的な動作フローである。
Next, FIGS. 10 to 13 show examples of operational flows regarding the
まず、図１０を用いて、本実施形態の特定制御装置２０の動作の概要について説明する。
First, an overview of the operation of the
特定制御装置２０の動画取得部２２は、まず、取得範囲を指定する（図１０のステップＳ２０１）。取得範囲については後述する。
The moving
次に、受信部２１は、人物情報を受信する（ステップＳ２０２）。受信部２１は、抽出人物リストから一人分の人物情報を読み込むことで、人物情報を受信する。
Next, the receiving
また、人物情報が示す人物について、動画取得部２２が動画を取得し、映像特定部２３が部分映像を特定し、音声特定部２４が部分音声を特定する（ステップＳ２０３）。ステップＳ２０３で行われる動作については後述する。
Further, regarding the person indicated by the person information, the
そして、抽出人物リストに登録されているすべての人物情報が示す人物についてステップＳ２０３が行われると（ステップＳ２０４でＹＥＳ）、動画取得部２２は、ステップＳ２０１を実施する。
Then, when step S203 is performed for the people indicated by all the person information registered in the extraction person list (YES in step S204), the
ステップＳ２０１における取得範囲は、動画取得部２２によって動画記憶装置６０－ｉから取得される動画の範囲である。たとえば、初めてステップＳ２０２からステップＳ２０４を実施する場合、動画取得部２２は、過去１０年分の動画を、取得範囲とする。また、ステップＳ２０２からステップＳ２０４を二回目以降に実施する場合には、動画取得部２２は、さらに、１０年分ずつさかのぼって、取得範囲とする。また、新たな動画が動画記憶装置６０－ｉに追加される可能性がある。そのため、過去方向のすべての年が取得範囲として指定された後も、動画取得部２２は、所定時間おき（１日１回、１週間に１回など）に、ステップＳ２０１からステップＳ２０４を実施するとよい。この場合、動画取得部２２は、すでに取得されて、部分映像や部分音声の特定がされている動画については、取得の対象外とするとよい。部分映像や部分音声がされているかどうかは、動画取得部２２は、登場部分情報記憶手段４０に記憶されている登場部分情報により把握することができる。
The acquisition range in step S201 is the range of the video acquired by the
次に、図１１を用いて、本実施形態の特定制御装置２０の、部分映像位置情報の特定に関する動作フローについて説明する。
Next, with reference to FIG. 11, an operation flow related to specifying partial video position information by the specifying
動画取得部２２は、動画記憶装置６０－ｉ（ｉは１からＮの整数）から、人物情報が示す人物に関連する動画を取得する。ここでの人物情報は、受信部２１が受信した人物情報である。より具体的には、動画取得部２２は、人物情報が示す人物の人物名と、ステップＳ２０１で指定された取得範囲とを、動画記憶装置６０－ｉに送信する（ステップＳ３０１）。そして、動画記憶装置６０－ｉから、取得範囲に含まれる動画のうち、メタデータに当該人物名が含まれる動画が、動画取得部２２に送信される。動画取得部２２は、動画記憶装置６０－ｉから送信された動画を受信する（ステップＳ３０２）。なお、取得範囲に含まれる動画とは、取得範囲が制作年による範囲である場合、取得範囲が示す年に制作された動画である。また、動画取得部２２は、当該人物についてすでに取得したことがある動画については、取得しない。
The
映像特定部２３は、動画取得部２２によって取得された動画について、部分映像を特定する。また、映像特定部２３は、部分映像位置情報を特定する。
The
より具体的には、映像特定部２３は、動画取得部２２によって取得された動画を、抽出エンジン３０に入力する（ステップＳ３０３）。抽出エンジン３０は、入力された動画に基づいて、部分映像を特定し、部分映像位置情報を特定する（ステップＳ３０４）。
More specifically, the
抽出エンジン３０が部分映像位置情報を特定すると、映像特定部２３は、部分映像位置情報を抽出エンジン３０から受信する（ステップＳ３０５）。
When the
制御部２５は、登場部分情報を、人物情報および動画情報に対応付ける。また、制御部２５は、人物情報および動画情報が対応付けられた登場部分情報を、登場部分情報記憶手段４０に記憶させる。このとき、制御部２５は、受信した部分映像位置情報を登場部分情報に含め、登場部分情報を登場部分情報記憶手段４０に記憶させる（ステップＳ３０６、ステップＳ３０７）。
The
次に、図１２を用いて、本実施形態の特定制御装置２０の、部分音声位置情報の特定に関する動作フローについて説明する。
Next, an operation flow related to specifying partial audio position information by the specifying
音声特定部２４は、人物情報が示す人物について、映像特定部２３で特定された部分映像が存在する場合には、当該部分映像を用いて、当該人物の音声特徴情報を取得する（ステップＳ３０８）。音声特定部２４は、一または複数の動画について、音声特徴情報を取得する箇所を指定する情報を受信し、当該情報で指定された箇所の音声から音声特徴情報を取得してもよい。
If there is a partial video identified by the
そして、音声特定部２４は、ステップＳ３０８で取得された音声特徴情報と、動画取得部２２によって取得された動画とを、抽出エンジン３０に入力する（ステップＳ３０９、ステップＳ３１０）。音声特定部２４は、人物情報と音声特徴情報とがあらかじめ記憶部に記憶されている場合には、記憶部に記憶されている音声特徴情報を、抽出エンジン３０に入力してもよい。
Then, the
抽出エンジン３０は、部分音声を特定し、また、部分音声位置情報を特定する（ステップＳ３１１）。
The
制御部２５は、音声特定部２４が部分音声位置情報を抽出エンジン３０から受信すると（ステップＳ３１２）、受信した部分音声位置情報を、登場部分情報記憶手段４０に記憶されている登場部分情報に追加する（ステップＳ３１３、ステップ３１４）。人物情報に対応付けられている登場部分情報が登場部分情報記憶手段４０に記憶されていない場合には、制御部２５は、人物情報と動画情報とに対応付けて、部分音声位置情報を登場部分情報に含めて、登場部分情報記憶手段４０に記憶させる。また、制御部２５は、動画情報に対応付けられている登場部分情報が登場部分情報記憶手段４０に記憶されていない場合にも、人物情報と動画情報とに対応付けて、部分音声位置情報を登場部分情報に含めて、登場部分情報記憶手段４０に登場部分情報を記憶させる。
When the
また、音声特定部２４は、さらに、部分音声の文字起こしを行ってもよい。図１３を用いて、文字起こしにおける特定制御装置２０の動作フローについて説明する。
Furthermore, the
まず、特定制御装置２０は、動画取得部２２によって取得された動画を抽出エンジン３０に入力する（ステップＳ３１５）。なお、抽出エンジン３０が、ステップＳ３１０で入力された動画を用いて文字起こしを行うことができる場合には、ステップＳ３１５は省略されてもよい。抽出エンジン３０は、部分音声についての文字起こしを行う（ステップＳ３１６）。そして、抽出エンジン３０は、部分音声の文字情報を特定制御装置２０に送信する（ステップＳ３１７）。
First, the
制御部２５は、登場部分情報と対応付けて、部分音声の文字情報を登場部分情報記憶手段４０に記憶させる（ステップＳ３１８、ステップＳ３１９）。
The
次に、図１４に、本実施形態の表示制御装置５０の動作フローを示す。
Next, FIG. 14 shows an operation flow of the
表示制御装置５０は、視聴者端末７０からの要求に応じて、動画記憶装置６０－ｉから動画を取得し、視聴者端末７０に表示させる。表示制御装置５０には、視聴者が動画を視聴したい人物の人物情報が入力される（ステップＳ４０１）。表示制御装置５０は、入力された人物情報に対応付けられている登場部分情報を登場部分情報記憶手段４０から取得し（ステップＳ４０２、ステップＳ４０３）、登場部分情報に関する動画一覧画像を、視聴者端末７０に表示させる（ステップＳ４０４）。
The
また、表示制御装置５０は、視聴者端末７０からの再生要求に応じて（ステップＳ４０５）、動画記憶装置６０－ｉへ再生要求を行い（ステップＳ４０６）、動画記憶装置６０－ｉから動画を取得する（ステップＳ４０７）。視聴者端末７０から表示制御装置５０への再生要求は、動画一覧画像に対する視聴者の操作や、操作パネル画像に対する視聴者の操作によって行われる。また、表示制御装置５０から動画記憶装置６０－ｉへの再生要求は、動画一覧画像の動画が自動的に順に再生される場合は、次の動画が再生する際にも行われる。
Furthermore, in response to a playback request from the viewer terminal 70 (step S405), the
そして、表示制御装置５０は視聴者端末７０に動画を再生させる（ステップＳ４０８、ステップＳ４０９）。なお、表示制御装置５０は、動画がどこまで視聴されたかを示す情報を、表示制御装置５０の記憶部または登場部分情報記憶手段４０に記憶させる。
Then, the
以上で説明したように、本発明の第二の実施形態では、特定制御装置２０は、受信部２１と動画取得部２２と映像特定部２３と音声特定部２４と制御部２５とを含む。受信部２１は、人物情報を受信する。人物情報は、人物を示す情報である。動画取得部２２は、動画記憶装置から、人物情報が示す人物に関連する動画を取得する。動画記憶装置は、動画を記憶している。動画は、映像情報と音声情報とを含む。映像特定部２３は、取得された動画から、部分映像を特定する。部分映像は、人物情報が示す人物の映像を含む部分である。また、映像特定部２３は、部分映像位置情報を特定する。部分映像位置情報は、動画のどの位置に部分映像が含まれているかを示す情報である。音声特定部２４は、取得された動画から、部分音声を特定する。部分音声は、人物情報が示す人物の音声を含む部分である。また、音声特定部２４は、部分音声位置情報を特定する。部分音声位置情報は、動画のどの部分に部分音声が含まれているかを示す情報である。制御部２５は、取得された動画について、登場部分情報を登場部分情報記憶手段に記憶させる。登場部分情報は、動画のどの位置に登場部分が含まれているかを示す情報である。登場部分は、部分映像および部分音声の少なくともいずれかに該当する部分である。登場部分情報記憶手段は、登場部分情報を記憶する。このとき、制御部２５は、人物情報と動画情報とに対応付けて、登場部分情報を登場部分情報記憶手段に記憶させる。動画情報は、動画に関する情報である。また、制御部２５は、登場部分情報に、部分映像位置情報と部分音声位置情報とを含めて、登場部分情報記憶手段に記憶させる。
As described above, in the second embodiment of the present invention, the
このように、特定制御装置２０は、部分映像位置情報と部分音声位置情報とを特定し、部分映像位置情報と部分音声位置情報とを登場部分情報に含めて、登場部分情報記憶手段に記憶させる。これにより、表示制御装置は、登場部分情報記憶手段に記憶されている登場部分情報を参照して、登場部分情報に関する情報を視聴者端末に表示させることが可能になる。また、表示制御装置は、登場部分情報を参照して、登場部分を視聴者に提供することができる。そのため、特定の人物の顔が撮像されていない場面や特定の人物の顔が撮像されていない動画についても、特定の人物の登場部分を特定して、登場部分を視聴者に提供することが可能になる。
In this way, the
また、音声特定部２４は、部分映像を用いて、人物の音声を識別可能な情報である音声特徴情報を取得し、音声特徴情報を用いて、部分音声を特定する。これにより、音声特定部２４は、音声特徴情報があらかじめ特定制御装置２０に登録されていなくても、部分音声を特定することが可能になる。
Furthermore, the
また、音声特定部２４は、部分映像の中から、撮像されている人物が一人である部分を抽出し、抽出された部分の音声に基づいて、音声特徴情報を取得する。これにより、音声特徴情報の取得をより精度よく実現することができる。
Furthermore, the
また、音声特定部２４は、一または複数の動画について、音声特徴情報を取得する箇所を指定する情報を受信し、音声特徴情報を取得する箇所を指定する情報で指定された箇所の音声から音声特徴情報を取得する。ここで、音声特徴情報は、人物の音声を識別可能な情報である。これにより、特定された部分映像がない人物についても、音声特徴情報を取得することができる。
The
また、音声特定部２４は、さらに、部分音声を文字情報に変換し、部分音声の文字情報を、登場部分情報と対応付けて、登場部分情報記憶手段に記憶させる。これにより、部分音声の文字情報を、表示制御装置５０から視聴者端末７０に表示させることが可能になる。
Furthermore, the
また、配信システムは、特定制御装置２０と、登場部分情報記憶手段４０と、表示制御装置５０とを備える。また、表示制御装置５０は、視聴者端末７０によって指定された人物である視聴対象人物の人物情報に対応する登場部分情報を登場部分情報記憶手段４０から取得する。また、表示制御装置５０は、取得した登場部分情報に関する情報を、動画一覧画像として、視聴者端末７０に表示させる。これにより、表示制御装置５０は、視聴対象人物が登場している登場部分の一覧を視聴者端末７０に表示させることができる。
The distribution system also includes a
また、表示制御装置５０は、動画を動画記憶装置から取得して、登場部分でない部分をスキップしながら、登場部分の動画を視聴者端末７０に再生させる。また、表示制御装置５０は、登場部分の動画を動画記憶装置から取得して、登場部分の動画を視聴者端末に再生させてもよい。これにより、視聴対象人物の登場部分だけを視聴したいという視聴者の要望を実現することができる。
The
［ハードウェア構成例］
上述した本発明の各実施形態における特定制御装置（１０、２０）を、一つの情報処理装置（コンピュータ）を用いて実現するハードウェア資源の構成例について説明する。なお、特定制御装置は、物理的または機能的に少なくとも二つの情報処理装置を用いて実現してもよい。また、特定制御装置は、専用の装置として実現してもよい。また、特定制御装置の一部の機能のみを情報処理装置を用いて実現してもよい。
[Hardware configuration example]
An example of the configuration of hardware resources that implements the specific control device (10, 20) in each embodiment of the present invention described above using one information processing device (computer) will be described. Note that the specific control device may be physically or functionally realized using at least two information processing devices. Further, the specific control device may be realized as a dedicated device. Further, only some functions of the specific control device may be realized using an information processing device.
図１５は、本発明の各実施形態の特定制御装置を実現可能な情報処理装置のハードウェア構成例を概略的に示す図である。情報処理装置９０は、通信インタフェース９１、入出力インタフェース９２、演算装置９３、記憶装置９４、不揮発性記憶装置９５およびドライブ装置９６を含む。
FIG. 15 is a diagram schematically showing an example of the hardware configuration of an information processing device that can implement the specific control device of each embodiment of the present invention.
たとえば、図１の動画取得部１２および制御部１５は、通信インタフェース９１および演算装置９３で実現することが可能である。また、受信部１１、映像特定部１３、音声特定部１４は、演算装置９３で実現することが可能である。
For example, the moving
通信インタフェース９１は、各実施形態の特定制御装置が、有線あるいは／および無線で外部装置と通信するための通信手段である。なお、特定制御装置を、少なくとも二つの情報処理装置を用いて実現する場合、それらの装置の間を通信インタフェース９１経由で相互に通信可能なように接続してもよい。
The
入出力インタフェース９２は、入力デバイスの一例であるキーボードや、出力デバイスとしてのディスプレイ等のマンマシンインタフェースである。
The input/
演算装置９３は、汎用のＣＰＵ（Central Processing Unit）やマイクロプロセッサ等の演算処理装置や複数の電気回路によって実現される。演算装置９３は、たとえば、不揮発性記憶装置９５に記憶された各種プログラムを記憶装置９４に読み出し、読み出したプログラムに従って処理を実行することが可能である。
The
記憶装置９４は、演算装置９３から参照可能な、ＲＡＭ（Random Access Memory）等のメモリ装置であり、プログラムや各種データ等を記憶する。記憶装置９４は、揮発性のメモリ装置であってもよい。
The
不揮発性記憶装置９５は、たとえば、ＲＯＭ（Read Only Memory）、フラッシュメモリ、等の、不揮発性の記憶装置であり、各種プログラムやデータ等を記憶することが可能である。
The
ドライブ装置９６は、たとえば、後述する記録媒体９７に対するデータの読み込みや書き込みを処理する装置である。
The
記録媒体９７は、たとえば、光ディスク、光磁気ディスク、半導体フラッシュメモリ等、データを記録可能な任意の記録媒体である。
The
本発明の各実施形態は、たとえば、図１５に例示した情報処理装置９０により特定制御装置を構成し、この特定制御装置に対して、上記各実施形態において説明した機能を実現可能なプログラムを供給することにより実現してもよい。
In each embodiment of the present invention, for example, a specific control device is configured by the
この場合、特定制御装置に対して供給したプログラムを、演算装置９３が実行することによって、実施形態を実現することが可能である。また、特定制御装置のすべてではなく、一部の機能を情報処理装置９０で構成することも可能である。
In this case, the embodiment can be realized by the
さらに、上記プログラムを記録媒体９７に記録しておき、特定制御装置の出荷段階、あるいは運用段階等において、適宜上記プログラムが不揮発性記憶装置９５に格納されるよう構成してもよい。なお、この場合、上記プログラムの供給方法は、出荷前の製造段階、あるいは運用段階等において、適当な治具を利用して特定制御装置内にインストールする方法を採用してもよい。また、上記プログラムの供給方法は、インターネット等の通信回線を介して外部からダウンロードする方法等の一般的な手順を採用してもよい。
Further, the program may be recorded on the
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下には限られない。 Part or all of the above embodiments may be described as in the following additional notes, but are not limited to the following.
（付記１）
人物を示す情報である人物情報を受信する受信部と、
映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得する動画取得部と、
取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定する映像特定部と、
取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定する音声特定部と、
取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる制御部と
を備える特定制御装置。
(Additional note 1)
a receiving unit that receives person information that is information indicating a person;
a video acquisition unit that acquires the video related to the person indicated by the person information from a video storage device that stores a video including video information and audio information;
Identifying a partial video, which is a portion including an image of the person, from the acquired video, and identifying partial video position information, which is information indicating in which position of the video the partial video is included. Department and
Audio identification that identifies a partial audio that is a portion that includes the voice of the person from the acquired video, and identifies partial audio position information that is information indicating where in the video the partial audio is included. Department and
Regarding the acquired video, appearance part information indicating where in the video the appearance part, which corresponds to at least one of the partial video and the partial audio, is included is included in the video, and the person information and the a control unit that associates the partial video position information and the partial audio position information with the video information that is information related to the video, includes the partial video position information and the partial audio position information in the appearance portion information, and causes the appearance portion information storage means to store the appearance portion information; A specific control device comprising and.
（付記２）
前記音声特定部は、前記部分映像を用いて、前記人物の音声を識別可能な情報である音声特徴情報を取得し、前記音声特徴情報を用いて、前記部分音声を特定する、
付記１に記載の特定制御装置。
(Additional note 2)
The audio identifying unit uses the partial video to acquire audio feature information that is information that can identify the person's audio, and uses the audio feature information to identify the partial audio.
The specific control device described in Supplementary Note 1.
（付記３）
前記音声特定部は、前記部分映像の中から、撮像されている人物が一人である部分を抽出し、抽出された部分の音声に基づいて、前記音声特徴情報を取得する、
付記２に記載の特定制御装置。
(Additional note 3)
The audio identifying unit extracts a portion where only one person is imaged from the partial video, and acquires the audio feature information based on the audio of the extracted portion.
The specific control device described in Supplementary Note 2.
（付記４）
前記音声特定部は、一または複数の前記動画について、前記人物の音声を識別可能な情報である音声特徴情報を取得する箇所を指定する情報を受信し、前記音声特徴情報を取得する箇所を指定する情報で指定された箇所の音声から前記音声特徴情報を取得する、
付記１に記載の特定制御装置。
(Additional note 4)
The audio specifying unit receives information specifying a location from which audio feature information, which is information that can identify the voice of the person, is to be obtained, for one or more of the videos, and specifies the location from which the audio feature information is to be obtained. obtaining the audio feature information from the audio at the location specified by the information to be used;
The specific control device described in Supplementary Note 1.
（付記５）
前記音声特定部は、さらに、前記部分音声を文字情報に変換し、前記部分音声の文字情報を、前記登場部分情報と対応付けて、前記登場部分情報記憶手段に記憶させる、
付記１に記載の特定制御装置。
(Appendix 5)
The voice specifying unit further converts the partial voice into text information, associates the text information of the partial voice with the appearance part information, and stores it in the appearance part information storage means.
The specific control device described in Supplementary Note 1.
（付記６）
付記１から付記５のいずれかに記載の特定制御装置と、
前記登場部分情報記憶手段と、
表示制御装置と
を備え、
前記表示制御装置は、視聴者端末によって指定された人物である視聴対象人物の前記人物情報に対応する前記登場部分情報を前記登場部分情報記憶手段から取得して、取得した前記登場部分情報に関する情報を、動画一覧画像として、前記視聴者端末に表示させる、
配信システム。
(Appendix 6)
A specific control device according to any one of Supplementary notes 1 to 5,
the appearance partial information storage means;
Equipped with a display control device and
The display control device acquires the appearance part information corresponding to the person information of the person to be viewed, who is a person specified by the viewer terminal, from the appearance part information storage means, and generates information regarding the acquired appearance part information. is displayed on the viewer terminal as a video list image;
delivery system.
（付記７）
前記表示制御装置は、前記動画を前記動画記憶装置から取得して、前記登場部分でない部分をスキップしながら、前記登場部分の前記動画を前記視聴者端末に再生させる、
付記６に記載の配信システム。
(Appendix 7)
The display control device acquires the video from the video storage device and causes the viewer terminal to play back the video of the appearing portion while skipping the portion that does not appear.
Distribution system described in Appendix 6.
（付記８）
前記表示制御装置は、前記登場部分の前記動画を前記動画記憶装置から取得して、前記登場部分の前記動画を前記視聴者端末に再生させる、
付記６に記載の配信システム。
(Appendix 8)
The display control device acquires the video of the appearance portion from the video storage device and causes the viewer terminal to play the video of the appearance portion.
Distribution system described in Appendix 6.
（付記９）
人物を示す情報である人物情報を受信し、
映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得し、
取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定し、
取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定し、
取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる、
特定制御方法。
(Appendix 9)
Receive person information that is information indicating a person,
acquiring the video related to the person indicated by the person information from a video storage device that stores a video including video information and audio information;
From the acquired video, identify a partial video that is a portion that includes an image of the person, and identify partial video position information that is information indicating at which position in the video the partial video is included;
From the acquired video, identify a partial audio that is a portion that includes the voice of the person, identify partial audio position information that is information indicating where in the video the partial audio is included,
Regarding the acquired video, appearance part information indicating where in the video the appearance part, which corresponds to at least one of the partial video and the partial audio, is included is included in the video, and the person information and the Associating the partial video position information and the partial audio position information with video information that is information related to the video, including the partial video position information and the partial audio position information in the appearing part information, and storing the partial video position information in the appearing part information storage means that stores the appearing part information.
Specific control method.
（付記１０）
コンピュータに、
人物を示す情報である人物情報を受信する受信機能と、
映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得する動画取得機能と、
取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定する映像特定機能と、
取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定する音声特定機能と、
取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる制御機能と
を実現させる特定制御プログラム。
(Appendix 10)
to the computer,
a reception function that receives person information that is information indicating a person;
a video acquisition function that acquires the video related to the person indicated by the person information from a video storage device that stores a video including video information and audio information;
Identifying a partial video, which is a portion including an image of the person, from the acquired video, and identifying partial video position information, which is information indicating in which position of the video the partial video is included. function and
Audio identification that identifies a partial audio that is a portion that includes the voice of the person from the acquired video, and identifies partial audio position information that is information indicating where in the video the partial audio is included. function and
Regarding the acquired video, appearance part information indicating where in the video the appearance part, which corresponds to at least one of the partial video and the partial audio, is included is included in the video, and the person information and the A control function that associates the partial video position information and the partial audio position information with the video information that is information related to the video, and stores the partial video position information and the partial audio position information in the appearance part information that stores the appearance part information. A specific control program that realizes and.
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。 Although the present invention has been described above with reference to the embodiments, the present invention is not limited to the above embodiments. The configuration and details of the present invention can be modified in various ways that can be understood by those skilled in the art within the scope of the present invention.
１０、２０ 特定制御装置
１１、２１ 受信部
１２、２２ 動画取得部
１３、２３ 映像特定部
１４、２４ 音声特定部
１５、２５ 制御部
３０ 抽出エンジン
４０ 登場部分情報記憶手段
５０ 表示制御装置
６０－ｉ 動画記憶装置
７０ 視聴者端末
９０ 情報処理装置
９１ 通信インタフェース
９２ 入出力インタフェース
９３ 演算装置
９４ 記憶装置
９５ 不揮発性記憶装置
９６ ドライブ装置
９７ 記録媒体
10, 20
Claims (10)
映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得する動画取得部と、
取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定する映像特定部と、
取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定する音声特定部と、
取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる制御部と
を備える特定制御装置。 a receiving unit that receives person information that is information indicating a person;
a video acquisition unit that acquires the video related to the person indicated by the person information from a video storage device that stores a video including video information and audio information;
Identifying a partial video, which is a portion including an image of the person, from the acquired video, and identifying partial video position information, which is information indicating in which position of the video the partial video is included. Department and
Audio identification that identifies a partial audio that is a portion that includes the voice of the person from the acquired video, and identifies partial audio position information that is information indicating where in the video the partial audio is included. Department and
Regarding the acquired video, appearance part information indicating where in the video the appearance part, which corresponds to at least one of the partial video and the partial audio, is included is included in the video, and the person information and the a control unit that associates the partial video position information and the partial audio position information with the video information that is information related to the video, includes the partial video position information and the partial audio position information in the appearance portion information, and causes the appearance portion information storage means to store the appearance portion information; A specific control device comprising and.
請求項１に記載の特定制御装置。 The audio identifying unit uses the partial video to acquire audio feature information that is information that can identify the person's audio, and uses the audio feature information to identify the partial audio.
The specific control device according to claim 1.
請求項２に記載の特定制御装置。 The audio identifying unit extracts a portion where only one person is imaged from the partial video, and acquires the audio feature information based on the audio of the extracted portion.
The specific control device according to claim 2.
請求項１に記載の特定制御装置。 The audio specifying unit receives information specifying a location from which audio feature information, which is information that can identify the voice of the person, is to be obtained, for one or more of the videos, and specifies the location from which the audio feature information is to be obtained. obtaining the audio feature information from the audio at the location specified by the information to be used;
The specific control device according to claim 1.
請求項１に記載の特定制御装置。 The voice specifying unit further converts the partial voice into text information, associates the text information of the partial voice with the appearance part information, and stores it in the appearance part information storage means.
The specific control device according to claim 1.
前記登場部分情報記憶手段と、
表示制御装置と
を備え、
前記表示制御装置は、視聴者端末によって指定された人物である視聴対象人物の前記人物情報に対応する前記登場部分情報を前記登場部分情報記憶手段から取得して、取得した前記登場部分情報に関する情報を、動画一覧画像として、前記視聴者端末に表示させる、
配信システム。 The specific control device according to any one of claims 1 to 5,
the appearance partial information storage means;
Equipped with a display control device and
The display control device acquires the appearance part information corresponding to the person information of the person to be viewed, who is a person specified by the viewer terminal, from the appearance part information storage means, and generates information regarding the acquired appearance part information. is displayed on the viewer terminal as a video list image;
delivery system.
請求項６に記載の配信システム。 The display control device acquires the video from the video storage device and causes the viewer terminal to play back the video of the appearing portion while skipping the portion that does not appear.
The distribution system according to claim 6.
請求項６に記載の配信システム。 The display control device acquires the video of the appearance portion from the video storage device and causes the viewer terminal to play the video of the appearance portion.
The distribution system according to claim 6.
映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得し、
取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定し、
取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定し、
取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる、
特定制御方法。 Receive person information that is information indicating a person,
acquiring the video related to the person indicated by the person information from a video storage device that stores a video including video information and audio information;
From the acquired video, identify a partial video that is a portion that includes an image of the person, and identify partial video position information that is information indicating at which position in the video the partial video is included;
From the acquired video, identify a partial audio that is a portion that includes the voice of the person, identify partial audio position information that is information indicating where in the video the partial audio is included,
Regarding the acquired video, appearance part information indicating where in the video the appearance part, which corresponds to at least one of the partial video and the partial audio, is included is included in the video, and the person information and the Associating the partial video position information and the partial audio position information with video information that is information related to the video, including the partial video position information and the partial audio position information in the appearing part information, and storing the partial video position information in the appearing part information storage means that stores the appearing part information.
Specific control method.
人物を示す情報である人物情報を受信する受信機能と、
映像情報と音声情報とを含む動画を記憶している動画記憶装置から、前記人物情報が示す前記人物に関連する前記動画を取得する動画取得機能と、
取得された前記動画から、前記人物の映像を含む部分である部分映像を特定し、前記動画のどの位置に前記部分映像が含まれているかを示す情報である部分映像位置情報を特定する映像特定機能と、
取得された前記動画から、前記人物の音声を含む部分である部分音声を特定し、前記動画のどの位置に前記部分音声が含まれていかを示す情報である部分音声位置情報を特定する音声特定機能と、
取得された前記動画について、前記部分映像および前記部分音声の少なくともいずれかに該当する部分である登場部分が前記動画のどの位置に含まれているかを示す登場部分情報を、前記人物情報と、前記動画に関する情報である動画情報とに対応付けるとともに、前記部分映像位置情報と前記部分音声位置情報とを前記登場部分情報に含めて、前記登場部分情報を記憶する登場部分情報記憶手段に記憶させる制御機能と
を実現させる特定制御プログラム。 to the computer,
a reception function that receives person information that is information indicating a person;
a video acquisition function that acquires the video related to the person indicated by the person information from a video storage device that stores a video including video information and audio information;
Identifying a partial video, which is a portion including an image of the person, from the acquired video, and identifying partial video position information, which is information indicating in which position of the video the partial video is included. function and
Audio identification that identifies a partial audio that is a portion that includes the voice of the person from the acquired video, and identifies partial audio position information that is information indicating where in the video the partial audio is included. function and
Regarding the acquired video, appearance part information indicating where in the video the appearance part, which corresponds to at least one of the partial video and the partial audio, is included is included in the video, and the person information and the A control function that associates the partial video position information and the partial audio position information with the video information that is information related to the video, and stores the partial video position information and the partial audio position information in the appearance part information that stores the appearance part information. A specific control program that realizes and.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022093590A JP2023180357A (en) | 2022-06-09 | 2022-06-09 | Specific control device, distribution system, specific control method, and specific control program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022093590A JP2023180357A (en) | 2022-06-09 | 2022-06-09 | Specific control device, distribution system, specific control method, and specific control program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2023180357A true JP2023180357A (en) | 2023-12-21 |
Family
ID=89307211
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022093590A Pending JP2023180357A (en) | 2022-06-09 | 2022-06-09 | Specific control device, distribution system, specific control method, and specific control program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2023180357A (en) |
-
2022
- 2022-06-09 JP JP2022093590A patent/JP2023180357A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11743514B2 (en) | Apparatus, systems and methods for a content commentary community | |
| US11546667B2 (en) | Synchronizing video content with extrinsic data | |
| US20160173738A1 (en) | Teleprompter on wireless communication device (wcd) for producing media content for website | |
| US8245253B2 (en) | Displaying music information associated with a television program | |
| CN101923882B (en) | Information processing device, and information processing method | |
| US20190259423A1 (en) | Dynamic media recording | |
| CN110168541B (en) | System and method for eliminating word ambiguity based on static and time knowledge graph | |
| JP2012508486A (en) | Content linkage method and system using portable device | |
| US20080229207A1 (en) | Content Presentation System | |
| JP2016527763A (en) | Movie episode selection method, movie episode selection device, program, and recording medium | |
| JP2009044454A (en) | Information providing system, video reproducing apparatus, information providing apparatus, information providing method and program | |
| US20220232291A1 (en) | Apparatus, systems and methods for media content event quick access queue | |
| CN109997366A (en) | The replacement of the media content of record | |
| US20130163965A1 (en) | Information playback apparatus and control method thereof | |
| CN110800307A (en) | Event source content and remote content synchronization | |
| JP2023180357A (en) | Specific control device, distribution system, specific control method, and specific control program | |
| US9652598B2 (en) | Information processing device, control method, and storage medium | |
| KR20140134100A (en) | Method for generating user video and Apparatus therefor | |
| US20160165313A1 (en) | Electronic programming guide generation | |
| JP4679232B2 (en) | Recording device | |
| US20130177289A1 (en) | Information processing apparatus and information processing method | |
| KR100671147B1 (en) | Apparatus for experiencing famous scene and Method thereof | |
| JP2013243704A (en) | Information processing terminal | |
| JP2013229650A (en) | Electronic apparatus control method, electronic apparatus, and electronic apparatus control program | |
| JP2015118713A (en) | Management server and program information processing system |