JP6898575B2 - Information processing device, control method and control program of information processing device - Google Patents

Information processing device, control method and control program of information processing device Download PDF

Info

Publication number
JP6898575B2
JP6898575B2 JP2020102051A JP2020102051A JP6898575B2 JP 6898575 B2 JP6898575 B2 JP 6898575B2 JP 2020102051 A JP2020102051 A JP 2020102051A JP 2020102051 A JP2020102051 A JP 2020102051A JP 6898575 B2 JP6898575 B2 JP 6898575B2
Authority
JP
Japan
Prior art keywords
user
server
movie
data
auxiliary
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020102051A
Other languages
Japanese (ja)
Other versions
JP2020145762A (en
Inventor
健治 笠原
健治 笠原
智司 生井
智司 生井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mixi Inc
Original Assignee
Mixi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2017008939A external-priority patent/JP6718389B2/en
Application filed by Mixi Inc filed Critical Mixi Inc
Priority to JP2020102051A priority Critical patent/JP6898575B2/en
Publication of JP2020145762A publication Critical patent/JP2020145762A/en
Priority to JP2021095844A priority patent/JP7182754B2/en
Application granted granted Critical
Publication of JP6898575B2 publication Critical patent/JP6898575B2/en
Priority to JP2022160420A priority patent/JP7393691B2/en
Priority to JP2023193880A priority patent/JP2024009078A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、情報処理システムに関する。
本発明は、特に、ユーザの希望に適う位置からムービーを再生させる情報処理システムに関する。
The present invention relates to an information processing system.
The present invention particularly relates to an information processing system that reproduces a movie from a position that suits the user's wishes.

特許文献1には、動画像から選択される複数の代表画像を紙に印刷して提供する仕組みが開示されている。
特許文献1に記載のシステムは、対応する再生範囲を特定する紐付け情報をそれぞれ埋め込んだ複数の代表画像を印刷するとともに、当該紐付け情報を含む再生要求に応じて当該紐付け情報により指定される範囲の動画像をオンラインで再生させる。
Patent Document 1 discloses a mechanism for printing and providing a plurality of representative images selected from moving images on paper.
The system described in Patent Document 1 prints a plurality of representative images in which linking information for specifying a corresponding reproduction range is embedded, and is designated by the linking information in response to a reproduction request including the linking information. Play back a range of moving images online.

特開2013−183255号公報Japanese Unexamined Patent Publication No. 2013-183255

特許文献1に記載のシステムでは、動画像データを所定の分割基準で複数の動画ブロックに機械的に分割し、当該複数の動画ブロックからそれぞれ選択される代表画像に当該動画ブロック内で指定される再生範囲をそれぞれ紐付ける。
そのため、動画の閲覧を希望するユーザに再生開始位置を柔軟に指定させることができない。
In the system described in Patent Document 1, moving image data is mechanically divided into a plurality of moving image blocks based on a predetermined division standard, and a representative image selected from each of the plurality of moving image blocks is designated in the moving image block. Link each playback range.
Therefore, it is not possible to flexibly specify the playback start position for the user who wants to view the moving image.

本発明が解決しようとする課題は、ムービーの閲覧を希望するユーザに当該ムービーの再生開始位置を簡便に指定させることである。 An object to be solved by the present invention is to allow a user who wants to view a movie to easily specify a playback start position of the movie.

〔A〕上記課題を解決するため、本発明の一態様である「情報処理装置」は、単数又は
複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示手段と、前記提示手段により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定手段と、を備える。
〔B〕上記課題を解決するため、本発明の一態様である「情報処理装置の制御方法」は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示ステップと、前記提示ステップにおいて提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定ステップと、を含む。
〔C〕上記課題を解決するため、本発明の一態様である「制御プログラム」は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示機能と、前記提示機能により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定機能と、を情報処理装置のコンピュータに実現させる。
〔D〕上記課題を解決するため、本発明の一態様である「コンピュータ読取り可能な記録媒体」に記録される制御プログラムは、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示機能と、前記提示機能により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定機能と、を情報処理装置のコンピュータに実現させる。
[A] In order to solve the above problems, in the "information processing device" which is one aspect of the present invention, information relating a single or a plurality of representative elements to specific information capable of identifying a movie from which the representative elements are extracted is provided. A presentation means for presenting to the user a plurality of auxiliary elements extracted from the movie specified by the specific information when a reproduction request including the specific information is received after the provision, and a plurality of presentation means presented by the presentation means. When any of the auxiliary elements is specified by the user, a determination is made to determine the playback start position of the movie to be played by the requester in response to the playback request so that the portion surrounding the specified auxiliary element is played. Means and.
[B] In order to solve the above problems, the "control method of an information processing device", which is one aspect of the present invention, provides a single or a plurality of representative elements and specific information capable of identifying a movie from which the representative elements are extracted. A presentation step of presenting to the user a plurality of auxiliary elements extracted from the movie specified by the specific information when a playback request including the specific information is received after the information to be associated is provided, and a presentation step presented in the presentation step. When any one of the plurality of auxiliary elements is specified by the user, the portion wrapping the specified auxiliary element is played at the playback start position of the movie to be played by the requester in response to the playback request. Includes a decision step to determine.
[C] In order to solve the above problems, the "control program", which is one aspect of the present invention, provides information for associating a single or a plurality of representative elements with specific information that can identify the movie from which the representative elements are extracted. A presentation function that presents to the user a plurality of auxiliary elements extracted from the movie specified by the specific information when a reproduction request including the specific information is received after the information processing is performed, and a plurality of auxiliary elements presented by the presentation function. A function for determining the playback start position of a movie to be played by the requester in response to the playback request when any of the elements is specified by the user so that the portion wrapping the specified auxiliary element is played. Is realized in the computer of the information processing device.
[D] In order to solve the above problems, the control program recorded on the "computer-readable recording medium" which is one aspect of the present invention identifies one or more representative elements and a movie from which the representative elements are extracted. A presentation function that presents to the user a plurality of auxiliary elements extracted from the movie specified by the specific information when a playback request including the specific information is received after the information associated with the possible specific information is provided. A portion that encloses the designated auxiliary element at the playback start position of the movie to be played by the requester in response to the playback request when any one of the plurality of auxiliary elements presented by the presentation function is specified by the user. The computer of the information processing device is provided with a decision function for determining that the information is reproduced.

上記〔A〕の「情報処理装置」には、下記の技術的限定を加えてもよい。また、同様の技術的限定を、上記〔B〕の「制御方法」,上記〔C〕の「制御プログラム」及び上記〔D〕の「記録媒体」が記録する制御プログラムに加えてもよい。
・前記提示手段が、提示される前記補助要素の数を徐々に増加させる。
・前記提示手段が、優先度の高い前記補助要素を優先的に提示する。
・オブジェクトの重要度を記憶手段に記憶させる手段をさらに備え、前記提示手段が、前記記憶手段を参照し、オブジェクトの重要度に応じた前記優先度の高い前記補助要素を優先的に提示する。
・前記提示手段により提示された複数の補助要素についてユーザに指定された回数を記憶手段に記憶させる手段をさらに備え、前記提示手段が、前記記憶手段を参照し、ユーザに指定された回数に応じた前記優先度の高い前記補助要素を優先的に提示する。
・前記提示手段が、提示される前記補助要素の数を時間の経過に応じて段階的に増加させる。
・前記提示手段が、提示される前記補助要素の数をユーザ操作に応じて段階的に増加させる。
・前記提示手段が、前記補助要素を抽出元の前記ムービーにおける出現順序を維持して提示する。
・前記提示手段が、前記特定手段により特定されるムービーのタイムラインに対応付けて前記複数の補助要素を提示し、前記決定手段が、前記指定された補助要素に対応する前記タイムライン上の位置を前記再生開始位置に決定する。
・前記代表要素は、フレームと該フレームの周辺の音声データに対応するテキストのうち少なくとも前者であり、前記補助要素は、前記代表要素でないフレーム又は前記代表要素でないテキストである。
The following technical limitations may be added to the "information processing device" of the above [A]. Further, the same technical limitation may be added to the control program recorded by the "control method" of the above [B], the "control program" of the above [C], and the "recording medium" of the above [D].
-The presenting means gradually increases the number of the auxiliary elements presented.
-The presenting means preferentially presents the auxiliary element having a high priority.
A means for storing the importance of the object in the storage means is further provided, and the presenting means refers to the storage means and preferentially presents the auxiliary element having the higher priority according to the importance of the object.
A means for storing the number of times specified by the user for the plurality of auxiliary elements presented by the presenting means is further provided in the storage means, and the presenting means refers to the storage means and responds to the number of times specified by the user. The auxiliary element having a high priority is presented preferentially.
-The presenting means gradually increases the number of the auxiliary elements presented over time.
-The presenting means gradually increases the number of the auxiliary elements presented according to the user operation.
-The presenting means presents the auxiliary elements while maintaining the order of appearance in the movie of the extraction source.
The presenting means presents the plurality of auxiliary elements in association with the timeline of the movie specified by the specific means, and the determining means is a position on the timeline corresponding to the designated auxiliary element. Is determined at the reproduction start position.
The representative element is at least the former of the text corresponding to the frame and the voice data around the frame, and the auxiliary element is a frame that is not the representative element or a text that is not the representative element.

本明細書では、下記のように用語を用いる。
・「ムービー」は、複数のフレームと音声データとを少なくとも包含する。
・「フレーム」とは、ムービーを構成する静止画像をいう。
・「要素」は、ムービーを構成するフレーム,ムービーを構成する音声データに対応するテキストを少なくとも含む。
・「ユーザ操作」は、画面上の指示位置を連続的に入力する位置入力装置(例えば、タッチパネル,マウス,タッチパッド等)を用いて行われる。
・「周辺」とは、ムービーのタイムライン上で出現位置が近いことをいう。
In this specification, terms are used as follows.
-A "movie" includes at least a plurality of frames and audio data.
-"Frame" means a still image that composes a movie.
-The "element" includes at least the frames that make up the movie and the text that corresponds to the audio data that makes up the movie.
-"User operation" is performed using a position input device (for example, a touch panel, a mouse, a touch pad, etc.) that continuously inputs an instruction position on the screen.
-"Peripheral" means that the appearance position is close on the timeline of the movie.

本発明によれば、ムービーの閲覧を希望するユーザに当該ムービーの再生開始位置を簡便に指定させることが可能になる。 According to the present invention, it is possible to allow a user who wants to view a movie to easily specify a playback start position of the movie.

先行情報の一例の説明図である。(実施例)It is explanatory drawing of an example of prior information. (Example) 先行情報の他の一例の説明図である。(実施例)It is explanatory drawing of another example of prior information. (Example) ネットワーク構成例の説明図である。(実施例)It is explanatory drawing of the network configuration example. (Example) ユーザ装置のハードウェア構成例の説明図である。(実施例)It is explanatory drawing of the hardware configuration example of a user apparatus. (Example) サーバ装置のハードウェア構成例の説明図である。(実施例)It is explanatory drawing of the hardware configuration example of a server device. (Example) コンテンツ管理システム及び動画配信システムの機能構成例の説明図である。(実施例)It is explanatory drawing of the functional configuration example of a content management system and a video distribution system. (Example) 管理データの項目例の説明図である。(実施例)It is explanatory drawing of the item example of management data. (Example) 先行情報提供手順の説明図である。(実施例)It is explanatory drawing of the prior information provision procedure. (Example) 動画配信手順の説明図である。(実施例)It is explanatory drawing of the video distribution procedure. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the display example of an instruction screen. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the display example of an instruction screen. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the display example of an instruction screen. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the display example of an instruction screen. (Example)

[1.実施形態]
[1−1.概要]
本実施形態は、ムービーから抽出可能な代表要素がレイアウトされる先行情報を見たユーザからの求めに応じて、当該ユーザの希望に適う位置からムービーを再生させる情報処理システムに関する。
本実施形態では、ムービーの視聴を希望するユーザに再生開始位置を簡便に指定させるため、当該ムービーから抽出可能な要素のうち先行情報に含まれない補助要素を少なくとも当該ユーザに提示して所望の補助要素を当該ユーザに指定させる構成が採用されている。
[1. Embodiment]
[1-1. Overview]
The present embodiment relates to an information processing system that reproduces a movie from a position suitable for the user's request in response to a request from a user who has seen the preceding information in which representative elements that can be extracted from the movie are laid out.
In the present embodiment, in order to allow a user who wants to watch a movie to easily specify a playback start position, at least an auxiliary element that is not included in the preceding information among the elements that can be extracted from the movie is presented to the user and is desired. A configuration is adopted in which the user is required to specify an auxiliary element.

[1−2.情報処理装置]
本実施形態に係る情報処理システムを構成する情報処理装置は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示手段と、前記提示手段により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じ
て要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定手段と、を備える。
[1-2. Information processing device]
The information processing apparatus constituting the information processing system according to the present embodiment provides the specific information after the information for associating one or a plurality of representative elements with the specific information that can identify the movie from which the representative element is extracted is provided. One of the presenting means for presenting to the user a plurality of auxiliary elements extracted from the movie specified by the specific information when the playback request including the information is received, and the plurality of auxiliary elements presented by the presenting means are described. The present invention includes a determination means for determining a reproduction start position of a movie to be reproduced by a requester in response to the reproduction request when specified by the user so that a portion wrapping the designated auxiliary element is reproduced.

[2.実施例]
[2−1.概要]
本実施例は、ムービーから抽出可能な代表フレームがレイアウトされる先行情報にカメラを向けたユーザ端末からの再生要求に応じて、ユーザの希望に適う位置からムービーをストリーミング再生させる情報処理システムに関する。
本実施例では、ムービーの視聴を希望するユーザに再生開始位置を簡便に指定させるため、当該ムービーから抽出可能な音声に対応する補助テキストを少なくとも当該ユーザに提示して所望の補助テキストを当該ユーザに指定させる構成が採用されている。
[2. Example]
[2-1. Overview]
The present embodiment relates to an information processing system for streaming playback of a movie from a position suitable for the user's request in response to a playback request from a user terminal in which a camera is pointed at a preceding information in which a representative frame that can be extracted from the movie is laid out.
In this embodiment, in order to allow a user who wants to watch a movie to easily specify a playback start position, at least the auxiliary text corresponding to the sound that can be extracted from the movie is presented to the user, and the desired auxiliary text is presented to the user. The configuration to be specified in is adopted.

図1は、先行情報の一例である。
先行情報100は、あるムービーから抽出可能な代表フレーム110,120,130及び140がレイアウトされた用紙である。各代表フレームの隅には、当該ムービーと当該フレームとを特定可能なパラメータ付きURLが変換された二次元コード111,121,131及び141がそれぞれ重畳配置されている。
FIG. 1 is an example of prior information.
The preceding information 100 is a paper on which representative frames 110, 120, 130, and 140 that can be extracted from a certain movie are laid out. In the corners of each representative frame, two-dimensional codes 111, 121, 131, and 141, which are converted URLs with parameters that can identify the movie and the frame, are superimposed and arranged, respectively.

図2は、先行情報の他の例である。
先行情報200は、あるムービーから抽出可能な代表フレーム210,220,230及び240がレイアウトされた画像である。各代表フレームの隅には、当該ムービーと当該フレームとを特定可能なパラメータ付きURLが変換された二次元コード211,221,231及び241がそれぞれ重畳配置されている。
FIG. 2 is another example of prior information.
The preceding information 200 is an image in which representative frames 210, 220, 230, and 240 that can be extracted from a certain movie are laid out. In the corners of each representative frame, two-dimensional codes 211, 211, 231 and 241 in which the URL with parameters that can identify the movie and the frame are converted are superimposed and arranged, respectively.

[2−2.ネットワーク構成]
図3は、実施例のシステムのネットワーク構成例を示す。
本実施例のシステムは、ユーザが使用するユーザ端末10と、コンテンツ管理サービスを提供するコンテンツ管理システム20と、動画配信サービスを提供する動画配信システム30と、を含む。
コンテンツ管理システム20は、ユーザ管理サーバ21とデータ処理サーバ22とデータ管理サーバ23とファイル管理サーバ24とストレージ25とを含む。動画配信システム30は、ファイル管理サーバ31と配信サーバ32とストレージ33とを含む。
[2-2. Network configuration]
FIG. 3 shows an example of a network configuration of the system of the embodiment.
The system of this embodiment includes a user terminal 10 used by the user, a content management system 20 that provides a content management service, and a video distribution system 30 that provides a video distribution service.
The content management system 20 includes a user management server 21, a data processing server 22, a data management server 23, a file management server 24, and a storage 25. The video distribution system 30 includes a file management server 31, a distribution server 32, and a storage 33.

ユーザ端末10とユーザ管理サーバ21とは、通信ネットワーク40を通じてそれぞれデータの授受が可能である。ユーザ管理サーバ21及びデータ処理サーバ22は、データ管理サーバ23を介して、ストレージ25に記憶されるデータにそれぞれアクセス可能である。また、ユーザ管理サーバ21及びデータ処理サーバ22は、ファイル管理サーバ24を介して、ストレージ25に記憶されるデータにそれぞれアクセス可能である。
ユーザ端末10とファイル管理サーバ31及び配信サーバ32とは、通信ネットワーク40を通じてそれぞれデータの授受が可能である。ファイル管理サーバ31は、ストレージ33に記憶されるデータにアクセス可能である。また、配信サーバ32は、ファイル管理サーバ31を介して、ストレージ33に記憶されるデータにそれぞれアクセス可能である。
通信ネットワーク40は、インターネット(Internet),携帯電話網,無線WAN(Wireless Wide Area Network),無線LAN(Wireless Local Area Network),イーサネット(Ethernet)(登録商標)などの既存のネットワークのうち少なくともいずれかを含んでいてよい。
Data can be exchanged between the user terminal 10 and the user management server 21 through the communication network 40, respectively. The user management server 21 and the data processing server 22 can access the data stored in the storage 25 via the data management server 23, respectively. Further, the user management server 21 and the data processing server 22 can access the data stored in the storage 25 via the file management server 24, respectively.
Data can be exchanged between the user terminal 10, the file management server 31, and the distribution server 32, respectively, through the communication network 40. The file management server 31 can access the data stored in the storage 33. Further, the distribution server 32 can access the data stored in the storage 33 via the file management server 31.
The communication network 40 is at least one of existing networks such as the Internet, a mobile phone network, a wireless WAN (Wireless Wide Area Network), a wireless LAN (Wireless Local Area Network), and an Ethernet (registered trademark). May include.

[2−2−1.ユーザ端末]
ユーザ端末10は、所定のWebブラウザプログラムがインストールされたユーザ装置(コンピュータ)である。
本実施例のシステムでは、ユーザ装置として、Webブラウザプログラムをインストール可能な汎用の携帯装置(例えば、携帯電話,スマートフォン(smartphone),タブレット(tablet)端末,タブレットPC(personal computer),ウェアラブルデバイス(wearable device)など)や汎用の処理装置(例えば、PC(personal computer)など)を用いることができる。
[2-2-1. User terminal]
The user terminal 10 is a user device (computer) in which a predetermined Web browser program is installed.
In the system of this embodiment, as a user device, a general-purpose mobile device (for example, a mobile phone, a smartphone (smartphone), a tablet (tablet) terminal, a tablet PC (personal computer), a wearable device (wearable)) on which a Web browser program can be installed can be installed. (Device), etc.) or a general-purpose processing device (for example, a PC (personal computer), etc.) can be used.

[2−2−2.コンテンツ管理システム]
コンテンツ管理システム20は、ユーザ管理サーバ21とデータ処理サーバ22とデータ管理サーバ23とファイル管理サーバ24とストレージ25とを含む。
ユーザ管理サーバ21は、Webサーバプログラム(HTTPデーモン(HyperText Transfer Protocol Daemon)ともいう。)がインストールされたサーバ装置(コンピュータ)である。
ユーザ管理サーバ21は、ユーザ端末10からの要求(リクエスト)に応じて、データ管理サーバ23を介してストレージ25から必要なデータを読み出し、ユーザ端末10に提供(レスポンス)する。また、ユーザ管理サーバ21は、ユーザ端末10からの要求(リクエスト)に応じて、ユーザ端末10から取得したデータを、データ管理サーバ23を介してストレージ25に書き込み、処理結果をユーザ端末10に提供(レスポンス)する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、ユーザ管理サーバ21の機能を分担させ又はユーザ管理サーバ21にかかる負荷を分散させてもよい。
[2-2-2. Content management system]
The content management system 20 includes a user management server 21, a data processing server 22, a data management server 23, a file management server 24, and a storage 25.
The user management server 21 is a server device (computer) in which a Web server program (also referred to as an HTTP daemon (HyperText Transfer Protocol Daemon)) is installed.
The user management server 21 reads necessary data from the storage 25 via the data management server 23 and provides (responses) to the user terminal 10 in response to a request from the user terminal 10. Further, the user management server 21 writes the data acquired from the user terminal 10 to the storage 25 via the data management server 23 in response to the request from the user terminal 10, and provides the processing result to the user terminal 10. (Response).
A server system may be configured by linking a plurality of server devices to share the functions of the user management server 21 or to distribute the load applied to the user management server 21.

データ処理サーバ22は、アプリケーションプログラムがインストールされたサーバ装置(コンピュータ)である。
データ処理サーバ22は、ファイル管理サーバ24を介してストレージ25から必要なデータを読み出し、これに演算・加工を施し、演算・加工済みのデータをデータ管理サーバ23を介してストレージ25に書き込む。また、データ処理サーバ22は、データ管理サーバ23を介してストレージ25から必要なデータを読み出し、これに演算・加工を施し、演算・加工済みのデータを出力する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、データ処理サーバ22の機能を分担させ又はデータ処理サーバ22にかかる負荷を分散させてもよい。
The data processing server 22 is a server device (computer) in which an application program is installed.
The data processing server 22 reads necessary data from the storage 25 via the file management server 24, performs calculation / processing on the necessary data, and writes the calculated / processed data to the storage 25 via the data management server 23. Further, the data processing server 22 reads necessary data from the storage 25 via the data management server 23, performs calculation / processing on the necessary data, and outputs the calculated / processed data.
A server system may be configured by linking a plurality of server devices to share the functions of the data processing server 22 or to distribute the load applied to the data processing server 22.

データ管理サーバ23は、DB(Database)サーバプログラムがインストールされたサーバ装置(コンピュータ)である。データ管理サーバ23は、内蔵する又は外部の接続可能なストレージ25とともにDBMS(Database Management System)を構成する。
データ管理サーバ23は、例えば、データの格納要求に応じ要求元から取得されるデータをストレージ25に格納する機能と、データの抽出要求に応じストレージ25から抽出されるデータを要求元に応答する機能とを有する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、データ管理サーバ23の機能を分担させ又はデータ管理サーバ23にかかる負荷を分散させてもよい。
The data management server 23 is a server device (computer) in which a DB (Database) server program is installed. The data management server 23 constitutes a DBMS (Database Management System) together with the internal or externally connectable storage 25.
The data management server 23 has, for example, a function of storing data acquired from a request source in response to a data storage request and a function of responding to a request source of data extracted from the storage 25 in response to a data extraction request. And have.
A server system may be configured by linking a plurality of server devices, and the functions of the data management server 23 may be shared or the load applied to the data management server 23 may be distributed.

ファイル管理サーバ24は、ファイルサーバプログラムがインストールされたサーバ装置(コンピュータ)である。
ファイル管理サーバ24は、例えば、データの格納要求に応じ要求元から取得されるデータをストレージ25に格納する機能と、データの抽出要求に応じストレージ25から抽出されるデータを要求元に応答する機能とを有する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、ファイル管理サーバ24の機能を分担させ又はファイル管理サーバ24にかかる負荷を分散させてもよい。
The file management server 24 is a server device (computer) in which a file server program is installed.
The file management server 24 has, for example, a function of storing data acquired from the request source in response to a data storage request and a function of responding to the request source of data extracted from the storage 25 in response to a data extraction request. And have.
A server system may be configured by linking a plurality of server devices to share the functions of the file management server 24 or to distribute the load applied to the file management server 24.

ストレージ25は、管理データ及びファイルデータを記憶する記憶装置である。
なお、複数の記憶装置を用意し、ストレージ25が記憶するデータの種類ごとに別々に記憶させてもよい。またストレージ25が記憶するデータを複数の記憶装置に分散配置することも可能である。
The storage 25 is a storage device that stores management data and file data.
A plurality of storage devices may be prepared and stored separately for each type of data stored in the storage 25. It is also possible to distribute the data stored in the storage 25 to a plurality of storage devices.

[2−2−3.動画配信システム]
動画配信システム30は、ファイル管理サーバ31と配信サーバ32とストレージ33とを含む。
ファイル管理サーバ31は、ファイルサーバプログラムがインストールされたサーバ装置(コンピュータ)である。
ファイル管理サーバ31は、例えば、データの格納要求に応じ要求元から取得されるデータをストレージ33に格納する機能と、データの抽出要求に応じストレージ33から抽出されるデータを要求元に応答する機能とを有する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、ファイル管理サーバ31の機能を分担させ又はファイル管理サーバ31にかかる負荷を分散させてもよい。
[2-2-3. Video distribution system]
The video distribution system 30 includes a file management server 31, a distribution server 32, and a storage 33.
The file management server 31 is a server device (computer) in which a file server program is installed.
The file management server 31 has, for example, a function of storing data acquired from the request source in response to a data storage request and a function of responding to the request source of data extracted from the storage 33 in response to a data extraction request. And have.
A server system may be configured by linking a plurality of server devices to share the functions of the file management server 31 or to distribute the load applied to the file management server 31.

配信サーバ32は、ストリーミング配信サーバプログラムがインストールされたサーバ装置(コンピュータ)である。
配信サーバ32は、ユーザ端末10からの要求(リクエスト)に応じて、ファイル管理サーバ31を介してストレージ33から必要なデータを読み出し、ユーザ端末10にストリーミング配信(レスポンス)する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、配信サーバ32の機能を分担させ又は配信サーバ32にかかる負荷を分散させてもよい。
The distribution server 32 is a server device (computer) in which a streaming distribution server program is installed.
The distribution server 32 reads necessary data from the storage 33 via the file management server 31 in response to a request from the user terminal 10, and distributes the data to the user terminal 10 by streaming (response).
A server system may be configured by linking a plurality of server devices, and the functions of the distribution server 32 may be shared or the load applied to the distribution server 32 may be distributed.

ストレージ33は、ファイルデータを記憶する記憶装置である。
なお、ストレージ33が記憶するデータを複数の記憶装置に分散配置することも可能である。
The storage 33 is a storage device that stores file data.
It is also possible to distribute the data stored in the storage 33 to a plurality of storage devices.

[2−3.ハードウェア構成]
[2−3−1.ユーザ装置のハードウェア構成]
図4は、ユーザ装置のハードウェア構成例を示す。
典型的なユーザ装置は、制御処理部を構成するMPU(Micro-Processing Unit)411と、主記憶部を構成するRAM(Random Access Memory)421と、補助記憶部を構成するROM(Read Only Memory)422及びEEPROM(Electrically Erasable Programmable Read-Only Memory)423と、入力部及び表示部を構成するタッチパネルディスプレイ431と、音声出力部を構成するスピーカ432と、撮像部を構成するカメラ433と、通信制御部を構成するNIC(Network Interface Controller)441及び無線LAN(Local Area Network)チップ442と、を少なくとも有する。
[2-3. Hardware configuration]
[2-3-1. Hardware configuration of user device]
FIG. 4 shows an example of the hardware configuration of the user device.
A typical user device is an MPU (Micro-Processing Unit) 411 that constitutes a control processing unit, a RAM (Random Access Memory) 421 that constitutes a main storage unit, and a ROM (Read Only Memory) that constitutes an auxiliary storage unit. 422 and EEPROM (Electrically Erasable Programmable Read-Only Memory) 423, a touch panel display 431 that constitutes an input unit and a display unit, a speaker 432 that constitutes an audio output unit, a camera 433 that constitutes an imaging unit, and a communication control unit. It has at least a NIC (Network Interface Controller) 441 and a wireless LAN (Local Area Network) chip 442 constituting the above.

RAM421と、ROM422と、EEPROM423と、タッチパネルディスプレイ431と、スピーカ432と、カメラ433と、NIC441と、無線LANチップ442とは、バスラインを介してMPU411と接続される。
MPU411は、(1)ROM422又はEEPROM423に記憶されたプログラムをRAM421上に読み込み、(2)プログラムの指示に従ってタッチパネルディスプレイ431とEEPROM423とカメラ433とNIC441と無線LANチップ442との少なくともいずれかからデータを取得し、(3)取得したデータをプログラムに規定される手順で演算・加工した上で、(4)演算済み・加工済みのデータをEEPROM423とタッチパネルディスプレイ431とスピーカ432とNIC441と無線LANチップ442との少なくともいずれかに提供する。
The RAM 421, ROM 422, EEPROM 423, touch panel display 431, speaker 432, camera 433, NIC 441, and wireless LAN chip 442 are connected to the MPU 411 via a bus line.
The MPU 411 (1) reads the program stored in the ROM 422 or the EEPROM 423 onto the RAM 421, and (2) reads data from at least one of the touch panel display 431, the EEPROM 423, the camera 433, the NIC 441, and the wireless LAN chip 442 according to the instructions of the program. After acquiring, (3) calculating and processing the acquired data according to the procedure specified in the program, (4) calculating and processing the calculated and processed data is the EEPROM 423, the touch panel display 431, the speaker 432, the NIC 441, and the wireless LAN chip 442. Provide to at least one of.

[2−3−2.サーバ装置のハードウェア構成]
図5は、サーバ装置のハードウェア構成例を示す。
典型的なサーバ装置は、MPUやROMを含む制御処理装置510と、RAMを含む主記憶装置520と、HDD(Hard Disc Drive)を含む補助記憶装置530と、マウスやキーボードを含む入力装置540と、ディスプレイやスピーカを含む出力装置550と、ネットワークカード(Network Interface Card)を含む通信制御装置560と、を有する。
[2-3-2. Server device hardware configuration]
FIG. 5 shows an example of the hardware configuration of the server device.
Typical server devices include a control processing device 510 including an MPU and ROM, a main storage device 520 including a RAM, an auxiliary storage device 530 including an HDD (Hard Disc Drive), and an input device 540 including a mouse and a keyboard. It has an output device 550 including a display and a speaker, and a communication control device 560 including a network interface card.

主記憶装置520、補助記憶装置530、入力装置540、出力装置550及び通信制御装置560は、バスラインを介して制御処理装置510とそれぞれ接続される。
制御処理装置510は、(1)補助記憶装置530に記憶されたプログラムを主記憶装置520上に読み込み、(2)プログラムの指示に従って入力装置540と補助記憶装置530と通信制御装置560との少なくともいずれかからデータを取得し、(3)取得したデータをプログラムに規定される手順で演算・加工した上で、(4)演算済み・加工済みのデータを補助記憶装置530と出力装置550と通信制御装置560との少なくともいずれかに提供する。
The main storage device 520, the auxiliary storage device 530, the input device 540, the output device 550, and the communication control device 560 are each connected to the control processing device 510 via a bus line.
The control processing device 510 (1) reads the program stored in the auxiliary storage device 530 onto the main storage device 520, and (2) follows at least the input device 540, the auxiliary storage device 530, and the communication control device 560 according to the instruction of the program. Data is acquired from either of them, (3) the acquired data is calculated and processed according to the procedure specified in the program, and (4) the calculated and processed data is communicated with the auxiliary storage device 530 and the output device 550. Provided to at least one with control device 560.

[2−4.機能構成]
図6は、コンテンツ管理システム及び動画配信システムの機能構成例を示す。
図6に例示されるように、コンテンツ管理システム20は、ファイル管理部611と、ファイル記憶部612と、抽出部621と、登録部622と、出力部623と、データ管理部631と、データ記憶部632と、提示部641と、決定部642と、提供部643と、を含む。また、動画配信システム30は、配信部651と、ファイル管理部661と、ファイル記憶部662と、を含む。
[2-4. Functional configuration]
FIG. 6 shows a functional configuration example of the content management system and the video distribution system.
As illustrated in FIG. 6, the content management system 20 includes a file management unit 611, a file storage unit 612, an extraction unit 621, a registration unit 622, an output unit 623, a data management unit 631, and data storage. A unit 632, a presentation unit 641, a determination unit 642, and a providing unit 643 are included. Further, the moving image distribution system 30 includes a distribution unit 651, a file management unit 661, and a file storage unit 662.

ファイル管理部611は、ファイル管理サーバ24を含んで構成される。ファイル記憶部612は、ストレージ25を含んで構成される。抽出部621,登録部622及び出力部623は、データ処理サーバ22を含んで構成される。データ管理部631は、データ管理サーバ23を含んで構成される。データ記憶部632は、ストレージ25を含んで構成される。提示部641,決定部642及び提供部643は、ユーザ管理サーバ21を含んで構成される。
配信部651は、配信サーバ32を含んで構成される。ファイル管理部661は、ファイル管理サーバ31を含んで構成される。ファイル記憶部662は、ストレージ33を含んで構成される。
The file management unit 611 includes a file management server 24. The file storage unit 612 is configured to include the storage 25. The extraction unit 621, the registration unit 622, and the output unit 623 include a data processing server 22. The data management unit 631 includes a data management server 23. The data storage unit 632 is configured to include the storage 25. The presentation unit 641, the determination unit 642, and the provision unit 643 are configured to include the user management server 21.
The distribution unit 651 includes a distribution server 32. The file management unit 661 includes a file management server 31. The file storage unit 662 is configured to include the storage 33.

ユーザ管理サーバ21が担う機能は、サーバ装置向けOS(Operating System)と当該OS上で動作するWebサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
データ処理サーバ22が担う機能は、サーバ装置向けOSと当該OS上で動作するアプリケーションプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
データ管理サーバ23が担う機能は、サーバ装置向けOSと当該OS上で動作するDBサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
ファイル管理サーバ24が担う機能は、サーバ装置向けOSと当該OS上で動作するファイルサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
The function of the user management server 21 is realized by installing an OS (Operating System) for the server device and a Web server program running on the OS in the server device, respectively.
The function of the data processing server 22 is realized by installing an OS for the server device and an application program running on the OS in the server device, respectively.
The function of the data management server 23 is realized by installing the OS for the server device and the DB server program running on the OS in the server device, respectively.
The function of the file management server 24 is realized by installing the OS for the server device and the file server program running on the OS in the server device, respectively.

ファイル管理サーバ31が担う機能は、サーバ装置向けOSと当該OS上で動作するファイルサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
配信サーバ32が担う機能は、サーバ装置向けOSと当該OS上で動作するストリーミング配信サーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
サーバ装置にインストールされるべきプログラムは、CD(Compact Disc),DVD(Digital Versatile Disk),MOディスク(Magneto-Optical disk),フラッシュメモリ(flash memory)などの記録媒体に記録された状態で配布され当該記録媒体からサーバ装置に読み込まれてもよいし、通信ネットワークを介し搬送波に重畳させてサーバ装置に供給されてもよい。
The function of the file management server 31 is realized by installing the OS for the server device and the file server program running on the OS in the server device, respectively.
The function of the distribution server 32 is realized by installing the OS for the server device and the streaming distribution server program running on the OS in the server device, respectively.
Programs to be installed on server devices are distributed as recorded on recording media such as CDs (Compact Discs), DVDs (Digital Versatile Disks), MO disks (Magneto-Optical disks), and flash memories. It may be read from the recording medium into the server device, or may be superposed on the carrier via the communication network and supplied to the server device.

ファイル記憶部612には、ユーザ端末10又は動画配信システム30から取得されたムービーファイルが記憶される。データ記憶部632には、ムービー管理データが記憶される。
図7(a)は、ムービー管理情報の項目例を示す。
図7(a)に例示されるように、ムービー管理情報は、キー項目である「ムービーID」と、当該ムービーファイルのファイル記憶部612における格納位置を示す「ファイルパス」,当該ムービーに関する先行情報の提供をリクエストしたユーザを特定する「ユーザID」,当該リクエストを受け付けた時期を特定可能な「受付時期」,当該ムービーの「再生時間」と、を含む。
The file storage unit 612 stores a movie file acquired from the user terminal 10 or the video distribution system 30. Movie management data is stored in the data storage unit 632.
FIG. 7A shows an example of items of movie management information.
As illustrated in FIG. 7A, the movie management information includes a key item "movie ID", a "file path" indicating a storage position of the movie file in the file storage unit 612, and prior information about the movie. Includes a "user ID" that identifies the user who requested the provision of the movie, a "reception time" that can specify the time when the request was received, and a "playback time" of the movie.

抽出部621は、ファイル記憶部612に記憶されるムービーファイルをファイル管理部611を介して取得し、要素を抽出する。本実施例では、フレームと音声データとを抽出する。音声データは、音声認識処理により対応テキストに変換する。
登録部622は、抽出されたフレームをファイル管理部611を介してファイル記憶部612に記憶させる。また、登録部622は、フレーム管理情報及びテキスト管理情報をデータ管理部631を介してデータ記憶部632に登録する。
出力部623は、抽出されたフレームの中からユーザ操作に応じて又は自動的に選択される単数又は複数の代表フレームがレイアウトされた先行情報(図1,図2)を生成してユーザに提供する。
The extraction unit 621 acquires the movie file stored in the file storage unit 612 via the file management unit 611, and extracts the elements. In this embodiment, the frame and the audio data are extracted. The voice data is converted into the corresponding text by the voice recognition process.
The registration unit 622 stores the extracted frame in the file storage unit 612 via the file management unit 611. Further, the registration unit 622 registers the frame management information and the text management information in the data storage unit 632 via the data management unit 631.
The output unit 623 generates advance information (FIGS. 1 and 2) in which one or more representative frames are laid out, which are automatically selected from the extracted frames according to the user operation, and provides the user with the preceding information (FIGS. 1 and 2). To do.

図7(b)は、フレーム管理情報の項目例を示す。
図7(b)に例示されるように、フレーム管理情報は、キー項目である「ムービーID」と、範囲の先頭を特定可能な「先頭位置」,範囲の末尾を特定可能な「末尾位置」,当該フレームを示す画像ファイルのファイル記憶部612における格納位置を示す「ファイルパス」,有意のとき代表要素であることを示す「代表フラグ」と、を含む。
FIG. 7B shows an example of items of frame management information.
As illustrated in FIG. 7B, the frame management information includes a key item "movie ID", a "start position" that can specify the beginning of the range, and a "end position" that can specify the end of the range. , A "file path" indicating a storage position in the file storage unit 612 of an image file indicating the frame, and a "representative flag" indicating that the image file is a representative element when it is significant.

図7(c)は、テキスト管理情報の項目例を示す。
図7(c)に例示されるように、テキスト管理情報は、キー項目である「ムービーID」と、範囲の先頭を特定可能な「先頭位置」,範囲の末尾を特定可能な「末尾位置」,当該範囲に包含される音声に対する音声認識結果又はこれをユーザが編集した「対応テキスト」,指定された回数に相当する「優先度」と、を含む。
FIG. 7C shows an example of items of text management information.
As illustrated in FIG. 7 (c), the text management information includes a key item "movie ID", a "start position" that can specify the beginning of the range, and a "end position" that can specify the end of the range. , The voice recognition result for the voice included in the range or the "corresponding text" edited by the user, and the "priority" corresponding to the specified number of times.

提示部641は、指定ムービーから抽出可能なテキストのうち複数の補助テキストを、指定ムービーのタイムラインにそれぞれ対応付けて、ユーザに指定された回数が多い補助テキストほど優先して、徐々に提示する。補助テキストを増加させる契機は、所定のユーザ操作が検出されたことでもよいし、所定の時間が経過したことでもよい。
決定部642は、提示された補助テキストのうちいずれかが指定された場合に、指定された補助テキストに対応するタイムライン上の位置を指定ムービーの再生開始位置として決定する。このとき、決定部642はテキスト管理情報の「優先度」を更新する。
提供部643は指定ムービーと再生開始位置とをそれぞれ特定可能なURLを再生要求の要求元に提供する。
The presentation unit 641 associates a plurality of auxiliary texts among the texts that can be extracted from the designated movie with the timeline of the designated movie, and gradually presents the auxiliary texts that are specified by the user more often with priority. .. The trigger for increasing the auxiliary text may be that a predetermined user operation is detected or that a predetermined time has elapsed.
When any of the presented auxiliary texts is specified, the determination unit 642 determines the position on the timeline corresponding to the specified auxiliary text as the playback start position of the designated movie. At this time, the determination unit 642 updates the "priority" of the text management information.
The providing unit 643 provides a URL capable of specifying the designated movie and the playback start position to the requester of the playback request.

ファイル記憶部662には、ムービーファイルが記憶される。
ファイル管理部661は、動画ファイルのアップデートをユーザ端末10から受け付ける。
配信部651は、再生要求において指定される指定ムービーのムービーファイルをファイル管理部661から読み出し、指定ムービーをストリーミング配信し再生させる。再生要求において再生開始位置が指定されている場合は、当該再生開始位置からストリーミング配信を開始する。
A movie file is stored in the file storage unit 662.
The file management unit 661 receives the update of the moving image file from the user terminal 10.
The distribution unit 651 reads the movie file of the designated movie specified in the playback request from the file management unit 661, and streams and reproduces the designated movie. If the playback start position is specified in the playback request, streaming distribution is started from the playback start position.

[2−5.先行情報提供手順]
図8は、先行情報提供手順を例示する。コンテンツ管理システム20は、下記の手順により先行情報を提供する。
〔S810〕
ユーザ管理サーバ21が、ムービーファイルを取得する。
具体的には、ユーザの指定に基づき、動画配信システム30で管理されているムービーファイルがファイル管理サーバ31から取得され、ファイル管理サーバ24を介してストレージ25に格納される。この際、取得されたムービーファイルに関するムービー管理情報(図7(a))が生成され、データ管理サーバ23を介してストレージ25に登録される。
[2-5. Advance information provision procedure]
FIG. 8 illustrates a procedure for providing prior information. The content management system 20 provides advance information by the following procedure.
[S810]
The user management server 21 acquires the movie file.
Specifically, based on the user's designation, the movie file managed by the video distribution system 30 is acquired from the file management server 31 and stored in the storage 25 via the file management server 24. At this time, movie management information (FIG. 7A) regarding the acquired movie file is generated and registered in the storage 25 via the data management server 23.

〔S820〕
ユーザ管理サーバ21が、ムービーファイルから要素を抽出する。
具体的には、ストレージ25に記憶されるムービーファイルがファイル管理サーバ24を介して取得され、フレームと音声データとが抽出される。音声データは、音声認識処理によりテキストに変換される。テキストは、必要に応じてユーザに編集させてもよい。
[S820]
The user management server 21 extracts the elements from the movie file.
Specifically, the movie file stored in the storage 25 is acquired via the file management server 24, and the frame and the audio data are extracted. The voice data is converted into text by the voice recognition process. The text may be edited by the user as needed.

〔S830〕
ユーザ管理サーバ21が、先行情報を提供する。
具体的には、抽出されたフレームの中からユーザ操作に応じて又は自動的に選択される単数又は複数の代表フレームがレイアウトされた先行情報(図1,図2)が生成され、ユーザに提供される。
[S830]
The user management server 21 provides advance information.
Specifically, prior information (FIGS. 1 and 2) in which a single or a plurality of representative frames selected from the extracted frames according to the user operation or automatically is laid out is generated and provided to the user. Will be done.

〔S840〕
ユーザ管理サーバ21が、管理情報を登録する。
具体的には、抽出されたフレームがファイル管理サーバ24を介してストレージ25に格納される。また、フレーム管理情報(図7(b))及びテキスト管理情報(図7(c))が生成され、データ管理サーバ23を介してストレージ25に登録される。
[S840]
The user management server 21 registers the management information.
Specifically, the extracted frame is stored in the storage 25 via the file management server 24. Further, frame management information (FIG. 7 (b)) and text management information (FIG. 7 (c)) are generated and registered in the storage 25 via the data management server 23.

[2−6.動画配信手順]
図9は、動画配信手順を例示する。コンテンツ管理システム20及び動画配信システム30は、下記の手順により動画を配信する。
〔S905〕
ユーザ管理サーバ21が、ムービーの再生要求をユーザ端末10から受領する。
具体的には、ユーザ端末10において次の手順で再生要求が送出される。なお、URLは、ムービーを特定可能なムービー特定情報と、先行情報における代表フレームを特定可能なパラメータとを包含する。
(1)先行情報に含まれる二次元コードを撮像する。
(2)撮像された二次元コードをURLに変換する。
(3)変換されたURLを指定してアクセスする。
[2-6. Video distribution procedure]
FIG. 9 illustrates a moving image distribution procedure. The content management system 20 and the video distribution system 30 distribute the video according to the following procedure.
[S905]
The user management server 21 receives a movie playback request from the user terminal 10.
Specifically, the user terminal 10 sends a reproduction request in the following procedure. The URL includes movie specific information that can specify a movie and parameters that can specify a representative frame in the preceding information.
(1) The two-dimensional code included in the preceding information is imaged.
(2) Convert the captured two-dimensional code into a URL.
(3) Specify the converted URL to access.

〔S910〕
ユーザ管理サーバ21が、指示画面をユーザ端末10に提供する。
図10は、指示画面の表示例を示す。
図10に例示されるように、指示画面1000は、タイムライン1010と、タイムライン1010に対応付けられる要素1022〜1028と、ボタン1030と、を含む。
タイムライン1010に対応付けられる要素は、ムービーのある範囲から抽出されるフレーム1022aと、当該フレームが代表フレームであることを示すアイコン1024aと、当該範囲の先頭からの再生を指示するボタン1028aと、を含む。
代表フレーム1022aは、ステップS905において受領した再生要求に含まれるパラメータにより特定される。
[S910]
The user management server 21 provides an instruction screen to the user terminal 10.
FIG. 10 shows a display example of the instruction screen.
As illustrated in FIG. 10, the instruction screen 1000 includes a timeline 1010, elements 1022-1028 associated with the timeline 1010, and a button 1030.
The elements associated with the timeline 1010 are a frame 1022a extracted from a certain range of the movie, an icon 1024a indicating that the frame is a representative frame, and a button 1028a instructing playback from the beginning of the range. including.
The representative frame 1022a is specified by the parameters included in the reproduction request received in step S905.

〔S915〕
ユーザ管理サーバ21が、指示画面内の要素の更新要求をユーザ端末10から受領する。
具体的には、指示画面を構成するWebページのロード完了を契機として、指示画面に表示される要素の更新要求が、ユーザ端末10からユーザ管理サーバ21へ非同期通信により送出される。
[S915]
The user management server 21 receives an update request for an element in the instruction screen from the user terminal 10.
Specifically, when the loading of the Web page constituting the instruction screen is completed, the update request of the element displayed on the instruction screen is sent from the user terminal 10 to the user management server 21 by asynchronous communication.

〔S920〕
ユーザ管理サーバ21が、指示画面内の要素をユーザ端末10に更新させる。
図11は、更新後の指示画面の表示例を示す。
図11の表示例では、対応テキスト1026a,フレーム1022b,対応テキスト1026b,フレーム1022c,対応テキスト1026cと、これらに付随する要素と、が追加されている。
対応テキスト1026aは、代表フレームが抽出される範囲から抽出可能な音声に対応するテキストであり、先行情報に含まれない補助要素である。
フレーム1022b,対応テキスト1026b,フレーム1022c,対応テキスト1026cは、ムービーから抽出可能な要素のうち先行情報に含まれない補助要素である。また、これらは、相対的な優先度(本実施例では、指定される頻度)が高い範囲の補助要素である。
[S920]
The user management server 21 causes the user terminal 10 to update the elements in the instruction screen.
FIG. 11 shows a display example of the instruction screen after the update.
In the display example of FIG. 11, the corresponding text 1026a, the frame 1022b, the corresponding text 1026b, the frame 1022c, the corresponding text 1026c, and the elements associated therewith are added.
The corresponding text 1026a is a text corresponding to the voice that can be extracted from the range in which the representative frame is extracted, and is an auxiliary element that is not included in the preceding information.
The frame 1022b, the corresponding text 1026b, the frame 1022c, and the corresponding text 1026c are auxiliary elements that are not included in the preceding information among the elements that can be extracted from the movie. In addition, these are auxiliary elements in a range having a high relative priority (frequency specified in this embodiment).

〔S925〕
ユーザ管理サーバ21が、指示データをユーザ端末10から取得する。
具体的には、ボタン1030に対するタップ操作が検出された場合に、指示画面に表示される要素の更新要求が、ユーザ端末10からユーザ管理サーバ21へ非同期通信により送出される。また、「ここから再生」と表示されるボタン1028に対するタップ操作が検出された場合に、要素の指定データが、ユーザ端末10からユーザ管理サーバ21へ送出される。
なお、指示画面に表示される要素の更新要求は、時間の経過に応じてユーザ端末10から自動的に送出されるように構成してもよい。
[S925]
The user management server 21 acquires instruction data from the user terminal 10.
Specifically, when a tap operation on the button 1030 is detected, an update request for an element displayed on the instruction screen is sent from the user terminal 10 to the user management server 21 by asynchronous communication. Further, when a tap operation for the button 1028 displayed as "Play from here" is detected, the element designation data is sent from the user terminal 10 to the user management server 21.
The element update request displayed on the instruction screen may be configured to be automatically sent from the user terminal 10 with the passage of time.

〔S930〕
ユーザ管理サーバ21が、指示データの内容に応じて処理を進める。
具体的には、取得された指示データが「要素の更新要求」であれば、上記ステップS920に戻る。一方、取得された指示データが「要素の指定」を示すデータであれば、下記ステップS935に進む。
[S930]
The user management server 21 proceeds with the process according to the content of the instruction data.
Specifically, if the acquired instruction data is an "element update request", the process returns to step S920. On the other hand, if the acquired instruction data is data indicating "designation of an element", the process proceeds to step S935 below.

図11の指示画面がユーザ端末10に表示されている場合において、ボタン1030がタップされると、要素の更新要求がユーザ端末10からユーザ管理サーバ21に送出される。
図12は、ユーザ操作に応じた1回目の更新後の指示画面の表示例を示す。
図12の表示例では、フレーム1022d,対応テキスト1026d,フレーム1022e,対応テキスト1026eと、これらに付随する要素と、がさらに追加されている。
フレーム1022d,対応テキスト1026d,フレーム1022e,対応テキスト1026eは、相対的な優先度が低い補助要素である。
When the instruction screen of FIG. 11 is displayed on the user terminal 10, when the button 1030 is tapped, an element update request is sent from the user terminal 10 to the user management server 21.
FIG. 12 shows a display example of the instruction screen after the first update according to the user operation.
In the display example of FIG. 12, the frame 1022d, the corresponding text 1026d, the frame 1022e, the corresponding text 1026e, and the elements associated therewith are further added.
Frame 1022d, corresponding text 1026d, frame 1022e, and corresponding text 1026e are auxiliary elements having low relative priority.

図12の指示画面がユーザ端末10に表示されている場合において、ボタン1030がタップされると、要素の更新要求がユーザ端末10からユーザ管理サーバ21に送出される。
図13は、ユーザ操作に応じた2回目の更新後の指示画面の表示例を示す。
図13の表示例では、フレーム1022f,対応テキスト1026fと、これらに付随する要素と、がさらに追加されている。
フレーム1022f,対応テキスト1026fは、相対的な優先度がさらに低い補助要素である。
When the instruction screen of FIG. 12 is displayed on the user terminal 10, when the button 1030 is tapped, an element update request is sent from the user terminal 10 to the user management server 21.
FIG. 13 shows a display example of the instruction screen after the second update according to the user operation.
In the display example of FIG. 13, the frame 1022f, the corresponding text 1026f, and the elements accompanying them are further added.
The frame 1022f and the corresponding text 1026f are auxiliary elements having a lower relative priority.

〔S935〕
ユーザ管理サーバ21が、指定ムービーの再生開始位置を決定する。
具体的には、指定された補助要素が包含される範囲の「先頭位置」を再生開始位置に決定する。このとき、指定された補助要素に係るテキスト管理情報の「優先度」が更新される。
[S935]
The user management server 21 determines the playback start position of the designated movie.
Specifically, the "starting position" of the range in which the specified auxiliary element is included is determined as the playback start position. At this time, the "priority" of the text management information related to the specified auxiliary element is updated.

〔S940〕
ユーザ管理サーバ21が、指定ムービーをストリーミング再生させるパラメータ付きURLをユーザ端末10に提供する。
具体的には、指定ムービーをストリーミング再生させるURLに決定された再生開始位置を特定可能なパラメータを付加したテキストを生成し、ユーザ端末10にリダイレクト先として提供する。
[S940]
The user management server 21 provides the user terminal 10 with a URL with parameters for streaming and playing the designated movie.
Specifically, a text in which a parameter that can specify a determined playback start position is added to a URL for streaming playback of a designated movie is generated and provided to the user terminal 10 as a redirect destination.

〔S945〕
配信サーバ32が、再生要求をユーザ端末10から受領する。再生要求では、再生開始位置が指定される。
〔S950〕
配信サーバ32が、ユーザ端末10に指定ムービーを再生開始位置からストリーミング配信する。
[S945]
The distribution server 32 receives the reproduction request from the user terminal 10. In the playback request, the playback start position is specified.
[S950]
The distribution server 32 streams the designated movie to the user terminal 10 from the playback start position.

[3.変形例]
[3−1.優先度に関する変形例]
上記実施例では、ユーザにより指定された回数を「優先度」として利用する構成が採用されている。「優先度」は再生開始位置がユーザにより指定される度に更新される。
これに対し、「優先度」を予め定めておく構成を採用してもよい。例えば、人物等のオブジェクトに重要度を設定しておき、重要度の高いオブジェクトの映像や音声が記録されている範囲ほど「優先度」が高くなる構成することも可能である。この構成は、ムービーを視聴するユーザが限定されている場合に特に有効である。
[3. Modification example]
[3-1. Modification example regarding priority]
In the above embodiment, a configuration is adopted in which the number of times specified by the user is used as the "priority". The "priority" is updated every time the playback start position is specified by the user.
On the other hand, a configuration in which the "priority" is predetermined may be adopted. For example, it is possible to set the importance of an object such as a person, and to configure the "priority" to be higher as the video or audio of the object of higher importance is recorded. This configuration is particularly effective when the number of users who watch the movie is limited.

[3−2.情報処理の分担に関する変形例]
上記実施例では、各種のデータ処理をコンテンツ管理システム20(特にデータ処理サーバ22)が実行する構成が採用されている。ユーザ端末10は、コンテンツ管理システム20の入出力装置に相当する役割を担っている。
これに対し、これらのデータ処理の少なくとも一部をユーザ端末10が実行する構成が採用されてもよい。例えばムービーからフレームや音声を抽出する処理,抽出された音声
に音声認識処理を施して対応テキストを得る処理等をユーザ端末10に実行させればコンテンツ管理システム20(データ処理サーバ22)の処理負荷を抑えることが可能になる。
[3-2. Modification example regarding the division of information processing]
In the above embodiment, a configuration is adopted in which the content management system 20 (particularly the data processing server 22) executes various data processes. The user terminal 10 plays a role corresponding to an input / output device of the content management system 20.
On the other hand, a configuration in which the user terminal 10 executes at least a part of these data processes may be adopted. For example, if the user terminal 10 executes a process of extracting a frame or a voice from a movie, a process of performing a voice recognition process on the extracted voice to obtain a corresponding text, or the like, the processing load of the content management system 20 (data processing server 22). Can be suppressed.

10 ユーザ端末
20 コンテンツ管理システム
21 ユーザ管理サーバ
22 データ処理サーバ(情報処理装置の一例)
23 データ管理サーバ
24 ファイル管理サーバ
25 ストレージ
30 動画配信システム
31 ファイル管理サーバ
32 配信サーバ
33 ストレージ
40 通信ネットワーク
10 User terminal 20 Content management system 21 User management server 22 Data processing server (an example of information processing device)
23 Data management server 24 File management server 25 Storage 30 Video distribution system 31 File management server 32 Distribution server 33 Storage 40 Communication network

Claims (5)

提示手段と、決定手段とを備え、
前記提示手段は、動画から抽出される代表要素の中から指定された代表要素を提示した後に、所定の契機に応じて、前記代表要素に加え優先度の高い補助要素から提示し、
前記決定手段は、該補助要素が指定された場合に、該補助要素に対応する前記動画の再生開始位置を決定する
情報処理装置。
It has a presentation means and a decision means,
The presenting means presents a representative element designated from the representative elements extracted from the moving image, and then presents the representative element and the auxiliary element having a high priority in addition to the representative element according to a predetermined opportunity.
The determination means is an information processing device that determines a playback start position of the moving image corresponding to the auxiliary element when the auxiliary element is specified.
記提示手段は、オブジェクトの重要度に応じた前記優先度の高い前記補助要素から提示する、
請求項に記載の情報処理装置。
Before Symbol presenting means presents from the high priority the auxiliary elements in accordance with the importance of objects,
The information processing device according to claim 1.
前記提示手段により提示された補助要素についてユーザに指定された回数を記憶手段に記憶させる手段をさらに備え、
前記提示手段は、ユーザに指定された回数に応じた前記優先度の高い前記補助要素から提示する、
請求項1又は2に記載の情報処理装置。
Further comprising means for storing the number of times specified by the user in the storage means for auxiliary elements presented by the presenting means,
It said presenting means presents from the high priority the auxiliary elements in accordance with the number of times specified in the User chromatography THE,
The information processing device according to claim 1 or 2.
画から抽出される代表要素の中から指定された代表要素を提示した後に、所定の契機に応じて、コンピュータが、前記代表要素に加え優先度の高い補助要素から提示し、
補助要素が指定された場合に、コンピュータが該補助要素に対応する前記動画の再生開始位置を決定する、
情報処理方法。
After presenting the typical element specified from among the representative elements extracted from moving picture, in response to a predetermined trigger, the computer presents a high ancillary element priority in addition to the representative element,
When the auxiliary element is specified, the computer determines the playback start position of the moving image corresponding to the auxiliary element.
Information processing method.
画から抽出される代表要素の中から指定された代表要素を提示した後に、所定の契機に応じて、前記代表要素に加え優先度の高い補助要素から提示する提示機能と、
補助要素がユーザに指定された場合に、該補助要素に対応する前記動画の再生開始位置を決定する決定機能と、
をコンピュータに実現させるためのプログラム。
After presenting the typical element specified from among the representative elements extracted from moving picture, in response to a predetermined trigger, a presentation function of presenting a high ancillary element priority in addition to the representative element,
When the auxiliary element is specified by the user, a determination function for determining the playback start position of the moving image corresponding to the auxiliary element, and
A program to realize the above on a computer.
JP2020102051A 2017-01-20 2020-06-12 Information processing device, control method and control program of information processing device Active JP6898575B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020102051A JP6898575B2 (en) 2017-01-20 2020-06-12 Information processing device, control method and control program of information processing device
JP2021095844A JP7182754B2 (en) 2020-06-12 2021-06-08 Information processing device, control method and control program for information processing device
JP2022160420A JP7393691B2 (en) 2020-06-12 2022-10-04 Information processing device, control method and control program for information processing device
JP2023193880A JP2024009078A (en) 2020-06-12 2023-11-14 Information processing apparatus, control method for the same, and control program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017008939A JP6718389B2 (en) 2017-01-20 2017-01-20 Information processing apparatus, control method of information processing apparatus, and control program
JP2020102051A JP6898575B2 (en) 2017-01-20 2020-06-12 Information processing device, control method and control program of information processing device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017008939A Division JP6718389B2 (en) 2017-01-20 2017-01-20 Information processing apparatus, control method of information processing apparatus, and control program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021095844A Division JP7182754B2 (en) 2020-06-12 2021-06-08 Information processing device, control method and control program for information processing device

Publications (2)

Publication Number Publication Date
JP2020145762A JP2020145762A (en) 2020-09-10
JP6898575B2 true JP6898575B2 (en) 2021-07-07

Family

ID=72353784

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020102051A Active JP6898575B2 (en) 2017-01-20 2020-06-12 Information processing device, control method and control program of information processing device

Country Status (1)

Country Link
JP (1) JP6898575B2 (en)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005303742A (en) * 2004-04-13 2005-10-27 Daikin Ind Ltd Information processing apparatus and information processing method, program, and information processing system
JP4701958B2 (en) * 2005-09-26 2011-06-15 ソニー株式会社 Image processing apparatus, image processing method, and program thereof
JP2007267356A (en) * 2006-03-02 2007-10-11 Sony Corp File management program, thumb nail image display method, and moving image reproduction device
JP4935551B2 (en) * 2007-07-17 2012-05-23 ソニー株式会社 Display control apparatus, display control method, and program
JP2009076982A (en) * 2007-09-18 2009-04-09 Toshiba Corp Electronic apparatus, and face image display method
JP5287756B2 (en) * 2010-02-08 2013-09-11 ソニー株式会社 Image processing apparatus, image processing method, and program
JP2011203821A (en) * 2010-03-24 2011-10-13 Sony Corp Information processor, information processing method and program

Also Published As

Publication number Publication date
JP2020145762A (en) 2020-09-10

Similar Documents

Publication Publication Date Title
JP6718389B2 (en) Information processing apparatus, control method of information processing apparatus, and control program
US9264746B2 (en) Content distribution system, content distribution server, content distribution method, software program, and storage medium
JP5870742B2 (en) Information processing apparatus, system, and information processing method
JP3675739B2 (en) Digital stream content creation method, digital stream content creation system, digital stream content creation program, recording medium recording this program, and digital stream content distribution method
EP3453182A1 (en) Seamless streaming and filtering
KR102261221B1 (en) System And Method For Obtaining Image Information, And Method For Displaying Image Acquisition Information
WO2010100913A1 (en) Metadata generation management device, metadata generation system, integrated circuit for metadata generation management, metadata generation management method, and program
JP6898575B2 (en) Information processing device, control method and control program of information processing device
JP7288254B1 (en) computer programs, terminals and servers
JP7393691B2 (en) Information processing device, control method and control program for information processing device
JP2012138804A (en) Image processor, image processing method, and program
WO2022163023A1 (en) Content correction device, content delivery server, content correction method, and recording medium
JP5324108B2 (en) Computer system, moving image editing method, program, moving image editing terminal
JP6215866B2 (en) Internet video playback system and program
JP5544030B2 (en) Clip composition system, method and recording medium for moving picture scene
JP5788032B2 (en) Output sharing terminal, content sharing attribute management server, output sharing method, program for output sharing terminal
JP6856883B2 (en) Information processing device, control method and control program of information processing device
KR101805302B1 (en) Apparatus and method for displaying multimedia contents
JP2009130644A (en) Communication equipment, communication method, program, and storage medium
JP6367882B2 (en) Client terminal and internet video playback system provided with the same
JP6648003B2 (en) Information processing apparatus, control method of information processing apparatus, and control program
JP7376034B1 (en) Servers, methods and computer programs
JP4752260B2 (en) Information processing apparatus and information processing method
JP7365195B2 (en) karaoke system
JP7423020B1 (en) System and method for playlist generation

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200707

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200707

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210324

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210524

R150 Certificate of patent or registration of utility model

Ref document number: 6898575

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250