JP6718389B2 - Information processing apparatus, control method of information processing apparatus, and control program - Google Patents

Information processing apparatus, control method of information processing apparatus, and control program Download PDF

Info

Publication number
JP6718389B2
JP6718389B2 JP2017008939A JP2017008939A JP6718389B2 JP 6718389 B2 JP6718389 B2 JP 6718389B2 JP 2017008939 A JP2017008939 A JP 2017008939A JP 2017008939 A JP2017008939 A JP 2017008939A JP 6718389 B2 JP6718389 B2 JP 6718389B2
Authority
JP
Japan
Prior art keywords
moving image
auxiliary
user
designated
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017008939A
Other languages
Japanese (ja)
Other versions
JP2018117328A (en
Inventor
健治 笠原
健治 笠原
智司 生井
智司 生井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mixi Inc
Original Assignee
Mixi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mixi Inc filed Critical Mixi Inc
Priority to JP2017008939A priority Critical patent/JP6718389B2/en
Publication of JP2018117328A publication Critical patent/JP2018117328A/en
Priority to JP2020102051A priority patent/JP6898575B2/en
Application granted granted Critical
Publication of JP6718389B2 publication Critical patent/JP6718389B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、情報処理システムに関する。
本発明は、特に、ユーザの希望に適う位置からムービーを再生させる情報処理システムに関する。
The present invention relates to an information processing system.
The present invention particularly relates to an information processing system for playing a movie from a position suitable for a user's request.

特許文献1には、動画像から選択される複数の代表画像を紙に印刷して提供する仕組みが開示されている。
特許文献1に記載のシステムは、対応する再生範囲を特定する紐付け情報をそれぞれ埋め込んだ複数の代表画像を印刷するとともに、当該紐付け情報を含む再生要求に応じて当該紐付け情報により指定される範囲の動画像をオンラインで再生させる。
Patent Document 1 discloses a mechanism for printing a plurality of representative images selected from moving images on paper and providing the same.
The system described in Patent Document 1 prints a plurality of representative images in which linking information that specifies a corresponding playback range is embedded, and is specified by the linking information in response to a playback request including the linking information. Play a range of moving images online.

特開2013−183255号公報JP, 2013-183255, A

特許文献1に記載のシステムでは、動画像データを所定の分割基準で複数の動画ブロックに機械的に分割し、当該複数の動画ブロックからそれぞれ選択される代表画像に当該動画ブロック内で指定される再生範囲をそれぞれ紐付ける。
そのため、動画の閲覧を希望するユーザに再生開始位置を柔軟に指定させることができない。
In the system described in Patent Document 1, moving image data is mechanically divided into a plurality of moving image blocks according to a predetermined division criterion, and a representative image selected from each of the plurality of moving image blocks is designated in the moving image block. Associate each playback range.
Therefore, it is not possible to flexibly specify the reproduction start position by the user who wants to browse the moving image.

本発明が解決しようとする課題は、ムービーの閲覧を希望するユーザに当該ムービーの再生開始位置を簡便に指定させることである。 The problem to be solved by the present invention is to allow a user who wants to browse a movie to easily specify a playback start position of the movie.

〔A〕上記課題を解決するため、本発明の一態様である「情報処理装置」は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示手段と、前記提示手段により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定手段と、を備える。
〔B〕上記課題を解決するため、本発明の一態様である「情報処理装置の制御方法」は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示ステップと、前記提示ステップにおいて提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定ステップと、を含む。
〔C〕上記課題を解決するため、本発明の一態様である「制御プログラム」は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示機能と、前記提示機能により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定機能と、を情報処理装置のコンピュータに実現させる。
〔D〕上記課題を解決するため、本発明の一態様である「コンピュータ読取り可能な記録媒体」に記録される制御プログラムは、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示機能と、前記提示機能により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定機能と、を情報処理装置のコンピュータに実現させる。
[A] In order to solve the above problems, the “information processing device” according to one aspect of the present invention has information that associates one or more representative elements with specific information that can specify a movie from which the representative elements are extracted. A presentation unit that presents a plurality of auxiliary elements extracted from the movie identified by the specific information to the user when a reproduction request including the specific information is received after being provided, and a plurality of presentation units presented by the presentation unit. When any one of the auxiliary elements is designated by the user, a determination is made to determine the reproduction start position of the movie to be reproduced by the request source in response to the reproduction request so that the portion enclosing the specified auxiliary element is reproduced. And means.
[B] In order to solve the above problems, the "control method for an information processing apparatus" according to one aspect of the present invention includes a single or a plurality of representative elements and specific information with which a movie from which the representative elements are extracted can be specified. A presentation step of presenting to the user a plurality of auxiliary elements extracted from the movie identified by the specific information when a reproduction request including the specific information is received after the information to be associated is provided; When any one of the plurality of auxiliary elements is specified by the user, the reproduction start position of the movie to be reproduced by the request source in response to the reproduction request is set so that the portion enclosing the specified auxiliary element is reproduced. A determining step of determining.
[C] In order to solve the above problems, the “control program” of one embodiment of the present invention provides information that associates one or more representative elements with specific information that can specify the movie from which the representative elements are extracted. A presentation function of presenting to the user a plurality of auxiliary elements extracted from the movie specified by the specific information when a reproduction request including the specific information is received after the presentation, and a plurality of auxiliary functions presented by the presentation function. When any one of the elements is designated by the user, a determination function that determines the playback start position of the movie to be played back by the request source in response to the playback request so that the portion that encloses the designated auxiliary element is played back. And are realized by the computer of the information processing apparatus.
[D] To solve the above problems, a control program recorded in a "computer-readable recording medium" according to an aspect of the present invention identifies a single or a plurality of representative elements and a movie from which the representative elements are extracted. A presentation function of presenting to the user a plurality of auxiliary elements extracted from the movie identified by the specific information when a reproduction request including the specific information is received after the information associating with the possible specific information is provided, A portion that encloses the designated auxiliary element at the reproduction start position of the movie to be reproduced by the request source in response to the reproduction request when any of the plurality of auxiliary elements presented by the presentation function is designated by the user. The computer of the information processing apparatus is made to realize the determination function of determining that the is reproduced.

上記〔A〕の「情報処理装置」には、下記の技術的限定を加えてもよい。また、同様の技術的限定を、上記〔B〕の「制御方法」,上記〔C〕の「制御プログラム」及び上記〔D〕の「記録媒体」が記録する制御プログラムに加えてもよい。
・前記提示手段が、提示される前記補助要素の数を徐々に増加させる。
・前記提示手段が、優先度の高い前記補助要素を優先的に提示する。
・オブジェクトの重要度を記憶手段に記憶させる手段をさらに備え、前記提示手段が、前記記憶手段を参照し、オブジェクトの重要度に応じた前記優先度の高い前記補助要素を優先的に提示する。
・前記提示手段により提示された複数の補助要素についてユーザに指定された回数を記憶手段に記憶させる手段をさらに備え、前記提示手段が、前記記憶手段を参照し、ユーザに指定された回数に応じた前記優先度の高い前記補助要素を優先的に提示する。
・前記提示手段が、提示される前記補助要素の数を時間の経過に応じて段階的に増加させる。
・前記提示手段が、提示される前記補助要素の数をユーザ操作に応じて段階的に増加させる。
・前記提示手段が、前記補助要素を抽出元の前記ムービーにおける出現順序を維持して提示する。
・前記提示手段が、前記特定手段により特定されるムービーのタイムラインに対応付けて前記複数の補助要素を提示し、前記決定手段が、前記指定された補助要素に対応する前記タイムライン上の位置を前記再生開始位置に決定する。
・前記代表要素は、フレームと該フレームの周辺の音声データに対応するテキストのうち少なくとも前者であり、前記補助要素は、前記代表要素でないフレーム又は前記代表要素でないテキストである。
The following technical limitations may be added to the "information processing device" of [A] above. Further, the same technical limitation may be added to the control program recorded by the "control method" of [B], the "control program" of [C], and the "recording medium" of [D].
The presenting means gradually increases the number of presented auxiliary elements.
-The presenting means preferentially presents the auxiliary element having a high priority.
A means for storing the importance of the object in the storage means is further provided, and the presenting means refers to the storage means and preferentially presents the auxiliary element having the high priority according to the importance of the object.
A unit for storing the number of times specified by the user for the plurality of auxiliary elements presented by the presenting unit in the storage unit, the presenting unit referring to the storage unit, and depending on the number of times specified by the user Further, the auxiliary element having the higher priority is preferentially presented.
-The presenting means increases the number of the above-mentioned auxiliary elements presented stepwise in accordance with the passage of time.
-The presenting means increases the number of the auxiliary elements presented in a stepwise manner in response to a user operation.
-The presenting means presents the auxiliary elements while maintaining the appearance order in the movie from which they are extracted.
The presenting means presents the plurality of auxiliary elements in association with the timeline of the movie specified by the specifying means, and the determining means positions on the timeline corresponding to the specified auxiliary elements Is determined as the reproduction start position.
The representative element is at least the former of the text corresponding to the frame and the audio data around the frame, and the auxiliary element is the frame that is not the representative element or the text that is not the representative element.

本明細書では、下記のように用語を用いる。
・「ムービー」は、複数のフレームと音声データとを少なくとも包含する。
・「フレーム」とは、ムービーを構成する静止画像をいう。
・「要素」は、ムービーを構成するフレーム,ムービーを構成する音声データに対応するテキストを少なくとも含む。
・「ユーザ操作」は、画面上の指示位置を連続的に入力する位置入力装置(例えば、タッチパネル,マウス,タッチパッド等)を用いて行われる。
・「周辺」とは、ムービーのタイムライン上で出現位置が近いことをいう。
In this specification, the following terms are used.
"Movie" includes at least a plurality of frames and audio data.
-The "frame" refers to the still images that make up the movie.
The "element" includes at least a frame forming a movie and a text corresponding to audio data forming the movie.
The "user operation" is performed using a position input device (for example, a touch panel, a mouse, a touch pad, etc.) that continuously inputs the designated position on the screen.
-"Peripheral" means that the appearance position is close on the movie timeline.

本発明によれば、ムービーの閲覧を希望するユーザに当該ムービーの再生開始位置を簡便に指定させることが可能になる。 According to the present invention, it becomes possible for a user who wants to browse a movie to easily specify the playback start position of the movie.

先行情報の一例の説明図である。(実施例)It is explanatory drawing of an example of prior information. (Example) 先行情報の他の一例の説明図である。(実施例)It is explanatory drawing of another example of prior information. (Example) ネットワーク構成例の説明図である。(実施例)It is an explanatory view of an example of network composition. (Example) ユーザ装置のハードウェア構成例の説明図である。(実施例)It is explanatory drawing of the hardware structural example of a user apparatus. (Example) サーバ装置のハードウェア構成例の説明図である。(実施例)It is explanatory drawing of the hardware structural example of a server apparatus. (Example) コンテンツ管理システム及び動画配信システムの機能構成例の説明図である。(実施例)It is explanatory drawing of the functional structural example of a content management system and a moving image delivery system. (Example) 管理データの項目例の説明図である。(実施例)It is explanatory drawing of the example of an item of management data. (Example) 先行情報提供手順の説明図である。(実施例)It is explanatory drawing of a precedence information provision procedure. (Example) 動画配信手順の説明図である。(実施例)It is explanatory drawing of a video delivery procedure. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the example of a display of an instruction screen. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the example of a display of an instruction screen. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the example of a display of an instruction screen. (Example) 指示画面の表示例の説明図である。(実施例)It is explanatory drawing of the example of a display of an instruction screen. (Example)

[1.実施形態]
[1−1.概要]
本実施形態は、ムービーから抽出可能な代表要素がレイアウトされる先行情報を見たユーザからの求めに応じて、当該ユーザの希望に適う位置からムービーを再生させる情報処理システムに関する。
本実施形態では、ムービーの視聴を希望するユーザに再生開始位置を簡便に指定させるため、当該ムービーから抽出可能な要素のうち先行情報に含まれない補助要素を少なくとも当該ユーザに提示して所望の補助要素を当該ユーザに指定させる構成が採用されている。
[1. Embodiment]
[1-1. Overview]
The present embodiment relates to an information processing system that reproduces a movie from a position that suits the user's request in response to a request from the user who has seen the preceding information in which the representative elements that can be extracted from the movie are laid out.
In the present embodiment, in order to allow a user who desires to watch a movie to easily specify the reproduction start position, at least an auxiliary element that is not included in the preceding information among the elements that can be extracted from the movie is presented to the user and desired. A configuration is adopted that allows the user to specify an auxiliary element.

[1−2.情報処理装置]
本実施形態に係る情報処理システムを構成する情報処理装置は、単数又は複数の代表要素と該代表要素の抽出元のムービーを特定可能な特定情報とを関連付ける情報が提供された後に該特定情報を含む再生要求を受けた場合に該特定情報により特定されるムービーから抽出される複数の補助要素をユーザに提示する提示手段と、前記提示手段により提示された複数の補助要素のうちいずれかが前記ユーザに指定された場合に前記再生要求に応じて要求元に再生させるムービーの再生開始位置を該指定された補助要素を包む部分が再生されるように決定する決定手段と、を備える。
[1-2. Information processing equipment]
The information processing apparatus that constitutes the information processing system according to the present exemplary embodiment provides the specific information after the information that associates one or more representative elements with the specific information that can specify the movie from which the representative element is extracted is provided. One of the plurality of auxiliary elements presented by the presenting means and the presenting means for presenting to the user a plurality of auxiliary elements extracted from the movie specified by the specifying information when receiving a reproduction request including Determining means for determining the reproduction start position of the movie to be reproduced by the request source in response to the reproduction request when specified by the user, so that the portion enclosing the specified auxiliary element is reproduced.

[2.実施例]
[2−1.概要]
本実施例は、ムービーから抽出可能な代表フレームがレイアウトされる先行情報にカメラを向けたユーザ端末からの再生要求に応じて、ユーザの希望に適う位置からムービーをストリーミング再生させる情報処理システムに関する。
本実施例では、ムービーの視聴を希望するユーザに再生開始位置を簡便に指定させるため、当該ムービーから抽出可能な音声に対応する補助テキストを少なくとも当該ユーザに提示して所望の補助テキストを当該ユーザに指定させる構成が採用されている。
[2. Example]
[2-1. Overview]
The present embodiment relates to an information processing system for streaming and playing a movie from a position suitable for a user in response to a playback request from a user terminal whose camera is directed to prior information in which a representative frame that can be extracted from the movie is laid out.
In the present embodiment, in order to allow a user who wants to watch a movie to easily specify the reproduction start position, at least the auxiliary text corresponding to the sound that can be extracted from the movie is presented to the user and the desired auxiliary text is displayed to the user. The configuration to be specified by is adopted.

図1は、先行情報の一例である。
先行情報100は、あるムービーから抽出可能な代表フレーム110,120,130及び140がレイアウトされた用紙である。各代表フレームの隅には、当該ムービーと当該フレームとを特定可能なパラメータ付きURLが変換された二次元コード111,121,131及び141がそれぞれ重畳配置されている。
FIG. 1 is an example of preceding information.
The preceding information 100 is a sheet on which representative frames 110, 120, 130 and 140 that can be extracted from a movie are laid out. Two-dimensional codes 111, 121, 131, and 141 in which URLs with parameters that can specify the movie and the frame are converted are superposed on the corners of each representative frame.

図2は、先行情報の他の例である。
先行情報200は、あるムービーから抽出可能な代表フレーム210,220,230及び240がレイアウトされた画像である。各代表フレームの隅には、当該ムービーと当該フレームとを特定可能なパラメータ付きURLが変換された二次元コード211,221,231及び241がそれぞれ重畳配置されている。
FIG. 2 is another example of the preceding information.
The preceding information 200 is an image in which representative frames 210, 220, 230 and 240 that can be extracted from a movie are laid out. Two-dimensional codes 211, 221, 231, and 241 in which URLs with parameters that can specify the movie and the frame are converted are superposed on the corners of each representative frame.

[2−2.ネットワーク構成]
図3は、実施例のシステムのネットワーク構成例を示す。
本実施例のシステムは、ユーザが使用するユーザ端末10と、コンテンツ管理サービスを提供するコンテンツ管理システム20と、動画配信サービスを提供する動画配信システム30と、を含む。
コンテンツ管理システム20は、ユーザ管理サーバ21とデータ処理サーバ22とデータ管理サーバ23とファイル管理サーバ24とストレージ25とを含む。動画配信システム30は、ファイル管理サーバ31と配信サーバ32とストレージ33とを含む。
[2-2. Network configuration]
FIG. 3 shows a network configuration example of the system of the embodiment.
The system of this embodiment includes a user terminal 10 used by a user, a content management system 20 that provides a content management service, and a video distribution system 30 that provides a video distribution service.
The content management system 20 includes a user management server 21, a data processing server 22, a data management server 23, a file management server 24, and a storage 25. The moving image distribution system 30 includes a file management server 31, a distribution server 32, and a storage 33.

ユーザ端末10とユーザ管理サーバ21とは、通信ネットワーク40を通じてそれぞれデータの授受が可能である。ユーザ管理サーバ21及びデータ処理サーバ22は、データ管理サーバ23を介して、ストレージ25に記憶されるデータにそれぞれアクセス可能である。また、ユーザ管理サーバ21及びデータ処理サーバ22は、ファイル管理サーバ24を介して、ストレージ25に記憶されるデータにそれぞれアクセス可能である。
ユーザ端末10とファイル管理サーバ31及び配信サーバ32とは、通信ネットワーク40を通じてそれぞれデータの授受が可能である。ファイル管理サーバ31は、ストレージ33に記憶されるデータにアクセス可能である。また、配信サーバ32は、ファイル管理サーバ31を介して、ストレージ33に記憶されるデータにそれぞれアクセス可能である。
通信ネットワーク40は、インターネット(Internet),携帯電話網,無線WAN(Wireless Wide Area Network),無線LAN(Wireless Local Area Network),イーサネット(Ethernet)(登録商標)などの既存のネットワークのうち少なくともいずれかを含んでいてよい。
Data can be exchanged between the user terminal 10 and the user management server 21 through the communication network 40. The user management server 21 and the data processing server 22 can each access the data stored in the storage 25 via the data management server 23. Further, the user management server 21 and the data processing server 22 are each able to access the data stored in the storage 25 via the file management server 24.
The user terminal 10, the file management server 31, and the distribution server 32 can exchange data with each other through the communication network 40. The file management server 31 can access the data stored in the storage 33. Further, the distribution server 32 can access the data stored in the storage 33 via the file management server 31.
The communication network 40 is at least one of existing networks such as the Internet, a mobile phone network, a wireless WAN (Wireless Wide Area Network), a wireless LAN (Wireless Local Area Network), and Ethernet (registered trademark). May be included.

[2−2−1.ユーザ端末]
ユーザ端末10は、所定のWebブラウザプログラムがインストールされたユーザ装置(コンピュータ)である。
本実施例のシステムでは、ユーザ装置として、Webブラウザプログラムをインストール可能な汎用の携帯装置(例えば、携帯電話,スマートフォン(smartphone),タブレット(tablet)端末,タブレットPC(personal computer),ウェアラブルデバイス(wearable device)など)や汎用の処理装置(例えば、PC(personal computer)など)を用いることができる。
[2-2-1. User terminal]
The user terminal 10 is a user device (computer) in which a predetermined Web browser program is installed.
In the system of the present embodiment, a general-purpose mobile device (for example, a mobile phone, a smart phone, a tablet terminal, a tablet PC (personal computer), a wearable device (wearable) that can install a web browser program as a user device. device)) or a general-purpose processing device (for example, PC (personal computer) etc.) can be used.

[2−2−2.コンテンツ管理システム]
コンテンツ管理システム20は、ユーザ管理サーバ21とデータ処理サーバ22とデータ管理サーバ23とファイル管理サーバ24とストレージ25とを含む。
ユーザ管理サーバ21は、Webサーバプログラム(HTTPデーモン(HyperText Transfer Protocol Daemon)ともいう。)がインストールされたサーバ装置(コンピュータ)である。
ユーザ管理サーバ21は、ユーザ端末10からの要求(リクエスト)に応じて、データ管理サーバ23を介してストレージ25から必要なデータを読み出し、ユーザ端末10に提供(レスポンス)する。また、ユーザ管理サーバ21は、ユーザ端末10からの要求(リクエスト)に応じて、ユーザ端末10から取得したデータを、データ管理サーバ23を介してストレージ25に書き込み、処理結果をユーザ端末10に提供(レスポンス)する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、ユーザ管理サーバ21の機能を分担させ又はユーザ管理サーバ21にかかる負荷を分散させてもよい。
[2-2-2. Content management system]
The content management system 20 includes a user management server 21, a data processing server 22, a data management server 23, a file management server 24, and a storage 25.
The user management server 21 is a server device (computer) in which a Web server program (also referred to as HTTP daemon (HyperText Transfer Protocol Daemon)) is installed.
The user management server 21 reads out necessary data from the storage 25 via the data management server 23 in response to a request from the user terminal 10 and provides it to the user terminal 10 (response). Further, the user management server 21 writes the data acquired from the user terminal 10 in the storage 25 via the data management server 23 in response to a request from the user terminal 10 and provides the processing result to the user terminal 10. (Response)
Note that a server system may be configured by linking a plurality of server devices to share the functions of the user management server 21 or distribute the load on the user management server 21.

データ処理サーバ22は、アプリケーションプログラムがインストールされたサーバ装置(コンピュータ)である。
データ処理サーバ22は、ファイル管理サーバ24を介してストレージ25から必要なデータを読み出し、これに演算・加工を施し、演算・加工済みのデータをデータ管理サーバ23を介してストレージ25に書き込む。また、データ処理サーバ22は、データ管理サーバ23を介してストレージ25から必要なデータを読み出し、これに演算・加工を施し、演算・加工済みのデータを出力する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、データ処理サーバ22の機能を分担させ又はデータ処理サーバ22にかかる負荷を分散させてもよい。
The data processing server 22 is a server device (computer) in which an application program is installed.
The data processing server 22 reads out necessary data from the storage 25 via the file management server 24, performs arithmetic processing on the data, and writes the processed/processed data to the storage 25 via the data management server 23. Further, the data processing server 22 reads out necessary data from the storage 25 via the data management server 23, performs arithmetic processing on the data, and outputs the arithmetically processed data.
Note that a server system may be configured by linking a plurality of server devices to share the functions of the data processing server 22 or distribute the load on the data processing server 22.

データ管理サーバ23は、DB(Database)サーバプログラムがインストールされたサーバ装置(コンピュータ)である。データ管理サーバ23は、内蔵する又は外部の接続可能なストレージ25とともにDBMS(Database Management System)を構成する。
データ管理サーバ23は、例えば、データの格納要求に応じ要求元から取得されるデータをストレージ25に格納する機能と、データの抽出要求に応じストレージ25から抽出されるデータを要求元に応答する機能とを有する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、データ管理サーバ23の機能を分担させ又はデータ管理サーバ23にかかる負荷を分散させてもよい。
The data management server 23 is a server device (computer) in which a DB (Database) server program is installed. The data management server 23 constitutes a DBMS (Database Management System) together with the built-in or externally connectable storage 25.
The data management server 23 has, for example, a function of storing data acquired from a request source in the storage 25 in response to a data storage request, and a function of responding to the request source in response to the data extracted from the storage 25 in response to a data extraction request. Have and.
Note that a server system may be configured by linking a plurality of server devices to share the functions of the data management server 23 or distribute the load on the data management server 23.

ファイル管理サーバ24は、ファイルサーバプログラムがインストールされたサーバ装置(コンピュータ)である。
ファイル管理サーバ24は、例えば、データの格納要求に応じ要求元から取得されるデータをストレージ25に格納する機能と、データの抽出要求に応じストレージ25から抽出されるデータを要求元に応答する機能とを有する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、ファイル管理サーバ24の機能を分担させ又はファイル管理サーバ24にかかる負荷を分散させてもよい。
The file management server 24 is a server device (computer) in which a file server program is installed.
The file management server 24 has, for example, a function of storing the data acquired from the request source in the storage 25 in response to the data storage request, and a function of responding to the request source with the data extracted from the storage 25 in response to the data extraction request. Have and.
Note that a plurality of server devices may be linked to form a server system so that the functions of the file management server 24 are shared or the load on the file management server 24 is distributed.

ストレージ25は、管理データ及びファイルデータを記憶する記憶装置である。
なお、複数の記憶装置を用意し、ストレージ25が記憶するデータの種類ごとに別々に記憶させてもよい。またストレージ25が記憶するデータを複数の記憶装置に分散配置することも可能である。
The storage 25 is a storage device that stores management data and file data.
Alternatively, a plurality of storage devices may be prepared and stored separately for each type of data stored in the storage 25. It is also possible to disperse the data stored in the storage 25 in a plurality of storage devices.

[2−2−3.動画配信システム]
動画配信システム30は、ファイル管理サーバ31と配信サーバ32とストレージ33とを含む。
ファイル管理サーバ31は、ファイルサーバプログラムがインストールされたサーバ装置(コンピュータ)である。
ファイル管理サーバ31は、例えば、データの格納要求に応じ要求元から取得されるデータをストレージ33に格納する機能と、データの抽出要求に応じストレージ33から抽出されるデータを要求元に応答する機能とを有する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、ファイル管理サーバ31の機能を分担させ又はファイル管理サーバ31にかかる負荷を分散させてもよい。
[2-2-3. Video distribution system]
The moving image distribution system 30 includes a file management server 31, a distribution server 32, and a storage 33.
The file management server 31 is a server device (computer) in which a file server program is installed.
The file management server 31 has, for example, a function of storing the data acquired from the request source in the storage 33 in response to the data storage request, and a function of responding to the request source of the data extracted from the storage 33 in response to the data extraction request. Have and.
A server system may be configured by linking a plurality of server devices to share the functions of the file management server 31 or to distribute the load on the file management server 31.

配信サーバ32は、ストリーミング配信サーバプログラムがインストールされたサーバ装置(コンピュータ)である。
配信サーバ32は、ユーザ端末10からの要求(リクエスト)に応じて、ファイル管理サーバ31を介してストレージ33から必要なデータを読み出し、ユーザ端末10にストリーミング配信(レスポンス)する。
なお、複数のサーバ装置を連携させてサーバシステムを構成し、配信サーバ32の機能を分担させ又は配信サーバ32にかかる負荷を分散させてもよい。
The distribution server 32 is a server device (computer) in which the streaming distribution server program is installed.
The distribution server 32 reads out necessary data from the storage 33 via the file management server 31 in response to a request from the user terminal 10 and performs streaming distribution (response) to the user terminal 10.
It should be noted that a server system may be configured by linking a plurality of server devices to share the functions of the distribution server 32 or distribute the load on the distribution server 32.

ストレージ33は、ファイルデータを記憶する記憶装置である。
なお、ストレージ33が記憶するデータを複数の記憶装置に分散配置することも可能である。
The storage 33 is a storage device that stores file data.
It should be noted that the data stored in the storage 33 can be distributed and arranged in a plurality of storage devices.

[2−3.ハードウェア構成]
[2−3−1.ユーザ装置のハードウェア構成]
図4は、ユーザ装置のハードウェア構成例を示す。
典型的なユーザ装置は、制御処理部を構成するMPU(Micro-Processing Unit)411と、主記憶部を構成するRAM(Random Access Memory)421と、補助記憶部を構成するROM(Read Only Memory)422及びEEPROM(Electrically Erasable Programmable Read-Only Memory)423と、入力部及び表示部を構成するタッチパネルディスプレイ431と、音声出力部を構成するスピーカ432と、撮像部を構成するカメラ433と、通信制御部を構成するNIC(Network Interface Controller)441及び無線LAN(Local Area Network)チップ442と、を少なくとも有する。
[2-3. Hardware configuration]
[2-3-1. Hardware configuration of user device]
FIG. 4 shows an example of the hardware configuration of the user device.
A typical user device includes an MPU (Micro-Processing Unit) 411 forming a control processing unit, a RAM (Random Access Memory) 421 forming a main storage unit, and a ROM (Read Only Memory) forming an auxiliary storage unit. 422 and an EEPROM (Electrically Erasable Programmable Read-Only Memory) 423, a touch panel display 431 forming an input unit and a display unit, a speaker 432 forming an audio output unit, a camera 433 forming an image pickup unit, and a communication control unit. At least a NIC (Network Interface Controller) 441 and a wireless LAN (Local Area Network) chip 442.

RAM421と、ROM422と、EEPROM423と、タッチパネルディスプレイ431と、スピーカ432と、カメラ433と、NIC441と、無線LANチップ442とは、バスラインを介してMPU411と接続される。
MPU411は、(1)ROM422又はEEPROM423に記憶されたプログラムをRAM421上に読み込み、(2)プログラムの指示に従ってタッチパネルディスプレイ431とEEPROM423とカメラ433とNIC441と無線LANチップ442との少なくともいずれかからデータを取得し、(3)取得したデータをプログラムに規定される手順で演算・加工した上で、(4)演算済み・加工済みのデータをEEPROM423とタッチパネルディスプレイ431とスピーカ432とNIC441と無線LANチップ442との少なくともいずれかに提供する。
The RAM 421, the ROM 422, the EEPROM 423, the touch panel display 431, the speaker 432, the camera 433, the NIC 441, and the wireless LAN chip 442 are connected to the MPU 411 via a bus line.
The MPU 411 reads (1) the program stored in the ROM 422 or the EEPROM 423 onto the RAM 421, and (2) reads data from at least one of the touch panel display 431, the EEPROM 423, the camera 433, the NIC 441, and the wireless LAN chip 442 according to the instructions of the program. After obtaining and (3) computing and processing the obtained data according to the procedure specified by the program, (4) the computed and processed data is stored in the EEPROM 423, the touch panel display 431, the speaker 432, the NIC 441, and the wireless LAN chip 442. And/or to provide.

[2−3−2.サーバ装置のハードウェア構成]
図5は、サーバ装置のハードウェア構成例を示す。
典型的なサーバ装置は、MPUやROMを含む制御処理装置510と、RAMを含む主記憶装置520と、HDD(Hard Disc Drive)を含む補助記憶装置530と、マウスやキーボードを含む入力装置540と、ディスプレイやスピーカを含む出力装置550と、ネットワークカード(Network Interface Card)を含む通信制御装置560と、を有する。
[2-3-2. Hardware configuration of server device]
FIG. 5 shows a hardware configuration example of the server device.
A typical server device includes a control processing device 510 including an MPU and a ROM, a main storage device 520 including a RAM, an auxiliary storage device 530 including an HDD (Hard Disc Drive), and an input device 540 including a mouse and a keyboard. , An output device 550 including a display and a speaker, and a communication control device 560 including a network card (Network Interface Card).

主記憶装置520、補助記憶装置530、入力装置540、出力装置550及び通信制御装置560は、バスラインを介して制御処理装置510とそれぞれ接続される。
制御処理装置510は、(1)補助記憶装置530に記憶されたプログラムを主記憶装置520上に読み込み、(2)プログラムの指示に従って入力装置540と補助記憶装置530と通信制御装置560との少なくともいずれかからデータを取得し、(3)取得したデータをプログラムに規定される手順で演算・加工した上で、(4)演算済み・加工済みのデータを補助記憶装置530と出力装置550と通信制御装置560との少なくともいずれかに提供する。
The main storage device 520, the auxiliary storage device 530, the input device 540, the output device 550, and the communication control device 560 are respectively connected to the control processing device 510 via a bus line.
The control processing device 510 (1) reads the program stored in the auxiliary storage device 530 onto the main storage device 520, and (2) at least the input device 540, the auxiliary storage device 530, and the communication control device 560 according to the instructions of the program. Data is acquired from any one of them, and (3) the acquired data is operated/processed according to the procedure specified by the program, and (4) the processed/processed data is communicated with the auxiliary storage device 530 and the output device 550. And/or controller 560.

[2−4.機能構成]
図6は、コンテンツ管理システム及び動画配信システムの機能構成例を示す。
図6に例示されるように、コンテンツ管理システム20は、ファイル管理部611と、ファイル記憶部612と、抽出部621と、登録部622と、出力部623と、データ管理部631と、データ記憶部632と、提示部641と、決定部642と、提供部643と、を含む。また、動画配信システム30は、配信部651と、ファイル管理部661と、ファイル記憶部662と、を含む。
[2-4. Functional configuration]
FIG. 6 shows a functional configuration example of the content management system and the moving image distribution system.
As illustrated in FIG. 6, the content management system 20 includes a file management unit 611, a file storage unit 612, an extraction unit 621, a registration unit 622, an output unit 623, a data management unit 631, and a data storage unit. A unit 632, a presentation unit 641, a determination unit 642, and a provision unit 643 are included. The moving image distribution system 30 also includes a distribution unit 651, a file management unit 661, and a file storage unit 662.

ファイル管理部611は、ファイル管理サーバ24を含んで構成される。ファイル記憶部612は、ストレージ25を含んで構成される。抽出部621,登録部622及び出力部623は、データ処理サーバ22を含んで構成される。データ管理部631は、データ管理サーバ23を含んで構成される。データ記憶部632は、ストレージ25を含んで構成される。提示部641,決定部642及び提供部643は、ユーザ管理サーバ21を含んで構成される。
配信部651は、配信サーバ32を含んで構成される。ファイル管理部661は、ファイル管理サーバ31を含んで構成される。ファイル記憶部662は、ストレージ33を含んで構成される。
The file management unit 611 includes the file management server 24. The file storage unit 612 includes the storage 25. The extraction unit 621, the registration unit 622, and the output unit 623 include the data processing server 22. The data management unit 631 includes the data management server 23. The data storage unit 632 is configured to include the storage 25. The presentation unit 641, the determination unit 642, and the provision unit 643 are configured to include the user management server 21.
The distribution unit 651 includes the distribution server 32. The file management unit 661 includes the file management server 31. The file storage unit 662 includes the storage 33.

ユーザ管理サーバ21が担う機能は、サーバ装置向けOS(Operating System)と当該OS上で動作するWebサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
データ処理サーバ22が担う機能は、サーバ装置向けOSと当該OS上で動作するアプリケーションプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
データ管理サーバ23が担う機能は、サーバ装置向けOSと当該OS上で動作するDBサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
ファイル管理サーバ24が担う機能は、サーバ装置向けOSと当該OS上で動作するファイルサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
The function of the user management server 21 is realized by installing an OS (Operating System) for the server device and a Web server program running on the OS in the server device.
The function of the data processing server 22 is realized by installing the OS for the server device and the application program running on the OS in the server device, respectively.
The function of the data management server 23 is realized by installing an OS for a server device and a DB server program operating on the OS in the server device, respectively.
The function of the file management server 24 is realized by installing an OS for a server device and a file server program running on the OS in the server device, respectively.

ファイル管理サーバ31が担う機能は、サーバ装置向けOSと当該OS上で動作するファイルサーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
配信サーバ32が担う機能は、サーバ装置向けOSと当該OS上で動作するストリーミング配信サーバプログラムとがサーバ装置にそれぞれインストールされることにより実現される。
サーバ装置にインストールされるべきプログラムは、CD(Compact Disc),DVD(Digital Versatile Disk),MOディスク(Magneto-Optical disk),フラッシュメモリ(flash memory)などの記録媒体に記録された状態で配布され当該記録媒体からサーバ装置に読み込まれてもよいし、通信ネットワークを介し搬送波に重畳させてサーバ装置に供給されてもよい。
The function of the file management server 31 is realized by installing an OS for a server device and a file server program operating on the OS in the server device, respectively.
The function of the distribution server 32 is realized by installing an OS for the server device and a streaming distribution server program operating on the OS, respectively in the server device.
The program to be installed in the server device is distributed in a state recorded on a recording medium such as a CD (Compact Disc), a DVD (Digital Versatile Disk), an MO disc (Magneto-Optical disk), and a flash memory. It may be read from the recording medium to the server device, or may be superposed on a carrier wave via a communication network and supplied to the server device.

ファイル記憶部612には、ユーザ端末10又は動画配信システム30から取得されたムービーファイルが記憶される。データ記憶部632には、ムービー管理データが記憶される。
図7(a)は、ムービー管理情報の項目例を示す。
図7(a)に例示されるように、ムービー管理情報は、キー項目である「ムービーID」と、当該ムービーファイルのファイル記憶部612における格納位置を示す「ファイルパス」,当該ムービーに関する先行情報の提供をリクエストしたユーザを特定する「ユーザID」,当該リクエストを受け付けた時期を特定可能な「受付時期」,当該ムービーの「再生時間」と、を含む。
The file storage unit 612 stores a movie file acquired from the user terminal 10 or the moving image distribution system 30. The data storage unit 632 stores movie management data.
FIG. 7A shows an example of items of movie management information.
As illustrated in FIG. 7A, the movie management information includes a “movie ID” that is a key item, a “file path” indicating a storage position of the movie file in the file storage unit 612, and preceding information regarding the movie. Includes a “user ID” that identifies the user who has requested the provision of the content, a “reception time” that can identify the time when the request is received, and a “playback time” of the movie.

抽出部621は、ファイル記憶部612に記憶されるムービーファイルをファイル管理部611を介して取得し、要素を抽出する。本実施例では、フレームと音声データとを抽出する。音声データは、音声認識処理により対応テキストに変換する。
登録部622は、抽出されたフレームをファイル管理部611を介してファイル記憶部612に記憶させる。また、登録部622は、フレーム管理情報及びテキスト管理情報をデータ管理部631を介してデータ記憶部632に登録する。
出力部623は、抽出されたフレームの中からユーザ操作に応じて又は自動的に選択される単数又は複数の代表フレームがレイアウトされた先行情報(図1,図2)を生成してユーザに提供する。
The extraction unit 621 acquires the movie file stored in the file storage unit 612 via the file management unit 611, and extracts the element. In this embodiment, a frame and audio data are extracted. The voice data is converted into corresponding text by voice recognition processing.
The registration unit 622 stores the extracted frame in the file storage unit 612 via the file management unit 611. The registration unit 622 also registers the frame management information and the text management information in the data storage unit 632 via the data management unit 631.
The output unit 623 generates the prior information (FIGS. 1 and 2) in which one or more representative frames selected according to a user operation or automatically from the extracted frames are laid out and provided to the user. To do.

図7(b)は、フレーム管理情報の項目例を示す。
図7(b)に例示されるように、フレーム管理情報は、キー項目である「ムービーID」と、範囲の先頭を特定可能な「先頭位置」,範囲の末尾を特定可能な「末尾位置」,当該フレームを示す画像ファイルのファイル記憶部612における格納位置を示す「ファイルパス」,有意のとき代表要素であることを示す「代表フラグ」と、を含む。
FIG. 7B shows an example of items of frame management information.
As illustrated in FIG. 7B, the frame management information includes “movie ID” that is a key item, “start position” that can specify the beginning of the range, and “tail position” that can specify the end of the range. , A “file path” indicating a storage position of the image file indicating the frame in the file storage unit 612, and a “representative flag” indicating a representative element when significant.

図7(c)は、テキスト管理情報の項目例を示す。
図7(c)に例示されるように、テキスト管理情報は、キー項目である「ムービーID」と、範囲の先頭を特定可能な「先頭位置」,範囲の末尾を特定可能な「末尾位置」,当該範囲に包含される音声に対する音声認識結果又はこれをユーザが編集した「対応テキスト」,指定された回数に相当する「優先度」と、を含む。
FIG. 7C shows an example of items of text management information.
As illustrated in FIG. 7C, the text management information includes “movie ID” that is a key item, “start position” that can specify the beginning of the range, and “tail position” that can specify the end of the range. , A voice recognition result for a voice included in the range or a “corresponding text” edited by the user, and a “priority” corresponding to a designated number of times.

提示部641は、指定ムービーから抽出可能なテキストのうち複数の補助テキストを、指定ムービーのタイムラインにそれぞれ対応付けて、ユーザに指定された回数が多い補助テキストほど優先して、徐々に提示する。補助テキストを増加させる契機は、所定のユーザ操作が検出されたことでもよいし、所定の時間が経過したことでもよい。
決定部642は、提示された補助テキストのうちいずれかが指定された場合に、指定された補助テキストに対応するタイムライン上の位置を指定ムービーの再生開始位置として決定する。このとき、決定部642はテキスト管理情報の「優先度」を更新する。
提供部643は指定ムービーと再生開始位置とをそれぞれ特定可能なURLを再生要求の要求元に提供する。
The presentation unit 641 associates a plurality of auxiliary texts among the texts that can be extracted from the designated movie with the timeline of the designated movie, preferentially presents the auxiliary texts that the user has designated more frequently, and gradually presents them. .. The trigger for increasing the supplementary text may be that a predetermined user operation is detected or that a predetermined time has elapsed.
When any one of the provided auxiliary texts is designated, the determination unit 642 determines the position on the timeline corresponding to the designated auxiliary text as the playback start position of the designated movie. At this time, the determination unit 642 updates the “priority” of the text management information.
The providing unit 643 provides the URL that can specify the designated movie and the playback start position to the request source of the playback request.

ファイル記憶部662には、ムービーファイルが記憶される。
ファイル管理部661は、動画ファイルのアップデートをユーザ端末10から受け付ける。
配信部651は、再生要求において指定される指定ムービーのムービーファイルをファイル管理部661から読み出し、指定ムービーをストリーミング配信し再生させる。再生要求において再生開始位置が指定されている場合は、当該再生開始位置からストリーミング配信を開始する。
A movie file is stored in the file storage unit 662.
The file management unit 661 receives the update of the moving image file from the user terminal 10.
The distribution unit 651 reads the movie file of the specified movie specified in the reproduction request from the file management unit 661, and streams and distributes the specified movie for reproduction. When the reproduction start position is designated in the reproduction request, the streaming distribution is started from the reproduction start position.

[2−5.先行情報提供手順]
図8は、先行情報提供手順を例示する。コンテンツ管理システム20は、下記の手順により先行情報を提供する。
〔S810〕
ユーザ管理サーバ21が、ムービーファイルを取得する。
具体的には、ユーザの指定に基づき、動画配信システム30で管理されているムービーファイルがファイル管理サーバ31から取得され、ファイル管理サーバ24を介してストレージ25に格納される。この際、取得されたムービーファイルに関するムービー管理情報(図7(a))が生成され、データ管理サーバ23を介してストレージ25に登録される。
[2-5. Advance information provision procedure]
FIG. 8 exemplifies a preceding information providing procedure. The content management system 20 provides the preceding information by the following procedure.
[S810]
The user management server 21 acquires the movie file.
Specifically, a movie file managed by the moving image distribution system 30 is acquired from the file management server 31 and stored in the storage 25 via the file management server 24 based on the user's designation. At this time, movie management information (FIG. 7A) regarding the acquired movie file is generated and registered in the storage 25 via the data management server 23.

〔S820〕
ユーザ管理サーバ21が、ムービーファイルから要素を抽出する。
具体的には、ストレージ25に記憶されるムービーファイルがファイル管理サーバ24を介して取得され、フレームと音声データとが抽出される。音声データは、音声認識処理によりテキストに変換される。テキストは、必要に応じてユーザに編集させてもよい。
[S820]
The user management server 21 extracts an element from the movie file.
Specifically, the movie file stored in the storage 25 is acquired via the file management server 24, and the frame and audio data are extracted. The voice data is converted into text by voice recognition processing. The text may be edited by the user as needed.

〔S830〕
ユーザ管理サーバ21が、先行情報を提供する。
具体的には、抽出されたフレームの中からユーザ操作に応じて又は自動的に選択される単数又は複数の代表フレームがレイアウトされた先行情報(図1,図2)が生成され、ユーザに提供される。
[S830]
The user management server 21 provides the preceding information.
Specifically, the preceding information (FIGS. 1 and 2) in which one or a plurality of representative frames that are automatically selected from the extracted frames according to a user operation is laid out is generated and provided to the user. To be done.

〔S840〕
ユーザ管理サーバ21が、管理情報を登録する。
具体的には、抽出されたフレームがファイル管理サーバ24を介してストレージ25に格納される。また、フレーム管理情報(図7(b))及びテキスト管理情報(図7(c))が生成され、データ管理サーバ23を介してストレージ25に登録される。
[S840]
The user management server 21 registers management information.
Specifically, the extracted frame is stored in the storage 25 via the file management server 24. Further, frame management information (FIG. 7B) and text management information (FIG. 7C) are generated and registered in the storage 25 via the data management server 23.

[2−6.動画配信手順]
図9は、動画配信手順を例示する。コンテンツ管理システム20及び動画配信システム30は、下記の手順により動画を配信する。
〔S905〕
ユーザ管理サーバ21が、ムービーの再生要求をユーザ端末10から受領する。
具体的には、ユーザ端末10において次の手順で再生要求が送出される。なお、URLは、ムービーを特定可能なムービー特定情報と、先行情報における代表フレームを特定可能なパラメータとを包含する。
(1)先行情報に含まれる二次元コードを撮像する。
(2)撮像された二次元コードをURLに変換する。
(3)変換されたURLを指定してアクセスする。
[2-6. Video distribution procedure]
FIG. 9 illustrates a moving image distribution procedure. The content management system 20 and the moving image distribution system 30 distribute a moving image by the following procedure.
[S905]
The user management server 21 receives a movie reproduction request from the user terminal 10.
Specifically, the user terminal 10 sends a reproduction request in the following procedure. The URL includes movie specifying information that can specify a movie and parameters that can specify a representative frame in the preceding information.
(1) The two-dimensional code included in the preceding information is captured.
(2) Convert the imaged two-dimensional code into a URL.
(3) Designate and access the converted URL.

〔S910〕
ユーザ管理サーバ21が、指示画面をユーザ端末10に提供する。
図10は、指示画面の表示例を示す。
図10に例示されるように、指示画面1000は、タイムライン1010と、タイムライン1010に対応付けられる要素1022〜1028と、ボタン1030と、を含む。
タイムライン1010に対応付けられる要素は、ムービーのある範囲から抽出されるフレーム1022aと、当該フレームが代表フレームであることを示すアイコン1024aと、当該範囲の先頭からの再生を指示するボタン1028aと、を含む。
代表フレーム1022aは、ステップS905において受領した再生要求に含まれるパラメータにより特定される。
[S910]
The user management server 21 provides the instruction screen to the user terminal 10.
FIG. 10 shows a display example of the instruction screen.
As illustrated in FIG. 10, the instruction screen 1000 includes a timeline 1010, elements 1022 to 1028 associated with the timeline 1010, and a button 1030.
Elements associated with the timeline 1010 are a frame 1022a extracted from a certain range of the movie, an icon 1024a indicating that the frame is a representative frame, a button 1028a for instructing reproduction from the beginning of the range, including.
The representative frame 1022a is specified by the parameter included in the reproduction request received in step S905.

〔S915〕
ユーザ管理サーバ21が、指示画面内の要素の更新要求をユーザ端末10から受領する。
具体的には、指示画面を構成するWebページのロード完了を契機として、指示画面に表示される要素の更新要求が、ユーザ端末10からユーザ管理サーバ21へ非同期通信により送出される。
[S915]
The user management server 21 receives from the user terminal 10 an update request for an element in the instruction screen.
Specifically, upon completion of loading the web page forming the instruction screen, an update request for the element displayed on the instruction screen is sent from the user terminal 10 to the user management server 21 by asynchronous communication.

〔S920〕
ユーザ管理サーバ21が、指示画面内の要素をユーザ端末10に更新させる。
図11は、更新後の指示画面の表示例を示す。
図11の表示例では、対応テキスト1026a,フレーム1022b,対応テキスト1026b,フレーム1022c,対応テキスト1026cと、これらに付随する要素と、が追加されている。
対応テキスト1026aは、代表フレームが抽出される範囲から抽出可能な音声に対応するテキストであり、先行情報に含まれない補助要素である。
フレーム1022b,対応テキスト1026b,フレーム1022c,対応テキスト1026cは、ムービーから抽出可能な要素のうち先行情報に含まれない補助要素である。また、これらは、相対的な優先度(本実施例では、指定される頻度)が高い範囲の補助要素である。
[S920]
The user management server 21 causes the user terminal 10 to update the elements in the instruction screen.
FIG. 11 shows a display example of the instruction screen after the update.
In the display example of FIG. 11, the corresponding text 1026a, the frame 1022b, the corresponding text 1026b, the frame 1022c, the corresponding text 1026c, and the elements accompanying these are added.
The corresponding text 1026a is a text corresponding to a voice that can be extracted from the range in which the representative frame is extracted, and is an auxiliary element that is not included in the preceding information.
The frame 1022b, the corresponding text 1026b, the frame 1022c, and the corresponding text 1026c are auxiliary elements that are not included in the preceding information among the elements that can be extracted from the movie. In addition, these are auxiliary elements in a range in which the relative priority (in this embodiment, the designated frequency) is high.

〔S925〕
ユーザ管理サーバ21が、指示データをユーザ端末10から取得する。
具体的には、ボタン1030に対するタップ操作が検出された場合に、指示画面に表示される要素の更新要求が、ユーザ端末10からユーザ管理サーバ21へ非同期通信により送出される。また、「ここから再生」と表示されるボタン1028に対するタップ操作が検出された場合に、要素の指定データが、ユーザ端末10からユーザ管理サーバ21へ送出される。
なお、指示画面に表示される要素の更新要求は、時間の経過に応じてユーザ端末10から自動的に送出されるように構成してもよい。
[S925]
The user management server 21 acquires the instruction data from the user terminal 10.
Specifically, when a tap operation on the button 1030 is detected, an update request for the element displayed on the instruction screen is sent from the user terminal 10 to the user management server 21 by asynchronous communication. Also, when a tap operation on the button 1028 displayed as “play from here” is detected, the element designation data is sent from the user terminal 10 to the user management server 21.
The element update request displayed on the instruction screen may be automatically transmitted from the user terminal 10 as time passes.

〔S930〕
ユーザ管理サーバ21が、指示データの内容に応じて処理を進める。
具体的には、取得された指示データが「要素の更新要求」であれば、上記ステップS920に戻る。一方、取得された指示データが「要素の指定」を示すデータであれば、下記ステップS935に進む。
[S930]
The user management server 21 advances the processing according to the content of the instruction data.
Specifically, if the acquired instruction data is “element update request”, the process returns to step S920. On the other hand, if the acquired instruction data is data indicating “designation of element”, the process proceeds to step S935 below.

図11の指示画面がユーザ端末10に表示されている場合において、ボタン1030がタップされると、要素の更新要求がユーザ端末10からユーザ管理サーバ21に送出される。
図12は、ユーザ操作に応じた1回目の更新後の指示画面の表示例を示す。
図12の表示例では、フレーム1022d,対応テキスト1026d,フレーム1022e,対応テキスト1026eと、これらに付随する要素と、がさらに追加されている。
フレーム1022d,対応テキスト1026d,フレーム1022e,対応テキスト1026eは、相対的な優先度が低い補助要素である。
When the button 1030 is tapped when the instruction screen of FIG. 11 is displayed on the user terminal 10, the element update request is sent from the user terminal 10 to the user management server 21.
FIG. 12 shows a display example of the instruction screen after the first update according to a user operation.
In the display example of FIG. 12, a frame 1022d, a corresponding text 1026d, a frame 1022e, a corresponding text 1026e, and elements associated with these are further added.
The frame 1022d, the corresponding text 1026d, the frame 1022e, and the corresponding text 1026e are auxiliary elements having a relatively low priority.

図12の指示画面がユーザ端末10に表示されている場合において、ボタン1030がタップされると、要素の更新要求がユーザ端末10からユーザ管理サーバ21に送出される。
図13は、ユーザ操作に応じた2回目の更新後の指示画面の表示例を示す。
図13の表示例では、フレーム1022f,対応テキスト1026fと、これらに付随する要素と、がさらに追加されている。
フレーム1022f,対応テキスト1026fは、相対的な優先度がさらに低い補助要素である。
When the button 1030 is tapped when the instruction screen of FIG. 12 is displayed on the user terminal 10, an element update request is sent from the user terminal 10 to the user management server 21.
FIG. 13 shows a display example of the instruction screen after the second update according to the user operation.
In the display example of FIG. 13, a frame 1022f, a corresponding text 1026f, and an element accompanying them are further added.
The frame 1022f and the corresponding text 1026f are auxiliary elements having a lower relative priority.

〔S935〕
ユーザ管理サーバ21が、指定ムービーの再生開始位置を決定する。
具体的には、指定された補助要素が包含される範囲の「先頭位置」を再生開始位置に決定する。このとき、指定された補助要素に係るテキスト管理情報の「優先度」が更新される。
[S935]
The user management server 21 determines the reproduction start position of the designated movie.
Specifically, the "start position" of the range including the designated auxiliary element is determined as the reproduction start position. At this time, the “priority” of the text management information related to the designated auxiliary element is updated.

〔S940〕
ユーザ管理サーバ21が、指定ムービーをストリーミング再生させるパラメータ付きURLをユーザ端末10に提供する。
具体的には、指定ムービーをストリーミング再生させるURLに決定された再生開始位置を特定可能なパラメータを付加したテキストを生成し、ユーザ端末10にリダイレクト先として提供する。
[S940]
The user management server 21 provides the URL with parameters for streaming reproduction of the designated movie to the user terminal 10.
Specifically, a text to which a parameter capable of specifying the determined reproduction start position is added to the URL for streaming reproduction of the designated movie is generated and provided to the user terminal 10 as a redirect destination.

〔S945〕
配信サーバ32が、再生要求をユーザ端末10から受領する。再生要求では、再生開始位置が指定される。
〔S950〕
配信サーバ32が、ユーザ端末10に指定ムービーを再生開始位置からストリーミング配信する。
[S945]
The distribution server 32 receives the reproduction request from the user terminal 10. In the reproduction request, the reproduction start position is designated.
[S950]
The distribution server 32 streams the specified movie from the reproduction start position to the user terminal 10.

[3.変形例]
[3−1.優先度に関する変形例]
上記実施例では、ユーザにより指定された回数を「優先度」として利用する構成が採用されている。「優先度」は再生開始位置がユーザにより指定される度に更新される。
これに対し、「優先度」を予め定めておく構成を採用してもよい。例えば、人物等のオブジェクトに重要度を設定しておき、重要度の高いオブジェクトの映像や音声が記録されている範囲ほど「優先度」が高くなる構成することも可能である。この構成は、ムービーを視聴するユーザが限定されている場合に特に有効である。
[3. Modification]
[3-1. Modification of priority]
In the above-described embodiment, the configuration in which the number of times designated by the user is used as the “priority” is adopted. The “priority” is updated every time the reproduction start position is designated by the user.
On the other hand, a configuration in which the “priority” is predetermined may be adopted. For example, it is possible to set the degree of importance to an object such as a person and to set the “priority” to be higher in the range in which the video and audio of the object of higher degree of importance are recorded. This configuration is particularly effective when the number of users who watch the movie is limited.

[3−2.情報処理の分担に関する変形例]
上記実施例では、各種のデータ処理をコンテンツ管理システム20(特にデータ処理サーバ22)が実行する構成が採用されている。ユーザ端末10は、コンテンツ管理システム20の入出力装置に相当する役割を担っている。
これに対し、これらのデータ処理の少なくとも一部をユーザ端末10が実行する構成が採用されてもよい。例えばムービーからフレームや音声を抽出する処理,抽出された音声に音声認識処理を施して対応テキストを得る処理等をユーザ端末10に実行させればコンテンツ管理システム20(データ処理サーバ22)の処理負荷を抑えることが可能になる。
[3-2. Modified example regarding sharing of information processing]
In the above-described embodiment, the content management system 20 (especially the data processing server 22) executes various data processes. The user terminal 10 plays a role corresponding to the input/output device of the content management system 20.
On the other hand, a configuration may be adopted in which the user terminal 10 executes at least part of these data processes. For example, the processing load of the content management system 20 (data processing server 22) can be obtained by causing the user terminal 10 to execute a process of extracting a frame or a voice from a movie, a process of performing a voice recognition process on the extracted voice to obtain a corresponding text, or the like. Can be suppressed.

10 ユーザ端末
20 コンテンツ管理システム
21 ユーザ管理サーバ
22 データ処理サーバ(情報処理装置の一例)
23 データ管理サーバ
24 ファイル管理サーバ
25 ストレージ
30 動画配信システム
31 ファイル管理サーバ
32 配信サーバ
33 ストレージ
40 通信ネットワーク

10 User Terminal 20 Content Management System 21 User Management Server 22 Data Processing Server (Example of Information Processing Device)
23 Data Management Server 24 File Management Server 25 Storage 30 Video Distribution System 31 File Management Server 32 Distribution Server 33 Storage 40 Communication Network

Claims (8)

動画と、前記動画から抽出される代表要素を特定可能な特定情報を提供する提供手段と、
該特定情報に基づく再生要求を受けた場合に該特定情報により特定される前記動画の代表要素を提示する提示手段と、
前記代表要素が指定された場合に、前記代表要素に基づいて前記動画の再生開始位置を決定する決定手段と、
を備え、
前記提示手段は、所定のユーザ操作が検出された場合、又は、所定の時間が経過した場合に、前記代表要素に加え優先度の高い補助要素から提示し、
前記決定手段は、該補助要素が指定された場合に、対応する再生開始位置を決定する情報処理装置。
A moving image, and providing means for providing specific information capable of specifying a representative element extracted from the moving image,
Presentation means for presenting a representative element of the moving image identified by the specific information when receiving a reproduction request based on the specific information;
When the representative element is designated, a determination unit that determines the reproduction start position of the moving image based on the representative element,
Equipped with
The presenting means, when a predetermined user operation is detected, or when a predetermined time has elapsed, presents from the auxiliary element of high priority in addition to the representative element,
The information processing apparatus, wherein the determining means determines a corresponding reproduction start position when the auxiliary element is designated.
前記提示手段が、所定のユーザ操作が検出された場合、又は、所定の時間が経過した場合に、提示される前記補助要素の数を増加させる、
請求項1に記載の情報処理装置。
The presenting means increases the number of the auxiliary elements presented when a predetermined user operation is detected or when a predetermined time has elapsed,
The information processing apparatus according to claim 1.
オブジェクトの重要度を記憶手段に記憶させる手段をさらに備え、
前記提示手段が、前記記憶手段を参照し、オブジェクトの重要度に応じた前記優先度の高い前記補助要素を優先的に提示する、
請求項2に記載の情報処理装置。
Further comprising means for storing the importance of the object in the storage means,
The presenting unit refers to the storage unit and preferentially presents the auxiliary element having the high priority according to the importance of the object,
The information processing apparatus according to claim 2.
前記提示手段により提示された複数の補助要素についてユーザに指定された回数を記憶手段に記憶させる手段をさらに備え、
前記提示手段が、前記記憶手段を参照し、ユーザに指定された回数に応じた前記優先度の高い前記補助要素を優先的に提示する、
請求項2に記載の情報処理装置。
Further comprising means for storing in the storage means the number of times designated by the user for the plurality of auxiliary elements presented by the presenting means,
The presenting means refers to the storing means, and preferentially presents the auxiliary element with the high priority according to the number of times specified by the user,
The information processing apparatus according to claim 2.
前記提示手段が、前記補助要素を抽出元の前記動画における出現順序を維持して提示する、
請求項1から請求項4までのいずれかに記載の情報処理装置。
The presenting means presents the auxiliary element while maintaining the appearance order in the moving image from which the auxiliary element is extracted,
The information processing apparatus according to any one of claims 1 to 4.
前記提示手段が、前記動画のタイムラインに対応付けて前記複数の補助要素を提示し、
前記決定手段が、前記指定された補助要素に対応する前記タイムライン上の位置を前記再生開始位置に決定する、
請求項5に記載の情報処理装置。
The presentation means, said plurality of auxiliary elements presented in association with the moving image of the timeline,
The determining means determines a position on the timeline corresponding to the designated auxiliary element as the reproduction start position.
The information processing device according to claim 5.
動画と、前記動画から抽出される代表要素を特定可能な特定情報を提供する提供ステップと、
該特定情報に基づく再生要求を受けた場合に該特定情報により特定される前記動画の代表要素を提示する提示ステップと、
前記代表要素が指定された場合に、前記代表要素に基づいて前記動画の再生開始位置を決定する決定ステップと、
を含み、
前記提示ステップは、所定のユーザ操作が検出された場合、又は、所定の時間が経過した場合に、前記代表要素に加え優先度の高い補助要素から提示し、
前記決定ステップは、該補助要素が指定された場合に、対応する再生開始位置を決定する、
情報処理装置の制御方法。
A moving image and a providing step of providing specific information capable of specifying a representative element extracted from the moving image,
A presentation step of presenting a representative element of the moving image specified by the specific information when receiving a reproduction request based on the specific information;
A determination step of determining a reproduction start position of the moving image based on the representative element when the representative element is designated;
Including
In the presenting step, when a predetermined user operation is detected, or when a predetermined time elapses, in addition to the representative element, an auxiliary element having a high priority is presented.
In the determining step, when the auxiliary element is designated, a corresponding playback start position is determined,
Control method of information processing apparatus.
動画と、前記動画から抽出される代表要素を特定可能な特定情報を提供する提供機能と、
該特定情報に基づく再生要求を受けた場合に該特定情報により特定される前記動画の代表要素を提示する提示機能と、
前記代表要素が指定された場合に、前記代表要素に基づいて前記動画の再生開始位置を決定する決定機能と、
を情報処理装置のコンピュータに実現させる制御プログラムであり、
前記提示機能は、所定のユーザ操作が検出された場合、又は、所定の時間が経過した場合に、前記代表要素に加え優先度の高い補助要素から提示し、
前記決定機能は、該補助要素がユーザに指定された場合に、対応する再生開始位置を決定する制御プログラム。
A moving image and a providing function for providing specific information capable of specifying a representative element extracted from the moving image,
A presentation function of presenting a representative element of the moving image specified by the specific information when a reproduction request based on the specific information is received,
When the representative element is designated, a determination function of determining a reproduction start position of the moving image based on the representative element,
Is a control program that causes a computer of an information processing device to realize
The presentation function, when a predetermined user operation is detected, or when a predetermined time has elapsed, presents from the auxiliary element of high priority in addition to the representative element,
The determination function is a control program for determining a corresponding reproduction start position when the auxiliary element is designated by the user.
JP2017008939A 2017-01-20 2017-01-20 Information processing apparatus, control method of information processing apparatus, and control program Active JP6718389B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017008939A JP6718389B2 (en) 2017-01-20 2017-01-20 Information processing apparatus, control method of information processing apparatus, and control program
JP2020102051A JP6898575B2 (en) 2017-01-20 2020-06-12 Information processing device, control method and control program of information processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017008939A JP6718389B2 (en) 2017-01-20 2017-01-20 Information processing apparatus, control method of information processing apparatus, and control program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020102051A Division JP6898575B2 (en) 2017-01-20 2020-06-12 Information processing device, control method and control program of information processing device

Publications (2)

Publication Number Publication Date
JP2018117328A JP2018117328A (en) 2018-07-26
JP6718389B2 true JP6718389B2 (en) 2020-07-08

Family

ID=62985712

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017008939A Active JP6718389B2 (en) 2017-01-20 2017-01-20 Information processing apparatus, control method of information processing apparatus, and control program

Country Status (1)

Country Link
JP (1) JP6718389B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7377085B2 (en) 2019-12-03 2023-11-09 シャープ株式会社 Server device, terminal device, editing system, transmission method, control program and recording medium
JP7324801B2 (en) * 2020-07-13 2023-08-10 株式会社コロプラ Program, information processing method, information processing apparatus, and system
JP7303846B2 (en) * 2020-10-30 2023-07-05 株式会社コロプラ Program, information processing method, information processing apparatus, and system
JP7303845B2 (en) * 2020-11-20 2023-07-05 株式会社コロプラ Program, information processing method, information processing apparatus, and system

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000059734A (en) * 1998-08-11 2000-02-25 Toshiba Syst Technol Corp Multimedia interactive system
JP2002027411A (en) * 2000-07-13 2002-01-25 Sony Corp Method and device for recording video signal, method and device for reproducing video signal, and recording medium
JP2004362099A (en) * 2003-06-03 2004-12-24 Sony Corp Server device, information processor, information processing method, and computer program
JP2005303742A (en) * 2004-04-13 2005-10-27 Daikin Ind Ltd Information processing apparatus and information processing method, program, and information processing system
US7620996B2 (en) * 2004-11-01 2009-11-17 Microsoft Corporation Dynamic summary module
JP4701958B2 (en) * 2005-09-26 2011-06-15 ソニー株式会社 Image processing apparatus, image processing method, and program thereof
JP4809201B2 (en) * 2006-12-12 2011-11-09 ヤフー株式会社 Information providing apparatus, information providing method, and computer program
JP4935551B2 (en) * 2007-07-17 2012-05-23 ソニー株式会社 Display control apparatus, display control method, and program
JP4505760B2 (en) * 2007-10-24 2010-07-21 ソニー株式会社 Information processing apparatus and method, program, and recording medium
JP5347279B2 (en) * 2008-02-13 2013-11-20 ソニー株式会社 Image display device
JP5388631B2 (en) * 2009-03-03 2014-01-15 株式会社東芝 Content presentation apparatus and method
JP2011205217A (en) * 2010-03-24 2011-10-13 Sony Corp Information processor, information processing method, and program
JP2011239075A (en) * 2010-05-07 2011-11-24 Sony Corp Display device, display method and program
US20120204209A1 (en) * 2010-06-01 2012-08-09 Seiji Kubo Content processing device, television receiver, and content processing method
JP5750878B2 (en) * 2010-12-09 2015-07-22 キヤノンマーケティングジャパン株式会社 Information processing apparatus, control method therefor, and program
JP5196282B1 (en) * 2011-12-28 2013-05-15 フリュー株式会社 Image providing apparatus, image providing method, information processing apparatus, information processing method, and program
JP5953821B2 (en) * 2012-03-01 2016-07-20 大日本印刷株式会社 Image output system, image output method, image output reception terminal, and program
JP2013206104A (en) * 2012-03-28 2013-10-07 Sony Corp Information processing device, information processing method, and program
JP2014027380A (en) * 2012-07-25 2014-02-06 Jvc Kenwood Corp Video data reproduction device, video data reproduction method, and video data reproduction program
JP2014027635A (en) * 2012-07-30 2014-02-06 Sharp Corp Portable terminal device and information communication system
JP6150919B2 (en) * 2016-03-07 2017-06-21 日立マクセル株式会社 Recording / reproducing apparatus and recording / reproducing method

Also Published As

Publication number Publication date
JP2018117328A (en) 2018-07-26

Similar Documents

Publication Publication Date Title
JP6718389B2 (en) Information processing apparatus, control method of information processing apparatus, and control program
JP4766108B2 (en) Presentation system, data management apparatus, and program
US20150071614A1 (en) Creating, Editing, and Publishing a Video Using a Mobile Device
KR101643238B1 (en) Cooperative provision of personalized user functions using shared and personal devices
US9099151B2 (en) Multimedia content editing server, multimedia content editing method, program, and integrated circuit
CN117157710A (en) Synchronization of visual content to audio tracks
US20140013193A1 (en) Methods and systems for capturing information-enhanced images
JP5750946B2 (en) Content distribution system, content distribution server, content distribution method, program, and recording medium
JP2024026035A (en) Computer program, terminal, and server
RU105102U1 (en) AUTOMATED SYSTEM FOR CREATING, PROCESSING AND INSTALLING VIDEOS
JP6898575B2 (en) Information processing device, control method and control program of information processing device
JP7393691B2 (en) Information processing device, control method and control program for information processing device
JP2006331512A (en) Folder icon display controller, method and program
JP5324108B2 (en) Computer system, moving image editing method, program, moving image editing terminal
JP2006203670A (en) Template distribution device
JP6856883B2 (en) Information processing device, control method and control program of information processing device
KR101805302B1 (en) Apparatus and method for displaying multimedia contents
JP6648003B2 (en) Information processing apparatus, control method of information processing apparatus, and control program
JP2008217123A (en) Communication system, terminal device, server, control method for terminal device and program therefor
US9571385B2 (en) Information processing apparatus, information processing system, and program
JP2019003531A (en) Video generation program, mobile terminal, and video management system
JP7376034B1 (en) Servers, methods and computer programs
JP7138217B2 (en) TERMINAL DEVICE, COMMUNICATION SYSTEM, CONTROL METHOD AND PROGRAM THEREOF
JP6160612B2 (en) Information processing apparatus and method, playback apparatus and method, program, and information processing system
KR101562040B1 (en) Music Editing Method Using Moving Picture Streaming Service, and Music Editing Device Used Therein

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200303

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200310

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200519

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200612

R150 Certificate of patent or registration of utility model

Ref document number: 6718389

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D03

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250