JP2021175038A - 情報処理装置 - Google Patents
情報処理装置 Download PDFInfo
- Publication number
- JP2021175038A JP2021175038A JP2020075686A JP2020075686A JP2021175038A JP 2021175038 A JP2021175038 A JP 2021175038A JP 2020075686 A JP2020075686 A JP 2020075686A JP 2020075686 A JP2020075686 A JP 2020075686A JP 2021175038 A JP2021175038 A JP 2021175038A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- image data
- data
- given
- marker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 23
- 238000003384 imaging method Methods 0.000 claims abstract description 90
- 239000000284 extract Substances 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 8
- 239000003550 marker Substances 0.000 abstract description 118
- 230000006870 function Effects 0.000 abstract description 23
- 230000004044 response Effects 0.000 abstract description 6
- 238000004891 communication Methods 0.000 description 17
- 230000005540 biological transmission Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- 238000000034 method Methods 0.000 description 11
- 238000000605 extraction Methods 0.000 description 9
- 230000004048 modification Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 9
- 230000033001 locomotion Effects 0.000 description 6
- 239000000203 mixture Substances 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000000386 athletic effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000006249 magnetic particle Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
図1は、本発明の一実施形態に係る情報処理システム1の装置構成を例示するブロック図である。情報処理システム1は、例えばサッカーを行っている様子を動画で撮像してその撮像された動画を再生するとともに、その動画データのうち或る条件を満たす部分のみを抽出して時系列に再生するための動画(ダイジェスト動画という)を示すダイジェスト動画データを生成して再生するためのシステムである。情報処理システム1において撮像対象は、サッカー等のスポーツ乃至競技に限らず、どのようなものであってもよい。
次に、図5を用いて本実施形態の動作を説明する。以下では、まず、動画の撮像からその再生までの動作について説明し、その後に、ダイジェスト動画の生成について説明する。
撮像者たるユーザはユーザ端末20を操作して、カメラ2007及びマイク2008による撮像処理を開始させる。これに応じて、ユーザ端末20の動画データ生成部21は動画データを生成する。ユーザはユーザ端末20による撮像を続けながら、又は撮像した画像をユーザ端末20において再生しながら、マーカを付与する操作を行う。この操作に応じて、ユーザ端末20のマーカ付与部23は、ユーザにより入力された文字情報を含むマーカを、動画データにおいてユーザにより指定された位置に付与する。ユーザ端末20の送信部22は、動画データ及びマーカを例えばRTMP(Real-Time Messaging Protocol)やHTTPS(Hypertext Transfer Protocol Secure)等の任意のプロトコルに従い、ネットワーク30経由でサーバ装置10に送信する。サーバ装置10の取得部11は、ユーザ端末20の送信部22により送信されてくる動画データ及びマーカをネットワーク30経由で取得し(ステップS11)、記憶する(ステップS12)。
次に、図10を参照して、ダイジェスト動画の生成動作について説明する。ダイジェスト動画はマーカに含まれる文字情報に基づいて生成されるが、その具体的な方法には、マーカに含まれる文字情報の共通性に関する条件に基づいてダイジェスト動画データを生成する方法と、ユーザによりマーカが選択された選択回数に応じてダイジェスト動画データを生成する方法とがある。
本発明は、上述した実施形態に限定されない。上述した実施形態を以下のように変形してもよい。また、以下の2つ以上の変形例を組み合わせて実施してもよい。
実施形態においては、ユーザ端末20が撮像者たるユーザによるマーカ付与の操作を受け付けていたが、動画を撮像するための撮像装置とマーカを付与するためのマーカ付与装置とが別体の装置であってもよい。具体的には、撮像者たるユーザは撮像装置(例えばスマートホンやビデオカメラ)を操作して撮像を行う一方、マーカ付与装置(例えばスマートホンのリモコンや、スマートホンに接続されたスマートウォッチ等のウェアラブル端末)を操作してマーカを付与するようにしてもよい。
生成部13は、マーカに含まれる文字情報に基づいて部分動画データを抽出し、抽出した部分動画データを含むダイジェスト動画データを生成するが、例えば、マーカに含まれる文字情報の順序に関する条件に基づいてダイジェスト動画データを生成するようにしてもよい。マーカに含まれる文字情報の順序に関する条件とは、例えばサッカーの試合を撮像した動画データであれば、パス、シュート、ゴールという文字情報を含むマーカが、或る期間内においてパス→シュート→ゴールという順序で付与されている場合に、これらパス、シュート、ゴールという文字情報を含むマーカを抽出用マーカとして用いて部分動画データを抽出し、抽出した部分動画データを含むダイジェスト動画データを生成するというものである。つまり、動画データにおいてそれぞれ異なる文字情報を含む複数のマーカが或る順序で付与されている場合に、それらのマーカを抽出用マーカとして用いる。このような文字情報の順序に関する条件は、例えば撮像対象ごとに決められていてもよいし、撮像位置及び撮像日時ごとに決められていてもよく、その内容は予めデータベース化されて生成部13に記憶されていればよい。
ユーザ端末20の撮像に関する性能やスペックは、その機種等に応じて様々であることが予想される。そこで、生成部13は、画像の属性が共通の範囲に属する動画データの部分動画データを含むダイジェスト動画データを生成するようにしてもよい。ここでいう動画データの画像の属性とは、例えばその画像の画質、解像度、明度等の、ユーザが動画において視認し得る、画像の質乃至特性のことである。これらの画像の属性は、動画データに含まれているメタデータによって表されてもよいし、生成部13が動画データを画像解析して特定してもよい。また、画像の属性が共通となる範囲は、予め決められて生成部13により記憶されていればよい。このようにすれば、ユーザから見て画質や解像度等がほぼ同じ部分動画データを含むダイジェスト動画データを閲覧することができる。
生成部13は、複数のユーザ端末20によってそれぞれ撮像された画像を示す動画データの撮像日時が重複している場合において、各々の動画データから抽出された各々の部分動画データの表示を切り替え可能なマルチアングル動画データを生成するようにしてもよい。ここでいうマルチアングル動画データは、図13に例示するように、例えば3つのユーザ端末20によって撮像された動画データG1,G2,G3からそれぞれ抽出された部分動画データDG11〜D13、D21〜D22、D31〜D32が、元の動画データごとに区別された状態で配置された動画データである。例えば閲覧者たるユーザが、動画データG1から抽出された部分動画データDG11〜D13からなるダイジェスト動画データを閲覧しているときに、動画データG2から抽出された部分動画データDG21〜D22からなるダイジェスト動画データを閲覧することを指示すると、再生部14は、この指示に応じて、部分動画データDG11〜D13からなるダイジェスト動画データの再生から、部分動画データDG21〜D22からなるダイジェスト動画データの再生に切り替える。このとき、部分動画データDG21〜D22からなるダイジェスト動画データの再生開始時期は、時間軸上において、部分動画データDG11〜D13からなるダイジェスト動画データを再生していた時期と同じであるとする。このようにすれば、閲覧者たるユーザは同じ撮像対象を異なるアングルで撮像したダイジェスト動画に切り替えながら閲覧することができる。
実施形態において、生成部13は、複数のユーザ端末20から取得した各々の動画データに含まれている撮像位置及び撮像日時が重複するものどうしをグルーピングしていた。生成部13は、撮像位置及び撮像日時に加えてさらに撮像方向に基づく撮像範囲が重複する動画データどうしをグルーピングするようにしてもよい。例えば撮像位置及び撮像日時が重複したとしても、撮像方向を考慮したときには異なる撮像対象を撮像している場合が考えられる。これは、例えば隣り合う競技場でそれぞれ競技をしている別々のチームの選手を撮像している場合や、同一の競技場であってもそれぞれ異なるチームに属する選手を撮像している場合等である。そこで、生成部13は、動画の撮像位置が例えば半径Xmの円の範囲に含まれ、動画の撮像開始時期から撮像終了時期までの期間の少なくとも一部が重複している動画データであって、さらに、各々の撮像位置からの撮像方向から特定される撮像範囲の少なくとも一部が重複している動画データを抽出し、これらをグルーピングするようにしてもよい。この場合、ユーザ端末20の入力装置2005は、カメラ2007及びマイク2008のほかに、撮像方向を検出する検出部としての地磁気センサ、加速度センサ或いはジャイロセンサ等を含んでいる。
実施形態の例えば図11において、マーカM12に対応する部分動画データと、マーカM13に対応する部分動画データとが同じ撮像対象を撮像したものであっても、マーカが付与された位置が少しだけ異なる場合、あくまでマーカを基準にして部分動画データを結合してダイジェスト動画データを生成することにしていたから、このような部分動画データの内容の重複は許容されていた。これに対して、このような部分動画データの内容の重複を許容しないようにしてもよい。例えば、生成部13は、複数のマーカ群が動画データの時間軸上で近接する場合には、これらマーカ群の選択回数を合計した値を用いてダイジェスト動画データを生成するようにしてもよい。つまり、複数のマーカ群が動画データの時間軸上で近接する場合とは、撮像対象の同一事象に対して付与されたマーカ群であると想定されるため、これらのマーカの選択回数を個別にカウントしてしまうと、閲覧者から人気があるシーンに対するマーカであると認識できない可能性がある。そこで、このようなマーカ群のうち動画データの時間軸上で最先の位置に付与されたマーカの位置を始期とし、且つ、この始期から所定期間経過後の時点又は最後尾の位置に付与されたマーカの位置を周期とした部分動画データをダイジェスト動画データに含めるようにする。このように、生成部13は、動画データにおける複数のマーカの位置が或る時間の範囲に収まる場合において、当該複数のマーカの各々が選択された回数の合計値が決められた条件を満たすときに、当該複数のマーカのうち最先の位置に付与されたマーカの位置に応じた部分動画データを含むダイジェスト動画データを生成するようにしてもよい。ここでいう決められた条件とは、例えば選択回数の合計値が閾値を超えるとか、その合計値が多い順から所定範囲に収まる等の条件である。
上記実施の形態の説明に用いたブロック図は、機能単位のブロックを示している。これらの機能ブロック(構成部)は、ハードウェア及び/又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び/又は論理的に結合した1つの装置により実現されてもよいし、物理的及び/又は論理的に分離した2つ以上の装置を直接的及び/又は間接的に(例えば、有線及び/又は無線)で接続し、これら複数の装置により実現されてもよい。例えばサーバ装置10の機能の少なくとも一部がユーザ端末20に実装されてもよい。
本明細書で説明した各態様/実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。
Claims (10)
- 複数の撮像装置によってそれぞれ撮像された画像を示す動画データと、当該動画データの一部に対して付与された、を含む付与データとを取得する取得部と、
前記付与データに含まれる文字情報に基づいて、当該付与データが前記動画データにおいて付与された位置に対応する部分動画データを抽出し、抽出した部分動画データを含むダイジェスト動画データを生成する生成部と
を備える情報処理装置。 - 前記生成部は、前記付与データに含まれる文字情報の共通性に関する条件に基づいて、前記ダイジェスト動画データを生成する
ことを特徴とする請求項1記載の情報処理装置。 - 前記生成部は、前記付与データに含まれる文字情報の順序に関する条件に基づいて前記ダイジェスト動画データを生成する
ことを特徴とする請求項1記載の情報処理装置。 - 前記生成部は、撮像位置及び撮像日時が共通の範囲に属する動画データの部分動画データを含むダイジェスト動画データを生成する
ことを特徴とする請求項1〜3のいずれか1項に記載の情報処理装置。 - 前記生成部は、撮像された画像の属性が共通の範囲に属する動画データの部分動画データを含むダイジェスト動画データを生成する
ことを特徴とする請求項1〜4のいずれか1項に記載の情報処理装置。 - 前記動画データに対して付与された複数の付与データのうちいずれかがユーザにより選択されると、選択された前記付与データが付与された位置に対応する前記部分動画データから再生を開始させる再生部を備え、
前記生成部は、前記付与データが選択されることで再生された回数に応じて前記部分動画データを抽出し、抽出した部分動画データを含むダイジェスト動画データを生成する
ことを特徴とする請求項1〜5のいずれか1項に記載の情報処理装置。 - 前記生成部は、複数の撮像装置によってそれぞれ撮像された画像を示す動画データの撮像日時が重複している場合において、各々の前記動画データから抽出された各々の前記部分動画データの表示を切り替え可能なマルチアングル動画データを生成する
ことを特徴とする請求項1〜6のいずれか1項に記載の情報処理装置。 - 前記動画データに対して付与された複数の付与データのうちいずれかがユーザにより選択されると、選択された前記付与データが付与された位置に対応する前記部分動画データから再生を開始させる再生部を備え、
前記生成部は、前記動画データにおける複数の付与データの位置が或る時間の範囲に収まる場合において、当該複数の付与データの各々が選択された回数の合計値が決められた条件を満たすときに、当該複数の付与データのうち最先の位置に付与された付与データの位置に応じた部分動画データを含むダイジェスト動画データを生成する
ことを特徴とする請求項1〜7のいずれか1項に記載の情報処理装置。 - 前記生成部は、前記動画データにおける複数の付与データの位置が或る時間の範囲に収まる場合において、当該複数の付与データの各々が選択された回数の差が閾値未満であり、且つ、当該複数の付与データの各々が選択された回数の合計値が決められた条件を満たすときに、当該複数の付与データのうち最先の位置に付与された付与データの位置に応じた部分動画データを含むダイジェスト動画データを生成する
ことを特徴とする請求項8記載の情報処理装置。 - 前記生成部は、前記動画データにおける複数の付与データの位置が或る時間の範囲に収まる場合において、当該複数の付与データの各々が選択された回数の差が閾値以上であるときは、当該複数の付与データの各々が選択された回数のうち最多の回数となる付与データの位置に応じた部分動画データを含むダイジェスト動画データを生成する
ことを特徴とする請求項8記載の情報処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020075686A JP7479184B2 (ja) | 2020-04-21 | 2020-04-21 | 情報処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020075686A JP7479184B2 (ja) | 2020-04-21 | 2020-04-21 | 情報処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021175038A true JP2021175038A (ja) | 2021-11-01 |
JP7479184B2 JP7479184B2 (ja) | 2024-05-08 |
Family
ID=78278831
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020075686A Active JP7479184B2 (ja) | 2020-04-21 | 2020-04-21 | 情報処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7479184B2 (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008130215A (ja) | 2006-11-24 | 2008-06-05 | Sharp Corp | 自動編集装置及び自動編集方法 |
JP5243366B2 (ja) | 2009-08-18 | 2013-07-24 | 日本電信電話株式会社 | 映像要約方法および映像要約プログラム |
US9172938B2 (en) | 2012-04-27 | 2015-10-27 | Panasonic Intellectual Property Management Co., Ltd. | Content reproduction method, content reproduction system, and content imaging device |
JP6409107B1 (ja) | 2017-09-06 | 2018-10-17 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
US11749309B2 (en) | 2018-03-26 | 2023-09-05 | Sony Corporation | Information processor, information processing method, and program |
-
2020
- 2020-04-21 JP JP2020075686A patent/JP7479184B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP7479184B2 (ja) | 2024-05-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9463388B2 (en) | Fantasy sports transition score estimates | |
RU2541149C2 (ru) | Устройство обработки информации, способ разрезания движущегося изображения и программа разрезания движущегося изображения | |
CN110691633B (zh) | 用于确定响应的反应时间以及使用户界面与正在渲染的内容同步的方法和系统 | |
US10631060B2 (en) | Video image reproduction device, video image distribution server, method of reproducing video image and method of distributing video image | |
JP2006345270A (ja) | 情報処理装置および方法、撮影装置、並びにプログラム | |
CN103780862B (zh) | 再生控制装置、再生控制方法以及记录介质 | |
EP3340613A1 (en) | Image processing method, image processing device, and program | |
US20180351894A1 (en) | Chat terminal device, chat system, chat display method, and recording medium | |
JP5225418B2 (ja) | 情報処理装置及び方法 | |
CN112312142B (zh) | 视频播放控制方法、装置和计算机可读存储介质 | |
JP2016209093A (ja) | ゲームシステム、管理装置、ゲーム装置、及びプログラム | |
US20170249972A1 (en) | Non-transitory computer-readable storage medium, playback control method, and playback control device | |
JP2021175038A (ja) | 情報処理装置 | |
US7947890B2 (en) | Program recording medium, playback device, and playback control method | |
JP7464437B2 (ja) | 情報処理装置 | |
US11749309B2 (en) | Information processor, information processing method, and program | |
US11577163B2 (en) | Computer server, a method and computer program product | |
JP7477352B2 (ja) | 情報処理装置 | |
JP7479183B2 (ja) | 情報処理装置 | |
KR101397331B1 (ko) | 신의 요약수집 및 플레이를 위한 시스템 및 방법, 및 그 기록매체 | |
CN112261465A (zh) | 视频处理方法及装置 | |
JP2010081531A (ja) | 映像処理装置及びその方法 | |
JP2007104284A (ja) | ダイジェスト情報生成装置及びダイジェスト情報生成方法 | |
JP4112889B2 (ja) | 映像中のイベント照合方法およびその方法をコンピュータが実行するためのプログラム | |
JP7369604B2 (ja) | 情報処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230221 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240329 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240423 |