JP7179387B1 - ハイライト動画生成システム、ハイライト動画生成方法、およびプログラム - Google Patents
ハイライト動画生成システム、ハイライト動画生成方法、およびプログラム Download PDFInfo
- Publication number
- JP7179387B1 JP7179387B1 JP2022044022A JP2022044022A JP7179387B1 JP 7179387 B1 JP7179387 B1 JP 7179387B1 JP 2022044022 A JP2022044022 A JP 2022044022A JP 2022044022 A JP2022044022 A JP 2022044022A JP 7179387 B1 JP7179387 B1 JP 7179387B1
- Authority
- JP
- Japan
- Prior art keywords
- highlight
- time
- video
- unit
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 14
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 239000000945 filler Substances 0.000 claims description 25
- 238000005520 cutting process Methods 0.000 claims description 15
- 238000000605 extraction Methods 0.000 claims description 12
- 239000000284 extract Substances 0.000 claims description 8
- 230000000717 retained effect Effects 0.000 claims 1
- 238000003860 storage Methods 0.000 description 13
- 230000005540 biological transmission Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005304 joining Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000699 topical effect Effects 0.000 description 1
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
図1は、本発明の実施形態に係るハイライト動画生成システム1の概要を説明するための図である。ハイライト動画生成システム1は、編集元の動画(以下、元動画という)を音声認識して生成されたテキストを用いてユーザが所望する動画の部分を選択し、元動画からユーザが所望するハイライト動画を生成するシステムである。本実施形態において、ハイライト動画とは、元動画から抽出した、ユーザが視聴者に見せたい部分を集めた動画であって、例えば、元動画で盛り上がった部分、目立った部分、興味を引く部分などを集めた動画や、元動画の重要な部分を集めて元動画の内容が要約された動画などである。
図2は、本発明の実施形態に係るハイライト動画生成システム1の機能構成を示す図である。ハイライト動画生成システム1は、ハイライト動画生成装置10と、ハイライト動画生成装置10にネットワークを介して接続されたユーザ端末20と、を備える。
ハイライト動画生成装置10は、ユーザ端末20とデータの送受信を行う送受信部11と、取得部12と、音声認識部13と、抽出部14と、表示制御部15と、選択部16と、特定部17と、切取部18と、生成部19と、記憶部100と、を備える。
抽出部14は、各単語について取得したタイムスタンプを、テキストデータの対応する箇所に挿入した後、元動画の各フレームの最初の単語のタイムスタンプにそのフレームの単語が紐づけた、タイムスタンプ付きテキストを抽出してもよい。
図3は、本発明の実施形態に係るハイライト動画生成システムが実行するハイライト動画生成処理フローを示す図である。ハイライト動画生成処理は、本実施形態では、ハイライト動画生成装置が実行する。
(1)例えば、ハイライト動画生成システムは、ハイライト動画にキャプションを付与するキャプション付与部を備えてもよい。キャプションは、元動画および/またはタイムスタンプ付きテキストに基づいてキャプション付与部が生成してもよいし、編集用画面で、選択文についてユーザから入力されたまたは当該選択文から選択されたキャプションをユーザ端末20から受信してもよい。ハイライト動画にキャプションを付与することで、ユーザが伝えたいことや意識してほしいことなどをはっきりと表示することができる。
10 ハイライト動画生成装置
11 送受信部
12 取得部
13 音声認識部
14 抽出部
15 表示制御部
16 選択部
17 特定部
18 切取部
19 生成部
100 記憶部
20 ユーザ端末
Claims (9)
- 編集の対象となる元動画から、複数のショート動画を切り取って結合して、ハイライト動画を生成するハイライト動画生成システムであって、
前記元動画を取得する取得部と、
取得した前記元動画を音声認識する音声認識部と、
前記音声認識の結果に基づいて、前記元動画の音声を、単語毎にタイムスタンプを保持したタイムスタンプ付テキストとして抽出する抽出部と、
抽出した前記タイムスタンプ付テキストを編集用画面に表示する表示部と、
前記編集用画面で、前記タイムスタンプ付テキストから1又は連続する複数の単語をユーザに複数選択させ、複数選択された前記1又は連続する複数の単語同士のタイムスタンプが連続しない場合に、当該ユーザの選択を受け付ける選択部と、
複数選択された前記1又は連続する複数の単語の時間範囲を、前記タイムスタンプ付テキストに基づいて、各々特定する特定部と、
前記元動画から、各々特定した前記時間範囲に対応する部分を各々のショート動画として切り取る切取部と、
切り取った前記各々のショート動画を結合して、ハイライト動画を生成する生成部と、
を備えるハイライト動画生成システム。 - 前記生成部が、前記ハイライト動画の先頭および/または後尾に予め用意した動画をさらに結合する請求項1に記載のハイライト動画生成システム。
- 前記選択部が、複数選択された前記1又は連続する複数の単語の結合順序の選択を受け付け、
前記生成部が、前記結合順に従って、切り取った前記各々のショート動画を結合して、ハイライト動画を生成する請求項1から請求項2のいずれかに記載のハイライト動画生成システム。 - 前記表示部は、抽出した前記タイムスタンプ付テキストにフィラーが含まれる場合、前記編集用画面において、当該フィラーを削除または当該フィラー以外の単語と区別できるように当該フィラーを表示する請求項1から請求項3のいずれかに記載のハイライト動画生成システム。
- 前記切取部は、複数選択された前記1又は連続する複数の単語にフィラーが含まれる場合、前記元動画から、各々特定した前記時間範囲に対応する部分のうち前記フィラーに対応する部分を除いた部分を、各々のショート動画として切り取る請求項1から請求項4のいずれかに記載のハイライト動画生成システム。
- 前記ハイライト動画にキャプションを付与するキャプション付与部を備える請求項1から請求項5のいずれかに記載のハイライト動画生成システム。
- 前記ハイライト動画に音楽を付加する音楽挿入部を備える請求項1から請求項6のいずれかに記載のハイライト動画生成システム。
- コンピュータが実行するハイライト動画生成方法であって、
元動画を取得するステップと、
取得した前記元動画を音声認識するステップと、
前記音声認識の結果に基づいて、前記元動画の音声を、単語毎にタイムスタンプを保持したタイムスタンプ付テキストとして抽出するステップと、
抽出した前記タイムスタンプ付テキストを編集用画面に表示するステップと、
前記編集用画面で、前記タイムスタンプ付テキストから1又は連続する複数の単語をユーザに複数選択させ、複数選択された前記1又は連続する複数の単語同士のタイムスタンプが連続しない場合に、当該ユーザの選択を受け付けるステップと、
複数選択された前記1又は連続する複数の単語の時間範囲を、前記タイムスタンプ付テキストに基づいて、各々特定するステップと、
前記元動画から、各々特定した前記時間範囲に対応する部分を各々のショート動画として切り取るステップと、
切り取った前記各々のショート動画を結合して、ハイライト動画を生成するステップと、
を含むハイライト動画生成方法。 - 編集の対象となる元動画から、複数のショート動画を切り取って結合して、ハイライト動画を生成するハイライト動画生成システムを、
前記元動画を取得する取得部、
取得した前記元動画を音声認識する音声認識部、
前記音声認識の結果に基づいて、前記元動画の音声を、単語毎にタイムスタンプを保持したタイムスタンプ付テキストとして抽出する抽出部、
抽出した前記タイムスタンプ付テキストを編集用画面に表示する表示部、
前記編集用画面で、前記タイムスタンプ付テキストから1又は連続する複数の単語をユーザに複数選択させ、複数選択された前記1又は連続する複数の単語同士のタイムスタンプが連続しない場合に、当該ユーザの選択を受け付ける選択部、
複数選択された前記1又は連続する複数の単語の時間範囲を、前記タイムスタンプ付テキストに基づいて、各々特定する特定部、
前記元動画から、各々特定した前記時間範囲に対応する部分を各々のショート動画として切り取る切取部、
切り取った前記各々のショート動画を結合して、ハイライト動画を生成する生成部、
として機能させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022044022A JP7179387B1 (ja) | 2022-03-18 | 2022-03-18 | ハイライト動画生成システム、ハイライト動画生成方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022044022A JP7179387B1 (ja) | 2022-03-18 | 2022-03-18 | ハイライト動画生成システム、ハイライト動画生成方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7179387B1 true JP7179387B1 (ja) | 2022-11-29 |
JP2023137704A JP2023137704A (ja) | 2023-09-29 |
Family
ID=84237895
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022044022A Active JP7179387B1 (ja) | 2022-03-18 | 2022-03-18 | ハイライト動画生成システム、ハイライト動画生成方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7179387B1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007295218A (ja) | 2006-04-25 | 2007-11-08 | Nippon Hoso Kyokai <Nhk> | ノンリニア編集装置およびそのプログラム |
WO2009022708A1 (ja) | 2007-08-14 | 2009-02-19 | Nippon Hoso Kyokai | 映像配信装置及び映像配信プログラム |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022025665A (ja) * | 2020-07-29 | 2022-02-10 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | 要約文作成装置、要約文作成方法及びプログラム |
-
2022
- 2022-03-18 JP JP2022044022A patent/JP7179387B1/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007295218A (ja) | 2006-04-25 | 2007-11-08 | Nippon Hoso Kyokai <Nhk> | ノンリニア編集装置およびそのプログラム |
WO2009022708A1 (ja) | 2007-08-14 | 2009-02-19 | Nippon Hoso Kyokai | 映像配信装置及び映像配信プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023137704A (ja) | 2023-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8966360B2 (en) | Transcript editor | |
US10034028B2 (en) | Caption and/or metadata synchronization for replay of previously or simultaneously recorded live programs | |
US9213705B1 (en) | Presenting content related to primary audio content | |
JP4127668B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP5377510B2 (ja) | マルチメディア電子メール合成装置及びその方法 | |
US20060235869A1 (en) | Metadata generating apparatus | |
US20040177317A1 (en) | Closed caption navigation | |
JP3927962B2 (ja) | データ処理装置およびデータ処理プログラム | |
WO2016202176A1 (zh) | 一种媒体文件合成方法、装置和设备 | |
WO2014013604A1 (ja) | メッセージ編集装置、メッセージ通信端末及びメッセージ通信システム | |
JP4846346B2 (ja) | コンテンツ・広告管理サーバ、広告主端末、クライアント端末、コンテンツ・広告管理プログラム、広告登録プログラム、及びコンテンツ取得プログラム | |
US9666211B2 (en) | Information processing apparatus, information processing method, display control apparatus, and display control method | |
US20190019533A1 (en) | Methods for efficient annotation of audiovisual media | |
WO2015019774A1 (ja) | データ生成装置、データ生成方法、翻訳処理装置、プログラム、およびデータ | |
US8768144B2 (en) | Video image data reproducing apparatus | |
JP7179387B1 (ja) | ハイライト動画生成システム、ハイライト動画生成方法、およびプログラム | |
JP5291448B2 (ja) | コンテンツ制作サーバ及びコンテンツ制作プログラム | |
JP4865469B2 (ja) | コンテンツ制作サーバ、コンテンツ提示装置、コンテンツ制作プログラム、及びコンテンツ提示プログラム | |
US7933671B2 (en) | Data outputting device, data outputting method, data outputting program, and recording medium | |
JP2008523759A (ja) | 映像メッセージを合成する方法及びシステム | |
JP2004266578A (ja) | 動画像編集方法および装置 | |
JP6812586B1 (ja) | 動画編集装置、動画編集方法、およびプログラム | |
JP2010066675A (ja) | 音声情報処理システム及び音声情報処理プログラム | |
US9084011B2 (en) | Method for advertising based on audio/video content and method for creating an audio/video playback application | |
KR101564659B1 (ko) | 효과음을 이용한 자막 삽입 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220318 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220318 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220621 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220725 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221025 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221109 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7179387 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |