JP5667773B2 - 情報作成装置及びその制御方法 - Google Patents
情報作成装置及びその制御方法 Download PDFInfo
- Publication number
- JP5667773B2 JP5667773B2 JP2010063244A JP2010063244A JP5667773B2 JP 5667773 B2 JP5667773 B2 JP 5667773B2 JP 2010063244 A JP2010063244 A JP 2010063244A JP 2010063244 A JP2010063244 A JP 2010063244A JP 5667773 B2 JP5667773 B2 JP 5667773B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- information
- angle
- view
- partial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/781—Television signal recording using magnetic recording on disks or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
- H04N9/8211—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a sound signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
Description
例えば、特許文献1には、映像コンテンツのフレーム間の差分から当該フレーム間のシーンの切り替わりを検出し、チャプタ情報を自動作成することが記載されている。
また、SD解像度の階層は顔のアップ、4K2K解像度の階層は人物の全体像など、階層間で画角を異ならせることも可能である。
図1は、本発明の実施形態に係るチャプタ情報作成装置100の構成例を示すブロック図である。なお、本実施形態に係るチャプタ情報作成装置100は録画機器であるものとして説明するが、本発明は階層符号化された映像コンテンツを復号可能な任意の装置において実施可能である。ビデオレコーダやビデオカメラのような録画装置はもちろん、ビデオディスクプレーヤやメディアプレーヤのような、記録媒体に蓄積された符号化映像の再生装置や、これら録画装置や再生装置と同様の機能を有する任意の機器において好適に実施しうる。
録画制御部102は、UI制御部101の制御に基づき、外部から入力される映像コンテンツデータを記録部103に記録する。
記録部103はハードディスクドライブ、Blu-rayディスクドライブ、半導体記憶装置などの記憶装置に、録画制御部102から入力されたMPEG2-TSデータを記録する。さらに、後述する狭画角チャプタ情報作成部108と共通チャプタ情報作成部111が作成したチャプタ情報テーブルを記憶装置に記録する。
レイヤの画角/最広画角レイヤの画角
が予め定められた閾値以下の場合は、ベースレイヤの画角情報、エンハンスレイヤの画角のオフセット情報、レイヤ識別子を画角位置判定部107へ出力する。さらに画角差判定部106は、最広画角レイヤ識別子を映像デコード部109へ出力する。このように、画角差判定部106は、レイヤのうち、最広画角レイヤの画角に対する比が閾値以下のレイヤ(狭画角レイヤ)を判別して画角位置判定部107に通知する。閾値の設定により、複数のレイヤのうち、移動距離によってチャプタを付与するレイヤ(画角)の範囲を変更することができる。
音声デコード部112は、信号分離部104から入力された音声ESをデコードし、音声データを作成し、音声データをスピーカーに出力する。
S101において画角情報抽出部105は、映像ESを信号分離部104から受け取り、AUに記述されているレイヤ識別子dependency_idを抽出する。また、画角情報抽出部105は、映像ESのSPS201からベースレイヤの画角情報(BH,BV)=(640,480)とエンハンスレイヤの画角のオフセット情報(LH,LV)=(1096,660)、(RH,RV)=(2360,1020)を抽出する。そして、画角情報抽出部105は抽出したベースレイヤの画角情報とエンハンスレイヤの画角のオフセット情報、レイヤ識別子を画角差判定部106へ出力する。
(X1−X0)2+(Y1−Y0)2≧M2
が成り立つか判断する。
チャプタ情報テーブル500にはレイヤ識別子とチャプタ時間を関連付けて記録し、当該映像コンテンツについてのチャプタ情報を管理するテーブルである。レイヤ識別子フィールド501には対応するチャプタ情報(チャプタ時間)が適用されるレイヤの識別子が記録される。従って、全レイヤに共通したチャプタ情報であれば、レイヤ識別子フィールド501には映像ESに含まれる全レイヤのレイヤ識別子dependency_idが記録される。また、特定のレイヤの映像にのみ適用されるチャプタ情報については、該当するレイヤのレイヤ識別子のみがレイヤ識別子フィールド501に記録される。チャプタ時間フィールド502にはチャプタ情報として、チャプタの先頭を表す時間が映像コンテンツの先頭からの経過時間として記録される。
上述の実施形態では、エンハンスレイヤが最広画角レイヤである2レイヤの階層符号化映像データに対して本発明を適用した例を説明した。しかし、ベースレイヤが最広画角レイヤであってもよい。この場合には、上述のS102の画角の判定において、例えばエンハンスレイヤの画角のオフセット情報の値が負であることを確認して、ベースレイヤがエンハンスレイヤより広画角と判断することができる。そして、エンハンスレイヤの映像の画角をEH×EV、広画角レイヤの映像の画角をBH×BVとして求めればよい。
また、レイヤ間で映像の画質、特に空間解像度が異なる場合には、各レイヤの映像の空間解像度を共通としてから、画角の大きさの比較を行えばよい。
Claims (23)
- 画角の異なる映像を含んだ複数の映像が階層符号化された映像のデータから、該映像を頭出し再生するための所定の情報を作成する情報作成装置であって、
前記データに含まれる前記複数の映像の画角情報に基づいて、前記複数の映像のうち、最広画角の映像の一部の映像である部分映像の空間的な位置を判別する判別手段と、
前記判別された空間的な位置の一定期間における移動距離が所定の閾値以上である場合に、前記部分映像に対する前記所定の情報を作成する作成手段と、
を有することを特徴とする情報作成装置。 - 前記作成手段は、前記最広画角の映像を解析し、前記最広画角のシーンが切り替わった場合に前記最広画角の映像に対する前記所定の情報を作成することを特徴とする請求項1記載の情報作成装置。
- 前記作成手段は、前記最広画角の映像に対して前記所定の情報を作成する際、前記部分映像に対する前記所定の情報も作成することを特徴とする請求項2記載の情報作成装置。
- 前記移動距離は、前記部分映像のフレーム間における移動距離であることを特徴とする請求項2または3記載の情報作成装置。
- 前記判別手段は、前記映像の各フレームに対して、前記部分映像の空間的な位置を判別することを特徴とする請求項1から4のいずれか1項に記載の情報作成装置。
- 前記判別手段は、前記映像の所定の複数フレームごとに、前記部分映像の空間的な位置を判別することを特徴とする請求項1から4のいずれか1項に記載の情報作成装置。
- 前記作成手段は、前記部分映像の前記最広画角の映像に対する大きさの割合が、所定の閾値以下であって、かつ前記部分映像の前記空間的な位置の一定期間における移動距離が前記所定の閾値以上である場合に前記部分映像に対する前記所定の情報を作成することを特徴とする請求項1から4のいずれか1項に記載の情報作成装置。
- 前記判別手段は、前記部分映像の中心位置の座標を前記部分映像の前記空間的な位置として判別することを特徴とする請求項1から7のいずれか1項に記載の情報作成装置。
- 前記判別手段は、前記部分映像の中心位置の座標を、前記映像の大きさを示す情報と、前記部分映像の、前記映像に対する相対的位置を特定する情報とに基づいて判別することを特徴とする請求項8に記載の情報作成装置。
- 前記作成手段は、前記部分映像の時間情報を前記所定の情報として生成することを特徴とする請求項1から9のいずれか1項に記載の情報作成装置。
- 前記作成手段は、前記部分映像の前記移動距離が前記所定の閾値以上であると判断された際の前記部分映像の時間情報を前記所定の情報として生成することを特徴とする請求項10記載の情報作成装置。
- 画角の異なる映像を含んだ複数の映像が階層符号化された映像のデータから、該映像を頭出し再生するための所定の情報を作成する情報作成装置の制御方法であって、
前記データに含まれる前記複数の映像の画角情報に基づいて、前記複数の映像のうち、最広画角の映像の一部の映像である部分映像の空間的な位置を判別する判別工程と、
前記判別された空間的な位置の一定期間における移動距離が所定の閾値以上である場合に、前記部分映像に対する前記所定の情報を作成する作成工程と、
を有することを特徴とする情報作成装置の制御方法。 - 前記作成工程において、前記最広画角の映像を解析し、前記最広画角のシーンが切り替わった場合に前記最広画角の映像に対する前記所定の情報を作成することを特徴とする請求項12記載の情報作成装置の制御方法。
- 前記作成工程において、前記最広画角の映像に対して前記所定の情報を作成する際、前記部分映像に対する前記所定の情報も作成することを特徴とする請求項13記載の情報作成装置の制御方法。
- 前記移動距離は、前記部分映像のフレーム間における移動距離であることを特徴とする請求項13または14記載の情報作成装置の制御方法。
- 前記判別工程において、前記映像の各フレームに対して、前記部分映像の空間的な位置を判別することを特徴とする請求項12から15のいずれか1項に記載の情報作成装置の制御方法。
- 前記判別工程において、前記映像の所定の複数フレームごとに、前記部分映像の空間的な位置を判別することを特徴とする請求項12から15のいずれか1項に記載の情報作成装置の制御方法。
- 前記作成工程において、前記部分映像の前記最広画角の映像に対する大きさの割合が、所定の閾値以下であって、かつ前記部分映像の前記空間的な位置の一定期間における移動距離が前記所定の閾値以上である場合に前記部分映像に対する前記所定の情報を作成することを特徴とする請求項12から15のいずれか1項に記載の情報作成装置の制御方法。
- 前記判別工程において、前記部分映像の中心位置の座標を前記部分映像の空間的な位置として判別することを特徴とする請求項12から18のいずれか1項に記載の情報作成装置の制御方法。
- 前記判別工程において、前記部分映像の中心位置の座標を、前記映像の大きさを示す情報と、前記部分映像の、前記映像に対する相対的位置を特定する情報とに基づいて判別することを特徴とする請求項19に記載の情報作成装置の制御方法。
- 前記作成工程において、前記部分映像の時間情報を前記所定の情報として生成することを特徴とする請求項12から20のいずれか1項に記載の情報作成装置の制御方法。
- 前記作成工程において、前記部分映像の前記移動距離が前記所定の閾値以上であると判断された際の前記部分映像の時間情報を前記所定の情報として生成することを特徴とする請求項21記載の情報作成装置の制御方法。
- コンピュータを、請求項1から11のいずれか1項に記載の情報作成装置の各手段として機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010063244A JP5667773B2 (ja) | 2010-03-18 | 2010-03-18 | 情報作成装置及びその制御方法 |
US13/043,143 US9025930B2 (en) | 2010-03-18 | 2011-03-08 | Chapter information creation apparatus and control method therefor |
CN2011100699370A CN102196230B (zh) | 2010-03-18 | 2011-03-18 | 章信息创建设备及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010063244A JP5667773B2 (ja) | 2010-03-18 | 2010-03-18 | 情報作成装置及びその制御方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011199525A JP2011199525A (ja) | 2011-10-06 |
JP2011199525A5 JP2011199525A5 (ja) | 2013-04-25 |
JP5667773B2 true JP5667773B2 (ja) | 2015-02-12 |
Family
ID=44603524
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010063244A Expired - Fee Related JP5667773B2 (ja) | 2010-03-18 | 2010-03-18 | 情報作成装置及びその制御方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9025930B2 (ja) |
JP (1) | JP5667773B2 (ja) |
CN (1) | CN102196230B (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9705746B2 (en) * | 2012-03-11 | 2017-07-11 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Channel bonding for layered content |
WO2018164930A1 (en) * | 2017-03-08 | 2018-09-13 | Vid Scale, Inc. | Improving motion vector accuracy by sharing cross-information between normal and zoom views |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3320197B2 (ja) * | 1994-05-09 | 2002-09-03 | キヤノン株式会社 | 画像編集装置及びその方法 |
US6957350B1 (en) * | 1996-01-30 | 2005-10-18 | Dolby Laboratories Licensing Corporation | Encrypted and watermarked temporal and resolution layering in advanced television |
CA2208950A1 (en) * | 1996-07-03 | 1998-01-03 | Xuemin Chen | Rate control for stereoscopic digital video encoding |
US6233356B1 (en) * | 1997-07-08 | 2001-05-15 | At&T Corp. | Generalized scalability for video coder based on video objects |
JPH11331851A (ja) * | 1998-05-13 | 1999-11-30 | Matsushita Electric Ind Co Ltd | 低ビットレート動画符号化装置 |
JP2000165859A (ja) * | 1998-11-25 | 2000-06-16 | Sony Corp | 画像処理システム、画像圧縮装置、画像伸長装置、および記録媒体 |
US6977664B1 (en) * | 1999-09-24 | 2005-12-20 | Nippon Telegraph And Telephone Corporation | Method for separating background sprite and foreground object and method for extracting segmentation mask and the apparatus |
JP2001326901A (ja) * | 2000-05-18 | 2001-11-22 | Sharp Corp | 動画像シーン情報管理装置 |
US7929610B2 (en) * | 2001-03-26 | 2011-04-19 | Sharp Kabushiki Kaisha | Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding |
US7039113B2 (en) * | 2001-10-16 | 2006-05-02 | Koninklijke Philips Electronics N.V. | Selective decoding of enhanced video stream |
JP4334898B2 (ja) * | 2003-03-26 | 2009-09-30 | シャープ株式会社 | データベース構築装置、データベース構築プログラム、画像検索装置、画像検索プログラム、及び画像記録再生装置 |
WO2005004487A1 (ja) * | 2003-06-30 | 2005-01-13 | Mitsubishi Denki Kabushiki Kaisha | 画像符号化装置及び画像符号化方法 |
JP4005060B2 (ja) * | 2004-06-30 | 2007-11-07 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理システム、プログラムおよびゲームキャラクタ移動制御方法 |
JP2006060279A (ja) * | 2004-08-17 | 2006-03-02 | Matsushita Electric Ind Co Ltd | 動画再生装置 |
JP4393333B2 (ja) | 2004-09-30 | 2010-01-06 | キヤノン株式会社 | 映像記録再生装置、方法及びプログラム |
JP4647343B2 (ja) * | 2005-02-28 | 2011-03-09 | 富士フイルム株式会社 | フォトムービー作成装置及びフォトムービー作成プログラム |
US7110605B2 (en) * | 2005-02-04 | 2006-09-19 | Dts Az Research, Llc | Digital intermediate (DI) processing and distribution with scalable compression in the post-production of motion pictures |
CN101204092B (zh) * | 2005-02-18 | 2010-11-03 | 汤姆森许可贸易公司 | 从低分辨率图像导出高分辨率图像的编码信息的方法以及实施所述方法的编码和解码设备 |
US7961963B2 (en) * | 2005-03-18 | 2011-06-14 | Sharp Laboratories Of America, Inc. | Methods and systems for extended spatial scalability with picture-level adaptation |
JP4208898B2 (ja) * | 2006-06-09 | 2009-01-14 | 株式会社ソニー・コンピュータエンタテインメント | 対象物追跡装置および対象物追跡方法 |
JP4831623B2 (ja) * | 2007-03-29 | 2011-12-07 | Kddi株式会社 | 動画像の顔インデックス作成装置およびその顔画像追跡方法 |
CN101098476A (zh) * | 2007-07-12 | 2008-01-02 | 刘西红 | 磁盘阵列中数据读取进行视频信息输出的优化方法 |
JP4433027B2 (ja) * | 2007-09-21 | 2010-03-17 | ソニー株式会社 | 信号処理装置、信号処理方法、およびプログラム |
JP2011503968A (ja) * | 2007-11-05 | 2011-01-27 | トムソン ライセンシング | 高速チャネル切り替え及び増加された誤り耐性のためのスケーラブルビデオ符号化方法 |
WO2009078056A1 (ja) * | 2007-12-14 | 2009-06-25 | Fujitsu Limited | 移動物検知装置及び移動物検知プログラム |
JP2009181216A (ja) * | 2008-01-29 | 2009-08-13 | Toshiba Corp | 電子機器および画像処理方法 |
JP5528008B2 (ja) * | 2008-07-17 | 2014-06-25 | キヤノン株式会社 | 再生装置及び再生方法 |
JP2011151647A (ja) * | 2010-01-22 | 2011-08-04 | Canon Inc | シーン検索装置、シーン検索方法、およびシーン検索プログラム |
-
2010
- 2010-03-18 JP JP2010063244A patent/JP5667773B2/ja not_active Expired - Fee Related
-
2011
- 2011-03-08 US US13/043,143 patent/US9025930B2/en not_active Expired - Fee Related
- 2011-03-18 CN CN2011100699370A patent/CN102196230B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2011199525A (ja) | 2011-10-06 |
CN102196230A (zh) | 2011-09-21 |
US20110229109A1 (en) | 2011-09-22 |
CN102196230B (zh) | 2013-07-31 |
US9025930B2 (en) | 2015-05-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101987820B1 (ko) | 고 해상도 컨텐츠를 처리하는 컨텐츠 처리 장치 및 그 방법 | |
TWI238002B (en) | Method for selecting the de-interlacing algorithm of dynamic image | |
KR100906957B1 (ko) | 서브-프레임 메타데이터를 이용한 적응 비디오 프로세싱 | |
JP5197910B2 (ja) | デジタル情報信号を受信する装置 | |
JP4707713B2 (ja) | 映像記録装置及びシーンチェンジ抽出方法 | |
JP4974984B2 (ja) | 映像記録装置及び方法 | |
US20100033632A1 (en) | Information processing apparatus, information processing method, display control apparatus, display controlling method , and program | |
JP2003532316A (ja) | 独立コード化領域を特徴とする画像シーケンス圧縮 | |
EP1411522A2 (en) | Determining a scene change point | |
JPH11284948A (ja) | サムネイル作成方法及びサムネイル表示方法 | |
JP2006319690A (ja) | 動画像符号化装置 | |
JP5667773B2 (ja) | 情報作成装置及びその制御方法 | |
JP4182747B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラムおよび記録媒体 | |
US9277270B2 (en) | Image processing apparatus capable of extracting frame image data from video data and method for controlling the same | |
US20070133950A1 (en) | Reproduction apparatus, reproduction method, recording method, image display apparatus and recording medium | |
JP2009194550A (ja) | 画質調整装置、画質調整方法及びプログラム | |
JP5036882B2 (ja) | 映像記録装置、映像記録方法、映像音声記録装置、及び映像音声記録方法 | |
JP2002010254A (ja) | 特徴点検出方法および記録再生装置 | |
KR101299245B1 (ko) | 관심영역을 복호화하는 영상재생장치 및 그 방법 | |
JP2006166290A (ja) | 画像記録装置および方法、並びにプログラム | |
CN111699530B (zh) | 记录装置及记录方法 | |
JP5425972B2 (ja) | 映像音声記録装置及び映像音声記録方法 | |
JP2009232319A (ja) | 動画符号化装置、動画再生装置、記録媒体、動画符号化プログラム、および動画再生プログラム | |
JP2008533890A (ja) | 複数のビデオ信号を単一のエンコードされたビデオ信号としてエンコードする方法および装置ならびにそのようなエンコードされたビデオ信号をデコードする方法および装置 | |
JP2009302734A (ja) | 動画再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130307 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130307 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140131 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140210 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140403 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141114 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141215 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5667773 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |