JP2001511560A - 画像シーケンスの検索属性を記憶する方法 - Google Patents

画像シーケンスの検索属性を記憶する方法

Info

Publication number
JP2001511560A
JP2001511560A JP2000504519A JP2000504519A JP2001511560A JP 2001511560 A JP2001511560 A JP 2001511560A JP 2000504519 A JP2000504519 A JP 2000504519A JP 2000504519 A JP2000504519 A JP 2000504519A JP 2001511560 A JP2001511560 A JP 2001511560A
Authority
JP
Japan
Prior art keywords
image sequence
image
search
search attribute
attributes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000504519A
Other languages
English (en)
Inventor
カウプ アンドレ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of JP2001511560A publication Critical patent/JP2001511560A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71—Indexing; Data structures therefor; Storage structures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 個々の検索属性を含む画像シーケンスへアクセスするために、この検索属性が相応に画像シーケンス内に記憶される。このために有利には、クリアテキストの形で存在する検索属性から成るリストが画像シーケンスの前、画像シーケンスの後に置かれるか、または画像シーケンス内に記憶される。各検索属性は情報エントリの他に画像シーケンス内の１つの画像に対するポインタを含んでいる。アクセスは個々の検索属性により保証される。

Description

【発明の詳細な説明】
【０００１】 本発明は、画像シーケンスの検索属性ないし検索特徴（Suchmerkmal）を記憶 し、この検索属性に即して画像シーケンスにアクセスする方法に関する。
【０００２】 種々のオーディオビジュアルな情報すなわち画像シーケンスは今日ではディジ
タル形式で種々の個所に記憶される。このオーディオビジュアルな情報を利用す
るには、関連するデータをとりあえず１度は探し出す必要がある。
【０００３】 画像圧縮に対するＭＰＥＧ規格は当業技術者には充分に周知である。
【０００４】 まずここで特別に用いられる概念の意味づけについて示しておく。“画像シー
ケンス”とは相互に関連する一連の画像を表す。“画像シーン”とは画像シーケ
ンスを形成する真の部分集合であり、ＭＰＥＧ規格ないしＩＴＵ規格で規定され
るイントラフレーム（Intrabild）により開始される。
【０００５】 本発明の課題は、画像シーケンス／画像シーンの検索属性を記憶し、この検索
属性を介して画像シーケンス／画像シーンにアクセスする方法を可能にすること
である。
【０００６】 この課題は請求項１の特徴部分に記載の構成により解決される。
【０００７】 この方法により、画像シーケンスの検索属性を記憶し、この検索属性に即して
画像シーケンスにアクセスすることができる。この場合検索属性が画像シーケン
スから求められる。検索属性は画像シーケンスとともに記憶される。検索属性に
予め設定された情報が含まれている場合、画像シーケンスへアクセスされる。
【０００８】 本発明の別の実施形態では、検索属性は画像シーケンスのオーディオデータお
よび／またはビデオデータである。
【０００９】 本発明の別の実施形態では、それ自身が同様にポインタまたはポインタを含ん
でいる検索属性により画像シーケンス内の１つの画像にアクセスすることができ
る。
【００１０】 アクセスはポインタが時間的なオフセットを画像シーケンス内に有し、画像が
参照されることにより行われる。このため画像へのアクセスが保証される。した
がってポインタは画像すなわち画像シーケンス内の開始点をアドレスする。
【００１１】 次の実施形態では、検索属性を画像シーケンスの前に置くか、画像シーケンス
の終端に加えるか、または画像シーケンス内に記憶させることができる。これは
有利にはＭＰＥＧ規格ないしＩＴＵ規格で規定された、画像シーンを開始するイ
ントラフレームを用いて行われる。検索属性をこのイントラフレームの前に置く
ことができる。この場合各１つのイントラフレームを有する複数の画像シーンが
画像シーケンス内に含まれていてもよい。
【００１２】 他の実施形態では、それぞれ個々の画像シーンがデータバンクに記憶されてお
り、これにより画像シーケンスへのアクセスが保証される。
【００１３】 付加的な実施形態では、画像シーケンス内のＭＰＥＧ規格ないしＩＴＵ規格で
規定されている個々のオブジェクトに対して画像シーケンスにそれぞれ固有の検
索属性が記憶される。これによりこのようなオブジェクトに関連して検索属性に
結合されたジャンプ位置を考慮することができる。
【００１４】 また別の実施形態では、検索属性を所定のスタートコード（ヘッダ）により一
義的に識別することができる。
【００１５】 検索属性は画像シーケンスとともに記憶されるので、分量の多い画像データバ
ンクを個々のこのような画像シーケンスから作成することができる。これに対し
てグローバルなポインタリスト有利には外部のポインタリストは、検索属性と画
像シーケンスへ対応するポインタとを含んでおり、（特にこのシーケンスが複数
の画像シーケンスから成り、これをさらに個別のデータバンクに送出しなければ
ならない場合に）画像シーケンスのモジュラー構造を困難にする。
【００１６】 本発明の実施形態は従属請求項から得られる。
【００１７】 図に即して本発明の実施例を詳細に説明する。
【００１８】 図１の１ａのステップでは検索属性が画像シーケンスから検出される。このた
めに所定のモデル画像の全体または一部に相応する複数の画像が検索される。こ
れはモデル画像中でまず予め設定された特徴、特に支配的な色または典型的に発
生する形状を分析することにより達成される。これらの属性はデータバンクに記
憶され、参照すべき画像マテリアルへのポインタ、すなわち画像シーケンス内で
見出されたモデル画像へのポインタにより参照される。検索属性は画像シーケン
スとともにステップ１ｂで記憶される。次に画像シーケンスへのアクセスが検索
属性に即してステップ１ｃで可能となる。これは予め設定可能な属性を検索属性
と比較し、一致が見出された場合に、画像シーケンス内の検索属性により参照さ
れる画像シーケンスへジャンプすることにより行われる。
【００１９】 この場合にただビデオデータを参照できるだけでなく、オーディオデータへの
ポインタも記憶することができることを指摘しておく。
【００２０】 図２には、検索属性を画像シーケンスとともに記憶するための種々の手段が示
されている。
【００２１】 図２のａには、画像シーケンスＧＯＰ（ＭＰＥＧ規格で規定されているGroup
of Picture）が示されており、この画像シーケンスはヘッダＨおよび画像情報Ｂ
Ｅを含んでいる。図２のａ〜ｃの全てに対して、垂直に上方から下方へ延在する
時間軸ｔが相当する。これにより画像シーケンスとして記憶された一連の画像の
時間経過が表されている。
【００２２】 図２のａでは検索属性Ｍが画像シーケンスＧＯＰの前に置かれている。検索属
性Ｍは有利には、容易に読み出し可能な形式のクリアテキスト（ＡＳＣＩＩコー
ド）によるリストとして記憶される。検索属性を有する長いリストを付加的に圧
縮して記憶することができる。画像シーケンス内の１つの画像に対するポインタ
ＰＴＲがそれぞれ個々の検索属性に結びつけられて存在しており、ここで前記１
つの画像は画像シーケンス内で検索属性に結合された一連の画像の開始点を表し
ている。
【００２３】 図２のａ〜ｄではこのようなポインタ（指示体）を矢印ＰＴＲで示している。
【００２４】 図２のｂでは検索属性Ｍが画像シーケンスＧＯＰの後に置かれている。その他
については図２のａと同様である。
【００２５】 検索属性Ｍは、図２のｃに示されているように、画像シーケンスＧＯＰの内部
に記憶することもできる。相応して検索属性Ｍに結合された画像情報に対するポ
インタＰＴＲを検索属性Ｍの前（図２のｃでは検索属性Ｍの上方）または時間的
に後（図２のｃでは検索属性Ｍの下方）に示さなければならない。
【００２６】 さらに図２のｄにはＭＰＥＧないしＩＴＵ規格にしたがって可能となる個々の
オブジェクト（オーディオオブジェクトおよび／またはビデオオブジェクト）の
符号化が示されている。このために各オブジェクトＯ１、Ｏ２に固有の検索属性
セットＭ３１、Ｍ３２が補足される。オーディオビジュアルなシーンであれば複
数の検索属性セットＭ１、Ｍ２、Ｍ３１、Ｍ３２を含んでいてよい。
【００２７】 図２のｄでは、検索属性セットＭ１、Ｍ２が一般的な画像データＢＤに関連し
て示されており、検索属性セットＭ３１、Ｍ３２はそれぞれ検索属性を含んでお
り、そのエントリ（ポインタ）はそれぞれオブジェクトＯ１、Ｏ２にしたがって
分離された一連の画像の内部で相応する参照すべき個所を指示している。
【００２８】 検索属性および検索属性と画像データＢＤとの関係のリストの構成が図３に示
されている。ここでは再び上方から下方への時間軸ｔの垂直な経過が相当する。
検索属性Ｍはリストの形で画像シーケンスＧＯＰの前に置かれており、この画像
シーケンスはヘッダＨおよび画像データＢＤを有している。リストは複数の検索
属性ＳＭ１、ＳＭ２を有している。各検索属性は各１つの記述要素ＩＮＦＯ１、
ＩＮＦＯ２と、画像データＢＤ内の１つの画像に対する各１つのポインタ（指示
体、pointer）ＰＴＲ１、ＰＴＲ２を有している。
【００２９】 上述のように、ＭＰＥＧ規格にしたがって圧縮された画像シーケンスごとにリ
ストを論理的に分割することができ、これにより予め設定可能なオブジェクトに
対して定められた検索属性ＳＭｉがＭＰＥＧ規格にしたがって圧縮された画像シ
ーケンス内で得られる。有利には２つのオブジェクトを区別するために、それぞ
れ第２の検索属性ＳＭ２ｉが第１のオブジェクトに割り当てられ、他の検索属性
ＳＭ（２ｉ＋１）が第２のオブジェクトに割り当てられる（ｉ＝０，１，２，３
，．．．）。相応に複数のオブジェクトに対して同じ画像シーケンス内で異なる
検索属性セットを当てることもできる。
【図面の簡単な説明】
【図１】 画像シーケンスの検索属性を記憶し、この検索属性に即して画像シーケンスに
アクセスする方法を示すブロック図である。
【図２】 画像シーケンスを有する検索属性を共通に記憶するための種々の手段が示され
ている。
【図３】 検索属性とこれに所属する画像データを参照させるポインタとを示す概略図で
ある。

Claims (10)

    【特許請求の範囲】
  1. 【請求項１】 ａ）検索属性を画像シーケンスから検出し、 ｂ）前記検索属性を画像シーケンスとともに記憶する、 ことを特徴とする画像シーケンスの検索属性を記憶する方法。
  2. 【請求項２】 前記検索属性は画像シーケンスのオーディオデータおよび／
    またはビデオデータである、請求項１記載の方法。
  3. 【請求項３】 画像シーケンス内の所望のアクセスに対して前記検索属性は
    画像シーケンス内の１つの画像に対するポインタを有する、請求項１または２記
    載の方法。
  4. 【請求項４】 前記検索属性を画像シーケンスの前に置く、請求項１から３
    までのいずれか１項記載の方法。
  5. 【請求項５】 前記検索属性を画像シーケンスに加える、請求項１から３ま
    でのいずれか１項記載の方法。
  6. 【請求項６】 前記検索属性を画像シーケンス内に記憶する、請求項１から
    ３までのいずれか１項記載の方法。
  7. 【請求項７】 ＭＰＥＧ規格にしたがって規定されたイントラフレームの前
    に、該イントラフレームにより開始される画像シーンに対する検索属性を置く、
    請求項６記載の方法。
  8. 【請求項８】 各画像シーンをデータバンクに記憶する、請求項７記載の方
    法。
  9. 【請求項９】 画像符号化規格にしたがって画像シーケンスに含まれている
    複数のオブジェクトに対して、複数のオブジェクトごとにそれぞれ固有の検索属
    性を画像シーケンスとともに記憶する、請求項１から８までのいずれか１項記載
    の方法。
  10. 【請求項１０】 前記検索属性は予め設定可能なスタートコード（ヘッダ）
    により一義的に識別可能である、請求項１から９までのいずれか１項記載の方法
    。
JP2000504519A 1997-07-23 1998-05-05 画像シーケンスの検索属性を記憶する方法 Pending JP2001511560A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE19731719.7 1997-07-23
DE19731719 1997-07-23
PCT/DE1998/001254 WO1999005611A1 (de) 1997-07-23 1998-05-05 Verfahren zum abspeichern von suchmerkmalen einer bildsequenz

Publications (1)

Publication Number Publication Date
JP2001511560A true JP2001511560A (ja) 2001-08-14

Family

ID=7836685

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000504519A Pending JP2001511560A (ja) 1997-07-23 1998-05-05 画像シーケンスの検索属性を記憶する方法

Country Status (5)

Country Link
EP (1) EP0996901A1 (ja)
JP (1) JP2001511560A (ja)
KR (1) KR20010022052A (ja)
CN (1) CN1271443A (ja)
WO (1) WO1999005611A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7444156B2 (en) 2001-02-20 2008-10-28 Microsoft Corporation User-tagging of cellular telephone locations
JP4429081B2 (ja) * 2004-06-01 2010-03-10 キヤノン株式会社 情報処理装置及び情報処理方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06162116A (ja) * 1992-11-25 1994-06-10 Ricoh Co Ltd 動画像表示装置
JPH08130701A (ja) * 1994-10-31 1996-05-21 Sanyo Electric Co Ltd 動画像データ処理方法及び処理装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5600775A (en) * 1994-08-26 1997-02-04 Emotion, Inc. Method and apparatus for annotating full motion video and other indexed data structures
US5794249A (en) * 1995-12-21 1998-08-11 Hewlett-Packard Company Audio/video retrieval system that uses keyword indexing of digital recordings to display a list of the recorded text files, keywords and time stamps associated with the system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06162116A (ja) * 1992-11-25 1994-06-10 Ricoh Co Ltd 動画像表示装置
JPH08130701A (ja) * 1994-10-31 1996-05-21 Sanyo Electric Co Ltd 動画像データ処理方法及び処理装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
粕谷英司、前田鏡二、宮森恒、富永英義: "圧縮映像中のパラメータを利用した高速照合とその検索方式の提案", 情報処理学会研究報告, vol. 第97巻,第58号, JPN6008017900, 6 June 1997 (1997-06-06), pages 25 - 32, ISSN: 0001025349 *

Also Published As

Publication number Publication date
EP0996901A1 (de) 2000-05-03
CN1271443A (zh) 2000-10-25
WO1999005611A1 (de) 1999-02-04
KR20010022052A (ko) 2001-03-15

Similar Documents

Publication Publication Date Title
US10448031B2 (en) Method of generating media file and storage medium storing media file generation program
US10529382B2 (en) Recording medium, reproducing apparatus, and reproducing method
US7912297B2 (en) Method of indexing image hierarchically and apparatus therefor
US6556767B2 (en) Video capture device
US5899575A (en) Video capture device, video recording/playing apparatus having the video capture device attached thereto, and video input device
US20090080509A1 (en) Data processor
US7343088B2 (en) Disc apparatus, disc recording method, disc playback method, recording medium, and program
JP2001511560A (ja) 画像シーケンスの検索属性を記憶する方法
JP2002354406A (ja) 動画像再生装置
US20010035963A1 (en) Image recording apparatus and method, image playback apparatus and method, and recording medium
KR100713501B1 (ko) 이동통신단말기상에서 디지털 동영상을 인덱싱하는 방법
JP2003289495A (ja) 動画像処理装置
JP2003023600A (ja) 画像処理装置、動画記録再生装置、画像処理方法、プログラム、及びコンピュータ読み取り可能な記憶媒体
US9025930B2 (en) Chapter information creation apparatus and control method therefor
JP2004096474A (ja) 動画データの再生方法及び再生装置
CN113010713A (zh) 一种多媒体视频画面的预览方法
JP2001036903A (ja) カラオケ装置及びカラオケ背景映像早送り方法
JP2019212348A (ja) 映像記録再生装置および映像記録再生方法
JP2010028435A (ja) 動画像再生装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050302

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080417

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20081003