JP2002314961A - ユーザモザイクを生成するためのビデオ送信システム及びビデオ処理システム - Google Patents

ユーザモザイクを生成するためのビデオ送信システム及びビデオ処理システム

Info

Publication number
JP2002314961A
JP2002314961A JP2002039069A JP2002039069A JP2002314961A JP 2002314961 A JP2002314961 A JP 2002314961A JP 2002039069 A JP2002039069 A JP 2002039069A JP 2002039069 A JP2002039069 A JP 2002039069A JP 2002314961 A JP2002314961 A JP 2002314961A
Authority
JP
Japan
Prior art keywords
sub
video signal
video
group
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002039069A
Other languages
English (en)
Other versions
JP4406750B2 (ja
Inventor
Francois Martin
マルタン フランソワ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=8860111&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2002314961(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of JP2002314961A publication Critical patent/JP2002314961A/ja
Application granted granted Critical
Publication of JP4406750B2 publication Critical patent/JP4406750B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4332Content storage operation, e.g. storage operation in response to a pause request, caching operations by placing content in organized collections, e.g. local EPG data repository
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454Content or additional data filtering, e.g. blocking advertisements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/28Arrangements for simultaneous broadcast of plural pieces of information
    • H04H20/30Arrangements for simultaneous broadcast of plural pieces of information by a single channel

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

(57)【要約】 【課題】 TVプログラムに関連するビデオ信号のため
の送信システム及び受信システムを提供して、テレビジ
ョンセットに表示されるTVプログラムのモザイクから
特定のTVプログラムをユーザが即座に、且つ適切なや
り方で選択することを可能にする。 【解決手段】 本発明は、TVプログラムに関連するビ
デオ信号のための送信システム及び処理システムに関す
る。本発明は、ユーザのテレビジョンセットに表示され
るTVプログラムのモザイクを構築するものであり、ユ
ーザは、特定のTVプログラムのセットを即座に、メニ
ューを介した関連するやり方で選択することができる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、通信チャネルにビ
デオ信号のセットの送信、及びテレビジョン視聴者によ
る操作向上のためのかかるビデオ信号の処理のためのビ
デオ送信システム及びビデオ処理システムに関する。本
発明は、テレビジョン(TV)プログラムのブロードキ
ャスタ、及び一方ではテレビジョンに関するビデオサー
ビスのサプライヤ、他方ではTVビデオ信号についての
受信及び処理システムにおけるテレビジョン視聴者によ
り利用されるビデオ送信システムで使用される場合があ
る。
【0002】
【従来の技術】デジタルテレビジョンの出現により、ユ
ーザがテレビジョンセットに表示することができるTV
プログラム数は、大幅に増加してきている。TVプログ
ラムにおけるこの成長に対処して、TVプログラムのこ
のグループの中からユーザが選択することを可能にする
ために、「モザイク」として言及される短縮表現が作成
され、このモザイクは、かかるTVプリグラムのユーザ
のテレビジョンセットに関する並置(juxtaposition)
を短縮フォーマットで含んでいる。ユーザは、TVプロ
グラムのグループのコンテンツを同時に見ることがで
き、特定のTVプログラムを選択する助けとなる。
【0003】米国特許第5,633,683号では、TVプログ
ラムグループからTVプログラムを選択するためのシス
テムが開示されている。対応する方法では、ビデオ信号
のグループの送信を含んでいる。ビデオ信号は、ビデオ
信号のかかるグループから取得されたモザイクを表して
おり、短縮サイズのビデオのぞれぞれの位置にリンクす
る情報は、モザイクが作成されるプリグラム番号に対す
るモザイクを形成している。受信に応じて、関心のある
短縮サイズのビデオプログラムをモザイクから選択する
ことにより、ユーザはTVプログラムを選択する。次い
で、対応する選択されたプログラムは、テレビジョンセ
ットのモザイクを置き換える。
【0004】
【発明が解決しようとする課題】上記公知文献で使用さ
れるモザイクを表すビデオ信号を送信及び受信するため
の方法は、幾つかの制限を有している。第1に、この方
法は、短縮フォーマットのTVプログラムの最大数の問
題に直面する。実際に、短縮サイズのTVプログラムの
それぞれは、ユーザがそのコンテンツにアクセス可能な
ように十分に大きくなければならないので、標準フォー
マットのテレビジョンセットに表示されるモザイクは、
16の短縮サイズのプログラム以上を含むことは不可能
である(水平に4プログラム×垂直4プログラム)。
【0005】TVプログラムの比較的大きなグループ、
特に16よりも大きなTVプログラム数からTVプログ
ラムを選択するオプションをユーザが有する場合には、
モザイクは、TVプログラムのかかるグループを表示す
るために十分ではない。したがって、ユーザは、テレビ
ジョンセットであるモザイクを別のモザイクに移すこと
を強いられて、複数のモザイクからTVプログラムを選
択しなければならない。これにより、TVプログラムの
選択が難しくなり、不便なものとなる。
【0006】第2に、このプロセスに従い作成されたモ
ザイクは、完全なものであり、TVプログラムのグルー
プの同型表現である。実際に、モザイクの作成の間、そ
れぞれ短縮サイズのTVプログラムは、その内容の特徴
を考慮せずに並置されている。
【0007】したがって、モザイクに特定のTVプログ
ラムを選択することをユーザが望む場合、それぞれ短縮
サイズのプログラムを次々と見て、ユーザの期待に対応
するコンテンツを有するものを見つけなければならな
い。このため、ユーザによる特定のTVプログラムの選
択は遅く、さらに、短縮サイズのプログラムが関連する
TVプログラムのタイプ又はスタイルを連続的に反映し
ていないといった程度に、時に信頼することができない
場合がある。
【0008】本発明の目的は、TVプログラムに関連す
るビデオ信号のための送信及び受信システムを提供し
て、テレビジョンセットに表示されるTVプログラムの
モザイクから特定のTVプログラムをユーザが手際よ
く、且つ適切なやり方で選択することを可能にすること
により、これらの制限を大幅に改善することである。
【0009】
【課題を解決するための手段】本発明の1態様によれ
ば、ビデオ送信システムは、入力ビデオ信号のグループ
の中から通信チャネルを通して出力信号を送信するため
に提供される。かかるシステムは、入力ビデオ信号のそ
れぞれから符号化されたビデオ信号を供給するための第
1グループの符号化手段を備えている。
【0010】上記目的を達成するために、本発明では、
送信システムが以下を備えることを特徴としている。入
力ビデオ信号のそれぞれからサブサンプルされたビデオ
信号を供給するための第2グループの符号化手段。対応
する入力ビデオ信号を特徴付ける記述子を、サブサンプ
ルビデオ信号のそれぞれに関連付けるための関連付け手
段。符号化ビデオ信号のグループを、記述子と関連付け
られたサブサンプルビデオ信号のグループと多重化し、
該多重化により上記出力信号を供給するための多重化手
段。
【0011】この送信システムは、より詳細には、ユー
ザへの送信の連鎖の開始に位置されるTVプログラムの
ブロードキャスタに関連している。このシステムでは、
TVプログラムに対応する入力ビデオ信号のグループは
符号化され、特に、入力ビデオ信号のそれぞれの帯域幅
を低減するために、符号化ビデオ信号のグループが供給
される。
【0012】同時に、入力ビデオ信号もまた符号化さ
れ、符号化ビデオ信号が供給される。ここでの符号化も
また、サブサンプリングにより、それぞれの入力ビデオ
信号のフォーマットにおける低減を含んでいる。次い
で、データ記述子は、サブサンプルビデオ信号のそれぞ
れと関連付けされ、そのコンテンツを記述するタイプ、
プログラム番号又は各種データのようなフィールドのグ
ループにより、サブサンプルビデオ信号が特徴付けされ
る。符号化ビデオ信号と関連付けされたデータとの多重
化は続けて実行され、ユーザである目的地に通信チャネ
ルを通して送出される信号が供給されるこの送信システ
ムでは、公知文献とは逆に、サブサンプルビデオ信号か
らモザイクのない信号が作成され、これにより、これら
サブサンプルビデオ信号からモザイクを構成する可能性
は、ユーザレベルでの受信に対して残される。
【0013】本発明の別な態様によれば、送信システム
は、テレビジョンについてのビデオサービスのサプライ
ヤにより送信が実行される場合と異なって実現すること
ができる。この場合では、TVプログラムのブロードキ
ャスタとユーザとの中間にあるサービスサプライヤ、処
理されるビデオ信号は、異なる種類のものである。
【0014】次いで、ビデオ送信システムは、入力ビデ
オ信号から通信チャネルを通した出力ビデオ信号の送信
のために提供される。この入力ビデオ信号は、符号化ビ
デオ信号のグループの多重化から生じている。かかるシ
ステムは、符号化ビデオ信号を生成するための分離手段
を備えている。
【0015】上記目的を達成するために、本発明では、
ビデオ送信システムが以下を備えていることを特徴とし
ている。符号化ビデオ信号のそれぞれからサブサンプル
されたビデオ信号を供給するためのトランスコーディン
グ手段。対応する符号化ビデオ信号を特徴付ける記述子
を、サブサンプルビデオ信号と関連付けるための関連付
け手段。入力ビデオ信号を、記述子により関連付けられ
たサブサンプルビデオ信号のグループと多重化して、該
多重化により上記出力信号を供給する多重化手段。
【0016】この送信システムでは、入力信号は、TV
プログラムに関連する多重化された符号化ビデオ信号に
対応する。分離の後、これら符号化ビデオ信号はトラン
スコードされ、符号化ビデオ信号の新しいグループが供
給される。また、このトランスコーディングは、サブサ
ンプリングにより、それぞれの入力ビデオ信号のフォー
マットにおける低減を含んでいる。
【0017】上述した送信システムと同様なやり方で、
データ記述子は、それぞれのサブサンプルビデオ信号と
関連付けされている。符号化ビデオ信号と関連付けされ
たデータとの多重化が続けて実行され、ユーザである目
的地に通信チャネルを通して送出される1つの信号が供
給される。
【0018】同様にして、サブサンプルビデオ信号から
モザイクのない信号が作成される。これにより、これら
サブサンプルビデオ信号からモザイクを構成する可能性
は、ユーザレベルでの受信に対して残される。
【0019】本発明の更なる特徴によれば、MPEG−
4標準に従いサブサンプルビデオ信号は符号化される。
これにより、それぞれのサブサンプルビデオ信号がかか
るように処理されたビデオオブジェクトとなるときに、
サブサンプルビデオ信号の処理に関して大きな柔軟性が
許容される。
【0020】本発明の別の態様によれば、ビデオ処理シ
ステムは、通信チャネルを通して符号化ビデオ信号のグ
ループの多重化から生じた入力ビデオ信号を受信するた
めに提供される。かかるシステムは、符号化ビデオ信号
を生成するための分離手段、及びかかる符号化ビデオ信
号を復号して、スクリーンに表示可能な復号化ビデオ信
号を生成するための復号化手段を備えている。
【0021】上記目的を達成するために、本発明では、
ビデオ受信システム及びビデオ処理システムが以下を備
えることを特徴としている。サブサンプルビデオ信号の
グループの多重化から生じた補助シグナルを受信するた
めの手段。それぞれのサブサンプルビデオ信号は、符号
化ビデオ信号のサブサンプリングから生じるものであ
り、データ記述子は、それぞれのサブサンプルビデオ信
号と関連付けされており、フィールドのグループにより
サブサンプルビデオ信号を特徴付けている。上記データ
記述子のフィールドを記憶して、フィールドのグループ
に関連する要求により、サブサンプルビデオ信号を識別
するためのデータベースを作成するための手段。
【0022】サブサンプルビデオ信号のグループから選
択されたサブサンプルビデオ信号の制限されたグループ
から、モザイクを作成するための手段。かかる選択され
たサブサンプル信号は、関連付けされた記述子のフィー
ルドがデータベースに送出されるユーザ要求の結果であ
るようなサブサンプルビデオ信号に対応している。この
ビデオ処理システムは、上述したビデオ送信システムの
うちの1つにより生成された出力ビデオ信号に対応する
入力ビデオ信号の受信及び処理に専用される。
【0023】公知文献とは逆に、プログラムのモザイク
は、サブサンプルビデオ信号のグループにより実現され
る。この処理システムの目的は、TVプログラムの1つ
のモザイクからユーザが手際よく特定のTVプログラム
を選択することを可能にして、サブサンプルビデオ信号
の制限されたグループからユーザモザイクを作成するこ
とである。
【0024】さらに、TVプログラムのモザイクがユー
ザに制限される公知文献とは逆に、本発明によるこの処
理システムにより、ユーザは、サブバンドビデオ信号か
らのモザイクを構成することができ、対応するTVプロ
グラムをユーザの嗜好又はプロファイルに合わせること
ができ、選択を容易にすることができる。
【0025】また、本発明は、上述したようなビデオ受
信システム及びビデオ処理システムを備えるテレビジョ
ンセットについての受信機に関する。また、本発明は、
MPEG−2標準に従い符号化された第1のビデオ信号
のグループから構成されるデジタル信号に関する。この
信号は、上述した送信システムの技術的特徴を反映して
いる。実際には、この信号は、MPEG−4標準に従い
符号化された第2のビデオ信号のグループを含んでい
る。それぞれの第2のビデオ信号は、第1のビデオ信号
のサブサンプリング、続いてMPEG−4標準に従う符
号化により連続的に取得される。それぞれのMPEG−
4ビデオ信号は、対応する第1のビデオ信号を特徴付け
る記述子と関連付けられている。
【0026】また、本発明は、上述した処理システムに
ためのコンピュータプログラムプロダクトだけでなく、
上述した送信システムのためのコンピュータプログラム
プロダクトに関する。かかるコンピュータプロダクト
は、シグナルプロセッサにより本発明の処理ステップを
実行するためのプログラムコード命令を含んでいる。本
発明のこれらの態様及び他の態様は、限定することのな
い例を通して、以下に記載される実施の形態を参照して
明らかとなるであろう。
【0027】
【発明の実施の形態】以下の説明では、ユーザのテレビ
ジョンセットに表示されるTVプログラムに対応するビ
デオ信号は、符号化される場合、MPEG-2 ISO/IEC 13818
-2標準に従い符号化される。しかし、当業者であれば、
これらビデオ信号がMPEG-1標準のような他のビデオ標準
に従い符号化される場合にも同様なやり方で使用されて
もよいことを理解されるであろう。
【0028】同様にして、明確さの観点で、説明は4つ
のTVプログラムのみに基づいて与えられる。本発明
は、制限されたプログラム数に明らかに限定されず、よ
り多くのTVプログラム数で使用することができる。
【0029】図1は、本発明によるビデオ送信システム
の第1実施の形態を示している。この実施の形態は、T
Vプログラムのブロードキャスタにより送信が実行され
る場合に使用される。
【0030】この送信システムは、たとえば、ビデオ取
得システム(図示せず)から生成されるビデオ信号10
1〜104を通して、4つのTVプリグラムのグループ
を受信するものである。これらの信号101〜104
は、行フォーマットであり、ビデオ符号化システム10
5に入力される。該システム105では、それぞれの信
号101〜104は、それぞれのビデオエンコーダ10
6〜109により符号化され、結果的に、MPEG−2
標準に従い符号化された信号110〜113が得られ
る。
【0031】同時に、信号101〜104は、ビデオ符
号化システム114に入力される。該システム114で
は、それぞれの信号101〜104は、サブサンプルさ
れ、次いでそれぞれのビデオエンコーダ115〜118
によりMPEG-4 ISO-IEC 14496-2に従い符号化され、結果
的に信号199〜122が得られる。サブサンプリング
ステップの目的は、信号101〜104のフォーマット
に比較して低減されたフォーマットを有するビデオ信号
119〜122を生成することである。
【0032】サブサンプリングのファクタは、異なる値
であってもよい。たとえば、フォーマットCCIRを有する
信号101〜104に適用されるファクタ4による水平
及び垂直サブサンプリングにより、フォーマットQCIFを
有する信号119〜122が生成される。
【0033】また、フォーマットCCIRを有する信号10
1〜104に適用されるファクタ8による水平及び垂直
サブサンプリングにより、フォーマットSUB-QCIFを有す
る信号119〜122が生成される。サブサンプリング
ファクタの値は、同じスクリーンに表示することができ
るサブサンプルされるビデオ信号の最大数を決定する。
【0034】関連付け手段123では、データ記述子1
32〜135が、たとえばデータベースから生成され、
信号119〜122と関連付けされる。関連付け手段1
23は、4つのグループ124〜127を備えており、
それぞれのグループにより、データ記述子は、サブサン
プルビデオ信号に添付又はリンクすることができ、結果
的に新たな信号128〜131となる。
【0035】これらデータ記述子は、フィールドのグル
ープにより、サブサンプル信号119〜122、及び同
時に信号119〜122が生成されるTVプログラム1
02〜104のそれぞれを特徴付けることができる。
【0036】表1は、非制限的なやり方で、サブサンプ
ルビデオ信号に関連付けられているそれぞれのデータ記
述子に含まれるフィールドを記載している。それぞれの
データ記述子は、様々なサブグループにアレンジされた
フィールドのグループを含んでいる。
【表1】 “識別(IDENTIFICATION)”サブグループは、参照(Fi
eld number)1を含んだ識別フィールドを含んでいる。
このフィールドの目的は、他の記述子と混同しないよう
に、それぞれの記述子を識別することである。
【0037】“フィルタリング(FILTERING)”サブグ
ループは、リファインメントの増加程度によりそのタイ
プに従いTVプログラムを分類するための参照2及び3
を含んだ2つのフィールドを含んでいる。
【0038】たとえば、レベル1でのタイプは、タイプ
(フィルム、ドキュメンタリ)から選択することができ
る。レベル1でのタイプが(フィルム)である場合、レ
ベル2でのタイプは、(ドラマ、コメディ、アドベンチ
ャ)から選択することができる。レベル1でのタイプが
(ドキュメンタリ)である場合、レベル2でのタイプ
は、(サイエンス、歴史、自然)から選択することがで
きる。
【0039】“記述(DESCRIPTION)”サブグループ
は、参照4,5,6及び7を含んでいる。これらのフィ
ールドにより、そのコンテンツに関してTVプログラム
に追加の指示を提供することができる。フィールド7に
より、それぞれのサブサンプル信号119〜122は、
ビデオ信号101〜104のうちの1つにより実行され
る対応するTVプログラムにリンクすることができる。
【0040】サブサンプルビデオ信号に関連付けされた
データ記述子132〜135は、文献“Digital Broadc
asting Systems for Television, Sound and Data Serv
ices; Specification for Service Information(SI) in
Digital Video Broadcasting(DVB) Systems”, ITU-Ra
dio communication study groups, Doc 11-3/45-E,29Au
gust 1996に記載されるような(English Digital Video
Broadcast-ServiceInformationからの)指定されたイ
ンタックスDVB-SIに従い構築される。
【0041】しかし、MPEG-7標準に従い、それぞれのT
Vプログラムの記述のより正確な程度を得るためにフィ
ールドを自由なやり方で定義することができるシンタッ
クスのような記述子を構築するための代替的なシンタッ
クスを考案してもよい。同様にして、オブジェクトの形
状又はオブジェクトを構成するパターンのような技術的
なビデオ特徴によりそれぞれのTVプログラムが記述さ
れる場合、MPEG-4標準に従い本発明による記述子を構築
してもよい。
【0042】中間伝送ストリーム(図示せず)におい
て、標準MPEG-2システム13818-1に従いマルチプレクサ
136により信号110〜113を多重化した後、信号
128〜131は、MPEG-2システム138-18標準の補正7
に従い、手段136によりなおカプセル化及び多重化さ
れ、通信チャネルを通して送信される出力信号137が
得られる。
【0043】図2は、本発明によるビデオ送信システム
の第2実施の形態を示している。本実施の形態は、ビデ
オサービスのサプライヤにより送信が実行される場合に
使用される。
【0044】この場合、MPEG-2標準に従い符号化されて
多重かされる4つのビデオ信号を含んだ伝送ストリーム
201が受信される。4つの符号化ビデオ信号は、伝送
ストリーム201から抽出され、デマルチプレクサ20
2により分離され、結果的にビデオ信号203〜206
となる。MPEG-2標準に従い符号化されるこれら4つのビ
デオ信号203〜206は、トランスコーディング処理
207を受け、MPEG-4標準に従い符号化されたビデオ信
号が生成される。
【0045】このトランスコーディング処理は、4つの
トランスコーダ208〜211を含んでおり、MPEG-4標
準に従い符号化されるビデオ信号212〜215が生成
される。符号化シンタックスにおけるこの変化に加え
て、それぞれのトランスコーダは、図1の実施の形態と
同じやり方で、信号203〜206のサブサンプリング
を実行する。
【0046】このトランスコーディング処理207は、
様々なやり方で実行される場合がある。最初に、信号2
03〜206のMPEG-2の復号化を含み、非符号化ビデオ
データにアクセスし、次いで、この非符号化ビデオデー
タMPEG-4が実行され、ビデオ信号212〜215が生成
される。しかし、この動作は、前の復号化なしで信号2
03〜206の直接の処理を含んだ動作が好ましいの
で、高価な処理手段を必要とする。
【0047】図1の実施の形態と同じやり方で、データ
記述子132〜135は、サブサンプルビデオ信号21
2〜215と関連付けられ、信号216〜219が生成
される。最後の動作では、伝送ストリーム201及び信
号216〜219は、マルチプレクサ136により新た
な伝送ストリームにおいて多重化及びカプセル化され、
結果的に、出力信号220が得られて通信チャネルを通
して送信される。
【0048】上述したビデオ送信システムでは、MPEG-4
標準に従い符号化されたサブサンプルビデオ信号は、T
Vプログラムに対応するビデオ信号のフレーム周波数よ
りも低いフレーム周波数を有する場合がある。したがっ
て、出力信号220の帯域幅は、符号化114又はトラ
ンスコーディング207の間に、低フレーム周波数で信
号119〜122又は信号212〜215のそれぞれを
生成することにおいて低減される。極端な例としては、
これら信号フレーム周波数がゼロである場合、TVプロ
グラムは1つの画像により表されることになる。
【0049】図4は、本発明によるビデオ受信システム
及びビデオ処理システムのブロック図である。このビデ
オ受信システム及びビデオ処理システムは、図1又は図
2を参照して記載された送信システムのうちの1つによ
り生成された出力信号を受信して処理するために設計さ
れるものである。テレビジョンセットに表示されるTV
プログラムの1つのモザイクから、特定のTVプログラ
ムをユーザが即座に選択することができ、制限されたサ
ブサンプルビデオ信号のグループからユーザモザイクを
作成することが目的である。
【0050】この受信システムは、入力信号401を分
離して、ビデオ信号411を生成するためのデマルチプ
レクサ402を備えている。このビデオ信号411は、
MPEG-2標準に従い符号化されるTVプログラム、一方で
MPEG-4標準に従い符号化されるサブサンプルビデオ信
号、及び他方でTVプログラムのそれぞれのコンテンツ
を記述することができるデータ記述子403から構成さ
れる。
【0051】次いで、データベース404は、それぞれ
の記述子の異なるフィールドから構成される。続くアク
ション415は、ユーザインタフェース406を介し
て、受信システムに位置するユーザにより発生され、テ
レビジョンセットに表示される原文又はグラフによるメ
ニューからTVプログラムのタイプを選択することを含
んでおり、ユーザ選択を取り上げる要求408が生成さ
れて、データベース404に送出される。
【0052】この要求に応答して、データベースでは、
コマンド410を介して、TVプログラムがユーザ選択
に対応するかが判定され、これら判定されたTVプログ
ラムから生じたサブサンプルビデオ信号の分離が許可さ
れる。次いで、サブサンプルビデオ信号のこの制限され
たグループは、MPEG-4標準に従う特定のデコーダで構成
される復号化グループ412により復号され、復号化さ
れたサブサンプルビデオ信号413が供給される。
【0053】次いで、これらビデオ信号は、イメージコ
ンポジショナ414によりモザイクの構成で組み立てら
れる。この組み立ては、同じ画像平面におけるサブサン
プルビデオ信号の並置を含んでいる。このようにして作
成されたモザイク415は、ユーザのテレビジョンセッ
トのような表示システムに送出される。また、それぞれ
のサブサンプルビデオ信号についての記述データ409
は、その構成の間にモザイクに挿入される。したがっ
て、ユーザは、自身の選択に対応する短縮フォーマット
のTVプログラムのグループを示す利用可能なモザイク
を有する。ユーザは、コマンド407を介して、モザイ
クから短縮フォーマットのTVプログラムを容易に選択
することができる。これにより、MPEG-2標準に従い符号
化される対応するTVプログラムのマルチプレクサ40
2による多重化、及びデコーダ412による復号化が引
き起こされ、次いで、ユーザのテレビジョンスクリーン
に表示される。
【0054】図3は、本発明による図4に例示されるよ
うなビデオ受信システム及びビデオ処理システムの詳細
な実施の形態を示している。このビデオ受信システム及
びビデオ処理システムは、図1又は図2を参照して上述
された送信システムのうちの1つにより生成された出力
信号に対応する入力信号301を受信及び処理するため
に設計されたものである。
【0055】この信号301は、伝送ストリームに対応
している。信号301は、デマルチプレクサ302によ
り最初に分離されて、MPEG-2標準に従い符号化される4
つのTVプログラムを含む伝送ストリーム303、MPEG
-4標準に従い符号化される4つのサブサンプルビデオ信
号を含む伝送ストリーム304、及び4つのサブサンプ
ルビデオ信号に関連付けられた4つのデータ記述子を含
む信号305が生成される。
【0056】それぞれのデータ記述子についてのフィー
ルド307のグループを供給するオブジェクトに加え
て、サブサンプルビデオ信号と対応するTVプログラム
との間でリンクを確立するプログラム識別パラメータ
(PID)311により、信号305は、テーブルアナ
ライザ306により分析される。
【0057】記述子抽出器308により、フィールド2
及び3により提供されるタイプ情報309が読まれ、信
号307から抽出される。データベース315は、好ま
しくはリレーショナル型であり、データベースジェネレ
ータ310により作成され、データベースにおけるそれ
ぞれのセルは、信号307,309及び311により搬
送されるデータから満たされる。
【0058】ユーザは、記述子の異なるフィルタリング
フィールドからのタイトルを取り、生成されてテレビジ
ョンセットに表示されるメニューからの選択340によ
り、ユーザインタフェース312を介して、ユーザが見
たいと望むTVプログラムのタイプに対応する上記メニ
ューからタイトルを選択する。
【0059】次いで、ユーザ選択を反映している要求3
13が生成される。この要求の内容は、リクエストアナ
ライザ314により分析され、要求に含まれるユーザ選
択、特に、どのタイプのプログラムが選択されたかが分
析される。次いで、リクエストアナライザ314は、デ
ータベース315を調べ、(この場合、4である)受信
された全てのTVプログラムの中から、要求の基準に合
うそれらTVプログラムを決定する。したがって、ユー
ザ選択に対応するTVプログラムの制限されたグループ
が定義され、それぞれのプログラムは、そのデータ記述
子から生じるその識別フィールドid(表1参照)によ
り識別される。
【0060】リクエストアナライザは、デマルチプレク
サ316に識別子339を送出して、TVプログラムの
この制限されたグループに属するそれらサブサンプルビ
デオ信号のみを分離する。MPEG-4標準に従い符号化され
たサブサンプルビデオ信号317〜320の制限された
グループが供給される。したがって、4つのサブサンプ
ルビデオ信号が示されているが、ユーザ要求の結果に依
存して、より少ない数の信号が供給される場合がある。
【0061】サブサンプルビデオ信号317〜320の
制限されたグループは、MPEG-4標準に従うデコーダ32
2〜325から構成される復号化システム321により
復号化され、復号化されたサブサンプルビデオ信号32
6〜329を供給する。次いで、これら復号化された信
号は、イメージコンポジタ334によりモザイクの構成
で組み立てられ、このコンポジタは、異なるサブサンプ
ルビデオ信号を同じ平面に並置する。
【0062】この構成の間に、サブサンプルビデオ信号
の制限されたグループに関連するデータ記述子からなる
フィールド4,5,6及び7に対応する追加のデータ3
37は、TVプログラムのモザイクに挿入され、作成さ
れテレビジョンセットに表示されるモザイクを見ている
ユーザに追加の情報が提供される。このモザイクは、出
力信号335により搬送される。
【0063】したがって、ユーザは、ユーザ選択を満た
すTVプログラムのモザイクを利用することができる。
ユーザインタフェース312を介して、ユーザは、モザ
イクから短縮フォーマットTVプログラム(すなわち、
サブサンプルビデオ信号)を選択する。これは、たとえ
ば、選択カーソルがモザイクにおけるある短縮フォーマ
ットプログラムから別の短縮フォーマットプログラムに
移動可能にする移動矢印が設けられたリモートコントロ
ール、選択カーソルが位置合わせされて選択される短縮
フォーマットプログラムを可能にする確認ボタン等によ
り行われる。
【0064】このアクション336に続いて、アナライ
ザ314は、ユーザにより選択される短縮フォーマット
TVプログラムの識別子を識別して、信号338を介し
て該識別子をデマルチプレクサ330に送出する。デマ
ルチプレクサ330は、信号303に含まれるTVプロ
グラムのグループの中から、識別子338に対応する信
号を分離して供給する。
【0065】MPEG-2標準に従うデコーダ332は、信号
331を復号化して、ユーザにより選択されたTVプロ
グラムに対応する復号化された信号333を供給する。
次いで、このTVプログラムは、プログラムモザイクを
テレビジョンセットに置き換える。
【0066】代替的な実施の形態では、モザイクを構成
するサブサンプルされたビデオ信号の選択は、メニュー
からTVプログラムのタイプを選択することなしに、ユ
ーザにより直接的なやり方で実行される。このために、
ユーザは、信号301に含まれている全てのTVプログ
ラムのグループの中から、ユーザが望むプログラムを次
々と選択して、ユーザの好適なモザイクに含める。
【0067】新たなフィールド“pref_mosaic”は、そ
れぞれのデータ記述子に加えられ、サブサンプルビデオ
信号がユーザの好適なモザイクの作成の間に利用されな
ければならないことを示すために評価される。
【0068】このようにして、ユーザは、ローカルに記
憶することができるユーザ自身のユーザプロファイルを
作成する。特定のTVプログラムの選択をユーザが望む
場合、(リモートコントロールボタン、メニュー等を介
しての)ユーザアクション340は、そのフィールドpr
ef_mosaicが認可された全ての記述子について、データ
ベース315におけるリクエストアナライザ314によ
るサーチをトリガする。これにより、ユーザの好適なモ
ザイクを形成するサブサンプルビデオ信号の制限された
グループを定義することができ、その後、モザイクは上
述したように作成され表示される。ユーザは、テレビジ
ョンに表示することを望むTVプログラムを好適なモザ
イクから選択するだけでよい。
【0069】所与の放送局で生じる場合がある番組変更
を考慮して、TVプログラムの更新されたモザイクをユ
ーザに提供するためには、連続的なやり方で又は周期的
にデータベース315の更新が実行される。このため
に、データベースジェネレータ310は、そのプログラ
ム識別子311により識別されるTVプログラムのそれ
ぞれについて、データベースにおける315に予め記憶
されているその関連するデータ記述子のフィールドが現
在の瞬間で受信されたフィールド307から309と同
じであるかをチェックする。
【0070】同じである場合、データベース315は更
新されない。これは、受信されたTVプログラムは、特
にそのタイプに関して同じであるからである。同じでな
い場合、予め記憶されるデータ記述子のフィールドを置
き換えることにより、データベース315の更新が実行
される。たとえば、プログラム識別子311により参照
されるテレビジョン放送局がドキュメンタリのブロード
キャストを開始した場合に、現在の瞬間までフィルムが
ブロードキャストされているので、データベース315
の更新が実行される。
【0071】図5は、本発明によるビデオ受信システム
及びビデオ処理システムを例示しており、受信エンクロ
ージャ501、特にセットトップボックス型で実現され
る。このエンクロージャは、上述のように信号301を
受信し、その出力として信号335を生成する。信号3
35は、特に、TVプログラムのモザイク及び/又はユ
ーザにより選択されたTVプログラムを搬送し、ユーザ
のテレビジョンセット502に表示される。ユーザは、
利用可能なリモートコントロール503を有しており、
テレビジョンセット502に表示されるビデオ/グラフ
ィカルコンテンツとのインタラクションが可能となる。
【0072】表示領域は、ユーザが見たいと望むTVプ
ログラムのタイプが選択されるメニューを表示すること
ができる領域504を含んでいる。たとえば、映画に対
応するTVプログラムを見たいと望む場合、タイトル
“film”を選択し、ドキュメンタリに対応するTVプロ
グラムを見たいと望む場合、タイトル“doc”を選択す
る。サブメニュー(図示せず)を考えて、サブタイプを
ユーザに提供してもよい。
【0073】この選択に応答して、システム501は、
ユーザ選択に対応するサブサンプルビデオ信号でプログ
ラムのモザイクを構築する。このモザイクは、テレビジ
ョンセット502に表示される。例示のために、TVプ
ログラムのモザイクは、3つのサブサンプルビデオ信号
505,506及び507から構成される。ユーザは、
このモザイクから見るTVプログラムを選択することが
できる。メニュー504において、タイトル“user”に
より、図3に定義されて記載されるようなユーザモザイ
クを呼ぶことができる。
【0074】ハードウェアの観点で、本発明のこの種の
実現に関して、リソースは、送信システム及び受信/処
理システムの両レベルでのシグナルプロセッサである。
かかるプロセッサは、図1〜図5に記載された手段の機
能を実現するために、プログラムコード命令のシーケン
スを含むコンピュータプログラムを実行する。かかるプ
ログラムコード命令は、メモリ装置に記憶されている。
特に、かかるプログラムコード命令は、本発明の異なる
処理ステップを実行する1以上のソースプログラムの完
成から引き出すことができる。
【図面の簡単な説明】
【図1】本発明によるビデオ送信システムの第1実施の
形態を示す図である。
【図2】本発明によるビデオ送信システムの第2実施の
形態を示す図である。
【図3】本発明によるビデオ受信及び処理システムの詳
細な実施の形態を示す図である。
【図4】本発明によるビデオ受信及び処理システムのブ
ロック図である。
【図5】本発明による受信及び処理システムを例示する
図である。
【符号の説明】
101〜104:ビデオ信号 105:ビデオ符号化システム 106〜109:ビデオエンコーダ 110〜113:符号化信号 114:ビデオ符号化システム 115〜118:ビデオエンコーダ 119〜122:サブサンプルビデオ信号 123:関連付け手段 124〜127:グループ 128〜131:新たな信号 132〜135:データ記述子 136:マルチプレクサ 137:出力信号 201:伝送ストリーム 202:マルチプレクサ 203〜206:ビデオ信号 207:トランスコーディング処理 208〜211:トランスコーダ 212〜215:サブサンプルビデオ信号 220:出力信号 301:入力信号 302:マルチプレクサ 303:伝送ストリーム 304:伝送ストリーム 305:データ記述子を含む信号 306:テーブルアナライザ 307:データ記述子のフィールド 308:記述子抽出器 309:タイプ情報 310:データベースジェネレータ 311:プログラム識別パラメータ 312:ユーザインタフェース 313:ユーザ選択を反映した要求 314:リクエストアナライザ 315:データベース 316:デマルチプレクサ 317〜320:サブサンプルビデオ信号 321:復号化システム 322〜325:デコーダ 326〜329:復号化されたサブサンプルビデオ信号 330:デマルチプレクサ 332:デコーダ 333:復号化された信号 334:イメージコンポジタ 335:出力信号 336:アクション 337:追加のデータ 338:識別子 340:メニューからの選択
───────────────────────────────────────────────────── フロントページの続き (72)発明者 フランソワ マルタン フランス国,75011 パリ,リュ・ド・ ラ・ロケット 69 Fターム(参考) 5C063 AB03 AB07 AC01 AC05 CA11 CA23 CA36 DA07 DA13 EB04

Claims (16)

    【特許請求の範囲】
  1. 【請求項1】 入力ビデオ信号のそれぞれから符号化さ
    れたビデオ信号を供給するための第1グループの符号化
    手段を備え、通信チャネルを通して前記入力ビデオ信号
    のグループに基づいて出力ビデオ信号を送信するための
    ビデオ送信システムであって、 前記入力ビデオ信号のそれぞれからサブサンプルされた
    ビデオ信号を供給するための第2グループの符号化手段
    と、 対応する前記入力ビデオ信号を特徴付ける記述子を前記
    サブサンプルビデオ信号のそれぞれと関連付けるための
    関連付け手段と、 前記符号化ビデオ信号のグループを、前記記述子により
    関連付けされた前記サブサンプビデオ信号のグループと
    多重化し、該多重化処理により前記出力信号を供給する
    ための多重化手段と、を備えることを特徴とするビデオ
    送信システム。
  2. 【請求項2】 符号化されたビデオ信号を生成する多重
    化のための手段を備え、前記符号化ビデオ信号のグルー
    プの多重化から生じた入力ビデオ信号に基づいて、通信
    チャネルを通して出力ビデオ信号を送信するためのビデ
    オ送信システムであって、 前記符号化ビデオ信号のそれぞれからサブサンプルされ
    たビデオ信号を供給するためのトランスコーディング手
    段と、 対応する前記符号化ビデオ信号を特徴付ける記述子を、
    前記サブサンプルビデオ信号のそれぞれと関連付けるた
    めの関連付け手段と、 前記入力ビデオ信号を、前記記述子により関連付けされ
    た前記サブサンプルビデオ信号のグループと多重化し、
    該多重化処理により前記出力信号を供給するための多重
    化手段と、を備えることを特徴とするビデオ送信システ
    ム。
  3. 【請求項3】 符号化されたビデオ信号を生成するため
    の多重化手段及び前記符号化ビデオ信号を復号化して、
    スクリーンに表示可能な復号化ビデオ信号を生成するた
    めの復号化手段を備え、通信チャネルを通して前記符号
    化ビデオ信号のグループの多重化から生じた入力ビデオ
    信号を受信するために設計されたビデオ処理システムで
    あって、 フィールドのグループによって対応する前記符号化ビデ
    オ信号を特徴付けるために記述子がそれぞれと関連付け
    られおり、前記符号化ビデオ信号のサブサンプリングか
    らそれぞれ生じたサブサンプリングされたビデオ信号の
    グループの多重化から生じた補助シグナルを受信するた
    めの手段と、 データの前記記述子のフィールドを記憶して、フィール
    ドのグループに関する要求により、前記サブサンプルビ
    デオ信号を識別するためのデータベースを作成するため
    の手段と、 前記サブサンプルビデオ信号の前記グループから選択さ
    れたサブサンプルビデオ信号の制限されたグループから
    モザイクを作成するための手段とを備え、 前記選択されたサブサンプルビデオ信号は、関連する記
    述子のフィールドが前記データベースに送出されるユー
    ザ要求の結果である前記サブサンプルビデオ信号であ
    る、ことを特徴とするビデオ処理システム。
  4. 【請求項4】 前記モザイクを作成するための手段は、 前記選択されたサブサンプルビデオ信号を生成するため
    に、前記補助シグナルを分離するための手段と、 前記選択されたサブサンプルビデオ信号のそれぞれか
    ら、復号化されたサブサンプルビデオ信号を生成するた
    めの復号化手段と、 前記復号化されたサブサンプルビデオ信号から、前記ス
    クリーンで表示可能な前記モザイクを構成するためのビ
    デオ構成手段と、を含むことを特徴とする請求項3記載
    のビデオ処理システム。
  5. 【請求項5】 前記ユーザ要求を発生するための要求発
    生器をさらに含み、前記ユーザ要求は、前記スクリーン
    に表示されるメニューからの、フィールドのグループの
    ユーザによる選択から発生される、ことを特徴とする請
    求項4記載のビデオ処理システム。
  6. 【請求項6】 前記ユーザ要求は、フィールドのグルー
    プを含むユーザプロファイルのコンテンツから発生され
    る、ことを特徴とする請求項4記載のビデオ処理システ
    ム。
  7. 【請求項7】 前記スクリーンに表示されるサブサンプ
    ルビデオ信号の前記グループから、前記制限されたグル
    ープのサブサンプルビデオ信号を選択するためのグラフ
    ィカル選択手段をさらに含む、ことを特徴とする請求項
    4記載の処理システム。
  8. 【請求項8】 対応する復号化ビデオ信号のフルスクリ
    ーン表示を可能にするために、表示される前記モザイク
    を構成する前記サブサンプルビデオ信号を選択するため
    の手段を備える、ことを特徴とする請求項5乃至7のい
    ずれか記載のビデオ処理システム。
  9. 【請求項9】 請求項3記載のビデオ処理システムを備
    えるテレビジョンセットのための受信機。
  10. 【請求項10】 MPEG−2標準に従い符号化された
    第1のビデオ信号のグループから構成され、更にMPE
    G−4標準に従い符号化された第2のビデオ信号のグル
    ープを備えるデジタル信号であって、 前記第2のビデオ信号のそれぞれは、前記第1のビデオ
    信号のサブサンプリング及びMPEG−4標準に従う後
    続する符号化により連続的に得られ、該MPEG−4ビ
    デオ信号のそれぞれは、対応する前記第1のビデオ信号
    を特徴付ける記述子と関連付けられている、ことを特徴
    とするデジタル信号。
  11. 【請求項11】 入力ビデオ信号のそれぞれから符号化
    されたビデオ信号を供給するための第1符号化ステップ
    を備え、前記入力ビデオ信号のグループから通信チャネ
    ルを通して出力ビデオ信号を送信するためのビデオ送信
    方法であって、 前記入力ビデオ信号のそれぞれからサブサンプルされた
    ビデオ信号を供給するための第2符号化ステップと、 対応する前記入力ビデオ信号を特徴付ける記述子を前記
    サブサンプルビデオ信号と関連付けるための関連付けス
    テップと、 前記符号化ビデオ信号のグループを、前記記述子で関連
    付けられた前記サブサンプルビデオ信号のグループと多
    重化し、該多重化処理により前記出力ビデオ信号を供給
    するための多重化ステップと、を備えることを特徴とす
    るビデオ送信方法。
  12. 【請求項12】 符号化されたビデオ信号を生成するた
    めの分離ステップを備え、前記符号化ビデオ信号のグル
    ープの多重化から生じた入力ビデオ信号から通信チャネ
    ルを通して出力ビデオ信号を送信するためのビデオ送信
    方法であって、 前記符号化ビデオ信号のそれぞれからサブサンプルされ
    たビデオ信号を供給するためのトランスコーディングス
    テップと、 対応する前記符号化ビデオ信号を特徴付ける記述子を、
    前記サブサンプルビデオ信号と関連付けるための関連付
    けステップと、 前記入力ビデオ信号を、前記記述子により関連付けられ
    た前記サブサンプルビデオ信号のグループと多重化し、
    該多重化処理により前記出力ビデオ信号を供給する多重
    化ステップと、を備えることを特徴とするビデオ送信方
    法。
  13. 【請求項13】 符号化されたビデオ信号を生成するた
    めの分離ステップ及び前記符号化ビデオ信号を復号化し
    て、スクリーンに表示可能な復号ビデオ信号を生成する
    ための復号化ステップを備え、前記符号化ビデオ信号の
    グループの多重化から生じた入力ビデオ信号を受信する
    ために設計されたビデオ処理方法であって、 フィールドのグループによって対応する前記符号化ビデ
    オ信号を特徴付けるために記述子がそれぞれと関連付け
    られおり、前記符号化ビデオ信号のサブサンプリングか
    らそれぞれ生じたサブサンプリングされたビデオ信号の
    グループの多重化から生じた補助シグナルを受信するた
    めのステップと、 データの前記記述子のフィールドを記憶して、フィール
    ドのグループに関する要求により、前記サブサンプルビ
    デオ信号を識別するためのデータベースを作成するため
    のステップと、 前記サブサンプルビデオ信号の前記グループから選択さ
    れたサブサンプルビデオ信号の制限されたグループから
    モザイクを作成するためのステップとを備え、 前記選択されたサブサンプルビデオ信号は、関連する記
    述子のフィールドが前記データベースに送出されるユー
    ザ要求の結果である前記サブサンプルビデオ信号であ
    る、ことを特徴とするビデオ処理方法。
  14. 【請求項14】 ビデオ送信システムのためのコンピュ
    ータプログラムプロダクトであって、前記ビデオ送信シ
    ステムで実現されるシグナルプロセッサにより前記プロ
    グラムが実行される場合に、請求項11記載の方法のス
    テップを実行するためのプログラムコード命令のシーケ
    ンスを含む、コンピュータプログラム。
  15. 【請求項15】 ビデオ送信システムのためのコンピュ
    ータプログラムプロダクトであって、前記ビデオ送信シ
    ステムで実現されるシグナルプロセッサにより前記プロ
    グラムが実行される場合に、請求項12記載の方法のス
    テップを実行するためのプログラムコード命令のシーケ
    ンスを含む、コンピュータプログラム。
  16. 【請求項16】 ビデオ処理システムのためのコンピュ
    ータプログラムプロダクトであって、前記ビデオ処理シ
    ステムで実現されるシグナルプロセッサにより前記プロ
    グラムが実行される場合に、請求項13記載の方法のス
    テップを実行するためのプログラムコード命令のシーケ
    ンスを含む、コンピュータプログラム。
JP2002039069A 2001-02-16 2002-02-15 ユーザモザイクを生成するためのビデオ送信システム及びビデオ処理システム Expired - Fee Related JP4406750B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0102137 2001-02-16
FR0102137 2001-02-16

Publications (2)

Publication Number Publication Date
JP2002314961A true JP2002314961A (ja) 2002-10-25
JP4406750B2 JP4406750B2 (ja) 2010-02-03

Family

ID=8860111

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002039069A Expired - Fee Related JP4406750B2 (ja) 2001-02-16 2002-02-15 ユーザモザイクを生成するためのビデオ送信システム及びビデオ処理システム

Country Status (7)

Country Link
US (1) US7164714B2 (ja)
EP (1) EP1233614B1 (ja)
JP (1) JP4406750B2 (ja)
KR (1) KR100825213B1 (ja)
CN (1) CN100525461C (ja)
BR (1) BR0201275A (ja)
RU (1) RU2308172C2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110286A (ja) * 2003-09-30 2005-04-21 Microsoft Corp 縮小ビデオ画像生成およびユーザインターフェース
JP2006074759A (ja) * 2005-08-22 2006-03-16 Kddi Corp 複数動画像の閲覧装置および配信装置
JP2012161099A (ja) * 2005-05-04 2012-08-23 Thomson Licensing 周波数を変換する装置及び方法

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040060061A1 (en) * 2002-09-20 2004-03-25 Imagictv Inc. Multiple view video feed
FR2846506B1 (fr) * 2002-10-28 2005-02-11 Philippe Marie Alber Guenebaud Dispositif de trans-compression d'un flux numerique audiovisuel pour l'adapter aux equipements de television existants
US8453175B2 (en) * 2003-05-29 2013-05-28 Eat.Tv, Llc System for presentation of multimedia content
TWI233305B (en) * 2003-11-03 2005-05-21 Benq Corp Method for transmitting data by an audio and video playback system
GB0402637D0 (en) 2004-02-06 2004-03-10 Nokia Corp Mobile telecommunications apparatus
GB2412519B (en) * 2004-03-23 2010-11-03 British Broadcasting Corp Monitoring system
CN101848381B (zh) * 2004-04-02 2014-04-16 Nds有限公司 用于在pvr窍门模式回放期间提供可见消息的系统
JP2006067124A (ja) 2004-08-25 2006-03-09 Nec Corp 画像符号化データの切り替え方法および装置、システムならびにプログラム
WO2006050135A1 (en) * 2004-10-29 2006-05-11 Eat.Tv, Inc. System for enabling video-based interactive applications
US8826328B2 (en) 2004-11-12 2014-09-02 Opentv, Inc. Communicating primary content streams and secondary content streams including targeted advertising to a remote unit
US20060230427A1 (en) * 2005-03-30 2006-10-12 Gerard Kunkel Method and system of providing user interface
FR2884675A1 (fr) * 2005-04-15 2006-10-20 France Telecom Procede de reproduction d'un programme audiovisuel
US20080115178A1 (en) * 2006-10-30 2008-05-15 Comcast Cable Holdings, Llc Customer configurable video rich navigation (vrn)
US8832738B2 (en) 2006-02-02 2014-09-09 The Directv Group, Inc. Interactive mosaic channel video stream with additional programming sources
BRPI0708681A2 (pt) * 2006-02-02 2011-06-07 Directv Group Inc canal de vìdeo matricial interativo e sistemas para distribuir e exibir o mesmo
KR100754652B1 (ko) * 2006-02-09 2007-09-05 삼성전자주식회사 다중 방송 서비스를 제공하기 위한 방송 시스템 및 방법
US8330866B2 (en) 2006-02-21 2012-12-11 Qualcomm Incorporated Multi-program viewing in a wireless apparatus
US8428048B2 (en) * 2006-02-21 2013-04-23 Qualcomm Incorporated Multi-program viewing in a wireless apparatus
WO2007102147A2 (en) * 2006-03-07 2007-09-13 Bitband Technologies Ltd. Personalized insertion of advertisements in streaming media
AR059819A1 (es) 2006-03-10 2008-04-30 Directv Group Inc Determinacion dinamica de la presentacion multiples celdas de video en un visor en pantalla.
US8184687B1 (en) * 2006-04-03 2012-05-22 Arris Group, Inc System and method for generating a mosaic image stream
US7913157B1 (en) * 2006-04-18 2011-03-22 Overcast Media Incorporated Method and system for the authoring and playback of independent, synchronized media through the use of a relative virtual time code
US20070261093A1 (en) * 2006-04-21 2007-11-08 Sony Ericsson Mobile Communications Ab Buffering video data as received over alternative networks
EP2041970A1 (en) * 2006-06-30 2009-04-01 Thomson Licensing System and method for delivery of personalized mosaic multimedia content over a cable data network
US8949895B2 (en) 2006-08-18 2015-02-03 The Directv Group, Inc. Mosaic channel video stream with personalized interactive services
US20100111497A1 (en) * 2006-09-06 2010-05-06 Zhikai Song Media playing tool with a multiple media playing model
US20080137725A1 (en) * 2006-12-12 2008-06-12 Yu-Chieh Chou Systems and methods for displaying local media signal and broadcast signal utilizing one decoder
EP2149256B1 (fr) * 2007-05-30 2018-04-04 Orange Generation d'une mosaique tv personnalisable
CN101355688A (zh) * 2007-07-26 2009-01-28 华为技术有限公司 用于iptv的频道选择方法、合成编码装置和机顶盒
KR100926911B1 (ko) * 2007-10-05 2009-11-17 주식회사 알티캐스트 디지털 방송에서 광고를 제공하는 방법 및 시스템
US8700792B2 (en) 2008-01-31 2014-04-15 General Instrument Corporation Method and apparatus for expediting delivery of programming content over a broadband network
JP4535150B2 (ja) * 2008-03-18 2010-09-01 ソニー株式会社 画像処理装置および方法、プログラム並びに記録媒体
US8752092B2 (en) * 2008-06-27 2014-06-10 General Instrument Corporation Method and apparatus for providing low resolution images in a broadcast system
CN101442650B (zh) * 2008-12-22 2011-05-18 华为终端有限公司 马赛克电视业务的实现方法、装置及系统
JP4564574B1 (ja) * 2009-06-24 2010-10-20 株式会社東芝 通信装置
US9357244B2 (en) 2010-03-11 2016-05-31 Arris Enterprises, Inc. Method and system for inhibiting audio-video synchronization delay
CN102014284B (zh) * 2010-12-10 2014-09-10 中兴通讯股份有限公司 转码业务中获取视频码流的参数集值的方法、系统及装置
FR2971611B1 (fr) * 2011-02-11 2013-02-22 Httv Procede d'affichage d'une mosaique video personnalisee et recepteur audiovisuel correspondant
WO2013021656A1 (ja) * 2011-08-11 2013-02-14 パナソニック株式会社 再生装置、再生方法、集積回路、放送システム、及び放送方法
EP2902894B1 (en) 2012-08-28 2019-11-13 EIZO Corporation Display control method, computer program, display control device and image display system
GB2507731B (en) * 2012-11-07 2015-08-12 Nds Ltd A system and method for providing a private mosaic
WO2015185080A1 (en) * 2014-06-02 2015-12-10 Arcelik Anonim Sirketi Image display device capable of broadcasting a plurality of programs enabling remotely selective simultaneous distribution of such programs
EP2966861B1 (en) * 2014-07-09 2016-11-09 Axis AB Method system and storage medium for controlling a video capture device, in particular of a door station
CN113327236B (zh) * 2021-06-04 2022-08-02 天津大学 新型冠状病毒抗体快速检测试剂的识别方法及系统

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4656515A (en) * 1985-03-25 1987-04-07 Rca Corporation Horizontal compression of pixels in a reduced-size video image utilizing cooperating subsampling and display rates
US5568278A (en) * 1991-03-19 1996-10-22 Olympus Optical Co., Ltd. Image data coding and decoding method and apparatus with a plurality of DCT's, quantizers, and VLC's
FR2713427B1 (fr) * 1993-12-01 1995-12-29 Thomson Consumer Electronics Procédé de sélection de programmes vidéo.
CN1139258C (zh) * 1994-04-15 2004-02-18 皇家菲利浦电子有限公司 用于传送和接收数字视频信号的装置
JP3698273B2 (ja) * 1995-07-20 2005-09-21 ソニー株式会社 電子番組ガイド伝送装置および方法、電子番組ガイド受信装置および方法、並びに電子番組ガイド送受信システムおよび方法
US6148030A (en) * 1996-02-07 2000-11-14 Sharp Kabushiki Kaisha Motion picture coding and decoding apparatus
JP3935945B2 (ja) * 1996-03-07 2007-06-27 トムソン コンシユーマ エレクトロニクス インコーポレイテツド 補助画像と主画像を合成する装置
US6453471B1 (en) * 1996-12-13 2002-09-17 Starsight Telecast, Inc. Electronic programming guide with movie preview
JPH10248051A (ja) * 1997-03-05 1998-09-14 Matsushita Electric Ind Co Ltd ディジタルデータ送信方法、ディジタルデータ送信装置およびディジタルデータ受信装置
DE69837463T2 (de) * 1997-06-03 2008-01-10 Koninklijke Philips Electronics N.V. Navigation durch fernsehprogramme
KR100239466B1 (ko) * 1997-08-28 2000-01-15 구자홍 에이치디티브이(hdtv)의 다중화면 발생장치
DE69914307T2 (de) * 1998-02-20 2004-11-25 Thomson Licensing S.A., Boulogne Multimediasystem zur adaptiven generierung und verarbeitung von umfangreichen fernsehprogrammzeitschriften
US6243145B1 (en) * 1998-05-01 2001-06-05 Scientific-Atlanta, Inc. Method and apparatus for browsing television channel information by category
JP4272771B2 (ja) * 1998-10-09 2009-06-03 キヤノン株式会社 画像処理装置、画像処理方法及びコンピュータ読み取り可能な記憶媒体
JP2000209580A (ja) * 1999-01-13 2000-07-28 Canon Inc 画像処理装置およびその方法
US6539545B1 (en) * 2000-01-28 2003-03-25 Opentv Corp. Interactive television system and method for simultaneous transmission and rendering of multiple encoded video streams

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110286A (ja) * 2003-09-30 2005-04-21 Microsoft Corp 縮小ビデオ画像生成およびユーザインターフェース
JP2012161099A (ja) * 2005-05-04 2012-08-23 Thomson Licensing 周波数を変換する装置及び方法
JP2006074759A (ja) * 2005-08-22 2006-03-16 Kddi Corp 複数動画像の閲覧装置および配信装置
JP4484220B2 (ja) * 2005-08-22 2010-06-16 Kddi株式会社 映像配信装置

Also Published As

Publication number Publication date
US7164714B2 (en) 2007-01-16
JP4406750B2 (ja) 2010-02-03
US20020154692A1 (en) 2002-10-24
CN1378387A (zh) 2002-11-06
KR100825213B1 (ko) 2008-04-25
EP1233614B1 (fr) 2012-08-08
CN100525461C (zh) 2009-08-05
EP1233614A1 (fr) 2002-08-21
BR0201275A (pt) 2002-10-08
KR20020067684A (ko) 2002-08-23
RU2308172C2 (ru) 2007-10-10

Similar Documents

Publication Publication Date Title
JP4406750B2 (ja) ユーザモザイクを生成するためのビデオ送信システム及びビデオ処理システム
KR100564839B1 (ko) 패킷화된 프로그램 데이터의 획득 장치, 재분할 가능한 패킷화된 프로그램 가이드 데이터를 적합하게 디코딩하기 위한 장치, 디코더에서 처리하기에 적합한 패킷화된 프로그램 데이터의 형성 방법, 및 디지털 데이터를 포함하는 저장매체
US7032236B1 (en) Multimedia system for processing program guides and associated multimedia objects
US8225367B2 (en) Systems and methods for dynamic conversion of web content to an interactive walled garden program
US20020083464A1 (en) System and method for unprompted, context-sensitive querying during a televison broadcast
US20020147984A1 (en) System and method for pre-caching supplemental content related to a television broadcast using unprompted, context-sensitive querying
US7533406B2 (en) Systems and methods for generating a walled garden program for substantially optimized bandwidth delivery
JP2001520491A (ja) マルチメディアプログラムデータおよびプログラムガイド情報をフォーマットして処理するためのシステム
JP2002536921A (ja) マルチメディア・ビデオ・デコーダに好ましいサービス管理システム
JP2003533060A (ja) 地上放送、ケーブル放送または衛星放送に適したプログラム・マップ・情報の形成および処理を行うシステム
JP2003500941A (ja) ブロードキャストプログラム、プログラムガイドおよびチャネル識別データを獲得し処理するためのシステム
JP2001522175A (ja) インタラクティブ・テレビジョン・アプリケーションにおいて符号化mpegスチール写真をスクロールするための符号化システムおよび方法
JP2002511220A (ja) 地上放送、ケーブル放送または衛星放送に適したプログラム特定情報を形成し処理するシステム
KR100711608B1 (ko) 홈단말에서 실시간 필터링된 방송 비디오 관리 시스템 및그 방법
JP2001520827A (ja) Mpeg準拠データとインターネット情報を処理し、デコードするシステム
EP2701396B1 (en) System and method for playing digital television program, and digital television reception terminal
US8707362B2 (en) Data broadcast receiver and method for gathering data broadcasting application
KR100586857B1 (ko) 패킷화된 프로그램 정보의 디코딩 방법과 장치, 디지털 데이터를 포함하는 저장 매체, 및 프로그램 가이드 정보의 형성 방법
MXPA99009365A (en) A system for processing and decoding mpeg compatible data and internet information

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071106

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20080130

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20080204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080501

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20081125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090223

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20090406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091006

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20091022

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091022

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20091022

R150 Certificate of patent or registration of utility model

Ref document number: 4406750

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121120

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131120

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees