JP2003519982A - 画像データを伝送するための方法 - Google Patents

画像データを伝送するための方法

Info

Publication number
JP2003519982A
JP2003519982A JP2001551008A JP2001551008A JP2003519982A JP 2003519982 A JP2003519982 A JP 2003519982A JP 2001551008 A JP2001551008 A JP 2001551008A JP 2001551008 A JP2001551008 A JP 2001551008A JP 2003519982 A JP2003519982 A JP 2003519982A
Authority
JP
Japan
Prior art keywords
image data
communication terminal
image
transmission channel
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001551008A
Other languages
English (en)
Other versions
JP4456791B2 (ja
Inventor
リッター・ルードルフ
ラウパー・エーリク
Original Assignee
スイスコム・モバイル・アクチエンゲゼルシヤフト
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by スイスコム・モバイル・アクチエンゲゼルシヤフト filed Critical スイスコム・モバイル・アクチエンゲゼルシヤフト
Publication of JP2003519982A publication Critical patent/JP2003519982A/ja
Application granted granted Critical
Publication of JP4456791B2 publication Critical patent/JP4456791B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Photoreceptors In Electrophotography (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Communication Control (AREA)

Abstract

(57)【要約】 通信端末利用者（９）が現時点の視線方向を特定して、画像データを通信端末（８）に伝送し、画像再生手段（８５）で表示する、画像データを伝送し、表示するための方法である。第一画像データ（２５）は、低い解像度で第一伝送チャネル（４）、例えばＤＶＢにより伝送され、利用者の現時点あるいは将来時点の観察画像領域に対応する第二画像データ（２１，２４）は、より高い解像度で第二伝送チャネル（７）により伝送される。第一および第二画像データは、通信端末で重畳されて、同時に再生される。

Description

【発明の詳細な説明】
【０００１】 この発明は、画像データを伝送する方法とそれに適した装置に関する。
【０００２】 適当な再生手段により利用者に画像として表示することができる画像データ、
特にデジタルデータは、多くの場合伝送時間を短くするため伝送前に圧縮され、
再生の前あるいは再生中に伸長される。画像データの圧縮と伸長に関する種々の
標準、特に種々のＭＰＥＧ標準（動画像符号化専門家会合）が既に提示されてい
る。
【０００３】 特許出願第ＷＯ９８／３３３１５号（テキサス大学）は、目の中心窩に投射さ
れた画像の領域（観察領域）だけに最大の解像度を必要とする人間の目の生理学
上の特性に基づいた別の画像データ圧縮方法を提示している。周辺の画像領域は
、より低い解像度でも品質の劣化に気付かれることなく再生することができる。
このように、この特許出願は、利用者の観察画像領域を連続して調べ、この画像
領域だけに最大の解像度を使い、それ以外の広い領域にはより低い解像度を適用
することを提案している。この観察画像領域は、一般的には画像全体の約２％だ
けである。そして、この方法によって強力に圧縮された画像が二つのコンピュー
タ間の伝送チャネルにより伝送される。
【０００４】 この方法は、特に小さなディスプレイ、例えばオフィスのコンピュータ画面に
表示されるのが決まっている画像の伝送に適している。しかし、例えば幅が非常
に広い形の画像や瞳が不意に動くことによって視点が早く動くような場合には、
システムの反応速度が遅くなりすぎて、より低い解像度の画像領域が急に見てい
る領域の中心点に来ることがある。さらに、この方法は、多数の利用者に画像デ
ータを同時に発信する場合にも適していない。
【０００５】 この発明の目的は、画像データの圧縮と伝送に関する新しく、より良い方法、
特に上に述べた欠点を回避する方法を提案するものである。
【０００６】 この目的は、この発明により、特に独立請求項の構成要素により達成されてい
る。さらに、他の有利な構成は、特許請求の範囲の従属請求項および発明の詳細
な説明から導き出される。
【０００７】 特に、この目的は、以下の画像データを伝送し、表示するための方法により達
成される。
【０００８】 ・通信端末利用者の現時点の視線方向を特定して、画像データを送信装置から
少なくとも一つの通信端末に伝送し、少なくとも一つの通信端末の画像再生手段
により表示する。
【０００９】 ・画像領域全体に対応する第一画像データが、低い解像度で第一伝送チャネル
により伝送される。
【００１０】 ・現時点の視線方向２２が送信装置１の逆方向チャネルにより送信される。
【００１１】 ・利用者の現時点の観察画像領域に対応する第二画像データが、より高い解像
度で第二伝送チャネルにより伝送される。
【００１２】 ・第一および第二画像データが、重畳されて、同時に再生される。
【００１３】 これは、第一画像データが第一伝送チャネル（例えば放送チャネル）により伝
送される一方、現時点の観察画像領域に対応する第二画像データだけが第二伝送
チャネル（例えば高価な双方向移動体無線網）により伝送されるという利点を持
つ。これにより、有料の移動体無線網で伝送されるデータ量を増加させることな
く、前述の特許出願第ＷＯ９８／３３３１５号より高い解像度を周辺領域に使う
ことができる。
【００１４】 同じ画像データが、低い解像度で放送チャネルによりすべての利用者に送られ
る一方、それぞれの利用者の観察画像領域に対応する画像データは、より高い解
像度で第二伝送チャネルにより各利用者に個別に送信される。
【００１５】 この発明の実施について、一つの例をあげて以下に記述する。この実施例は、
次の添付図面により説明する。
【００１６】 図１は、この発明によるシステムのブロック図を示している。
【００１７】 図２は、ビットマップのセグメント化を模式的に示している。
【００１８】 図３は、複数の利用者が画像を見る場合に目の生理学上必要とされる必要解像
度を示している。
【００１９】 図１において、参照番号１は送信装置を表しており、それは、二つの異なる伝
送チャネル４，７により多数の通信端末８と通信するために、例えばハードウェ
アおよびソフトウェアの構成要素を持つ商用の通信サーバで構成することができ
る。参照番号１０は画像データを表しており、それは、例えばその内容を適当な
再生手段により利用者９に静止画あるいはとりわけ動画のような画像として表示
することができるデジタルデータファイルである。画像データは、例えばデジタ
ル化された画像の連続（例えば、映画やテレビ番組）、あるいは他のマルチメデ
ィアデータ、例えば静止画および／または動画および／または音声データを含ん
だＨＴＭＬデータとすることができる。この発明の別の実施例では、後に述べる
とおり、観察者が高い確率で視線を向ける特別に興味を持っている画像領域と画
像部分の画像データ１０に特に注目している。
【００２０】 画像データの連続は、送信装置１のそこでは表示されていないシーケンサによ
って順番に読まれ、特にハイパーテキストの制御エレメントを持った画像データ
の場合には、利用者９がそのシーケンサを使って画像データの順序を選択的に制
御できる。シーケンサは、例えば画像の連続した画像を読み、セグメント化モジ
ュール２（オプション）に送るハードウェアおよび／またはソフトウェアモジュ
ールで構成することができる。
【００２１】 セグメント化モジュール２は、図２に示すように画像をいつくかのセグメント
に分ける。そのために、個々の観察者９の現時点の視線方向に関する指示Ａ、例
えば少なくとも一人の観察者９の視線が現時点で向けられているすべての点２２
の座標ｘ，ｙを利用する。有利には、現時点の視点２２の速度に対応した一つあ
るいは複数の移動ベクトル２３が更に受信されるか、あるいはセグメント化モジ
ュールで計算される。
【００２２】 セグメント化モジュール２は、この指示Ａに基づき少なくとも一人の利用者９
が現時点で見ている一つあるいは複数の領域２１を特定する。後に述べるとおり
、この領域はより高い解像度で圧縮され、対応する利用者に伝送チャネル７によ
り伝送される。周辺領域２５を含むすべての画像は、別のアルゴリズムとより低
い解像度で圧縮され、すべての利用者に伝送チャネル４により送信される。各領
域２１の大きさは、有利には伝送チャネル７の帯域幅に適合させることができる
。典型的には、各高圧縮領域２１の大きさは、画像全体の２〜４パーセントにな
る。
【００２３】 有利な実施例では、セグメント化モジュール２は、更に一つあるいは複数の観
察領域を予め特定しようとする。このために、セグメント化モジュールは、例え
ば移動ベクトル２３で示される視線の動き、画像の中の観察対象物あるいは人物
、および／または画像データの特別に注目されている部分の動き、例えばマルチ
メディア画像データの場合におけるハイパーリンクを考慮することができる。セ
グメント化モジュール２は、決まってよく見られる領域を手動で注目することが
できるとともに、例えば目および／または画像の観察対象物の連続した位置を記
憶でき、例えば適当な回帰機能を使って予想される次の視線方向を予測すること
ができる。
【００２４】 図２に示す実施例では、種々の画像領域２１，２４，２５は長方形である。ま
た、これらは、別の形と異なった大きさを持つこともでき、部分的あるいは全体
的に重畳することができる。
【００２５】 視点から除かれた画像領域２５は、第一符号化モジュール３に送られ、そこで
例えばＭＰＥＧアルゴリズムあるいは静止画の場合にはＪＰＥＧまたはＧＩＦア
ルゴリズムで圧縮される。第一符号化モジュール３は、有利には空間的、時間的
、クロミナンス圧縮方法を使う。さらに、第一符号化モジュールは、有利には誤
り訂正符号化およびチャネル符号化を行う。
【００２６】 次に、符号化モジュール３で符号化された画像領域は、送信機４から放送形式
で送信され、多くの受信機８がそれぞれの放送受信機８０により受信することが
できる。送信機４は、例えばデータをＤＡＢあるいはＤＶＢ（デジタル音声放送
あるいはデジタルビデオ放送）画像データとして、テレビ放送データ、例えばテ
レビデジタル符号化データ、あるいはインターネットのＴＣＰ−ＩＰデータなど
として送信することができる。さらに、符号化モジュール３で処理されたデータ
は、磁気式および／または光学式データ記録媒体、例えばＣＤあるいはＤＶＤに
コピーされて、この形態で販売され、多くの利用者が購入することができる。
【００２７】 有利には画像領域２５が複数の連続した個々の画像から記録されるとともに、
通信端末８の第一受信機８０で受信された画像データは、第一キャッシュメモリ
８１にコピーされる。この方法により、両伝送チャネル４，７の伝送時間の違い
を調節することができる。
【００２８】 セグメント化モジュールにより現時点および将来時点の観察画像領域２１と２
４から選ばれたデータは、第二符号化モジュール５に送られ、各現時点および将
来時点の観察画像領域２１，２４は、中心窩圧縮機能、すなわち前に述べた特許
出願第ＷＯ９８／３３３１５号で提示されているとおり、その処理結果として視
点２２の近傍の画像データを広く除かれた画像領域より高い解像度で作り出す機
能を使って圧縮される。この発明の有利な実施例において、中心窩機能の少なく
ともあるパラメータは第二伝送チャネルの帯域幅に依存することができる。さら
に、有利には第二符号化モジュール５は、誤り訂正符号化およびチャネル符号化
を行う。
【００２９】 第二符号化モジュール５が符号化した画像領域２１は、それぞれ第二伝送チャ
ネル７により現時点でこの画像領域を見ている全利用者９に送信され、そしてこ
れらの利用者が通信端末８の第二受信機８３（例えば移動無線端末）により受信
することができる。第二伝送チャネル７は、ほぼ実時間接続を可能とする双方向
通信チャネルであり、例えば公衆電話交換網、例えばＧＳＭやＵＭＴＳなどのデ
ジタル移動無線網、あるいはＩＳＤＮなどの固定網、あるいはインターネットな
どのＴＣＰ−ＩＰ網である。
【００３０】 この発明の提示されていない実施例においては、セグメント化モジュール２は
無く、全ての個別画像１０は符号化モジュール３と５の両方に送られる。この場
合、第一符号化モジュール３は、全ての個別画像の全ての領域２１，２４および
２５を圧縮する標準モジュールとすることができる。第二符号化モジュール５は
、全画像を中心窩機能により圧縮することができる。
【００３１】 通信端末８は、有利には個人が持ち運びでき、電気的に自律したもので、有利
にはポケット機器として生産される。電気通信網７が移動無線網である実施例に
おいては、少なくともある通信端末８は無線通信端末であり、例えば放送受信機
８０を内蔵した移動無線電話あるいは通信機能を持ったラップトップあるいはパ
ームトップコンピュータである。このような複合通信端末は、例えば特許出願第
ＷＯ９９／６０７１２号および第ＷＯ９９／６０７１３号（両方ともスイスコム
ＡＧ名）ですでに提示されている。移動無線端末８３は、例えばＧＰＲＳサービ
ス（一般パケット無線サービス）を使って、あるいはサービスチャネルに適当な
プロトコルを利用して移動無線網７でデータを交換することができる。ＤＶＢ受
信機を例とする第一受信機８０およびＵＭＴＳ端末機を例とする第二受信機８３
は、有利には単一の装置（例えば単一のケースの中に）に統合されるが、実施例
として互いの機能を結合して複数の装置に統合することもできる。この場合、両
方の装置を有利には非接触型インタフェース、例えばＩｒｄＡ、ブルートゥース
、あるいは家庭内無線でつなぐことができる。
【００３２】 通信端末８の第二受信機８３で受信された画像データは、第二キャッシュメモ
リ８４にコピーされ、これにより有利にはいくつかの連続した画像領域２１ある
いは２４が第二キャッシュメモリ８４に記憶される。
【００３３】 通信端末８の重畳モジュール８２は、両方のキャッシュメモリ８１と８４から
画像データを読み、これらを重畳する。このため、有利には両方のキャッシュメ
モリにある各画像領域２１，２４，２５は、両方の伝送チャネル４と７の伝送時
間の違いを調節するため、領域が属する個別画像を示す番号を持っている。モジ
ュール８２により選択された第二キャッシュメモリ８４の画像領域２１，２４は
、現時点の観察画像領域に従って選択される。キャッシュメモリは、十分に大き
く、記憶された画像データの読み出しを利用者の適切な指示により、一時停止し
たり、再スタートしたり、および／または後方および前方に戻すことができる。
【００３４】 そして、モジュール８２で結合された画像データに対応する画像信号は、通信
端末８の表示装置８５により再生することができる。この発明の有利な実施例に
おいて、表示装置が、通信端末８の利用者９の目の網膜上に画像信号を投射する
、いわゆる仮想網膜表示装置（ＶＲＤ）から構成される。このＶＲＤ表示装置は
、特許出願第ＷＯ９４／０９４７２号および第ＷＯ９７／３７３３９号で提示さ
れている。表示装置８５は、異なったフォーマットの画像データを適切なインタ
フェースにより受けることができる。
【００３５】 第一ユニットにある表示装置８５は、第二ユニットにある構成要素と、例えば
有線インタフェースあるいは無線インタフェースで接続することができるととも
に、表示装置８５および通信端末８の他の構成要素は、共通のあるいは別々の装
置として実現することができる。
【００３６】 図１に模式的に示すとおり、通信端末８は、利用者９の視線方向ｘ，ｙを特定
することができる視線方向測定モジュール８６を含む。そのような視線方向測定
モジュール（視線追跡システムＥＴＳ）は、前に述べた特許出願第ＷＯ９４／０
９４７２号に提示されている。視線方向ｘ，ｙに関する指示Ａは、すでに述べた
とおり、それによってどの画像領域２１，２４を第二キャッシュメモリ８４から
読み出すかを特定することができるモジュール８２に送られる。これに引き続き
、この指令Ａは、送受信機８３に送られ、ここでは示されていないモジュールで
利用者が規定した指示と組み合わされて、直ちに第二伝送チャネル７の逆方向チ
ャネルにより送受信機８３から送信装置１に送信される。これらの指示Ａは、第
二伝送チャネルの形式に従い、例えばＵＳＳＤメッセージとして、あるいは有利
にはサービスあるいはデータチャネルにより伝送することができる。
【００３７】 一つの実施例において、有利には視線方向は、有利には少なくとも一つの目の
瞳孔の位置を検出する、利用者の頭に向き合って眼鏡の上に取り付けられた測定
モジュールを使って検出される。
【００３８】 他の実施例において、有利には視線方向は、利用者の頭に向き合って眼鏡の上
に取り付けられた測定モジュールを使って検出され、参照系に対する利用者９の
頭の位置および／または向きを測定システム、有利には利用者の頭に取り付けら
れた慣性システムを使って検出される。これにより、利用者の視角全体より広く
、利用者が頭を回すとその内容が動く画像データを利用者９に投射することがで
きる。このようにして、現時点の視線方向２２は、有効な観察領域２１と結びつ
けられる。この方法により、非常に広角な映画を利用者に見せることができる。
【００３９】 視線方向と同様に送り返される利用者が規定した追加の指示Ａは、有利には、
例えば個人識別モジュール８３０（例えばＳＩＭカード）に記録された利用者識
別を含んでいる。さらに、これらの追加の指示は、利用者９の別の命令（例えば
、表示される画像がハイパーリンクを含んでいる場合には、利用者が選択するＵ
ＲＬ）あるいは別のメニューの選択を含むことができる。これらの追加の指示は
、一緒にあるいは別々に伝送することができる。少なくともある追加の指示には
、暗号化および／または電子的な署名を施すことができる。
【００４０】 送信装置１において、受信された現時点の視点ｘ，ｙに関する指示Ａは、現時
点の観察画像領域２１を決め、ならびに場合によっては将来時点の画像領域２４
を予測し、これらの画像領域２１，２４を符号化モジュール５に送るために、セ
グメント化モジュール２で利用される。
【００４１】 追加の指示として伝送された利用者識別は、画像データの視聴に対して課金す
る送信装置側の課金センター６で利用される。課金金額は、例えば識別モジュー
ル８３０に登録されたプリペイド金額から直接に、あるいは銀行口座、クレジッ
トカードや請求書方式（例えば、電話の請求書の一部として）により引き落とさ
れ、また例えば利用された画像の時間単位、利用された作品単位、追加情報ある
いはページ単位、および／または定期利用との組み合わせにより課金計算するこ
とができる。利用者固有の請求設定（例えば、希望の請求住所と請求方法）は、
課金センターの利用者データバンク６０に保存することができる。課金センター
は、送信装置１に統合するか、あるいは他の形態として別の機関が（例えばネッ
トワーク７の運用者が）運営することができる。
【００４２】 通信端末８の利用者９により入力され、追加の指示として第二伝送チャネル７
により伝送された選択コマンドと命令は、表示されていないシーケンサにより受
信され、例えば利用者が要求した画像データ、例えばサブタイトル、ＨＴＭＬ、
ＷＭＬページ、音声シーケンス等を入手して、両伝送チャネルにより通信端末４
に伝送できるようにするため更に処理される。
【００４３】 この発明は、共通のデータを放送チャネル４により送信し、個人の視線方向に
依存したデータをアドレス指定されたチャネル７により伝送することにおいて、
特に多くの利用者９に向けて画像データ１（例えば、映画あるいはテレビ放送）
を同時に伝送するのに適している。また、この発明は、ビデオ会議あるいは画像
伝送を伴った二人の参加者間での電話通信にも利用できる。ここでは、目の生理
学上必要とされる必要解像度を考慮して、画像データの伝送を通信チャネル４と
７の決められた最大帯域幅の範囲内に適合させている。
【００４４】 この発明は、いくつかの詳細な説明においてＧＳＭ移動無線網における特別な
実施例を提示しているが、当業者は、この方法を別の種類の移動および固定網、
例えばＡＭＰＳ、ＴＤＭＡ、ＣＤＭＡ、ＴＡＣＳ、ＰＤＣ、ＨＳＣＳＤ、ＧＰＲ
Ｓ、ＥＤＧＥあるいはＵＭＴＳ移動無線網にも、特にＷＡＰ（無線アプリケーシ
ョンプロトコル）機能を有する移動無線網にも適用できることを理解するでしょ
う。さらに、この発明は、別のネットワーク、特にインターネットでも利用する
ことができる。
【図面の簡単な説明】
【図１】 この発明によるシステムのブロック図、
【図２】 この発明によるビットマップのセグメント化の模式図、
【図３】 この発明による複数の利用者が画像を見る場合に目の生理学上必
要とされる必要解像度。
【符号の説明】
１ 送信装置 １０ 画像データ ２ セグメント化モジュール ２０ 個別画像 ２１ 現時点の観察領域 ２２ 現時点の視点ｘ，ｙ（視線方向） ２３ 移動ベクトル ２４ 予測観察領域 ２５ 周辺領域 ３ 第一符号化モジュール ４ 第一伝送チャネル ５ 第二符号化モジュール ６ 課金センター ６０ 利用者データバンク ７ 第二伝送チャネル ８ 通信端末 ８０ 第一受信機（放送受信機） ８１ 第一キャッシュメモリ ８２ 重畳モジュール ８３ 第二受信機（移動無線端末） ８３０ 識別モジュール（ＳＩＭカード） ８４ 第二キャッシュメモリ ８５ 表示装置 ８６ 視線方向測定モジュール（ＥＴＳ） ９ 利用者（観察者）
───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＣＹ， ＤＥ，ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，Ｉ Ｔ，ＬＵ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ ，ＣＦ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＧＷ，ＭＬ， ＭＲ，ＮＥ，ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＧＨ，ＧＭ，Ｋ Ｅ，ＬＳ，ＭＷ，ＳＤ，ＳＬ，ＳＺ，ＴＺ，ＵＧ，ＺＷ )，ＥＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ，ＫＺ，ＭＤ，ＲＵ， ＴＪ，ＴＭ)，ＡＥ，ＡＬ，ＡＭ，ＡＴ，ＡＵ，ＡＺ， ＢＡ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，ＣＨ，ＣＮ，Ｃ Ｒ，ＣＵ，ＣＺ，ＤＥ，ＤＫ，ＤＭ，ＥＥ，ＥＳ，ＦＩ ，ＧＢ，ＧＤ，ＧＥ，ＧＨ，ＧＭ，ＨＲ，ＨＵ，ＩＤ， ＩＬ，ＩＮ，ＩＳ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＲ，Ｋ Ｚ，ＬＣ，ＬＫ，ＬＲ，ＬＳ，ＬＴ，ＬＵ，ＬＶ，ＭＡ ，ＭＤ，ＭＧ，ＭＫ，ＭＮ，ＭＷ，ＭＸ，ＮＯ，ＮＺ， ＰＬ，ＰＴ，ＲＯ，ＲＵ，ＳＤ，ＳＥ，ＳＧ，ＳＩ，Ｓ Ｋ，ＳＬ，ＴＪ，ＴＭ，ＴＲ，ＴＴ，ＴＺ，ＵＡ，ＵＧ ，ＵＳ，ＵＺ，ＶＮ，ＹＵ，ＺＡ，ＺＷ Ｆターム(参考） 5C059 KK02 MA32 MB21 RA06 RB02 SS06 SS11 UA06 UA38 5C064 BA01 BC10 BC16 BC23 BC25 BD02 BD08 BD09

Claims (54)

    【特許請求の範囲】
  1. 【請求項１】 通信端末利用者（９）の現時点の視線方向を特定して、画像
    データを送信装置（１）から少なくとも一つの通信端末（８）に伝送して画像再
    生手段（８５）により表示する、画像データ（２０）を伝送し、表示するための
    方法において、第一画像データ（２５）は低い解像度で第一伝送チャネルにより
    伝送されること、現時点の視線方向（２２）は送信装置（１）の逆方向チャネル
    に送信されること、少なくとも一人の利用者の現時点あるいは将来時点の観察画
    像領域に対応するより高い解像度の第二画像データ（２１，２４）は第二伝送チ
    ャネルにより伝送されること、第一および第二画像データは通信端末において重
    畳されて、同時に再生されることを特徴とする方法。
  2. 【請求項２】 画像データが画像再生手段（８５）により利用者（９）の網
    膜に投射されることを特徴とする前述の請求項１に記載の方法。
  3. 【請求項３】 観察画像領域（２１）が網膜の中心窩に投射されるべき画像
    領域であることを特徴とする前述の請求項２に記載の方法。
  4. 【請求項４】 観察画像領域（２１）の大きさを調節することができること
    を特徴とする前述の請求項１から３までのいずれか一つに記載の方法。
  5. 【請求項５】 観察画像領域（２１）の大きさを第二伝送チャネル（７）の
    帯域幅に適合させることができることを特徴とする前述の請求項１から４までの
    いずれか一つに記載の方法。
  6. 【請求項６】 第一画像データ（２５）が第一伝送チャネル（４）により放
    送形式で伝送されることを特徴とする前述の請求項１から５までのいずれか一つ
    に記載の方法。
  7. 【請求項７】 第一画像データ（２５）がＤＶＢデータとして伝送されるこ
    とを特徴とする前述の請求項６に記載の方法。
  8. 【請求項８】 第一画像データ（２５）が磁気式および／または光学式デー
    タ記録媒体にコピーされ、販売されることを特徴とする前述の請求項１から４ま
    でのいずれか一つに記載の方法。
  9. 【請求項９】 音声データが第一画像データ（２５）と同時に第一伝送チャ
    ネル（４）により伝送され、通信端末（８）により再生されることを特徴とする
    前述の請求項１から８までのいずれか一つに記載の方法。
  10. 【請求項１０】 第二伝送チャネル（７）が双方向型であり、逆方向チャネ
    ルがこの双方向型第二伝送チャネル（７）の逆方向チャネルであることを特徴と
    する前述の請求項１から９までのいずれか一つに記載の方法。
  11. 【請求項１１】 第二伝送チャネル（７）が公衆電話交換網から構成される
    ことを特徴とする前述の請求項１０に記載の方法。
  12. 【請求項１２】 電話網が移動無線網であることを特徴とする前述の請求項
    １１に記載の方法。
  13. 【請求項１３】 第二伝送チャネル（７）がＴＣＰ−ＩＰ網から構成される
    ことを特徴とする前述の請求項１から１０までのいずれか一つに記載の方法。
  14. 【請求項１４】 利用者識別データが逆方向チャネルにより課金センター（
    ６）に送信され、課金センターにより視聴された画像の課金のために利用される
    ことを特徴とする前述の請求項１から１３までのいずれか一つに記載の方法。
  15. 【請求項１５】 少なくとも一人の利用者により要求された追加マルチメデ
    ィアデータが第二伝送チャネル（７）により送信されることを特徴とする前述の
    請求項１から１４までのいずれか一つに記載の方法。
  16. 【請求項１６】 追加マルチメディアデータが表示画像の中の目で選択され
    るハイパーリンクに対応することを特徴とする前述の請求項１５に記載の方法。
  17. 【請求項１７】 視線方向（２２）が予め特定されることを特徴とする前述
    の請求項１から１６までのいずれか一つに記載の方法。
  18. 【請求項１８】 視線方向が視点の動きを考慮して予測されることを特徴と
    する前述の請求項１７に記載の方法。
  19. 【請求項１９】 視線方向が画像データの観察対象物の動きを考慮して予測
    されることを特徴とする請求項１７に記載の方法。
  20. 【請求項２０】 視線方向が画像の注目された領域を考慮して予測されるこ
    とを特徴とする請求項１７に記載の方法。
  21. 【請求項２１】 画像データを受信し、画像再生手段（８５）で表示するこ
    とができ、通信端末利用者（９）の現時点の視線方向（２２）を特定することが
    できる通信端末（８）において、低い解像度の第一画像データ（２５）を第一伝
    送チャネル（４）により受信することができること、利用者により現時点および
    ／または将来時点の観察画像領域に対応するより高い解像度の第二画像データ（
    ２１，２４）を第二伝送チャネル（７）により受信することができること、視線
    方向（２２）を逆方向チャネルにより送信することができること、第一および第
    二画像データを重畳して、同時に再生することができることを特徴とする通信端
    末。
  22. 【請求項２２】 画像データが画像再生手段（８５）により利用者（９）の
    網膜に投射されることを特徴とする前述の請求項２１に記載の通信端末。
  23. 【請求項２３】 画像再生手段（８５）が画像データに対応した画像信号を
    利用者の網膜に投射する仮想網膜表示装置であることを特徴とする前述の請求項
    ２２に記載の通信端末。
  24. 【請求項２４】 画像再生手段（８５）が通信端末（８）の受信機（８０，
    ８３）とは異なるユニットに統合されていることを特徴とする前述の請求項２１
    から２３までのいずれか一つに記載の通信端末。
  25. 【請求項２５】 ユニットが非接触型インタフェースにより近接して接続さ
    れていることを特徴とする前述の請求項２４に記載の通信端末。
  26. 【請求項２６】 現時点の観察画像領域が網膜の中心窩に投射されるべき画
    像領域に対応することを特徴とする前述の請求項２２に記載の通信端末。
  27. 【請求項２７】 現時点の観察画像領域（２１）の広さを調節することがで
    きることを特徴とする前述の請求項２６に記載の通信端末。
  28. 【請求項２８】 通信端末が第一伝送チャネル（４）により放送形式で伝送
    される画像データのための第一受信機（８０）から構成されることを特徴とする
    前述の請求項２１から２７までのいずれか一つに記載の通信端末。
  29. 【請求項２９】 第一受信機（８０）が無線受信機であることを特徴とする
    前述の請求項２８に記載の通信端末。
  30. 【請求項３０】 第一受信機（８０）がＤＶＢ無線受信機であることを特徴
    とする前述の請求項２９に記載の通信端末。
  31. 【請求項３１】 第一受信機がデータ記録媒体の読取機から構成されること
    を特徴とする前述の請求項２８に記載の通信端末。
  32. 【請求項３２】 通信端末が第二伝送チャネル（７）により伝送される画像
    データのための第二受信機（８３）から構成されることを特徴とする前述の請求
    項２１から３１までのいずれか一つに記載の通信端末。
  33. 【請求項３３】 第二受信機（８３）が逆方向チャネル（７）により視線方
    向（２２）を送信することができる送受信機であることを特徴とする前述の請求
    項３２に記載の通信端末。
  34. 【請求項３４】 第二受信機（８３）が移動無線端末であることを特徴とす
    る前述の請求項３３に記載の通信端末。
  35. 【請求項３５】 通信端末が第二伝送チャネル（７）により視線方向（ｘ，
    ｙ）を送信装置（１）にリアルタイムに送信することを特徴とする前述の請求項
    ２１から３４までのいずれか一つに記載の通信端末。
  36. 【請求項３６】 通信端末が第二画像データ（２１，２４）のためのキャッ
    シュメモリ（８４）から構成されることを特徴とする前述の請求項２１から３５
    までのいずれか一つに記載の通信端末。
  37. 【請求項３７】 キャッシュメモリ（８４）が現時点の観察画像領域（２１
    ）より広い領域（２１＋２４）の画像データに対応し、キャッシュメモリから抽
    出される画像データが現時点の視線方向（ｘ，ｙ）に依存することを特徴とする
    前述の請求項３６に記載の通信端末。
  38. 【請求項３８】 通信端末がさらに第一画像データ（２５）のための第一キ
    ャッシュメモリ（８１）を含み、第一および第二キャッシュメモリからデータが
    同期して抽出されることを特徴とする前述の請求項３６から３７までのいずれか
    一つに記載の通信端末。
  39. 【請求項３９】 送信装置が以下の構成要素から構成されることを特徴とす
    る送信装置、 逆方向チャネルにより伝送される少なくとも一人の利用者（９）の視線方向（
    ２２）を含むデータを受信するための受信機、 第一画像データ（２５）を低い解像度で圧縮し、第一伝送チャネル（４）によ
    り放送形式で送信するための第一符号化モジュール（３）、 少なくとも一人の利用者の現時点あるいは将来時点の観察画像領域に対応する
    第二画像データ（２１，２４）をより高い解像度で圧縮し、第二伝送チャネル（
    ７）により伝送するための第二符号化モジュール（５）。
  40. 【請求項４０】 観察画像領域（２１）が網膜の中心窩に投射されるべき画
    像領域であることを特徴とする前述の請求項３９に記載の装置。
  41. 【請求項４１】 観察画像領域（２１）の広さを調節することができること
    を特徴とする前述の請求項４０に記載の装置。
  42. 【請求項４２】 観察画像領域（２１）の広さを第二伝送チャネル（７）の
    帯域幅に適合させることができることを特徴とする前述の請求項４１に記載の装
    置。
  43. 【請求項４３】 第一画像データ（２５）が第一伝送チャネル（４）により
    放送形式で伝送されることを特徴とする前述の請求項３９から４２までのいずれ
    か一つに記載の装置。
  44. 【請求項４４】 音声データが第一画像データ（２５）と同時に第一伝送チ
    ャネル（４）により伝送されることを特徴とする前述の請求項３９から４３まで
    のいずれか一つに記載の装置。
  45. 【請求項４５】 第二伝送チャネル（７）が双方向型であり、逆方向チャネ
    ルがこの第二伝送チャネル（７）の逆方向チャネルであるを特徴とする前述の請
    求項３９から４４までのいずれか一つに記載の装置。
  46. 【請求項４６】 第二伝送チャネル（７）が公衆電話交換網から構成される
    ことを特徴とする前述の請求項４５に記載の装置。
  47. 【請求項４７】 電話網が移動無線網であることを特徴とする前述の請求項
    ４６に記載の装置。
  48. 【請求項４８】 課金センター（６）が画像の視聴に対して利用者（９）に
    課金するために設けられていることを特徴とする前述の請求項３９から４７まで
    のいずれか一つに記載の装置。
  49. 【請求項４９】 装置が第一、第二符号化モジュールのそれぞれに送られる
    べき画像領域（２１，２４，２５）を特定するためにセグメント化モジュール（
    ２）から構成されることを特徴とする前述の請求項３９から４８までのいずれか
    一つに記載の装置。
  50. 【請求項５０】 第二符号化モジュール（５）が現時点あるいは将来時点で
    多くの利用者に同時に見られる少なくとも一つの画像領域に対応する画像データ
    を一度に符号化し、多くの利用者に送信することを特徴とする前述の請求項３９
    から４９までのいずれか一つに記載の装置。
  51. 【請求項５１】 視線方向が予め特定されることを特徴とする前述の請求項
    ３９から５０までのいずれか一つに記載の装置。
  52. 【請求項５２】 視線方向が視点の動きを考慮して予測されることを特徴と
    する前述の請求項３９から５１までのいずれか一つに記載の装置。
  53. 【請求項５３】 視線方向が画像データの観察対象物の動きを考慮して予測
    されることを特徴とする前述の請求項３９から５２までのいずれか一つに記載の
    装置。
  54. 【請求項５４】 視線方向が画像の注目された領域を考慮して予測されるこ
    とを特徴とする前述の請求項３９から５３までのいずれか一つに記載の装置。
JP2001551008A 1999-12-30 1999-12-30 画像データを伝送するための方法 Expired - Lifetime JP4456791B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CH1999/000632 WO2001050754A1 (de) 1999-12-30 1999-12-30 Verfahren für die übermittlung von bilddaten

Publications (2)

Publication Number Publication Date
JP2003519982A true JP2003519982A (ja) 2003-06-24
JP4456791B2 JP4456791B2 (ja) 2010-04-28

Family

ID=4551760

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001551008A Expired - Lifetime JP4456791B2 (ja) 1999-12-30 1999-12-30 画像データを伝送するための方法

Country Status (9)

Country Link
US (1) US7095522B2 (ja)
EP (1) EP1247401B1 (ja)
JP (1) JP4456791B2 (ja)
AT (1) ATE244489T1 (ja)
AU (1) AU1765800A (ja)
DE (1) DE59906217D1 (ja)
ES (1) ES2203222T3 (ja)
IL (2) IL148431A0 (ja)
WO (1) WO2001050754A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005006754A1 (ja) * 2003-07-14 2005-01-20 Fujitsu Limited 送信した低品質ａ／ｖデータに対応する高品質ａ／ｖデータの送信
JPWO2016092698A1 (ja) * 2014-12-12 2017-09-21 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP2018110397A (ja) * 2016-12-30 2018-07-12 アクシス アーベー 方法、およびコンピュータ装置
JP2020519094A (ja) * 2017-04-28 2020-06-25 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． ビデオ再生方法、デバイス、およびシステム

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002065443A1 (en) * 2001-02-15 2002-08-22 Tveye Inc. Method and apparatus for low bandwidth transmission of data utilizing of the human eye anatomy
EP1244311A3 (en) 2001-03-22 2004-10-06 Sony Corporation Picture encoding
JP2002330440A (ja) * 2001-05-01 2002-11-15 Sony Corp 画像伝送方法、画像伝送方法のプログラム、画像伝送方法のプログラムを記録した記録媒体及び画像伝送装置
JP2003108476A (ja) * 2001-09-28 2003-04-11 Fuji Photo Film Co Ltd コンテンツ管理システム、コンテンツ管理方法およびプログラム
US7464176B2 (en) * 2002-06-17 2008-12-09 Microsoft Corporation Multicast system and method for deploying multiple images simultaneously
AU2003260320A1 (en) * 2002-07-31 2004-02-23 Theodor Heutschi Electronic device, in particular a mobile multimedia communications device
EP1584193A1 (en) * 2002-12-20 2005-10-12 Koninklijke Philips Electronics N.V. Method and apparatus for handling layered media data
KR100461542B1 (ko) * 2002-12-26 2004-12-17 한국전자통신연구원 다중 주파수 대역을 이용한 디지탈 방송 송/수신 장치 및그 방법
EP1720357A1 (de) * 2005-05-04 2006-11-08 Swisscom Mobile AG Verfahren und Vorrichtung zur Übermittlung von Videodaten mit Komprimierung basierend auf Blickrichtung nach Augenverfolgungsverfahren
US7876978B2 (en) * 2005-10-13 2011-01-25 Penthera Technologies, Inc. Regions of interest in video frames
JP4670902B2 (ja) * 2008-05-30 2011-04-13 ソニー株式会社 送信装置、送信方法および受信装置
US9897805B2 (en) * 2013-06-07 2018-02-20 Sony Interactive Entertainment Inc. Image rendering responsive to user actions in head mounted display
US10209771B2 (en) 2016-09-30 2019-02-19 Sony Interactive Entertainment Inc. Predictive RF beamforming for head mounted display
US10585472B2 (en) 2011-08-12 2020-03-10 Sony Interactive Entertainment Inc. Wireless head mounted display with differential rendering and sound localization
CN103630915B (zh) * 2012-08-24 2018-08-03 深圳思凯微电子有限公司 一种利用数字调频广播进行导航定位的方法
JP6138453B2 (ja) 2012-10-29 2017-05-31 京セラ株式会社 テレビ電話機能付き機器、プログラムおよびテレビ電話機能付き機器の制御方法
US9265458B2 (en) 2012-12-04 2016-02-23 Sync-Think, Inc. Application of smooth pursuit cognitive testing paradigms to clinical drug development
US20140161199A1 (en) * 2012-12-06 2014-06-12 Xiaomi Inc. Method and apparatus for processing video image
US9380976B2 (en) 2013-03-11 2016-07-05 Sync-Think, Inc. Optical neuroinformatics
US10373592B2 (en) 2016-08-01 2019-08-06 Facebook Technologies, Llc Adaptive parameters in image regions based on eye tracking information
CN106506490B (zh) * 2016-11-03 2019-07-09 深圳智高点知识产权运营有限公司 一种分布式计算控制方法以及分布式计算系统
GB2563832B (en) * 2017-06-23 2021-11-10 Sony Interactive Entertainment Inc Display method and apparatus

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01289388A (ja) * 1988-05-16 1989-11-21 Nec Corp 動画像信号の符号化復号化方式
JPH02100488A (ja) * 1988-10-06 1990-04-12 Fuji Xerox Co Ltd 画像伝送装置
JPH02193641A (ja) * 1989-01-23 1990-07-31 Nippon Telegr & Teleph Corp <Ntt> 注視方向検出方法
JPH03133290A (ja) * 1989-10-19 1991-06-06 Fujitsu Ltd 画像符号化装置
JPH04293375A (ja) * 1991-03-22 1992-10-16 A T R Shichiyoukaku Kiko Kenkyusho:Kk 映像表示システム
JPH0744110A (ja) * 1993-08-03 1995-02-14 Nippon Telegr & Teleph Corp <Ntt> 視線適応型表示装置
JPH07135651A (ja) * 1993-11-10 1995-05-23 Matsushita Electric Ind Co Ltd 映像通信システム
JPH07284095A (ja) * 1994-04-12 1995-10-27 Nippon Telegr & Teleph Corp <Ntt> 視点適応型画像伝送方法および画像伝送装置
JPH08510631A (ja) * 1994-03-18 1996-11-05 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ オーディオ−ビジュアル表示システム
JPH099253A (ja) * 1995-06-19 1997-01-10 Toshiba Corp 画像圧縮通信装置
JPH09163344A (ja) * 1995-12-08 1997-06-20 Nippon Hoso Kyokai <Nhk> デマンドアクセス情報提供システム、およびこれに用いる情報配信装置、中継配信装置、並びに利用者端末装置
JPH09214932A (ja) * 1996-01-30 1997-08-15 Nippon Telegr & Teleph Corp <Ntt> 画像装置及び画像通信システム
JPH1084548A (ja) * 1996-07-17 1998-03-31 Sony Corp 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、伝送方法、並びに記録媒体
JPH10112856A (ja) * 1996-10-04 1998-04-28 Agency Of Ind Science & Technol 画像伝送装置および方法
JPH10294941A (ja) * 1997-04-22 1998-11-04 Canon Inc 画像伝送システム、画像伝送装置、画像送信装置及び画像受信装置
JPH10326071A (ja) * 1997-03-27 1998-12-08 Nippon Telegr & Teleph Corp <Ntt> 注視点高解像度化による計算機ホログラム表示方法並びに装置並びにこの方法を記録した記録媒体
JPH11195065A (ja) * 1998-01-06 1999-07-21 Digital Vision Laboratories:Kk 情報流通システム及び情報供給システム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4513317A (en) * 1982-09-28 1985-04-23 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Retinally stabilized differential resolution television display
US5055927A (en) * 1988-09-13 1991-10-08 Deutsche Thomson-Brandt Gmbh Dual channel video signal transmission system
US5103306A (en) * 1990-03-28 1992-04-07 Transitions Research Corporation Digital image compression employing a resolution gradient
US5326266A (en) * 1992-09-02 1994-07-05 Evans & Sutherland Computer Corporation Area of interest display system with opto/mechanical image combining
US5644324A (en) * 1993-03-03 1997-07-01 Maguire, Jr.; Francis J. Apparatus and method for presenting successive images
FR2731896B1 (fr) * 1995-03-24 1997-08-29 Commissariat Energie Atomique Dispositif de mesure de la position du point de fixation d'un oeil sur une cible, procede d'eclairage de l'oeil et application a l'affichage d'images dont les images changent en fonction des mouvements de l'oeil
US6078349A (en) * 1995-06-07 2000-06-20 Compaq Computer Corporation Process and system for increasing the display resolution of a point-to-point video transmission relative to the actual amount of video data sent
WO1997030551A1 (en) * 1996-02-14 1997-08-21 Olivr Corporation Ltd. Method and systems for progressive asynchronous transmission of multimedia data
US5898423A (en) * 1996-06-25 1999-04-27 Sun Microsystems, Inc. Method and apparatus for eyetrack-driven captioning
US6252989B1 (en) * 1997-01-07 2001-06-26 Board Of The Regents, The University Of Texas System Foveated image coding system and method for image bandwidth reduction
US6792245B1 (en) * 1998-04-10 2004-09-14 Sony Computer Entertainment Inc. Information reproducing apparatus and broadcasting system
US6091378A (en) * 1998-06-17 2000-07-18 Eye Control Technologies, Inc. Video processing methods and apparatus for gaze point tracking
US6312129B1 (en) * 1998-07-21 2001-11-06 L-3 Communications Corp. Head mounted projector system
US5980044A (en) * 1998-09-16 1999-11-09 Evans & Sutherland Computer Corp. Area of interest display system with image combining using error dithering
US6454411B1 (en) * 1998-11-17 2002-09-24 Entertainment Design Workshop Llc Method and apparatus for direct projection of an image onto a human retina

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01289388A (ja) * 1988-05-16 1989-11-21 Nec Corp 動画像信号の符号化復号化方式
JPH02100488A (ja) * 1988-10-06 1990-04-12 Fuji Xerox Co Ltd 画像伝送装置
JPH02193641A (ja) * 1989-01-23 1990-07-31 Nippon Telegr & Teleph Corp <Ntt> 注視方向検出方法
JPH03133290A (ja) * 1989-10-19 1991-06-06 Fujitsu Ltd 画像符号化装置
JPH04293375A (ja) * 1991-03-22 1992-10-16 A T R Shichiyoukaku Kiko Kenkyusho:Kk 映像表示システム
JPH0744110A (ja) * 1993-08-03 1995-02-14 Nippon Telegr & Teleph Corp <Ntt> 視線適応型表示装置
JPH07135651A (ja) * 1993-11-10 1995-05-23 Matsushita Electric Ind Co Ltd 映像通信システム
JPH08510631A (ja) * 1994-03-18 1996-11-05 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ オーディオ−ビジュアル表示システム
JPH07284095A (ja) * 1994-04-12 1995-10-27 Nippon Telegr & Teleph Corp <Ntt> 視点適応型画像伝送方法および画像伝送装置
JPH099253A (ja) * 1995-06-19 1997-01-10 Toshiba Corp 画像圧縮通信装置
JPH09163344A (ja) * 1995-12-08 1997-06-20 Nippon Hoso Kyokai <Nhk> デマンドアクセス情報提供システム、およびこれに用いる情報配信装置、中継配信装置、並びに利用者端末装置
JPH09214932A (ja) * 1996-01-30 1997-08-15 Nippon Telegr & Teleph Corp <Ntt> 画像装置及び画像通信システム
JPH1084548A (ja) * 1996-07-17 1998-03-31 Sony Corp 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、伝送方法、並びに記録媒体
JPH10112856A (ja) * 1996-10-04 1998-04-28 Agency Of Ind Science & Technol 画像伝送装置および方法
JPH10326071A (ja) * 1997-03-27 1998-12-08 Nippon Telegr & Teleph Corp <Ntt> 注視点高解像度化による計算機ホログラム表示方法並びに装置並びにこの方法を記録した記録媒体
JPH10294941A (ja) * 1997-04-22 1998-11-04 Canon Inc 画像伝送システム、画像伝送装置、画像送信装置及び画像受信装置
JPH11195065A (ja) * 1998-01-06 1999-07-21 Digital Vision Laboratories:Kk 情報流通システム及び情報供給システム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005006754A1 (ja) * 2003-07-14 2005-01-20 Fujitsu Limited 送信した低品質ａ／ｖデータに対応する高品質ａ／ｖデータの送信
JPWO2016092698A1 (ja) * 2014-12-12 2017-09-21 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP2018110397A (ja) * 2016-12-30 2018-07-12 アクシス アーベー 方法、およびコンピュータ装置
JP2020519094A (ja) * 2017-04-28 2020-06-25 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． ビデオ再生方法、デバイス、およびシステム
US11159848B2 (en) 2017-04-28 2021-10-26 Huawei Technologies Co., Ltd. Video playing method, device, and system
JP7110234B2 (ja) 2017-04-28 2022-08-01 華為技術有限公司 ビデオ再生方法、デバイス、およびシステム

Also Published As

Publication number Publication date
IL148431A0 (en) 2002-09-12
IL148431A (en) 2007-06-17
DE59906217D1 (de) 2003-08-07
AU1765800A (en) 2001-07-16
EP1247401A1 (de) 2002-10-09
ES2203222T3 (es) 2004-04-01
JP4456791B2 (ja) 2010-04-28
US20020101612A1 (en) 2002-08-01
WO2001050754A1 (de) 2001-07-12
US7095522B2 (en) 2006-08-22
ATE244489T1 (de) 2003-07-15
EP1247401B1 (de) 2003-07-02

Similar Documents

Publication Publication Date Title
JP4456791B2 (ja) 画像データを伝送するための方法
CN1157951C (zh) 传输图像数据的方法及适用于此的通信终端和发送装置
KR100881526B1 (ko) 데이터 전송 방법 및 그 장치, 및 데이터 전송 시스템
US6959450B1 (en) Transmission and display of video data
AU694416B2 (en) Communication system
JP4602632B2 (ja) ビデオ会議の方法とシステム
JP3263278B2 (ja) 画像圧縮通信装置
WO2009051857A2 (en) System and method for video coding using variable compression and object motion tracking
JP2003502940A (ja) ビデオ情報の観察行動に関するデータを収集し、これらのデータを中央のデータ処理設備に転送するための方法と装置
JP2002501342A (ja) テレビ放送付加価値通信網および携帯用再生装置
KR20180052255A (ko) 스트리밍 컨텐츠 제공 방법, 및 이를 위한 장치
JP2004320507A (ja) 映像信号処理装置、映像信号処理方法、撮像装置、再生装置、受信装置
CN113141541B (zh) 码率切换方法、装置、设备及存储介质
JP2002051315A (ja) データ伝送方法およびその装置、並びにデータ伝送システム
JP2003224838A (ja) 視点自由形画像表示装置及び方法、課金装置及び課金方法、記憶媒体、並びにコンピュータ・プログラム
JP2002082861A (ja) 映像配信方法、映像配信装置および画像配信システム
EP3494691B1 (en) Method for temporal inter-view prediction and technical equipment for the same
CN111818311A (zh) 一种可变视域的超高清视频监视器
KR20180013243A (ko) 스트리밍 컨텐츠 제공 방법, 스트리밍 컨텐츠 저장 방법 및 이를 위한 장치
JP2003299056A (ja) 映像処理装置、映像配信システム、映像処理方法、プログラム及び記録媒体
KR20180020027A (ko) 컨텐츠 부가 정보 제공 방법 및 이를 위한 장치
JP2003046463A (ja) 映像配信方法
JP2003235058A (ja) 視点自由形画像表示装置及び方法、記憶媒体、コンピュータ・プログラム、放送システム、並びに、付加情報管理装置及び方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050412

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20060411

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060627

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20060807

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20060929

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091009

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100208

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4456791

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140212

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term