JPH099230A - 解像度制御装置 - Google Patents
解像度制御装置Info
- Publication number
- JPH099230A JPH099230A JP7148898A JP14889895A JPH099230A JP H099230 A JPH099230 A JP H099230A JP 7148898 A JP7148898 A JP 7148898A JP 14889895 A JP14889895 A JP 14889895A JP H099230 A JPH099230 A JP H099230A
- Authority
- JP
- Japan
- Prior art keywords
- resolution
- point
- information
- video information
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
の映像情報を同時に表示する場合であっても、リアルタ
イムの表示と解像度の両方を満足させることができるよ
うにする。 【構成】 解像度変更入力部16と解像度決定部17
は、自地点の会議参加者の操作に従って、他地点から送
られてくる映像情報を解像度を各他地点ごとに指定可能
である。解像度変更部14は、他地点から送られてきた
映像情報に、指定された解像度を設定する。
Description
システムに設けられる解像度制御装置に関する。
織の分散化に伴い、地理的に離れた場所にいる人々がコ
ンピュータの資源を利用して会議や共同作業を行なう、
いわゆるCSCW(Computer Suported Cooperative Wo
rk)の必要性が高まっている。
として、下記の文献に記載されるように、テレビ会議シ
ステムがある。
テレビジョン学会誌 Vol 45,No.8,pp.926-930(1991) ここで、このテレビ会議システムは、会議参加者の映像
情報や音声情報をネットワークを通じて相互に伝送する
ことにより、複数の会議参加者が互いに離れた状態で会
議を進めるシステムである。
年、2つの地点だけでなく、3つ以上の地点を接続でき
るものも開発されている。
議システムにおいては、会議参加者の映像情報を表示す
る方法として、従来、全員の映像情報を一人または数人
分ずつ切り替えて表示する方法と、全員の映像情報を同
時に表示する方法が用いられていた。
または数人分づつ切り替えて表示する方法の場合、表示
していない人の表情などを見ることはできないという問
題があった。この問題は、全員の映像情報を同時に表示
する方法によれば解決することができる。
示する方法の場合、複数の地点から送られてきた符号化
された映像情報を同時に復号しなければならないため、
端末装置の処理負荷が大きくなるという問題があった。
で表示することができないという問題があった。また、
リアルタイムで表示するには、受信映像情報をコマ落し
で表示しなければならないため、要求される解像度を満
たすことができないという問題あった。
いては、全員の映像情報をリアルタイムで表示すること
ができ、かつ、解像度の要求も満たすことができる技術
が望まれる。
に、請求項1〜4に係る発明は、会議においては、特定
の人に意見を主張する場合は、その人を見つめながら話
し、全員に意見を主張する場合は、一人ずつ順番に見つ
めたり、全員をぼんやり眺めながら話すことが多い点に
着目し、テレビ会議システムのように、各地点ごとに他
の複数の地点から送られてきた映像情報を同時に表示す
る映像通信システムにおいて、自地点の利用者の操作に
従って、受信映像情報の解像度を各他地点ごとに指定す
る手段と、指定された解像度を対応する受信映像情報に
設定する手段とを各地点ごとに設けるようにしたもので
ある。
解像度指定手段と解像度設定手段を受信側に設けるよう
にしたものである。
度指定手段は受信側に設け、解像度設定手段は送信側に
設けるようにしたものである。
明のように、解像度設定手段を受信側に設ける構成にお
いて、指定解像度を自地点で指定された解像度と他地点
で指定された解像度とに基づいて決定するようにしたも
のである。
明のように、解像度設定手段を送信側に設ける構成にお
いて、指定解像度を自地点で指定された解像度と他地点
で指定された解像度とに基づいて決定するようにしたも
のである。
ドシステムなどのように、1つの受信点で複数の送信点
から送られてきた複数の映像情報を同時に表示する映像
通信システムにおいて、解像度指定手段を受信点に設
け、解像度設定手段を受信点または送信点に設けるよう
にしたものである。
の解像度の指定とこの受信映像情報に対する解像度の設
定は、いずれも映像情報の受信側で行われる。この場
合、受信映像情報の解像度は、各他地点ごとに指定可能
である。したがって、各他地点ごとに異なる解像度を指
定することができる。
においては、意見を主張したい相手の解像度を高く、そ
の他の人の解像度を低くすることが可能である。その結
果、端末装置の処理負荷を減少させることができる。こ
れにより、全会議参加者の映像情報を同時に表示する場
合であっても、リアルタイムの表示と解像度の両方を満
足させることができる。
情報の解像度の指定は受信側で行われ、受信映像情報に
対する解像度の設定は送信側で行われる。すなわち、受
信側で指定された解像度を送信側で送信映像情報に設定
することにより、受信側の受信映像情報の解像度が指定
された解像度に設定される。
効果を得ることができるとともに、表示されない映像情
報を送信する無駄を省くことができる。
地点で、受信映像情報の解像度を指定する場合、この解
像度は、自地点の解像度指定内容と他地点の解像度指定
内容とに基づいて決定される。
合、他地点の解像度の指定内容を反映させることができ
る。
情報の解像度の指定は、受信点で行われ、指定された解
像度の設定は、受信点または送信点で行われる。この場
合、受信映像情報の解像度は、各送信点ごとに指定可能
である。したがって、例えば、ビデオオンデマンドシス
テムにおいて、各送信点から送られてきた映像情報を異
なる解像度で同時に表示することができる。
例を詳細に説明する。なお、以下の説明では、この発明
をテレビ会議システムに適用した場合を代表として説明
する。
実施例を説明する。
ブロック図である。
点に、解像度指定機能と解像度設定機能を設けるように
したものである。
議参加者の操作に従って、他地点の会議参加者の受信映
像情報の解像度を各他地点ごとに指定する機能をいう。
解像度設定機能とは、指定された解像度を対応する受信
映像情報に設定する機能をいう。
いずれも、映像情報の受信側に設けられる。
置の構成を示すものである。但し、図には、端末装置に
おいて、映像情報を送受信する部分(破線で囲む部分)
を中心に示す。
11と、自映像送信部12と、相手映像受信部13と、
解像度変更部14と、相手映像表示部15と、解像度変
更入力部16と、解像度決定部17を有する。
定部17は、この発明の特徴とする解像度指定手段をな
す。また、解像度変更部14は、この発明の特徴とする
解像度設定手段をなす。
メラから、このカメラにより撮影された自地点の会議参
加者の映像情報を受け取り、自映像送信部12に供給す
る機能を有する。この場合、この自映像入力部11は、
必要に応じて、受け取った映像情報にアナログ/ディジ
タル変換処理などを施して自映像送信部12に供給す
る。
を符号化して他地点の端末装置に送信する機能を有す
る。この場合、この自映像送信部12は、映像情報に所
定のヘッダ情報を付加して送信する。
報の送信先や送信元を示す情報、映像情報の符号化の種
類を示す情報、映像情報のデータ量を示す情報などがあ
る。すなわち、他地点において、映像情報を受信して復
号するのに必要な情報がある。
方式を用いることができる。例えば、カラー静止画像の
国際標準符号化方式(JPEG:Joint Photographic C
oding Experts Group )などで規定されているフレーム
内符号化方式、蓄積用動画符号化方式(MPEG:Movi
ng Picture Expert Group )やCCITT勧告H.26
1などで規定されているフレーム間符号化を用いること
ができる。また、JPEGで規定されている階層符号化
方式などを用いることができる。
てきた他地点の会議参加者の映像情報を受信し、解像度
変更部14に供給する機能を有する。この場合、この相
手映像受信部13は、ヘッダ情報を解析し、この解析結
果を必要に応じて解像度変更部14に供給する。
きた映像情報の解像度を解像度決定部20で決定された
解像度に変更するとともに、この映像情報を復号する機
能を有する。この場合、受信映像情報の解像度は、後述
するように、各他地点ごとに変更される。
で復号された複数の他地点の会議参加者の映像情報を同
時にディスプレイに表示する機能を有する。この表示
は、例えば、画面分割により行われる。なお、この場
合、自地点の会議参加者の映像情報も図示しない自映像
表示部により、他地点の会議参加者の映像情報と一緒に
分割表示される。
加者の希望に従って、会議参加者の表示画面に解像度操
作ウィンドウを表示する機能を有する。ここで、解像度
操作ウィンドウとは、自地点の会議参加者が他地点から
送られてきた映像情報の解像度を指定するための操作を
行うウィンドウである。
会議参加者が1つの会議室に集まっているような構図を
有する。この場合、各会議参加者の識別子は、例えば、
各会議参加者を象徴する図柄、すなわち、アイコンによ
って表される。
会議参加者の操作に従って、解像度操作ウィンドウに表
示された各会議参加者のアイコンの表示位置を変更する
機能と、自地点の会議参加者の操作に従って、そのアイ
コンの視線方向を変更する機能と、表示位置の変更情報
及び視線方向の変更情報を解像度変更情報として解像度
決定部17に供給する機能を有する。
と、アイコンの表示位置の変更操作と、視線方向の変更
操作は、例えば、マウスを使って行われる。
6から供給される解像度変更情報に基づいて、各他地点
ごとに、この他地点から送られてくる映像情報の解像度
を決定する機能を有する。
る。
に、A,B,C,Dの4つの地点を通信網で接続して、
テレビ会議を行う場合を代表として説明する。この場
合、自地点は、例えば、地点Dであるとする。
自地点Dの会議参加者の映像情報は、自映像入力部11
に供給され、必要に応じてアナログ/ディジタル変換処
理などの処理を受けた後、自映像送信部12に供給され
る。自映像送信部12に供給された映像情報は、符号化
された後、他地点A,B,Cの端末装置に送信される。
この場合、この映像情報には、その送信元等を示すヘッ
ダ情報が付加される。
られてきた映像情報は、相手映像受信部13で受信され
る。相手映像受信部13で受信された映像情報は、解像
度変更部14に供給される。この場合、相手映像受信部
13は、受信映像に付加されたヘッダ情報を解析し、こ
の解析結果を必要に応じて解像度変更部14に供給す
る。
は、解像度を解像度決定部17により決定された解像度
に変更されるとともに、復号される。復号された映像情
報は、相手映像表示部15に供給され、ディスプレイの
画面上に表示される。
法の一例を示す図である。
行2列の4つの表示領域22a,22b,22c,22
dに分割し、各表示領域22a,22b,22c,22
dに対応する地点A,B,C,Dの映像情報を表示する
ようにしたものである。この場合、自地点Dの映像情報
は、上記のごとく、図示しない自映像表示部により表示
される。以上が、映像情報の送受信動作である。
を説明する。
求に従って、解像度変更入力部16により、会議参加者
の表示画面21の一部に、解像度操作ウィンドウが表示
される。
示す。
く、すべての地点A,B,C,Dの会議参加者が1つの
会議室に集まったような構図を有する。図には、各会議
参加者のアイコンが自分の似顔絵で表される場合を示
す。
地点Dの会議参加者によって、マウスを使って変更され
る。この変更処理は、解像度変更入力部16によって行
われる。また、自地点Dの会議参加者のアイコンの視線
方向は、自地点Dの会議参加者によって、マウスを使っ
て変更される。この変更処理も、解像度変更入力部16
により行われる。
い会議参加者のアイコンをマウスでクリックすることに
より、そのアイコンの方向に向けられる。図には、他地
点Bのアイコンをクリックした場合を示す。この場合、
自地点Dのアイコンの視線は、他地点Bのアイコンの方
向に向けられる。
の変更情報は、解像度決定部17に供給される。解像度
決定部17は、これらの情報に基づいて、他地点A,
B,Cの会議参加者の映像情報の解像度を決定する。
者のアイコンと他地点A,B,Cの会議参加者のアイコ
ンとの距離及び自地点Dを中心とする他地点A,B,C
の視線角度に基づいて行われる。
更情報を受けると、この情報に含まれる表示位置変更情
報に基づいて、自地点Dの会議参加者のアイコンと他地
点A,B,Cの会議参加者のアイコンとの距離xa,x
b,xcを算出する。図5に、この距離xa,xb,x
cを示す。
離xa,xb,xcに基づいて、他地点A,B,Cから
送られてくる映像情報の解像度を決定する。この場合、
解像度は、距離xa,xb,xcが近いほど上げられ、
遠いほど下げられる。
解像度を制御する場合は、この制御方法として、映像情
報の大きさを制御する方法を用いることができる。この
ような構成によれば、実際の感覚とよく合った映像情報
を得ることができる。
xb,xcがこの閾値より小さい場合は、映像情報を表
示しないようにしてもよい。このような構成によれば、
自分から離れたところにいる会議参加者の映像情報が表
示されないので、実際の会議に近い感覚を得ることがで
きる。
報を受けると、この情報に含まれる表示位置変更情報と
視線方向変更情報とに基づいて、自地点Dを中心とする
他地点A,B,Cの視線角度を算出する。
に、自地点Dのアイコンの視線方向に対して自地点Dア
イコンと他地点A,B,Cアイコンを結ぶ線がなす角度
θa,θb,θcをいう。図6の例の場合、自地点Dの
アイコンは、他地点Bのアイコンを見ているので、視線
角度θbは0である。したがって、図6には、この視線
角度θbを示さない。
a,θb,θcに基づいて、解像度を決定する。この場
合、解像度は、視線角度が小さいほど上げられ、大きい
ほど下げられる。
a,θb,θcがこの閾値より大きい場合は、映像情報
を表示しないようにしてもよい。このような構成によれ
ば、自分の後ろにいる会議参加者を表示しないようにす
ることができるので、実際の会議に近い感覚を得ること
ができる。
B,Cの解像度を示す情報は、解像度変更部14に供給
される。解像度変更部14は、この解像度情報を受け取
ると、この解像度情報に基づいて、受信映像情報の解像
度を変更する。
A,B,Cごとに、受信映像情報の解像度とこの受信映
像情報に対して解像度決定部20で決定された解像度を
比較し、両者が一致する場合は、受信映像情報の解像度
を変更しない。これに対し、一致しない場合は、受信映
像情報に解像度決定部20で決定された解像度を設定す
る。以上がこの発明の特徴とする解像度制御動作であ
る。
る。
像情報の大きさを変更する方法と、コマ数を変更する方
法と、画質を変更する方法がある。
像度を高くしたい相手の映像情報はそのまま予め定めた
表示領域(図3参照)に表示し、解像度を低くしたい相
手の映像情報は、図7に示すように、画素を規則的に間
引くことにより、大きさを小さくして予め定めた表示領
域に表示すればよい。
像度を高くしたい相手の映像情報は、受信した全フレー
ムの情報をそのまま復号して表示し、解像度を低くした
い相手の映像情報は、図8に示すように、規則的にコマ
を落してから復号して表示すればよい。
PEGのように、他のフレームに依存せず、そのフレー
ムだけで復号することができるフレーム内符号化方式を
使用する場合は、どのフレームをコマ落とししてもよ
い。
アルサービス用ビデオ符号化方式(CCITT勧告 H.2
61)のように、他のフレームの復号結果を利用してその
フレームを復号するフレーム間符号化方式を使用する場
合には、受信映像を全フレーム分復号してから、表示す
る前にコマ落としするか、あるいは、図9に示すよう
に、送信側で符号化する際に、通常より短い間隔で定期
的にフレーム内符号化を行い、受信側では、フレーム内
符号化されたフレームだけを受信して復号し、表示する
ようにすればよい。
グレッシブ符号化やハイアラーキカル符号化のように、
1フレームの映像情報をまず低解像度で符号化し、順
に、高解像度の映像情報を符号化する階層符号化を用い
る。そして、解像度を高くしたい相手の映像情報は、全
解像度のデータを受信してから復号して表示し、解像度
を低くしたい相手の映像情報は、低解像度のデータだけ
を受信してから復号して表示する。以上が解像度の変更
方法の一例である。
ば、次のような効果が得られる。
Dの会議参加者の操作に従って、受信映像情報の解像度
を各他地点A,B,Cごとに指定可能な手段(解像度変
更入力部16、解像度決定部17)と、この手段により
指定された解像度を受信映像情報に設定する手段(解像
度変更部14)とを設けるようにしたので、受信映像情
報の解像度を各他地点A,B,Cごとに制御することが
できる。
参加者の映像情報を同時に表示する場合であっても、リ
アルタイムの表示と解像度の両方を満足させることがで
きる。
者は、意見を主張する相手を特に見つめながら話し、そ
の人の反応などを伺う。これに対し、意見の主張の対象
でない人に対しては、たまに、視線を送り、反応をみる
ことで、自分の主張の正当性を確認する程度である。
全体をぼんやり見渡しながら発言することもあるが、特
に自分の意見を強く主張したい場合などは一人ひとりの
顔を順に見つめながら発言することが多い。
手の反応や表情まで詳しく見ているのは、同時に、1か
2人であり、ほかの相手に関しては視線の隅でぼんやり
ととらえている程度である。
も全員の顔を同時にはっきりと表示する必要がないこと
を意味する。すなわち、注目したい人の表情ははっきり
と表示し、その他の人の表情は、ぼんやり表示してもよ
いことを意味する。また、全体を眺める時は、全員の顔
をぼんやり表示すればよいことを意味する。
情報の解像度を各他地点A,B,Cごとに制御可能なよ
うに構成したものである。
解像度を高くし、そのほかの人の解像度を低くすること
ができるので、従来に比べ、受信映像情報の処理量を少
なくすることができる。これにより、解像度の要求を満
たしながら、リアルタイム処理を実現することができ
る。
に全会議参加者が集まったような構図を持つ操作ウィン
ドウ25を画面21上に表示し、この操作ウィンドウ2
5に表示されたアイコンの表示位置や視線方向をマウス
で変更することにより、解像度を指定することができる
ようにしたので、解像度を指定するための操作を簡単に
することができる。
Dの会議参加者のアイコンと他地点A、B、Cの会議参
加者のアイコンとの距離及び自地点Dのアイコンを中心
とする他地点A,B,Cのアイコンの視線角度に基づい
て、解像度を決定するようにしたので、自地点Dの会議
参加者のアイコンを注目したい人のアイコンに近付けた
り、その視線を注目したい人のアイコンに向けるだけ
で、この人の解像度を上げ、他の人の解像度を下げるこ
とができる。これにより、全体の処理負荷を増やすこと
なく、所望の映像情報の解像度を上げることができる。
Dの会議参加者のアイコンと他地点A、B、Cの会議参
加者のアイコンとの距離に基づいて、解像度を決定する
ようにしたので、実際の会議と同じような感覚の映像情
報を得ることができる。この場合、特に、遠い人ほど映
像情報を小さくしたり、画質を下げたりすると、実際の
会議に極めて近い感覚の映像情報を得ることができる。
Dのアイコンを中心とする他地点A,B,Cのアイコン
の視線角度に基づいて、解像度を決定するようにしたの
で、実際の会議と同じような感覚の映像情報を得ること
ができる。この場合、特に、横方向の人ほど画質を下げ
たり、コマ数を減らしたりすると、実際の会議に極めて
近い感覚の映像情報を得ることができる。
実施例を説明する。
側で、指定された解像度を受信映像情報に設定する場合
を説明した。これに対し、この実施例では、映像情報の
送信側で、送信映像情報の解像度を指定された解像度に
設定することにより、受信映像情報の解像度を指定され
た解像度に設定するようにしたものである。
ク図である。
31と、解像度変更部32と、自映像送信部33と、相
手映像受信部34と、相手映像表示部35と、解像度変
更入力部36と、解像度決定部37と、解像度要求送信
部38と、解像度要求受信部39を有する。
定部37は、この発明の特徴とする解像度指定手段をな
し、解像度要送信部38は、解像度送信手段をなし、解
像度要求受信部39は、解像度受信手段をなす。
11とほぼ同じ機能を有する。解像度変更部32は、復
号機能の代りに、符号化機能を有する点を除けば、図1
の解像度変更部14とほぼ同じ機能を有する。自映像送
信部33は、符号化機能を有しない点を除けば、図1の
自映像送信部12とほぼ同じ機能を有する。
像受信部13とほぼ同じ機能を有する。相手映像表示部
35は、受信映像情報の復号機能を有する点を除けば、
図1の相手映像表示部15とほぼ同じ機能を有する。
度変更入力部16とほぼ同じ機能を有する。解像度決定
部37は、決定した解像度を示す情報を解像度要求送信
部38に供給する点を除けば、図1に示す解像度決定部
37とほぼ同じ機能を有する。
7で決定された解像度を示す情報を解像度要求情報とし
て、他地点の端末装置に送信する機能を有する。この場
合、この解像度要求送信部38は、解像度要求情報に所
定のヘッダ情報を付加する。このヘッダ情報としては、
その送信先や送信元を示す情報、データ量を示す情報な
どがある。
れてきた自地点の送信映像情報に対する解像度要求情報
を受信し、解像度変更部32に供給する機能を有する。
この場合、この解像度要求受信部39は、ヘッダ情報に
含まれる送信元情報などを解析し、この解析結果を必要
に応じて、解像度変更部32に供給する。
る。なお、以下の説明でも、図2に示すような4つの地
点A,B,C,Dを通信網で接続して、テレビ会議を行
う場合を代表として説明する。
自地点Dの会議参加者の映像情報は、自映像入力部11
を介して解像度変更部32に供給される。解像度変更部
32に供給された映像情報は、解像度を他地点A,B,
Cから送られてきた解像度要求情報によって示される解
像度に設定されるとともに、符号化される。
像度要求情報によって示される解像度を持つ映像情報
と、他地点Bから送られてきた解像度要求情報によって
示される解像度を持つ映像情報と、他地点Cから送られ
てきた解像度要求情報によって示される解像度を持つ映
像情報が得られる。
れ、送信元などを示すヘッダ情報を付加された後、他地
点A,B,Cの端末装置に送信される。
られてきた映像情報は、相手映像受信部34で受信され
た後、相手映像表示部35に供給される。相手映像表示
部35に供給された映像情報は、復号された後、画面上
の対応する表示領域に表示される。以上が、映像情報の
送受信動作である。
を説明する。
れてきた映像情報の解像度は、先の実施例と同じように
して、解像度変更入力部36と解像度決定部37により
決定される。
求送信部38に供給され、必要に応じて、送信元情報な
どのヘッダ情報を付加された後、解像度要求情報として
他地点A,B,Cの端末装置に送られる。
自地点Dの送信映像情報に対する解像度要求情報は、解
像度要求受信部39で受信される。解像度要求受信部3
9で受信される解像度要求情報は、解像度変更部32に
供給される。この場合、ヘッダ情報の解析結果も必要に
応じて、解像度変更部32に供給される。
ら供給される映像情報の解像度と解像度要求受信部39
から供給される解像度要求情報によって示される解像度
を比較し、両者が一致する場合は、自映像入力部31か
ら供給される映像情報の解像度を変更しない。これに対
し、両者が異なる場合は、自映像入力部31から供給さ
れる映像情報の解像度を解像度要求情報で示される解像
度に変更する。以上が、解像度の制御動作である。
としては、映像情報の画質を変更する方法と、大きさを
変更する方法と、コマ数を変更する方法が考えられる。
像情報の符号化時に、量子化のステップサイズや量子化
のテーブルなどを変更する方法が考えられる。
ータの量子化が行なわれる。この場合、量子化のステッ
プサイズを粗くすると、映像情報の細やかな変化が同じ
値に量子化されてしまうので、符号化効率は向上するが
映像情報の画質が低下する。一方、量子化のステップサ
イズを細かくすると、画質が向上する。そこで、各他地
点A,B,Cの端末装置から送られてきた解像度要求情
報に従って量子化ステップサイズを変更することによ
り、送信映像情報に各他地点A,B,Cから要求された
解像度を設定することができる。
では、映像情報を符号化する前に、各他地点A,B,C
から送られてきた解像度要求情報に基づいて、映像情報
の大きさやコマ数が変更される。そして、この変更によ
って低解像度になった映像情報が符号化されて各他地点
A,B,Cの端末装置に送信される。以上が解像度の制
御方法である。
も、先の実施例と同様の効果を得ることができるととも
に、さらに、次のような効果を得ることができる。
の送信側に解像度の設定機能を設けるようにしたので、
映像情報の受信側で指定された解像度が低解像度である
場合は、全データを送信する必要がない。これにより、
実際には表示されないデータを送信する無駄を省くこと
ができる。
変更情報のみに基づいて、自地点の受信映像情報の解像
度を設定する場合を説明した。これに対し、この実施例
は、自地点の解像度変更情報と他地点の解像度変更情報
に基づいて、自地点の受信映像情報の解像度を設定する
ようにしたものである。
ク図である。
置と同様に、映像情報の受信側で解像度を設定する構成
において、自地点の解像度変更情報と他地点の解像度変
更情報に基づいて、自地点の受信映像情報の解像度の設
定するようにしたものである。したがって、図11にお
いて、先の図1とほぼ同じ機能を果たす部分には、同一
符号を付して詳細な説明を省略する。
映像出力部12と、相手映像受信部13と、解像度変更
部14と、相手映像表示部15は、図1に示すものとほ
ぼ同じ機能を有する。
表示機能と、表示位置変更機能と、視線方向変更機能を
有する点では、図1に示す解像度変更入力部16と同じ
である。
が、全会議参加者のアイコンの表示位置を変更可能なよ
うに構成されているのに対し、この実施例の解像度変更
入力部41は、自地点の会議参加者のアイコンの表示位
置のみ変更可能なように構成されている点である。
像度変更情報を解像度決定部17にのみ供給するもので
あったのに対し、この実施例の解像度変更入力部41
は、解像度変更送信部42にも供給するようになってい
る点である。但し、この場合、解像度変更送信部42に
は、解像度変更情報として、表示位置変更情報と視線方
向変更情報のうち、表示位置変更情報のみが供給され
る。
部41から供給される解像度変更情報(表示位置変更情
報のみ)を他地点の端末装置の送信する機能を有する。
この場合、この解像度変更送信部42は、必要に応じ
て、解像度変更情報の送信元や送信先を示す情報、デー
タ量を示す情報をヘッダ情報として解像度変更情報に付
加する。
れてきた解像度変更情報を受信し、解像度決定部44に
供給する機能を有する。この場合、解像度変更受信部4
3は、受信情報に含まれるヘッダ情報を解析し、この解
析結果を必要に応じて、解像度決定部44に供給する。
した解像度変更情報に基づいて、操作ウィンドウ上で、
他地点の会議参加者のアイコンの表示位置を変更する機
能を有する。
1と解像度変更受信部43とから供給される解像度変更
情報に基づいて、他地点から送られてきた映像情報の解
像度を各他地点ごとに決定し、解像度変更部14に供給
する機能を有する。
る。
は、第1の実施例における映像情報の送受信動作と同じ
である。したがって、以下の説明では、受信映像情報の
解像度の制御動作を中心に、この実施例の動作を説明す
る。なお、以下の説明でも、図2に示すようなテレビ会
議システムを例に動作を説明する。
入力部41を介して解像度決定部44に供給されるとと
もに、解像度変更送信部42に供給される。この場合、
解像度決定部44には、解像度変更情報として、表示位
置変更情報と視線方向変更情報が供給される。これに対
し、解像度変更送信部42には、表示位置変更情報のみ
が供給される。
は、操作ウィンドウ25に表示された自地点の会議参加
者のアイコンの表示位置を解像度変更情報の中の表示位
置変更情報で示される位置に変更する。また、自地点の
会議参加者のアイコンの視線方向を視線方向変更情報で
示される方向に変更する。
変更情報は、他地点A,B,Cの端末装置に送信され
る。これにより、他地点A,B,Cには、自地点Dの会
議参加者のアイコンの表示位置を示す情報が送信され
る。
られてきた解像度変更情報は、解像度変更受信部43に
より受信される。この解像度変更情報は、他地点A,
B,Cで設定された他地点A,B,Cの会議参加者のア
イコンの表示位置を示す。
変更情報は、解像度決定部44に供給される。このと
き、解像度決定部44には、必要に応じて、ヘッダ情報
の解析結果も供給される。
作ウィンドウに表示された他地点A,B,Cの会議参加
者のアイコンの表示位置を、受信した解像度変更情報で
示される位置に変更する。これにより、自地点Dの会議
参加者は、他地点A,B,Cの会議参加者による他地点
A,B,Cの会議参加者のアイコンの表示位置の変更操
作を知ることができる。
情報は、それぞれ自分以外のすべての地点に送信され
る。したがって、各地点A,B,C,Dの会議参加者
は、会議参加者のアイコンの表示位置が同じ操作ウィン
ドウ25を共有することができる。
1と解像度変更受信部43から供給される解像度変更情
報に基づいて、他地点A,B,Cの解像度を決定する。
この決定も、上述したような距離と視線角度を算出する
ことにより行われる。これにより、他地点A,B,Cの
解像度変更情報を加味した解像度が決定される。
の会議参加者をよく見るために、自分のアイコンを自地
点Dの会議参加者のアイコンに近付けたとする。この場
合、他地点Aの画面上では、第1の実施例と同様に、自
地点Dの会議参加者の映像情報の解像度が向上する。
地点Dの解像度操作ウィンドウ25上でも、自地点Dの
会議参加者のアイコンに他地点Aの会議参加者のアイコ
ンが近付く。これにより、自地点Dの画面上で、他地点
Aの会議参加者の解像度が向上する。
ウ上でも、他地点Aの会議参加者のアイコンの表示位置
が変化するので、その変化に応じて、その解像度が変化
する。
示す情報は、解像度変更部14に供給される。解像度変
更部14は、他地点A,B,Cから送られてきた映像情
報の解像度を、解像度決定部14で決定された解像度に
変更する。以上が、解像度の制御動作である。
施例と同様の効果を得ることができるとともに、さら
に、次のような効果を得ることができる。
地点A,B,Cに送信する手段(解像度変更送信部4
2)と、他地点A,B,Cの解像度変更情報を受信する
手段(解像度変更受信部43)と、自地点と他地点の解
像度変更情報に基づいて、受信映像情報の解像度を決定
する手段(解像度決定部44)を設けるようにしたの
で、受信映像情報の解像度を決定する際、他地点の解像
度変更操作を反映させることができる。
各会議参加者の表示位置が同じ解像度操作ウィンドウ2
5を共有することができる。
点の会議参加者の解像度変更操作から、他地点の会議参
加者の興味の度合いを知ることができ、自分が主張する
相手が自分の方をどの程度見ているかを判断することが
できる。
の画面上の自分の映像情報の解像度を調節することがで
きるので、相手によく見てもらいたい場合は近付き、見
られたくない場合は離れるなどの操作が可能となる。
様に、映像情報の受信側で解像度を設定する構成におい
て、自地点の解像度変更情報と他地点の解像度変更情報
に基づいて、自地点の受信映像情報の解像度の設定する
場合を説明した。
施例と同様に、映像情報の送信側で解像度を設定する構
成において、自地点の解像度変更情報と他地点の解像度
変更情報に基づいて、自地点の受信映像情報の解像度の
設定するようにしたものである。
ク図である。なお、図12において、先の図10とほぼ
同位置機能を果たす部分には同一符号を付して、詳細な
説明を省略する。
像度変更部32と、自映像送信部33と、相手映像受信
部34と、相手映像表示部35と、解像度要求送信部3
8と、解像度要求受信部39は、図10に示すものとほ
ぼ同じ機能を有する。
更送信部52と、解像度変更受信部53と、解像度決定
部54は、図11に示すものとほぼ同じ機能を有する。
解像度変更情報と他地点から送られてきた解像度変更情
報に基づいて決定された解像度を示す情報を解像度要求
情報として他地点に送信する点と、他地点から送られて
きた解像度要求情報に基づいて、送信映像情報の解像度
を設定する点を除けば、先の第3の実施例と同じ動作が
得られる。これにより、全会議参加者の解像度変更操作
を反映した解像度制御動作が行われる。
ば、第2の実施例の効果と同様の効果に加えて、第3の
実施例の効果と同様の効果を得ることができる。
つの実施例を説明したが、この発明は、上述したような
実施例に限定されるものではない。
は、解像度操作ウィンドウ25を使って解像度を変更す
るための操作として、マウスでアイコンの表示位置や視
線方向を変更する操作を用いる場合を説明した。しか
し、この発明は、例えば、マウスで背景の部分をクリッ
クすると、全他地点の映像情報の解像度が中程度になる
ような操作や、2人のアイコンの表示位置の間をクリッ
クすると、その2人を映像情報の解像度が他の人の解像
度より高くなるような操作を用いるようにしてもよい。
は、解像度操作ウィンドウ上の会議参加者の表示とし
て、似顔絵のアイコンを用いる場合を説明した。しか
し、この発明は、似顔絵以外のアイコンを用いるように
してもよい。また、アイコンだけでなく、各会議参加者
を連想させる記号や名前などの文字列、または、顔映像
などを用いるようにしてもよい。
は、解像度操作ウィンドウとして、全会議参加者が会議
室に集まったような構図の操作ウィンドウを用いる場合
を説明した。しかし、この発明は、このような構図以外
の構図のウィンドウを用いるようにしてもよい。
B,C,D(この例の場合、Dも他地点である。)の会
議参加者を一列に配置し、その下のスクロールバー61
を左右に動かすことにより、解像度を変更するようにし
てもよい。
参加者の解像度は、その位置とスクロールバー61との
距離に基づいて、決定される。例えば、距離が小さいほ
ど高い解像度が設定される。
B,C,Dの会議参加者を円上に配置し、矢印62を回
すことにより、解像度を変更するようにしてもよい。
参加者の解像度は、自分と円の中心とを結ぶ線と矢印6
2とのなす角度に基づいて、決定される。例えば、角度
が小さいほど高い解像度が設定される。
は、受信映像情報の解像度を映像情報の受信側で設定す
る場合を説明し、第2,第4の実施例では、受信映像情
報の解像度を映像情報の送信側で設定する場合を説明し
た。しかし、この発明は、送信側と受信側の両方で設定
するようにしてもよい。
は、他地点に解像度情報として位置情報のみを送る場合
を説明した。しかし、この発明は、視線情報も送信して
それを操作ウィンドウ上へ表示するようにしてもよい。
このような構成によれば、視線情報からも他地点の会議
参加者の興味の度合いを知ることができる。
その相手の映像情報の解像度を上げるような構成を付加
するようにしてもよい。このような構成によれば、自分
を見て欲しいときに、相手に視線を向けることで、相手
端末上での自分の映像情報の解像度を上げることができ
る。
は、この発明をテレビ会議システムに適用する場合を説
明した。しかし、この発明は、テレビ会議システム以外
の映像通信システムにも適用することができる。
複数の地点で、映像情報を相互に送受信する映像通信シ
ステムだけでなく、例えば、ビデオオンデマンドシステ
ムのように、1つの受信点で、複数の送信点から送られ
てきた映像情報を同時に表示する映像通信システムにも
適用することができる。
御装置の構成例を示す図である。
C,Dから送られている映像情報を受信し、これを同時
に表示する映像通信システムにこの発明を適用する場合
を代表として示す。
様に、映像情報の受信側で解像度を設定するようにした
ものである。
1と、解像度変更入力部72と、解像度決定部73が設
けられ、送信点B,C,Dには、解像度制御装置の構成
要素は設けられない。
ほぼ同じなので、ここでは、詳細な説明を省略する。
様に、映像情報の送信側で、解像度を設定するようにし
たものである。
部81と、解像度決定部82と、解像度要求送信部83
が設けられ、送信点B,C,Dには、解像度要求受信部
84と、解像度変更部85が設けられる。
とほぼ同じなので、ここでは、詳細な説明を省略する。
旨を逸脱しない範囲で種々様々変形実施可能なことは勿
論である。
点で相互に映像情報を送受信する映像通信システムにお
いて、映像情報の受信側に、自地点の会議参加者の操作
に従って、受信映像情報の解像度を各他地点ごとに指定
可能な手段と、この手段により指定された解像度を受信
映像情報に設定する手段とを設けるようにしたので、受
信映像情報の解像度を各他地点ごとに制御することがで
きる。これにより、テレビ会議システムにおいて、全地
点の会議参加者の映像情報を同時に表示する場合であっ
ても、リアルタイムの表示と解像度の要求の両方を満足
させることができる。
度設定手段を映像情報の送信側に設けるようにしたの
で、請求項1に係る発明の効果と同様の効果が得ること
ができるとともに、表示されない映像情報を送信する無
駄を省くことができる。
係る発明のように、映像情報の受信側で解像度を設定す
る構成において、指定定解像度を自地点で指定された解
像度と他地点で指定された解像度とに基づいて決定する
ようにしたので、請求項1に係る発明の効果と同様の効
果を得ることができるとともに、自地点で解像度を指定
する場合、他地点の解像度指定内容を反映させることが
できるという効果を得ることができる。
係る発明のように、映像情報の送信側で解像度を設定す
る構成において、指定解像度を自地点で指定された解像
度と他地点で指定された解像度とに基づいて決定するよ
うにしたので、請求項2に係る発明の効果と同様の効果
に加えて、請求項3に係る発明の効果と同様の効果を得
ることができる。
デマンドシステムなどのように、1つの受信点で複数の
送信点から送られてきた複数の映像情報を同時に表示す
る映像通信システムにおいて、解像度指定手段を受信点
に設け、解像度設定手段を受信点または送信点に設ける
ようにしたので、このようなシステムにおいて、請求項
1あるいは2に係る発明の効果と同様の効果を得ること
ができる。
図である。
ク図である。
す図である。
る。
る。
す図である。
示す図である。
像度変更方法を示す図である。
ク図である。
ク図である。
ク図である。
ある。
ある。
ク図である。
ク図である。
部 17,37,44,54,73,82…解像度決定部 21…画面 22a〜22d…表示領域 25…解像度操作ウィンドウ 38,83…解像度要求送信部 39,84…解像度要求受信部 42,52…解像度変更送信部 43,53…解像度変更受信部 61…スクロールバ− 62…矢印
Claims (10)
- 【請求項1】 各地点ごとに他の複数の地点から送られ
てきた映像情報を同時に表示する映像通信システムにお
いて、各地点ごとに設けられ、 自地点の利用者の操作に従って、受信映像情報の解像度
を各他地点ごとに指定可能な解像度指定手段と、 この解像度指定手段により指定された各他地点の解像度
を対応する受信映像情報に設定する解像度設定手段とを
備えたことを特徴とする解像度制御装置。 - 【請求項2】 各地点ごとに他の複数の地点から送られ
てきた映像情報を同時に表示する映像通信システムにお
いて、各地点ごとに設けられ、 自地点の利用者の操作に従って、受信映像情報の解像度
を各他地点ごとに指定可能な解像度指定手段と、 この解像度指定手段により指定された解像度を示す情報
を他地点に送信する解像度送信手段と、 他地点の解像度送信手段により送られてきた解像度を示
す情報を受信する解像度受信手段と、 この解像度受信手段により受信された情報により示され
る解像度を対応する送信映像情報に設定する解像度設定
手段とを備えたことを特徴とする解像度制御装置。 - 【請求項3】 各地点ごとに他の複数の地点から送られ
てきた映像情報を同時に表示する映像通信システムにお
いて、各地点ごとに設けられ、 自地点の利用者の操作に従って、受信映像情報の解像度
を各他地点ごとに指定可能な解像度指定手段と、 この解像度指定手段により指定された解像度を示す情報
を他地点に送信する解像度送信手段と、 他地点の解像度送信手段により送られてきた解像度を示
す情報を受信する解像度受信手段と、 前記解像度指定手段により指定された解像度と前記解像
度受信手段により受信された情報により示される解像度
とに基づいて、各他地点ごとに解像度を決定する解像度
決定手段と、 この解像度決定手段により決定された各他地点の解像度
を対応する受信映像情報に設定する解像度設定手段とを
備えたことを特徴とする解像度制御装置。 - 【請求項4】 各地点ごとに他の複数の地点から送られ
てきた映像情報を同時に表示する映像通信システムにお
いて、各地点ごとに設けられ、 自地点の利用者の操作に従って、受信映像情報の解像度
を各他地点ごとに指定可能な解像度指定手段と、 この解像度指定手段により指定された解像度を示す情報
を他地点に送信する第1の解像度送信手段と、 他地点の第1の解像度指定手段により送られてきた解像
度を示す情報を受信する第1の解像度受信手段と、 前記解像度指定手段により指定された解像度と前記第1
の解像度受信手段により受信された情報により示される
解像度とに基づいて、各他地点ごとに受信映像情報の解
像度を決定する解像度決定手段と、 この解像度決定手段により決定された解像度を示す情報
を他地点に送信する第2の解像度送信手段と、 他地点の第2の解像度送信手段により送られてきた解像
度を示す情報を受信する第2の解像度受信手段と、 この第2の解像度受信手段により受信された情報により
示される解像度を対応する送信映像情報に設定する解像
度設定手段とを備えたことを特徴とする解像度制御装
置。 - 【請求項5】 前記映像通信システムは、テレビ会議シ
ステムであることを特徴とする請求項1,2,3または
4記載の解像度制御装置。 - 【請求項6】 前記解像度指定手段は、 会議参加者の映像情報の表示画面に、各会議参加者が1
つの会議室に集まっているような構図の解像度操作ウィ
ンドウを表示するウィンドウ表示手段と、 自地点の会議参加者の操作に従って、前記解像度操作ウ
ィンドウに表示された複数の会議参加者の識別子のう
ち、少なくとも自地点の会議参加者の識別子の表示位置
を変更可能な表示位置変更手段と、 前記解像度操作ウィンドウに表示された自地点の会議参
加者の識別子と他地点の会議参加者の識別子との距離に
基づいて、他地点の会議参加者の映像情報の解像度を決
定する解像度決定手段とを備えたことを特徴とする請求
項5記載の解像度制御装置。 - 【請求項7】 前記解像度指定手段は、 各会議参加者の映像情報の表示画面に、各会議参加者が
1つの会議室に集まっているような構図を有し、各会議
参加者の識別子として、各会議参加者の似顔絵が表示さ
れた解像度操作ウィンドウを表示するウィンドウ表示手
段と、 自地点の会議参加者の操作に従って、前記解像度操作ウ
ィンドウに表示された複数の会議参加者の識別子のう
ち、自地点の会議参加者の視線方向を変更可能な視線方
向変更手段と、 この視線方向変更手段により設定された視線方向と自地
点の会議参加者の識別子及び他地点の会議参加者の識別
子を結ぶ線とがなす視線角度に基づいて、他地点の会議
参加者の映像情報の解像度を決定する解像度決定手段と
を備えたことを特徴とする請求項5記載の解像度制御装
置。 - 【請求項8】 1つの受信点で複数の送信点から送られ
てきた複数の映像情報を同時に表示する映像通信システ
ムにおいて、 前記受信点に設けられ、この受信点の利用者の操作に従
って、各送信点ごとに受信映像情報の解像度を指定可能
な解像度指定手段と、 この解像度指定手段により指定された解像度を前記受信
点の受信映像情報に設定する解像度設定手段とを備えた
ことを特徴とする解像度制御装置。 - 【請求項9】 前記解像度設定手段は、前記受信点に設
けられ、前記解像度指定手段により各送信点ごとに指定
された解像度を対応する受信映像情報に設定するように
構成されていることを特徴とする請求項8記載の解像度
制御装置。 - 【請求項10】 前記解像度設定手段は、 前記受信点に設けられ、前記解像度指定手段により各送
信点ごとに指定された解像度を示す情報を前記送信点に
送信する解像度送信手段と、 前記送信点に設けられ、前記解像度送信手段により送ら
れてきた解像度情報を受信する解像度受信手段と、 この解像度受信手段により受信された情報により示され
る解像度を送信映像情報に設定することにより、前記解
像度指定手段により指定された解像度を前記受信点の受
信映像情報に設定する設定手段とを備えたことを特徴と
する請求項8記載の解像度制御装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP7148898A JPH099230A (ja) | 1995-06-15 | 1995-06-15 | 解像度制御装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP7148898A JPH099230A (ja) | 1995-06-15 | 1995-06-15 | 解像度制御装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH099230A true JPH099230A (ja) | 1997-01-10 |
Family
ID=15463153
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP7148898A Pending JPH099230A (ja) | 1995-06-15 | 1995-06-15 | 解像度制御装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH099230A (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6717607B1 (en) * | 2000-04-28 | 2004-04-06 | Swisscom Mobile Ag | Method and system for video conferences |
JP2009017463A (ja) * | 2007-07-09 | 2009-01-22 | Canon Inc | 映像処理装置及び映像処理方法 |
US7705877B2 (en) | 2004-01-28 | 2010-04-27 | Hewlett-Packard Development Company, L.P. | Method and system for display of facial features on nonplanar surfaces |
JP2012165170A (ja) * | 2011-02-07 | 2012-08-30 | Nippon Telegr & Teleph Corp <Ntt> | 会議装置、会議方法および会議プログラム |
WO2014013979A1 (ja) * | 2012-07-17 | 2014-01-23 | Necディスプレイソリューションズ株式会社 | 表示装置、及び表示方法 |
JP2014045243A (ja) * | 2012-08-24 | 2014-03-13 | Sumitomo Electric Ind Ltd | 映像データ配信装置およびそれを含む双方向対話システム |
-
1995
- 1995-06-15 JP JP7148898A patent/JPH099230A/ja active Pending
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6717607B1 (en) * | 2000-04-28 | 2004-04-06 | Swisscom Mobile Ag | Method and system for video conferences |
US7705877B2 (en) | 2004-01-28 | 2010-04-27 | Hewlett-Packard Development Company, L.P. | Method and system for display of facial features on nonplanar surfaces |
JP2009017463A (ja) * | 2007-07-09 | 2009-01-22 | Canon Inc | 映像処理装置及び映像処理方法 |
JP2012165170A (ja) * | 2011-02-07 | 2012-08-30 | Nippon Telegr & Teleph Corp <Ntt> | 会議装置、会議方法および会議プログラム |
WO2014013979A1 (ja) * | 2012-07-17 | 2014-01-23 | Necディスプレイソリューションズ株式会社 | 表示装置、及び表示方法 |
JPWO2014013979A1 (ja) * | 2012-07-17 | 2016-06-30 | Necディスプレイソリューションズ株式会社 | 表示装置、及び表示方法 |
US9497405B2 (en) | 2012-07-17 | 2016-11-15 | Nec Display Solutions, Ltd. | Display device for displaying videos side by side without overlapping each other and method for the same |
JP2014045243A (ja) * | 2012-08-24 | 2014-03-13 | Sumitomo Electric Ind Ltd | 映像データ配信装置およびそれを含む双方向対話システム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6453336B1 (en) | Video conferencing with adaptive client-controlled resource utilization | |
CN101953158B (zh) | 针对全景视频会议中的均一质量的自适应量化 | |
US7139807B2 (en) | Media role management in a video conferencing network | |
US7277117B2 (en) | Communication control apparatus, communication apparatus, communication system, and method of the same | |
US5793415A (en) | Videoconferencing and multimedia system | |
US9077847B2 (en) | Video communication method and digital television using the same | |
US8289369B2 (en) | Distributed real-time media composer | |
EP1472871B1 (en) | Remote server switching of video streams | |
US7508413B2 (en) | Video conference data transmission device and data transmission method adapted for small display of mobile terminals | |
JP2002007294A (ja) | 画像配信システム及び方法並びに記憶媒体 | |
US20030081112A1 (en) | System and method for managing streaming data | |
US20060150224A1 (en) | Video streaming | |
US20060192848A1 (en) | Video conferencing system | |
US7425979B2 (en) | Communication system | |
JP4053869B2 (ja) | ビデオ会議システム | |
JP3851975B2 (ja) | カメラと画面キャプチャを用いたインターネット放送方法 | |
JPH099230A (ja) | 解像度制御装置 | |
CN112752058B (zh) | 调整视频流的属性的方法和装置 | |
JP2002209197A (ja) | 多地点テレビ会議システム | |
Parke | The evolution of conferencing | |
JP3697423B2 (ja) | 多地点制御装置 | |
GB2402014A (en) | Multimedia conference terminal with source selection means | |
JP2005033828A (ja) | 多地点制御装置 | |
JPH08163529A (ja) | 画像多地点通信制御システム | |
JP3697422B2 (ja) | 多地点制御装置、テレビ会議端末装置及び多地点テレビ会議システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20050218 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050303 |
|
A621 | Written request for application examination |
Effective date: 20050303 Free format text: JAPANESE INTERMEDIATE CODE: A621 |
|
A521 | Written amendment |
Effective date: 20050218 Free format text: JAPANESE INTERMEDIATE CODE: A821 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050405 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050517 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080401 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080530 |
|
A131 | Notification of reasons for refusal |
Effective date: 20080708 Free format text: JAPANESE INTERMEDIATE CODE: A131 |
|
A521 | Written amendment |
Effective date: 20080904 Free format text: JAPANESE INTERMEDIATE CODE: A523 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Effective date: 20080930 Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Effective date: 20081021 Free format text: JAPANESE INTERMEDIATE CODE: A61 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111114 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |