JP5902701B2 - 3次元画像にグラフィックオブジェクトを散りばめる3次元画像生成方法及びこれに用いられる表示装置 - Google Patents
3次元画像にグラフィックオブジェクトを散りばめる3次元画像生成方法及びこれに用いられる表示装置 Download PDFInfo
- Publication number
- JP5902701B2 JP5902701B2 JP2013535411A JP2013535411A JP5902701B2 JP 5902701 B2 JP5902701 B2 JP 5902701B2 JP 2013535411 A JP2013535411 A JP 2013535411A JP 2013535411 A JP2013535411 A JP 2013535411A JP 5902701 B2 JP5902701 B2 JP 5902701B2
- Authority
- JP
- Japan
- Prior art keywords
- depth
- transition region
- image
- edge
- graphic object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 30
- 230000007704 transition Effects 0.000 claims description 40
- 230000006870 function Effects 0.000 claims description 13
- 238000003780 insertion Methods 0.000 claims description 11
- 230000037431 insertion Effects 0.000 claims description 11
- 238000012886 linear function Methods 0.000 claims description 3
- 230000008859 change Effects 0.000 description 17
- 230000000007 visual effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 206010052143 Ocular discomfort Diseases 0.000 description 4
- 230000008447 perception Effects 0.000 description 4
- 230000006872 improvement Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 206010047571 Visual impairment Diseases 0.000 description 1
- 208000003464 asthenopia Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
Description
- 前記挿入されたグラフィックオブジェクトの周囲の輪郭により画定される補間領域を決定する手段を含み、当該輪郭は所定の厚さを有し、
- 前記挿入手段は、前記グラフィックオブジェクトの輪郭上に置かれた画素の深さを変更(調整)し、前記画素の深さは挿入されるべき前記グラフィックオブジェクトの輪郭の内部エッジまで少しずつ前記輪郭の外部エッジから増大し、前記輪郭の内側エッジにある画素は前記挿入されたオブジェクトの画素より深い位置に位置される。
3D画像内の挿入ウィンドウに対応する輪郭が、例えば前記文字及び記号のセットの範囲を限定する(定める)。本発明に基づく1つの例では、当該輪郭により範囲限定されて、文字若しくは記号のセットと背景要素と含む内部領域は、挿入されるグラフィックオブジェクトの一部である。本発明の他の例では、挿入されるグラフィックオブジェクトは、文字若しくは記号の前記セットに限定される。
表示される画像の視差マップは、中央処理ユニットによってそれ自体公知の方法で決定されるか、データストリームを介して送信され、この場合、視差値が右側ビューまたは左側ビューの各要素に関連付けられる。表示される送信されたコンテンツの3次元画像の全ての要素の対応する深さは、このように決定される。正の視差は画面の後に位置する画像要素に対応し、負の視差は画面の前に位置する画像要素に対応する。
挿入されるグラフィック要素の輪郭によって限定される画像部分と当該画像の残りの部分との間の急激な深さ変化を避けるために、本発明では当該グラフィック要素の輪郭の周りに移行領域が作成される。この領域は、グラフィックオブジェクトの輪郭に対応する第1の内部エッジと、異なるパラメータ(例えば、望まれる表示若しくは画像の2つの部分の間の深さの違い)に応じて決定される幅だけ離れた第2の外部エッジとを含む。
改良例によれば、ユーザは、画面の深さ値に対して、グラフィックオブジェクトを挿入するための深さ値の導入手段を有する。この導入手段はカーソルに設けることができ、ユーザによって選択されたカーソルの位置が挿入されるオブジェクトの位置を規定する。観察者が画面の前に挿入されるオブジェクトを多く配置すれば、3Dシーンの奥行きはより深くなる。ユーザが画面の背面にカーソルを移動できるようにする必要はない。なぜなら、そうすると深さの効果(印象)がさらに限定されるからである。改良例によれば、補間領域の幅は、ユーザによって導入される調整に依存する。例えば、ユーザが画面の前に明らかに自分のグラフィックオブジェクトを移動する場合、視覚的不快感を減らすための非常に広い補間領域は必要ない。
- オブジェクトの視覚的データ(圧縮されている可能性有り)
- 表示された画像内に挿入されるオブジェクトの位置
- 挿入されるオブジェクトから画面までの距離と、観察者から画面までの距離との比
- 枠の厚さ。
本発明の好ましい実施形態を、以下に示す。
付記1.
少なくとも1つの三次元画像を生成する方法であって、
グラフィックオブジェクトを所定の挿入深さで前記少なくとも1つの三次元画像に挿入するステップと、
前記挿入されたグラフィックオブジェクトを囲む移行領域を決定するステップであって、前記領域が前記グラフィックオブジェクトを画定する第1の内部エッジと当該第1のエッジから離れた第2のエッジとにより画定される、ステップと、前記方法はさらに、
前記移行領域に位置する前記少なくとも1つの画像の要素の深さを、前記移行領域の前記第1のエッジから前記第2のエッジへ、前記挿入されたグラフィックオブジェクトの深さから前記第2のエッジの画像要素の深さへ、順次適合させるステップ、を含む、前記方法。
付記2.
前記適合は、前記移行領域にある各要素に適用される深さが、前記移行領域の前記第1のエッジから前記第2のエッジへ少しずつ増大するようになされる、付記1記載の方法。
付記3.
前記決定された領域の各要素に適用された深さの前記順次適合は、前記領域の前記第1のエッジと第2のエッジの間の距離の関数であり、当該関数は線形関数、三角関数または放物線関数のいずれかである、付記2記載の方法。
付記4.
前記方法は、前記グラフィックオブジェクトに関連付けられたデータを受信するステップを含み、当該受信されたデータは前記挿入されたグラフィックオブジェクトの周りの前記移行領域の幅のデータを少なくとも含む、付記1記載の方法。
付記5.
三次元画像を生成する装置であって、
少なくとも1つの3次元画像にグラフィックオブジェクトを挿入する手段を備え、前記装置はさらに、
前記挿入されたグラフィックオブジェクトを囲む移行領域を決定する手段であって、前記領域は、前記グラフィックオブジェクトの輪郭に対応する第1の内部エッジと前記第1の内部エッジから離れた第2のエッジとによって画定される、手段と、
前記移行領域に位置する前記少なくとも1つの画像の要素の深さを、前記第2のエッジに位置する前記画像の要素の深さから、前記挿入されたグラフィックオブジェクトの深さに順次適合させる手段と、を備える、前記装置。
Claims (5)
- 少なくとも1つの三次元画像を生成する方法であって、
グラフィックオブジェクトを所定の挿入深さで前記少なくとも1つの三次元画像に挿入することと、
前記挿入されるグラフィックオブジェクトを囲む移行領域を決定することであって、前記移行領域が前記グラフィックオブジェクトを画定する内部エッジと当該内部エッジから離れた外部エッジとにより画定され、前記決定することは、前記内部エッジに位置する前記挿入されるグラフィックオブジェクトの第1の画素の深さ値と、前記外部エッジに位置する前記少なくとも1つの三次元画像の第2の画素の深さ値との間の差に基づいて、前記移行領域の幅を適応させることを含む、前記移行領域を決定することと、
前記外部エッジに位置する前記第2の画素の深さから前記内部エッジの前記挿入されるグラフィックオブジェクトの前記第1の画素の深さへと深さが徐々に変化するように、前記移行領域に位置する前記少なくとも1つの三次元画像の画素の深さを処理することと、
を含む、前記方法。 - 前記処理することは、前記移行領域に位置する各画素の前記深さを前記移行領域の前記外部エッジから前記内部エッジへ漸進的に増加させることを含む、請求項1記載の少なくとも1つの三次元画像を生成する方法。
- 前記移行領域の各画素に適用される前記深さを増加させることは、前記移行領域の前記内部エッジと前記外部エッジとの間の距離の関数に基づいており、当該関数は線形関数、三角関数または放物線関数のうちの1つである、請求項2記載の少なくとも1つの三次元画像を生成する方法。
- 前記方法は、前記グラフィックオブジェクトに関連付けられたデータを受信することを含み、当該受信されたデータは、他のデータ項目に加えて、前記挿入されるグラフィックオブジェクトの周りの前記移行領域の前記幅を含む、請求項1記載の少なくとも1つの三次元画像を生成する方法。
- 三次元画像を生成する装置であって、
少なくとも1つの三次元画像にグラフィックオブジェクトを挿入する手段と、
前記挿入されるグラフィックオブジェクトを囲む移行領域を決定する手段であって、前記移行領域は、前記グラフィックオブジェクトの輪郭に対応する内部エッジと前記内部エッジから離れた外部エッジとによって画定され、前記決定する手段は、前記内部エッジに位置する第1の画素の深さ値と、前記外部エッジに位置する第2の画素の深さ値との間の差に基づいて、前記移行領域の幅を適応させる手段をさらに含む、前記決定する手段と、
前記外部エッジに位置する前記第2の画素の深さから前記内部エッジの前記挿入されるグラフィックオブジェクトの前記第1の画素の深さへと深さが徐々に変化するように、前記移行領域に位置する前記少なくとも1つの三次元画像の画素の深さを処理する手段と、
を備える、前記装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1058966 | 2010-10-29 | ||
FR1058966 | 2010-10-29 | ||
PCT/EP2011/068698 WO2012055892A1 (en) | 2010-10-29 | 2011-10-26 | Method for generation of three-dimensional images encrusting a graphic object in the image and an associated display device |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013545184A JP2013545184A (ja) | 2013-12-19 |
JP2013545184A5 JP2013545184A5 (ja) | 2014-12-18 |
JP5902701B2 true JP5902701B2 (ja) | 2016-04-13 |
Family
ID=44024058
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013535411A Active JP5902701B2 (ja) | 2010-10-29 | 2011-10-26 | 3次元画像にグラフィックオブジェクトを散りばめる3次元画像生成方法及びこれに用いられる表示装置 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20130207971A1 (ja) |
EP (1) | EP2633688B1 (ja) |
JP (1) | JP5902701B2 (ja) |
KR (1) | KR101873076B1 (ja) |
CN (1) | CN103202024B (ja) |
WO (1) | WO2012055892A1 (ja) |
ZA (1) | ZA201302757B (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102131745B1 (ko) | 2012-01-04 | 2020-07-08 | 인터디지탈 매디슨 페이튼트 홀딩스 | 3d 이미지 시퀀스의 처리 |
JP6040838B2 (ja) * | 2012-08-29 | 2016-12-07 | 株式会社Jvcケンウッド | デプス推定装置、デプス推定方法、デプス推定プログラム、画像処理装置、画像処理方法及び画像処理プログラム |
WO2014100959A1 (en) | 2012-12-24 | 2014-07-03 | Thomson Licensing | Apparatus and method for displaying stereoscopic images |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6208348B1 (en) * | 1998-05-27 | 2001-03-27 | In-Three, Inc. | System and method for dimensionalization processing of images in consideration of a pedetermined image projection format |
JP4121888B2 (ja) * | 2003-04-28 | 2008-07-23 | シャープ株式会社 | コンテンツ表示装置およびコンテンツ表示プログラム |
JP4735234B2 (ja) * | 2005-12-19 | 2011-07-27 | ブラザー工業株式会社 | 画像表示システム |
JP2010505174A (ja) | 2006-09-28 | 2010-02-18 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | メニューディスプレイ |
KR101362647B1 (ko) * | 2007-09-07 | 2014-02-12 | 삼성전자주식회사 | 2d 영상을 포함하는 3d 입체영상 파일을 생성 및재생하기 위한 시스템 및 방법 |
EP2235685B1 (en) * | 2007-12-26 | 2014-06-18 | Koninklijke Philips N.V. | Image processor for overlaying a graphics object |
JP4695664B2 (ja) * | 2008-03-26 | 2011-06-08 | 富士フイルム株式会社 | 立体動画像処理装置および方法並びにプログラム |
WO2009152769A1 (zh) * | 2008-06-17 | 2009-12-23 | 深圳华为通信技术有限公司 | 视频通讯方法、装置及系统 |
PL2362671T3 (pl) * | 2008-07-25 | 2014-05-30 | Koninklijke Philips Nv | Obsługa napisów przez wyświetlacz 3D |
EP2399398B1 (en) * | 2009-02-17 | 2016-04-20 | Koninklijke Philips N.V. | Combining 3d image and graphical data |
KR20110018261A (ko) * | 2009-08-17 | 2011-02-23 | 삼성전자주식회사 | 텍스트 서브타이틀 데이터 처리 방법 및 재생 장치 |
CN101742349B (zh) * | 2010-01-05 | 2011-07-20 | 浙江大学 | 一种对三维场景的表达方法及其电视系统 |
-
2011
- 2011-10-26 JP JP2013535411A patent/JP5902701B2/ja active Active
- 2011-10-26 CN CN201180052459.0A patent/CN103202024B/zh active Active
- 2011-10-26 WO PCT/EP2011/068698 patent/WO2012055892A1/en active Application Filing
- 2011-10-26 EP EP11775942.3A patent/EP2633688B1/en active Active
- 2011-10-26 US US13/879,397 patent/US20130207971A1/en not_active Abandoned
- 2011-10-26 KR KR1020137010781A patent/KR101873076B1/ko active IP Right Grant
-
2013
- 2013-04-17 ZA ZA2013/02757A patent/ZA201302757B/en unknown
Also Published As
Publication number | Publication date |
---|---|
EP2633688A1 (en) | 2013-09-04 |
WO2012055892A1 (en) | 2012-05-03 |
KR101873076B1 (ko) | 2018-06-29 |
JP2013545184A (ja) | 2013-12-19 |
CN103202024A (zh) | 2013-07-10 |
US20130207971A1 (en) | 2013-08-15 |
KR20130139271A (ko) | 2013-12-20 |
EP2633688B1 (en) | 2018-05-02 |
CN103202024B (zh) | 2016-05-04 |
ZA201302757B (en) | 2014-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI598846B (zh) | 影像資料處理方法以及使用該方法的立體影像顯示裝置 | |
EP2332340B1 (en) | A method of processing parallax information comprised in a signal | |
US9124870B2 (en) | Three-dimensional video apparatus and method providing on screen display applied thereto | |
US20100045779A1 (en) | Three-dimensional video apparatus and method of providing on screen display applied thereto | |
US20110193945A1 (en) | Image display device, image display viewing system and image display method | |
JP2011071898A (ja) | 立体映像表示装置および立体映像表示方法 | |
US10694173B2 (en) | Multiview image display apparatus and control method thereof | |
JP5902701B2 (ja) | 3次元画像にグラフィックオブジェクトを散りばめる3次元画像生成方法及びこれに用いられる表示装置 | |
CN106559662B (zh) | 多视图图像显示设备及其控制方法 | |
JP6377155B2 (ja) | 多視点映像処理装置及びその映像処理方法 | |
EP2421271B1 (en) | Display apparatus and method for applying on screen display (OSD) thereto | |
EP2752815A1 (en) | Display method and display apparatus | |
JP2011223126A (ja) | 立体映像表示装置および立体映像表示方法 | |
WO2014199127A1 (en) | Stereoscopic image generation with asymmetric level of sharpness | |
US9547933B2 (en) | Display apparatus and display method thereof | |
JP2014225736A (ja) | 画像処理装置 | |
JP2012205285A (ja) | 映像信号処理装置及び映像信号処理方法 | |
US20140254917A1 (en) | Auto-convergence system with active learning and related method and machine-readable medium thereof | |
KR102143944B1 (ko) | 입체감 조절 방법과 이를 이용한 입체 영상 표시장치 | |
JP5501150B2 (ja) | 表示装置及びその制御方法 | |
US20150054915A1 (en) | Multiple-view image displaying apparatus for improving picture quality and a method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141027 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141027 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150925 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150929 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160119 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160209 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160310 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5902701 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |