JP2012019517A - ディスプレイ方法および装置 - Google Patents
ディスプレイ方法および装置 Download PDFInfo
- Publication number
- JP2012019517A JP2012019517A JP2011149799A JP2011149799A JP2012019517A JP 2012019517 A JP2012019517 A JP 2012019517A JP 2011149799 A JP2011149799 A JP 2011149799A JP 2011149799 A JP2011149799 A JP 2011149799A JP 2012019517 A JP2012019517 A JP 2012019517A
- Authority
- JP
- Japan
- Prior art keywords
- video
- main object
- caption
- information
- depth information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/15—Processing image signals for colour aspects of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/337—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using polarisation multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/341—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
Abstract
本発明の目的は、人間の眼への疲労感を軽減させる字幕を生成できるディスプレイ方法および装置を提供することを技術的課題とする。
【解決手段】
視聴者の眼への疲労感を緩和できる本発明の一側面に係るディスプレイ方法は、3D映像のメインオブジェクト(Main Object)予測領域の深さ情報を用いて字幕情報を生成するステップと、前記生成された字幕情報によって字幕を前記3D映像と合成して表示するステップとを含む。従って、画面の主要物体の深さに応じて字幕の属性(Property)を調節することにより、視聴者の眼への疲労感を緩和させる効果がある。
【選択図】図3
Description
ここで、Dmとはメインオブジェクト予測領域の深さ情報を意味し、Dmは注視領域であるメインオブジェクト予測領域の左眼映像および右眼映像間のx軸上の位置差を計算する“calculate_depth_of_main_object()”関数を用いて算出されてよい。
ここで、Daとは3D映像の平均深さ情報を意味し、Daは3D映像の左/右映像間のx軸上の位置差を計算する“Calculate_average_depth_of_scene()”関数を用いて算出されてよい。
ここで、Pos_Leftとは字幕の左眼映像のx軸上の位置を意味し、Pos_Rightとは字幕の右眼映像のx軸上の位置を意味する。なお、xは字幕が初めに位置する任意の位置でもよく、例えば、メインオブジェクト抽出部により3D映像から抽出されたメインオブジェクト予測領域の境界線を用いて計算された字幕の初めの位置であってよい。
ここで、Captionとは、数式4から算出された左眼映像のx軸上の字幕位置であるPos_Leftと、右眼映像のx軸上の字幕位置であるPos_Right、y軸上の字幕位置、字幕の大きさS、字幕の色相Cによって字幕と3D映像を合成する命令語を意味する。
Claims (15)
- 3D映像のメインオブジェクト(Main Object)予測領域の深さ情報を用いて字幕情報を生成するステップと、
前記生成された字幕情報によって字幕を前記3D映像と合成して表示するステップと、
を含むディスプレイ方法。 - 前記字幕情報は、
前記字幕の深さ、位置、大きさ、色相のうち少なくとも一つを含むことを特徴とする請求項1に記載のディスプレイ方法。 - 前記字幕の色相は、
前記メインオブジェクト予測領域の色相に応じて変わることを特徴とする請求項1に記載のディスプレイ方法。 - 前記3D映像から前記メインオブジェクトの位置する領域を予測して前記メインオブジェクト予測領域を抽出するステップと、
前記抽出されたメインオブジェクト予測領域の深さ情報を算出するステップと、
を更に含むことを特徴とする請求項1に記載のディスプレイ方法。 - 前記メインオブジェクト予測領域の深さ情報は、
前記メインオブジェクト予測領域に該当する前記3D映像の左眼映像および右眼映像の領域を抽出し、前記抽出された領域の深さ情報の差異を算出することで決定されることを特徴とする請求項1に記載のディスプレイ方法。 - 前記メインオブジェクト予測領域の深さ情報は、
前記3D映像に対する輝度分析によって決定されることを特徴とする請求項1に記載のディスプレイ方法。 - 前記3D映像の平均深さ情報を算出するステップを更に含み、
前記字幕情報を生成するステップは、
前記メインオブジェクト予測領域の深さ情報および前記算出された平均深さ情報を用いて前記字幕情報を生成することを特徴とする請求項1に記載のディスプレイ方法。 - 前記3D映像の字幕ファイルから前記字幕を抽出するステップを更に含むことを特徴とする請求項1に記載のディスプレイ方法。
- 前記3D映像から前記字幕を抽出するステップを更に含むことを特徴とする請求項1に記載のディスプレイ方法。
- 3D映像のメインオブジェクト(Main Object)予測領域の深さ情報を用いて字幕情報を生成する字幕情報生成部と、
前記生成された字幕情報によって字幕を前記3D映像と合成する字幕合成部と、
前記字幕の合成された前記3D映像を表示する映像出力部と、
を含むディスプレイ装置。 - 前記字幕情報は、
前記字幕の深さ、位置、大きさ、色相のうち少なくとも一つを含むことを特徴とする請求項10に記載のディスプレイ装置。 - 前記字幕の色相は、
前記メインオブジェクト予測領域の色相に応じて変わることを特徴とする請求項10に記載のディスプレイ装置。 - 前記3D映像から前記メインオブジェクトの位置する領域を予測して前記メインオブジェクト予測領域を抽出するメインオブジェクト抽出部と、
前記抽出されたメインオブジェクト予測領域の深さ情報を算出するメインオブジェクト深さ情報算出部と、
を更に含むことを特徴とする請求項10に記載のディスプレイ装置。 - 前記メインオブジェクト深さ情報算出部は、
前記メインオブジェクト予測領域に該当する前記3D映像の左眼映像および右眼映像の領域を抽出し、前記抽出された領域の深さ情報の差異を算出することにより、前記メインオブジェクト予測領域の深さ情報を決定することを特徴とする請求項13に記載のディスプレイ装置。 - 前記3D映像の平均深さ情報を算出する平均深さ情報算出部を更に含み、
前記字幕情報生成部は、
前記メインオブジェクト予測領域の深さ情報および前記算出された平均深さ情報を用いて前記字幕情報を生成することを特徴とする請求項13に記載のディスプレイ装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2010-0064932 | 2010-07-06 | ||
KR1020100064932A KR20120004203A (ko) | 2010-07-06 | 2010-07-06 | 디스플레이 방법 및 장치 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012019517A true JP2012019517A (ja) | 2012-01-26 |
Family
ID=43896807
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011149799A Pending JP2012019517A (ja) | 2010-07-06 | 2011-07-06 | ディスプレイ方法および装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20120007949A1 (ja) |
EP (1) | EP2405665A3 (ja) |
JP (1) | JP2012019517A (ja) |
KR (1) | KR20120004203A (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102812711B (zh) * | 2010-02-25 | 2016-11-02 | 汤姆森特许公司 | 利用视差估计和视差时间变化限制的立体字幕加载 |
US20130050414A1 (en) * | 2011-08-24 | 2013-02-28 | Ati Technologies Ulc | Method and system for navigating and selecting objects within a three-dimensional video image |
US9064295B2 (en) * | 2013-02-04 | 2015-06-23 | Sony Corporation | Enhanced video encoding using depth information |
CN106791493A (zh) * | 2016-11-17 | 2017-05-31 | 天津大学 | 基于模糊控制的颜色协调立体字幕制作方法 |
KR101958263B1 (ko) * | 2018-08-03 | 2019-03-14 | (주)이노시뮬레이션 | Vr 콘텐츠와 ui 템플릿의 제어방법 |
CN112383810A (zh) * | 2020-11-10 | 2021-02-19 | 北京字跳网络技术有限公司 | 歌词视频展示方法、装置、电子设备及计算机可读介质 |
CN114245092A (zh) * | 2022-02-23 | 2022-03-25 | 北京灵犀微光科技有限公司 | 多深度近眼显示方法及装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11289555A (ja) * | 1998-04-02 | 1999-10-19 | Toshiba Corp | 立体映像表示装置 |
JP2006186795A (ja) * | 2004-12-28 | 2006-07-13 | Victor Co Of Japan Ltd | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム |
JP2006185033A (ja) * | 2004-12-27 | 2006-07-13 | Victor Co Of Japan Ltd | 擬似立体画像生成装置及び擬似立体画像生成プログラム並びに擬似立体画像表示システム |
JP2007053621A (ja) * | 2005-08-18 | 2007-03-01 | Mitsubishi Electric Corp | 画像生成装置 |
JP2010056737A (ja) * | 2008-08-27 | 2010-03-11 | Fujifilm Corp | 3次元表示装置および方法並びにプログラム |
WO2010064118A1 (en) * | 2008-12-01 | 2010-06-10 | Imax Corporation | Methods and systems for presenting three-dimensional motion pictures with content adaptive information |
JP2010130495A (ja) * | 2008-11-28 | 2010-06-10 | Toshiba Corp | 立体情報出力装置及び立体情報出力方法 |
WO2010122775A1 (ja) * | 2009-04-21 | 2010-10-28 | パナソニック株式会社 | 映像処理装置及び映像処理方法 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6771885B1 (en) * | 2000-02-07 | 2004-08-03 | Koninklijke Philips Electronics N.V. | Methods and apparatus for recording programs prior to or beyond a preset recording time period |
US20050193408A1 (en) * | 2000-07-24 | 2005-09-01 | Vivcom, Inc. | Generating, transporting, processing, storing and presenting segmentation information for audio-visual programs |
US20020085219A1 (en) * | 2000-08-11 | 2002-07-04 | Victor Ramamoorthy | Method of and system for generating and viewing multi-dimensional images |
WO2002056597A1 (en) * | 2001-01-11 | 2002-07-18 | Koninklijke Philips Electronics N.V. | Recognizing film and video objects occuring in parrallel in single television signal fields |
US7050109B2 (en) * | 2001-03-02 | 2006-05-23 | General Instrument Corporation | Methods and apparatus for the provision of user selected advanced close captions |
US7085401B2 (en) * | 2001-10-31 | 2006-08-01 | Infowrap Systems Ltd. | Automatic object extraction |
US7257235B2 (en) * | 2002-02-28 | 2007-08-14 | Minolta Co., Ltd. | Monitoring apparatus, monitoring method, monitoring program and monitoring program recorded recording medium readable by computer |
KR100519781B1 (ko) * | 2004-02-18 | 2005-10-07 | 삼성전자주식회사 | 객체 추적 방법 및 그 장치 |
US7643672B2 (en) * | 2004-10-21 | 2010-01-05 | Kazunari Era | Image processing apparatus, image pickup device and program therefor |
CN101208723A (zh) * | 2005-02-23 | 2008-06-25 | 克雷格·萨默斯 | 用于3维照相机和3维视频的自动场景建模 |
US20070098221A1 (en) * | 2005-10-27 | 2007-05-03 | Charles Florin | Method for detection and tracking of deformable objects using adaptive time-varying autoregressive model |
KR100734850B1 (ko) * | 2005-11-29 | 2007-07-03 | 한국전자통신연구원 | 센서 네트워크에 대한 시뮬레이션 장치 및 방법 |
JP4717701B2 (ja) * | 2006-04-24 | 2011-07-06 | キヤノン株式会社 | 撮像システム、撮影方向制御方法、及びプログラム |
WO2008103929A2 (en) * | 2007-02-23 | 2008-08-28 | Johnson Controls Technology Company | Video processing systems and methods |
EP2157803B1 (en) * | 2007-03-16 | 2015-02-25 | Thomson Licensing | System and method for combining text with three-dimensional content |
JP2009159125A (ja) * | 2007-12-25 | 2009-07-16 | Casio Hitachi Mobile Communications Co Ltd | 字幕付き映像再生装置、字幕付き映像再生装置の検索結果通知方法及びプログラム |
JP4618384B2 (ja) * | 2008-06-09 | 2011-01-26 | ソニー株式会社 | 情報提示装置および情報提示方法 |
CN102246204B (zh) * | 2008-12-11 | 2015-04-29 | 图象公司 | 用于使用标度空间来处理图像的设备和方法 |
US8269821B2 (en) * | 2009-01-27 | 2012-09-18 | EchoStar Technologies, L.L.C. | Systems and methods for providing closed captioning in three-dimensional imagery |
CN101527046B (zh) * | 2009-04-28 | 2012-09-05 | 青岛海信数字多媒体技术国家重点实验室有限公司 | 一种运动检测方法、装置和系统 |
TW201119353A (en) * | 2009-06-24 | 2011-06-01 | Dolby Lab Licensing Corp | Perceptual depth placement for 3D objects |
JP5407957B2 (ja) * | 2009-06-29 | 2014-02-05 | ソニー株式会社 | 立体画像データ送信装置および立体画像データ受信装置 |
JP5402715B2 (ja) * | 2009-06-29 | 2014-01-29 | ソニー株式会社 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
JP5369952B2 (ja) * | 2009-07-10 | 2013-12-18 | ソニー株式会社 | 情報処理装置および情報処理方法 |
JP2011029849A (ja) * | 2009-07-23 | 2011-02-10 | Sony Corp | 受信装置、通信システム、立体画像への字幕合成方法、プログラム、及びデータ構造 |
US9049431B2 (en) * | 2009-12-31 | 2015-06-02 | Cable Television Laboratories, Inc. | Method and system for generation of captions over stereoscopic 3D images |
-
2010
- 2010-07-06 KR KR1020100064932A patent/KR20120004203A/ko not_active Application Discontinuation
-
2011
- 2011-04-07 EP EP11161481.4A patent/EP2405665A3/en not_active Withdrawn
- 2011-07-05 US US13/176,224 patent/US20120007949A1/en not_active Abandoned
- 2011-07-06 JP JP2011149799A patent/JP2012019517A/ja active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11289555A (ja) * | 1998-04-02 | 1999-10-19 | Toshiba Corp | 立体映像表示装置 |
JP2006185033A (ja) * | 2004-12-27 | 2006-07-13 | Victor Co Of Japan Ltd | 擬似立体画像生成装置及び擬似立体画像生成プログラム並びに擬似立体画像表示システム |
JP2006186795A (ja) * | 2004-12-28 | 2006-07-13 | Victor Co Of Japan Ltd | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム |
JP2007053621A (ja) * | 2005-08-18 | 2007-03-01 | Mitsubishi Electric Corp | 画像生成装置 |
JP2010056737A (ja) * | 2008-08-27 | 2010-03-11 | Fujifilm Corp | 3次元表示装置および方法並びにプログラム |
JP2010130495A (ja) * | 2008-11-28 | 2010-06-10 | Toshiba Corp | 立体情報出力装置及び立体情報出力方法 |
WO2010064118A1 (en) * | 2008-12-01 | 2010-06-10 | Imax Corporation | Methods and systems for presenting three-dimensional motion pictures with content adaptive information |
WO2010122775A1 (ja) * | 2009-04-21 | 2010-10-28 | パナソニック株式会社 | 映像処理装置及び映像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
US20120007949A1 (en) | 2012-01-12 |
KR20120004203A (ko) | 2012-01-12 |
EP2405665A3 (en) | 2013-12-25 |
EP2405665A2 (en) | 2012-01-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8294754B2 (en) | Metadata generating method and apparatus and image processing method and apparatus using metadata | |
KR101185870B1 (ko) | 3d 입체 영상 처리 장치 및 방법 | |
EP2356818B1 (en) | Methods and systems for presenting three-dimensional motion pictures with content adaptive information | |
KR101539935B1 (ko) | 3차원 비디오 영상 처리 방법 및 장치 | |
EP2448276B1 (en) | GUI providing method, and display apparatus and 3D image providing system using the same | |
TWI444036B (zh) | 2d至3d使用者介面內容資料轉換 | |
JP5429034B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
JP2012019517A (ja) | ディスプレイ方法および装置 | |
EP2582143A2 (en) | Method and device for converting three-dimensional image using depth map information | |
KR20130095655A (ko) | 입체 컨텐츠의 3-차원적인 효과들을 요구에 맞추기 위한 방법 및 장치 | |
JP2004274125A (ja) | 画像処理装置および方法 | |
JP2014103689A (ja) | 立体映像エラー改善方法及び装置 | |
EP2434768A2 (en) | Display apparatus and method for processing image applied to the same | |
CN102457750A (zh) | 用于将对象数据插入立体图像中的方法和设备 | |
US10009592B2 (en) | Method and apparatus for processing 3-dimensional image including additional object in system providing multi-view image | |
KR20120023268A (ko) | 디스플레이 장치 및 그 영상 생성 방법 | |
EP2547114A2 (en) | Display apparatus and method for displaying 3D image thereon | |
US20120121163A1 (en) | 3d display apparatus and method for extracting depth of 3d image thereof | |
JP2011151773A (ja) | 映像処理装置及び制御方法 | |
US8416288B2 (en) | Electronic apparatus and image processing method | |
WO2013027305A1 (ja) | 立体映像処理装置、及び立体映像処理方法 | |
KR100503276B1 (ko) | 2차원 영상신호를 3차원 영상신호로 변환하는 장치 | |
KR20170033293A (ko) | 입체 비디오 생성 | |
KR101939243B1 (ko) | 입체 깊이 조정 및 초점 조정 | |
KR101907127B1 (ko) | 입체 비디오 주밍 및 비디오 내의 전경 및 배경 검출 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140620 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150703 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150818 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160301 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170207 |