CN102907108A - 生成装置、显示装置、再现装置、眼镜 - Google Patents

生成装置、显示装置、再现装置、眼镜 Download PDF

Info

Publication number
CN102907108A
CN102907108A CN2012800013570A CN201280001357A CN102907108A CN 102907108 A CN102907108 A CN 102907108A CN 2012800013570 A CN2012800013570 A CN 2012800013570A CN 201280001357 A CN201280001357 A CN 201280001357A CN 102907108 A CN102907108 A CN 102907108A
Authority
CN
China
Prior art keywords
image
glasses
display unit
positive
mentioned
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012800013570A
Other languages
English (en)
Inventor
池田航
小川智辉
矢羽田洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN102907108A publication Critical patent/CN102907108A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/324Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/361Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N2013/40Privacy aspects, i.e. devices showing different images to different viewers, the images not being viewpoints of the same scene
    • H04N2013/403Privacy aspects, i.e. devices showing different images to different viewers, the images not being viewpoints of the same scene the images being monoscopic

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Television Receiver Circuits (AREA)

Abstract

显示装置的抵消图像制作部(4a、4b)生成关于正图像的抵消图像。分时显示部(5)将正图像及抵消图像分时显示。正图像及抵消图像是在通过将影像信号的帧期间划分而得到的多个显示期间的各个显示期间中应作为分时显示的对象的图像。并且,构成抵消图像的各个像素的亮度设定为比从亮度的数值范围的最大值减去正图像的各个像素的亮度后的差值大的值。

Description

生成装置、显示装置、再现装置、眼镜
技术领域
本发明属于显示装置与眼镜的同步技术的技术领域。
背景技术
所谓显示装置与眼镜的同步技术,是通过使应在显示装置上显示的原图像与眼镜的闸门的状态同步、来切换使图像由用户看到或不看到的技术。通过这样,能够实现多视对应、多用户对应。所谓多视对应,是单独实现关于构成立体视的各个视(view)的显示及关于构成平面视的视的显示的方式。具体而言,是对应于左视的显示、右视的显示。所谓多用户对应,是将应使多个用户的各人视听的图像单独提供。
所谓显示切换,是切换在通过将1帧划分为4份、6份而得到的各个显示期间中应显示的内容。
在与眼镜的同步中,除了使用红外线的技术以外,还出现了使用Bluetooth(TM)等的技术的情况,也能够进行更细致的同步控制。
专利文献1:日本专利第3935507号公报
由多视对应的显示装置显示的立体视影像的内容是适合于配戴着眼镜的状态下的视听的,对于没有配戴眼镜的用户而言,显示在电视机上的画面内容是左右模糊的,所以看起来是不舒服的。由此,以往的多视对应的显示装置对于没有配戴眼镜的用户而言不能说是考虑充分的。
多用户对应也是同样的,在没有配戴眼镜的用户视听显示装置的画面的情况下,该显示画面的内容为对于两个以上的用户的图像数据重合的状态,成为不能理解该内容的不舒服的状况。
在是用多视对应的显示装置进行立体视显示的假定下提示了技术课题,但该假定只不过是在说明上述技术课题时选择了身边的题材,在本申请中作为对象的技术课题并不限定于多视对应的显示装置进行立体视显示的情形。将一些图像以分时用于切换显示时的视觉上的不舒服全部消除是在本申请中要解决的技术课题,是要在不远的将来将上述技术在工业产品的领域中实用化时、本领域的技术人员必定面对的技术障碍。
发明内容
本发明的目的是提供一种能够生成不会给没有配戴眼镜的用户带来不舒服的印象的图像的生成装置。
能够解决该问题的生成装置,是生成要使配戴着眼镜的用户视听的图像的生成装置,其特征在于,具备:取得单元,取得正图像;以及生成单元,生成关于所取得的正图像的抵消图像;上述眼镜是用户在对影像信号的帧期间中分时显示的多个图像中的某个图像进行视听时所配戴的眼镜;上述正图像及抵消图像是应作为上述分时显示的对象的图像;构成上述抵消图像的各个像素的亮度设定为比从亮度的数值范围的最大值减去正图像的各个像素的亮度后的差分值大的值。
通过对显示装置的显示方法、闸门眼镜的控制方法加以精心设计,并将某个图像与将该图像抵消的图像高速切换,使在有无眼镜时可看到的图像不同,所以能够解决上述问题。
附图说明
图1表示由记录介质、再现装置、显示装置、闸门式眼镜构成的家庭影院系统。
图2表示通过主动闸门式眼镜103的左眼图像、右眼图像的视听的一例。
图3表示左眼图像、抵消图像的组、和基于它们的分时显示的重合图像。
图4表示有关实施方式1的显示装置的内部结构。
图5表示样式(pattern)1的通过同步信号进行的与闸门式眼镜的同步、和通过分时处理部进行的分时显示。
图6表示样式2的基于同步信号进行的与闸门式眼镜的同步、和通过分时处理部进行的分时显示。
图7表示样式3的基于同步信号进行的与闸门式眼镜的同步、和通过分时处理部进行的分时显示。
图8表示样式4的基于同步信号进行的与闸门式眼镜的同步、和通过分时处理部进行的分时显示。
图9表示样式5的基于同步信号进行的与闸门式眼镜的同步、和通过分时处理部进行的分时显示。
图10表示抵消图像生成部4a、4b的内部结构的图。
图11表示用来求出Y、Cr、Cb的反转值的计算原理。
图12表示与0~255的数值范围的数据对应的画面上的明亮度的理论上的变化、和实际的变化。
图13将理论上的抵消图像的设定、实际的抵消图像的内容、和作为其对策的措施建立对应表示。
图14表示相对于表示正图像的亮度在0~255的范围中变化的情况下的亮度变化的直线,使抵消图像的亮度以过冲(overshoot)倾向变化的情形。
图15是显示装置的处理过程的主流程图。
图16表示有关第2实施方式的抵消图像生成部4a、4b的内部结构。
图17表示通过正图像的部分的抵消带来的视觉效果。
图18将正图像、抵消图像、由分时显示带来的重合图像适用到A+B=C的数学式中而表示。
图19表示第3实施方式的施加了特有的改良的再现装置的内部结构、显示装置的内部结构。
图20表示显示装置(显示器)的初始化过程的流程图。
图21表示有关第4实施方式的再现装置的内部结构。
图22表示有关第5实施方式的再现装置的内部结构。
图23是表示有关第5实施方式的显示装置的内部结构的图。
图24表示有关第5实施方式的闸门式眼镜的内部结构。
图25表示以带字幕图像、无字幕图像为对象的分时显示。
图26表示以带字幕图像和关于特定语言的声音为对象的分时显示。
图27表示有关第6实施方式的再现装置的内部结构。
图28表示有关第6实施方式的显示装置、闸门式眼镜的内部结构。
图29表示按照码序列以图像A的正图像、图像A的抵消图像的顺序显示的一例。
图30是根据使用情景的状况将第6实施方式的构成要素的处理内容补充的图。
图31表示通过比特宽扩展进行的误差对策的概念的图。
具体实施方式
具备上述课题解决手段的生成装置及显示装置的发明能够作为电视机设备实施,闸门式眼镜的发明能够作为用来通过该电视机设备视听立体视影像的闸门式眼镜实施。再现装置的发明能够作为用来将封装介质再现的播放器设备实施,集成电路的发明可以作为装入到这些设备中的系统LSI实施。程序的发明记录在计算机可读取的记录介质中,可以作为向这些设备安装的执行形式程序实施。
(第1实施方式)
本实施方式提供一种即使在没有配戴眼镜的用户视听显示装置的画面的情况下也不会给用户带来不适感的多视对应的生成装置、多用户对应的生成装置。
即,在到目前为止的多视对应的显示装置中,没有配戴眼镜的用户视听时的显示内容为将两个以上的视点图像数据重合,所以该重合影像成为障碍,对于显示敦促将眼镜去除那样的消息是不适当的。由于两个以上的视点图像数据重合那样的图像碍眼,所以即使为了店面展示而设置,也要满足找来用户的这一个目的。在本实施方式中谋求相关问题的解决。
图1表示由再现装置、显示装置、闸门式眼镜构成的家庭影院系统。该家庭影院系统如图1所示,由再现装置100、光盘101、遥控器102、主动闸门式眼镜103、显示装置200构成,供用户的使用。
再现装置100与显示装置200连接,将记录在光盘101中的内容再现。
光盘101对上述家庭影院系统例如供给电影作品。
遥控器102是从用户受理对分层GUI(图形用户界面)的操作的设备,为了受理相关操作,遥控器102具备将构成GUI的菜单调出的菜单键、使构成菜单的GUI部件的焦点移动的方向键、对构成菜单的GUI部件进行确定操作的决定键、用来使分层菜单返回更上级的菜单的返回键、数值键。
主动闸门式眼镜103在通过将帧划分而得到的多个显示期间的各个期间中,将右眼闸门、左眼闸门中的某一个关闭,使另一个成为开状态。通过这样,构成立体视影像。在左眼图像的显示期间中,将右眼侧的闸门设定为闭状态。在右眼图像的显示期间中,将左眼侧的闸门设定为闭状态。闸门式眼镜具备无线通信功能,能够根据来自显示装置200的请求将内置电池的剩余量向显示装置发送。
显示装置200显示电影作品的立体视影像。在立体视影像的显示时,在通过将一帧划分而得到的多个显示期间的各个期间中,显示构成立体视影像的两个以上的视点图像数据。如果没有配戴闸门式眼镜的用户观看该再现装置200的画面,则成为在两个以上的视点图像数据(在图中是左眼图像、右眼图像)重合的状态下观看。
图2表示通过主动闸门式眼镜103的左眼图像、右眼图像的视听的一例。视线vw1表示由主动闸门式眼镜103将右眼遮光的情况下的影像的入射。视线vw2表示由主动闸门式眼镜103将左眼遮光的情况下的影像的入射。成为通过该vw1视听左眼图像。此外,成为通过vw2视听右眼图像。通过配戴主动闸门式眼镜103,成为用户交替地视听右眼图像、左眼图像,将立体视图像再现。在图2中,可知在上述两个视线交叉的地方出现了立体视影像。
(第1实施方式)
如上述图2所示,显示装置200的画面内容以主动闸门式眼镜103的配戴为前提,所以不适合没有配戴闸门式眼镜情况下的视听。所以,将没有配戴闸门式眼镜的视听考虑在内,在实施方式1中,通过设置关于左眼图像、右眼图像的各自的抵消图像,将该抵消图像以与右眼图像、左眼图像相同的比率再现,在没有配戴闸门式眼镜的状态下的视听中,使左眼图像或右眼图像看不到。
图3表示左眼图像与抵消图像的组、和它们的基于分时显示的重合图像。在图3中,在+标记左侧描绘了左眼图像的正图像。在+标记的右侧描绘了左眼图像的抵消图像。=标记的右侧描绘通过将这些正图像、抵消图像进行分时显示而得到的重合图像。构成图像B的抵消图像的像素是将图像A的像素抵消的像素,所以通过它们的分时显示,将存在于图像A内的图案的亮度均匀化。通过将这样的分时显示对左眼图像、右眼图像分别进行,使得在不配戴闸门式眼镜的视听中看不到正图像的图案。在本实施方式中,利用通过将正图像和抵消图像用于分时显示而仅能看到没有浓淡的画面从而不能辨识正图像的效果,能够使得配戴着闸门式眼镜的人看到正确的图像,而没有配戴闸门式眼镜的人不能辨识图像。对照地,通过闸门式眼镜的闸门功能,对于配戴着闸门式眼镜的人,通过仅能看到正图像而不能看到抵消图像,使得仅由配戴着闸门式眼镜的人能看到正确的图像。
实施了上述改良的显示装置的内部结构成为图4那样。图4表示有关实施方式1的显示装置的内部结构。如图4所示,显示装置由设备间接口1、左眼帧存储器2a、右眼帧存储器2b、存储器控制器3a、3b、抵消图像生成部4a、4b、分时处理部5、显示电路6、配置寄存器7、显示样式生成部8、同步信号发送部9构成。
在图4中,有特征性的是帧存储器、抵消图像生成部分别存在多个系统,将该多个系统中的某个系统的输出提供给显示电路6这一点。这些多个系统为了实现多视对应、多用户对应而存在。本装置是假设了左眼图像、右眼图像的处理的装置,所以在该内部结构的构成要素中,存在是相同的结构、但用途因左眼用或右眼用而不同的要素。对于这样是相同的结构、但用途因左眼用或右眼用而不同的要素,通过相同的数值与英文字母a、b的结合来与其他构成要素区别。此外,是相同的结构、但用途因左眼用或右眼用而不同的构成要素作为结构是相同的,所以仅说明共用的处理。
在本图中,将帧存储器、抵消图像生成部的系统数设为"2"。这是能够对应于2视(左眼及右眼)、并且用来对应于2用户(配戴着闸门式眼镜A的用户A、配戴着闸门式眼镜B的用户B)的所需最低限度的结构。以下,对显示装置的构成要素进行说明。
设备间接口1例如通过依据HDMI规格的多媒体电缆、复合电缆(composite cable)、组件电缆(component cable)进行已解码的影像及声音的传送。特别是,HDMI除了影像以外还能够附加各种属性信息。
左眼用帧存储器2a将通过设备间接口转送来的左眼图像数据按照每帧进行保存。
右眼用帧存储器2b将通过设备间接口转送来的右眼图像数据按照每帧进行保存。
存储器控制器3a、3b生成对帧存储器的读出目的地地址,对帧存储器2命令从该读出目的地地址读出数据。
抵消图像制作部4a、4b通过将正图像的各像素的像素值使用规定的函数变换而生成抵消图像,向显示电路6输出。
分时处理部5在通过将1帧期间划分而得到的多个显示期间的各个显示期间中进行正图像的读出,将左眼正图像、左眼抵消图像、右眼正图像、右眼抵消图像中的某一方有选择地向显示电路6输出。
显示电路6由将多个有机EL元件、液晶元件、等离子元件这样的发光元件以矩阵状排列的显示面板;安装在显示面板的四边上的驱动电路;和元件控制电路构成,按照构成保存在帧存储器2a、2b中的图像数据的像素,进行发光元件的闪烁。
配置寄存器7是将画面尺寸及画面模式、还有厂商名、模型名保存的非易失性存储器。
显示样式生成部8生成作为分别实现多视模式、多用户模式时的显示样式的帧内切换样式。所谓帧内切换样式,是决定在通过将一帧划分而得到的多个显示期间中分别显示正图像还是显示抵消图像的。在实现多视模式的情况下,在正图像中有左眼图像L、右眼图像R、平面视专用图像2D这样的种类。在实现多用户模式的情况下,在正图像中有面向用户A的图像A、面向用户B的图像B。如果划分数是4,则在帧内能够得到4个显示期间。将该4个显示期间分别设为显示期间1、显示期间2、显示期间3、显示期间4,对各显示期间分配正图像、抵消图像中的某一方。应在一帧内分配的正图像的总数、应在一帧内分配的抵消图像的总数必须相同。这里,正图像、抵消图像是应在通过将1帧期间划分而得到的各个显示期间中显示的,所以必须在对“视”及用户的组合分配的显示期间到来前决定下个应显示的正图像是哪个、抵消图像是哪个。
同步信号发送部9制作对应于帧内切换样式的同步信号并发送。发送的同步信号是规定在一帧内的各个显示期间中怎样设定各用户的闸门式眼镜的左眼闸门及右眼闸门的状态的信号。在是多视模式的情况下,基本上用户是一个,将该用户配戴的闸门式眼镜的闸门的状态按照左眼、按照右眼切换。在是多用户模式的情况下,用户为多人,但开闭状态的设定为在左眼-右眼中共用的设定。即,应在多用户模式下发送的同步信号是将各用户配戴的闸门式眼镜的左眼闸门及右眼闸门的状态按照用户切换的信号。在该开闭控制中,各用户能看到或不能看到通过将一帧期间划分而得到的多个显示期间中的特有的显示期间的图像。为了该多用户对应,同步信号发送部9对同步信号附加闸门式眼镜识别码并发送。该闸门式眼镜识别码是确定应使用该同步信号的闸门式眼镜的识别码。多个用户的各人配戴的闸门式眼镜的控制部通过进行仅取得附有自身的识别码的同步信号、忽视其以外信号的控制,用户能够视听按照用户而不同的影像。这样,结束显示装置的内部结构的说明。
在将通过划分1帧期间而得到的各个显示期间对多视的各个视及多用户的各个用户怎样分配的分配样式中,有各种各样的样式。选择典型的5个样式(样式1~5),说明在这些样式中、分时处理部5、同步信号发送部9怎样进行处理。在以后的说明中,假设多用户中的两个用户A、B分别应视听的图像为图像"A"、"B"。此外,将多视中的左眼图像称作"L",将右眼图像称作"R",将与左眼图像及右眼图像不同地为了平面视再现而准备的图像称作"2D"。
·样式1
样式1是使多个用户分别视听图像A、B的样式。图5表示样式1的通过同步信号进行的与闸门式眼镜的同步、和通过分时处理部进行的分时显示。在图5(a)中,可知正图像A、抵消图像A、正图像B、抵消图像B被依次用于分时显示。将这些正图像、抵消图像同时显示,通过将正图像与抵消图像重合而进行图像A、B的全消除。图5(b)表示由同步信号发送部发送的同步信号。在图5(b)中,最初的1/4帧的显示期间是开,其余的显示期间是闭。由此,配戴着闸门式眼镜A的用户仅看到图像A。
图5(c)表示对闸门式眼镜B的同步控制。在图5(c)中,可知仅第3个1/4帧期间打开、其余的期间关闭。由此,仅能看到图像B。
没有配戴闸门式眼镜的人由于看到全部的图像,所以将正图像A、B与抵消图像A、B通过分时显示而重合,辨识没有浓淡的图像。闸门式眼镜A仅在显示有正图像A时闸门打开,其以外时关闭。配戴着闸门式眼镜A的人仅能看到正图像A,看不到其他图像,所以看不到抵消图像A。由此,能够辨识正图像A。
闸门式眼镜B仅在显示有正图像B时闸门打开,其以外时关闭。配戴着闸门式眼镜B的人仅能看到正图像B,看不到其他图像,所以看不到抵消图像B,能够辨识正图像B。
在图5的显示期间P1中同步信号发送部9需要使配戴着闸门式眼镜A的用户视听图像A,所以需要制作使用户A的左眼为开状态、右眼为闭状态、使用户B的左眼为闭状态、右眼为开状态的同步信号。在显示期间P3中,同步信号发送部9需要制作使闸门式眼镜A的左眼为闭状态、右眼为闭状态、使闸门式眼镜B的左眼、右眼为开状态的样式。在显示期间的开始时期到来之前发送表示该样式的同步信号,并且通过该样式进行图像切换。
·样式2
样式2是执行明亮度调整的样式。在图6(a)中,可知正图像A、抵消图像A、正图像A、抵消图像A依次被用于分时显示。通过将这些正图像、抵消图像同时显示,来进行全部消除。图6(b)表示由同步信号发送部发送的同步信号。最初的1/4帧的显示期间是开,剩余的显示期间是闭。由此,配戴着闸门式眼镜A的用户仅看到明亮度较低的图像。
图6(c)表示对闸门式眼镜B的同步控制。在图6(c)中,可知仅第2个1/4帧期间关闭、其余期间打开。由此,能看到较高明亮度的图像。
在以上的图6(b)中,仅最初的1/4帧期间打开,其余关闭。通过这样,在整体的3/4的时间中被关闭,所以影像变暗。在该图6中,闸门式眼镜A仅在显示有正图像A时闸门打开,在其以外时关闭,但除了显示有正图像A时以外、在显示有正图像B和抵消图像B时也将闸门打开的情况也是有效的。通过这样,通过将正图像B与抵消图像B重合,结果仅能够辨识正图像A,由于更多的时间闸门打开,所以起到能够使图像看起来明亮的效果。
·样式3
样式3是在没有闸门式眼镜的情况下看到图像A、如果配戴闸门式眼镜则能看到图像B的例子。
图7表示在没有闸门式眼镜的情况下能看到图像A、如果配戴闸门式眼镜则能看到图像B的样式3。在图7中,反复正影像
Figure BDA00002416445400101
以高速切换显示。在该图7(a)中可知,在通过将1帧划分为6份而得到的1/6帧期间中将正图像A、正图像B、抵消图像B、正图像A、正图像B、抵消图像B依次用于分时显示。图7(b)表示没有配戴闸门式眼镜的状态下的视听。通过将正图像B及抵消图像B同时显示,将图像B全部消除,仅能看到图像A。图7(c)表示对闸门式眼镜发送的同步信号。第2个、第5个1/6帧的显示期间是开,其余的显示期间是闭。由此,配戴着闸门式眼镜B的用户仅看到图像B。
如以上这样,在没有配戴闸门式眼镜的情况下,正图像B与抵消图像B被重合而不能辨识到,所以仅能够辨识正图像A。在配戴着闸门式眼镜的情况下,由于在正图像B的定时,闸门打开,所以能够看到正图像B。
·样式4
样式4是使配戴着闸门式眼镜的用户视听立体视影像、使没有配戴闸门式戴眼镜的用户能看到构成立体视影像的左眼图像、右眼图像中的一方的样式。
图8表示样式4中的立体视处理的分时显示。在该图8(a)中可知,在通过将1帧划分为6份而得到的1/6帧期间中,将左眼正图像L、右眼正图像R、左眼抵消图像R、左眼正图像L、右眼正图像R、右眼抵消图像R依次用于分时显示。图8(b)表示没有配戴闸门式眼镜时的视听。通过将右眼正图像及右眼抵消图像同时显示,将右眼图像R全部消除,仅能看到左眼图像L。图8(c)由于在第1个1/6帧的显示期间中左眼闸门开、在第2个1/6帧的显示期间中右眼闸门开、在第4个1/6帧的显示期间中左眼闸门开、在第5个1/6帧的显示期间中右眼闸门闭、在其余的1/6帧的显示期间中全部是闭,所以配戴着闸门式眼镜的用户能够视听左眼图像L、右眼图像R的正图像,看到立体视影像。
在该图8中,由于反复将正影像
Figure BDA00002416445400103
Figure BDA00002416445400104
,为2D图像看到。配戴着闸门式眼镜的人由于在显示有左眼正图像时左眼的所以没有配戴闸门式眼镜的用户仅能够辨识左眼正影像,能够作闸门打开、在显示有右眼正图像时右眼的闸门打开,所以能够看到由左眼正图像和右眼正图像形成的3D图像。该方法在没有配戴闸门式眼镜的人能看到的2D图像与3D图像的左眼图像相同的情况下是有效的。
·样式5
样式5是使配戴着闸门式眼镜的用户看到立体视图像、使没有配戴闸门式眼镜的用户视听与构成该立体视图像的左眼图像、右眼图像不同的2D图像的样式。
在图9(a)中可知,在通过将1帧划分为6份而得到的1/6帧期间中,将2D图像、左眼正图像L、左眼抵消图像L、右眼正图像R、右眼抵消图像R、2D图像依次用于分时显示。图9(b)表示没有配戴闸门式眼镜时的视听。通过将左眼图像及左眼抵消图像、右眼正图像及右眼抵消图像同时显示,将左眼图像及右眼图像全部消除,仅能看到2D图像。图9(c)表示对闸门式眼镜发送的同步信号。在第2个1/6帧的显示期间中左眼闸门开,在第4个1/6帧的显示期间中右眼闸门开,在其余的1/6帧的显示期间中全部是闭。在对应于该开的显示中,将左眼图像,右眼图像交替地显示,所以配戴着闸门式眼镜的用户看到立体视影像。
由于将正影像
Figure BDA00002416445400111
Figure BDA00002416445400112
一边高速切换一边显示,所以没有配戴闸门式眼镜的用户通过左眼正图像与右眼正图像被抵消而仅能够辨识正图像2D。配戴着闸门式眼镜的人由于在显示有左眼正图像时左眼的闸门打开、在显示有右眼正图像时右眼的闸门打开,所以能够看到由左眼正图像和右眼正图像形成的3D图像。
以上,结束对显示样式的说明。图4的构成要素中的抵消图像制作部4a、4b是作为装置的核心的结构,在本实施方式中担负特别重要的作用。聚焦于该抵消图像制作部4a、4b的内部结构,更详细地说明抵消图像制作部4a、4b的内部结构。抵消图像制作部4a、4b是生成抵消图像的生成装置,具备图10所示那样的内部结构。图10是表示抵消图像制作部4a、4b的内部结构的图。如本图所示,抵消图像制作部4a、4b由变换式储存器11a、11b、运算器12a、12b、延迟电路13a、13b构成。本装置是假设了左眼图像、右眼图像的处理的装置,所以在该内部结构中的构成要素中,存在是相同的结构、但用途因左眼用或右眼用而不同的要素。关于这样是相同的结构、但用途因左眼用或右眼用而不同的要素,通过相同的数值与英文字母a、b的结合来与其他构成要素区别。此外,是相同的结构、但用途因左眼用或右眼用而不同的构成要素作为结构是相同的,所以仅说明共用的处理。
<变换式储存器11a、11b>
变换式储存器11a、11b保存有多个变换式。这些变换式与显示装置的尺寸和画面模式的组合建立了对应,根据当前的画面模式与画面尺寸的组合而将某个变换式取出。关于1个显示装置的1个模型,由于存在50英寸、42英寸、37英寸等各种各样的尺寸,所以将唯一的变换式与这些画面尺寸建立对应。此外,在该画面尺寸中,也能够以高对比度模式、平滑模式(smooth mode)或电影模式等的各种各样的模式显示图像。由此,变换式储存器11a、11b保持数学式代码及修正参数,该数学式代码及修正参数用于确定次数及系数匹配于各个画面模式而不同的变换式。在显示装置自身拥有变换式的情况下,显示装置的制作者掌握着显示装置的特性,所以将次数及系数匹配于特性而不同的变换式保持在非易失性存储器中。这里,在变换式储存器11a、11b中的变换式的保存形态中,有将分别表示多个变换式的数学式代码进行数据库化而保存的形态、和以变换式的系数及次数为修正参数进行数据库化而保存的形态。
<运算器12a、12b>
运算器12a、12b将构成正图像的亮度Y、红色差Cr、蓝色差Cb变换到抵消图像的像素值位置。关于红色差Cr、蓝色差Cb变换为反转值。关于亮度Y,使用变换式(g(Y))及修正参数变换为抵消图像的像素值。变换式g(Y)如果将与显示装置200的画面尺寸及显示装置200的当前画面模式对应的变换式设为gsize、mode,则位于画面上的任意的X坐标的亮度Y(x,y)通过变换式gsize、mode变换。
在该变换时,应怎样将构成正图像的像素值的亮度Y、红色差Cr、蓝色差Cb抵消的处理变得重要。该处理的基本原理是重要的,所以与上述内部结构不同地准备说明图进行详细的说明。一边参照这些说明图一边进行详细的说明。
图11表示用来求出Y、Cr、Cb的反转值的计算原理。图11(a)表示用来将R、G、B变换为Y、Cr、Cb的变换矩阵。变换矩阵是以a、b、c、d、e、f、g、h、i为要素的3×3的行列式。图11(b)表示该行列式的要素a、b、c、d、e、f、g、h、i的值。图11(c)表示R、G、B的要素的反转值。该反转值是1-R、1-G、1-B。图11(d)表示Y、Cr、Cb的反转值、和R、G、B的反转值。在图11(d)中,亮度Y、红色差Cr、蓝色差Cb的反转值通过使用以a、b、c、d、e、f、g、h、i为要素的变换式将像素的RGB值变换而得到。图11(e)表示行列式a、b、c、d、e、f、g、h、i的要素间的关系。图11(f)图11(g)表示Y、Cr、Cb的反转值与R、G、B、Y、Cr、Cb的关系。由此,Y与其反转值的和为1,色差Cb与其反转值的和为0,色差Cr与其反转值的和为0。
由图11(g)可以理解,在通过分时表进行的正图像的抵消中,只要对构成正图像的亮度Y、红色差Cr、蓝色差Cb分别得到反转值,制作以该反转值为像素值位置的抵消图像就可以。但是,实际的像素的明亮度并不是相对于亮度的数据线性地变化。图12表示与0~255的数值范围中的数据相对的画面上的明亮度的理论上的变化、和实际的变化。图12(a)是表示将横轴规定为从0到255的数据内的亮度值的范围,将纵轴规定为期待的明亮度的表示明亮度变化的曲线图。如该图12(a)所示,如果亮度变高则画面成比例地变亮的比例关系为理想的变化。图12(b)的曲线图表示实际的变化。可知,本图中的明亮度的变化相对于从0到255的数据内的亮度值的变化,实际的画面的明亮度非线性地变化。
对画面具有1920×1080的分辨率,亮度从画面的左端向右端提高而形成渐变的情况下的图像的抵消方式进行说明。图13将理论上的抵消图像的设定、实际的抵消图像的内容、和作为其对策的措施建立对应表示。
首先,说明对应于画面上的从0到1919的坐标值,抵消图像的亮度如何变化较好这样的理论上的亮度变化。图13(a)是与坐标对应的正图像的亮度变化及抵消图像的亮度变化,表示期待的变化。在该图中,在正图像和抵消图像中,亮度的和为255。如果正图像的亮度是0,则使抵消图像的亮度为255,如果正图像的亮度是128,则使抵消图像的亮度为127,如果正图像的亮度是255,则使抵消图像的亮度为0。在此情况下,正图像的亮度相对于坐标单调增加,抵消图像的明亮度相对于坐标单调减小。这样,可以期待重合画面的明亮度相对于坐标变化是恒定的。
但是,在现实中,正图像、抵消图像不如图13(a)那样变化,正图像、抵消图像相对于画面的坐标变化如图13(b)那样变化。图13(a)是理论上的变化,相对于此,图13(b)是与坐标对应的正图像的亮度变化及抵消图像的亮度变化,表示实际的变化。如该图所示,正图像的亮度相对于画面上的坐标如曲线cv2所示那样曲线性地增加,抵消图像的亮度也相对于画面上的坐标如曲线cv1所示那样曲线性地减小。这样,通过将正图像、抵消图像进行分时显示带来的重合图像的变化如图中的cv3所示那样为U字曲线所示的变化,不是恒定的。这样,通过正图像和抵消图像的分时显示带来的重合图像的观感上的明亮度不恒定,所以在将正图像和抵消图像交替地切换的情况下,正图像的形状隐约浮现,某种程度上可看到正图像的图案。
为了在画面整个区域中没有浓淡地辨识通过分时显示带来的重合图像,需要设定抵消图像的亮度,以使得在正图像的某个坐标中,人的视觉特性与施加了基于显示装置的亮度修正后的明亮度、和抵消图像的相同坐标的明亮度的重合结果为恒定,抵消图像的亮度值应更偏向于亮度较高的一方。图13(c)表示抵消图像的亮度变化的理想形态。在本图中,正图像的像素的变化为曲线cv3所示的变化。相对于该正图像的像素变化,如曲线cv4所示,将在纵轴的中心与正图像的变化对称的变化作为抵消图像的变化。如果这样使抵消图像的变化为线对称,则将正图像、抵消图像进行分时显示而带来的重合图像的明亮度成为恒定。
具体而言,使正图像的亮度如图14那样变化。图14表示相对于表示正图像的亮度在0~255的范围内变化的情况下的亮度变化的直线,使抵消图像的亮度以过冲倾向变化的情形。过冲倾向的变化通过将比从最大亮度减去正图像的亮度后的差分还大的值设为抵消图像的亮度来进行。该图14的曲线很受显示装置的画面特性影响。在显示装置中,根据面板特性或模式来调整信号的值和实际对该点赋予的能量的量,但它不是信号值与能量的量的一次函数,即使例如为线性比例,也不一定在人的眼睛中线性地反应。由此,该曲线优选的是经验性地导出。
通过将比从最大亮度减去正图像的亮度后的差分还大的值作为抵消图像的亮度,使抵消图像的亮度变化,能够将正图像的图案抵消。抵消图像的变化只要是满足比从最大亮度减去正图像的亮度后的差分还大的值的条件,是怎样的变换都可以,可以通过相对于亮度的n次函数来规定。怎样规定抵消图像的亮度的过冲倾向的变化,是按照显示装置的画面模式、显示装置的画面尺寸而变化。由此,在本实施方式中,预先将作为系数、次数不同的多个变换式的表示上述n次函数的变换式预先保存。并且,通过对这些变换式分别分配画面模式与画面尺寸的组合,从而使显示装置适合于当前的画面模式、画面尺寸。
<延迟电路13a、13b>
延迟电路13a、13b使从运算器12a、12b向分时处理部5的传送延迟规定的时间。
以上,结束对抵消图像制作部4a、4b的内部结构的说明。有关本实施方式的显示装置可以通过将上述那样的显示装置的各构成要素用ASIC等的硬件集成元件具体实现来进行工业生产。在该硬件集成元件中采用CPU、代码ROM、RAM等的通用的计算机架构的情况下,必须将用计算机代码记述了上述那样的各构成要素的处理过程的程序预先装入到代码ROM中,使硬件集成元件内的CPU执行该程序的处理过程。在采用通用的计算机系统的架构的情况下,对在软件安装中需要的处理次序进行说明。
图15是显示装置的处理过程的主流程图。步骤S1~步骤S2形成循环。步骤S1是是否进行了画面模式设定的判断,步骤S2是是否进行了多视模式或多用户模式的设定的判断。如果进行模式设定,则在步骤S3中显示设置菜单,在步骤S4中进行操作受理。然后,在步骤S5中将设定内容写入到配置寄存器中后,回到步骤S1~步骤S2的循环。如果在步骤S2中为“是”,则在步骤S6中将确定与当前画面模式及画面尺寸对应的变换式的数学式代码及修正参数设定到抵消图像生成部中,并向步骤S7转移。步骤S7是帧内显示期间的开始时期是否到来的时间等待。如果开始时期到来,则在步骤S8中从A、B、L、R、2D中确定应通过帧内切换样式显示的图像,在步骤S9中判断应显示的图像是否是A、B、L、R、2D的正图像。如果是正图像,则在步骤S10中将A、B、L、R、2D的正图像向显示部输出,在步骤S13中,将按照用户指定左眼的闸门状态、右眼的闸门状态的同步信号向各用户发送。然后,在步骤S14中判断多视模式或多用户模式是否结束,如果没有结束,则转移到步骤S7。如果应显示的图像不是A、B、L、R、2D的正图像,则使用在步骤S11中设定的变换式将A、B、L、R、2D的正图像的亮度变换,得到抵消图像。然后,在步骤S12中将抵消图像向显示电路输出。然后,在步骤S13中,将按照用户指定了左眼的闸门状态、右眼的闸门状态的同步信号向各用户发送。然后,在步骤S 14中判断是否模式已结束,如果没有结束,则向步骤S7转移。
如以上这样,根据本实施方式,在构成立体视影像的两个以上的视点图像数据是左眼图像、右眼图像的组的情况下,在一帧期间内将左眼图像的正图像、左眼图像的抵消图像、右眼图像的正图像、右眼图像的抵消图像以分时进行显示,所以在没有配戴闸门式眼镜的状态下的视听时,左眼的正图像、右眼的正图像的内容被抵消图像抵消。通过这样,用户辨识为画面整体的明亮度为均匀的影像,所以即使在将本生成装置作为多视对应的显示装置设置在店面中的情况下,也不会使用户感到不舒服。
此外,只要在左眼图像的抵消图像、右眼图像的抵消图像的显示期间中,实现将用户配戴的闸门式眼镜的闸门关闭的控制,就能够使配戴着闸门式眼镜视听的用户看到影像,而对于没有配戴的用户能够将影像隐蔽。这样,能够仅使配戴着闸门式眼镜的特定的用户视听立体视影像。
在将与正图像、抵消图像分别对应的比较期间在1帧内分配有多个的情况下,通过仅将与抵消图像建立了对应的多个显示期间中的哪个进行闸门的开期间的设定,从而能够控制画面的明暗。
{发明的效果}
本实施方式所记载的生成装置的发明,是生成要使配戴着眼镜的用户视听的图像的生成装置,其特征在于,具备:取得单元,取得正图像;以及生成单元,生成关于所取得的正图像的抵消图像;上述眼镜是用户在对影像信号的帧期间中分时显示的多个图像中的某个图像进行视听时所配戴的眼镜;上述正图像及抵消图像是应作为上述分时显示的对象的图像;构成上述抵消图像的各个像素的亮度设定为比从亮度的数值范围的最大值减去正图像的各个像素的亮度后的差分值大的值。
根据本发明,在多视对应中显示装置应显示的正图像是左眼图像、右眼图像的组的情况下,在一帧期间内,将左眼图像的正图像、左眼图像的抵消图像、右眼图像的正图像、右眼图像的抵消图像分时显示,所以在没有配戴眼镜的状态下的视听时,左眼的正图像、右眼的正图像的内容被抵消图像抵消。通过这样,用户辨识为画面整体的明亮度一样的影像,所以即使在将多视对应的显示装置设置在店面中的情况下,也不会使用户感到不舒服。通过这样,产品厂商能够将新的商品向市场送出,能够成功进行企业的品牌形象的建立及市场份额的获得。由此,上述生成装置的发明给国内产业带来各种各样的贡献。
此外,如果实现在左眼图像的抵消图像、右眼图像的抵消图像的显示期间中将用户配戴的眼镜的闸门关闭的控制,则能够使配戴着眼镜的用户视听影像,对不是配戴着眼镜的用户将影像隐藏。这样,能够仅使配戴着眼镜的特定的用户视听立体视影像。
由此,在用户看到多用户对应、多视对应的影像的情况下,也不会有不舒服的感受。进而,在抵消时,由于画面整体的亮度变化是一样的,所以通过将敦促眼镜的配戴那样的消息作为显示的对象,能够敦促眼镜非配戴者准备眼镜。
虽然是任意的,但其特征也可以是,上述眼镜是闸门式眼镜;上述生成装置是显示装置;具备:显示单元,在1帧期间内,使正图像和抵消图像分时显示;发送单元,向眼镜发送同步信号,该同步信号规定了当开始显示正图像或抵消图像中某一方时眼镜的左眼闸门的开闭状态及右眼闸门的开闭状态。
在分别对应于正图像、抵消图像的显示期间在1帧内被分配了多个的情况下,通过调整将与抵消图像建立了对应的多个显示期间中的哪个显示期间设定为闸门的开状态、闭状态中的某一种状态,能够控制画面的明暗。
虽然是任意的,但也可以是,在上述正图像中,有面向配戴着眼镜的用户的图像、和面向没有配戴眼镜的非配戴用户的图像,关于面向配戴用户的图像,1帧期间中的正图像及抵消图像的出现频度相等;由上述发送单元发送的同步信号在抵消图像的显示期间中使左眼闸门的状态及右眼闸门的状态都为闭状态。还能够提供在没有眼镜的情况下能看到2D图像,而如果配戴眼镜则能看到3D图像的视听方法。
(第2实施方式)
第1实施方式说明了作为正图像、抵消图像的切换方法而导入对全画面的分时显示的一例,但在本实施方式中,涉及在画面的一部分中实现正图像、抵消图像的切换的改良。被施加了该改良的部位是第1实施方式所示的抵消图像制作部的内部。图16表示有关第2实施方式的反转运算器12a、12b的内部结构。本图是以图10的内部结构为基础作图的,与作为其基础的内部结构相比,新追加了图像合成部144a、144b这一点是新的。以下,对追加的构成要素进行说明。
<空间划分显示部14a、14b>
空间划分显示部14a、14b通过在通过将显示画面划分而得到的区域的一部分中,按照每个方格(checker board)、按照每行切换正图像和抵消图像来实现空间划分显示。所谓行,是由画面的横一列的像素构成的矩形区域,所谓方格,是通过将画面划分为微小的矩形而得到的微小区域。通过这些按照每个方格/按照每行显示正图像、抵消图像,也能够进行正图像、抵消图像的重合。由此,在没有配戴闸门式眼镜的状态下观看显示装置的画面时,画面的亮度变得一样而什么都看不到。另一方面,通过控制闸门式眼镜的闸门状态、以使得按照每个方格/按照每行配置的正图像、抵消图像中的正图像透过,配戴着闸门式眼镜的用户能够视听正图像。
随着新构成要素的追加,对于已有的构成要素(抵消图像生成部4a、4b)也施加了本实施方式特有的改良。对施加了这些改良的构成要素进行说明。
抵消图像生成部4a、4b通过将正图像的像素中的一部分基于变换式变换,实现部分性的分时显示。通过这样,能够将一部分的像素被置换为抵消像素后的抵消图像、和正图像,作为分时显示的对象。通过将这样进行了部分置换后的抵消图像作为分时显示的对象,实现正图像的部分性的抵消。以上是对有关第3实施方式的构成要素的追加、改良的说明。
接着,说明对于正图像的部分性的抵消的技术意义。在对于正图像的部分性的抵消中,必须使作为分时显示及空间划分显示的对象的区域与作为对象外的区域的明亮度平衡。图17表示通过部分性的抵消带来的视觉效果。画面的上半部将100%、0%的像素作为部分性的分时显示的对象,画面的下半部将50%、50%的像素作为部分性的分时显示的对象。在此情况下,用户感到上半部比下半部明亮。这也是由视觉特性及显示装置的修正带来的。通过将100%、0%的像素交替显示,也能够实现适合视听的显示。这在空间划分的情况下也是同样的。
正图像在亮度的值是作为最大亮度的数据、抵消图像是亮度0的数据的情况下,通过将正图像与抵消图像以分时进行显示而得到的重合图像的各自的亮度看起来比50%的图像彼此的重合结果要明亮。这意味着将较亮的点和较暗的点交替地显示的情况下较亮的点被更清楚地看到的人类视觉特性、和将两个图像高速地切换的切换显示时的亮度不是这些图像的亮度的平均值,而被显示装置的修正功能修正为明亮的亮度。根据本图可知,在较暗的地方,在观感上不与亮度值的变化同等地辨识出明亮度的变化,而在较亮的地方,亮度值仅稍稍变化,在观感上辨识的明亮度就较大地变化。
图18将正图像、抵消图像、通过分时显示/空间划分显示形成的重合图像适用于A+B=C这样的数学式而表示。相当于该A的是正图像,相当于B的是抵消图像,C是通过分时显示带来的重合图像。当将正图像,抵消图像以分时切换时,通过人的眼睛的残像在大脑内将正图像与抵消图像重合,得到整面被消除的内容的重合图像。图18(a)将画面整体作为高速切换的对象,但如果将画面的部分区域作为高速切换的对象,则成为进行部分消除。图18(b)是用数学式的形态表示将画面的下半部作为高速切换的对象的情况下的正图像、抵消图像的重合的附图。如该数学式的右边所示,下半部被部分消除。如图18(b)那样,通过仅将画面下部作为抵消图像,还能够仅不能辨识画面的一部分。
如以上这样,根据本实施方式,由于将正图像的一部分作为图像切换的对象,所以例如在智力游戏的运动图像内容中,能够实现在闸门式眼镜的非配戴时仅将智力游戏的答案隐藏,而如果配戴闸门式眼镜则能看到答案那样的导入了闸门式眼镜的对话性,能够扩大使用内容的对话控制的领域。
(第3实施方式)
在第1实施方式中,显示装置200选择在抵消图像制作中使用的变换式,但在本实施方式中,涉及再现装置选择在抵消图像制作中使用的变换式的改良。即,在与显示装置连接的再现装置保持用于确定变换式的数学式代码及修正参数的情况下,再现装置从显示装置取得所连接的显示装置的识别信息、例如模型信息(型号信息)和选择中的画面模式,按照用于确定与显示装置和画面模式相符的变换式的数学式代码及修正参数,再现装置生成抵消图像。施加了本实施方式特有的改良的再现装置的内部结构为图19那样。图19是表示有关第3实施方式的再现装置的内部结构的图。本装置是假设了左眼图像、右眼图像的处理的装置,所以在该内部结构的构成要素中,存在是相同的结构、但用途因左眼用或右眼用而不同的要素。对于这样是相同的结构、但用途因左眼用或右眼用而不同的要素,通过相同的数值与英文字母a、b的结合来与其他构成要素区别。此外,是相同的结构、但用途因左眼用或右眼用而不同的构成要素作为结构是相同的,所以仅说明共用的处理。
图19的再现装置由盘驱动器21、本地储存器22、多路分离器23、左眼视频解码器24a、右眼视频解码器24b、左眼平面存储器25a、右眼平面存储器25b、配置寄存器26、通信控制部27、设备间接口28构成。
盘驱动器21装填记录有构成立体视影像的内容的盘介质,执行对该记录介质的读出/写入。在该记录介质中,以只读型介质为代表,有可重写的可移除介质、可重写的内置介质等的种类。此外,再现装置具备随机存取部。随机存取部执行从视频流的时间轴上的任意时点起的随机存取。这里,在视频流中,有通常的视频流和多视视频流。所谓多视视频流,是由基本视视频流、从属视视频流构成的立体视用途的视频流。并且,随机存取部具体而言,在被命令进行从视频流的时间轴上的任意的时点起的再现的情况下,使用作为脚本数据(scenario data)之一的入口映射(entry map),搜索与该任意的时点对应的存取单元的源包号码。该存取单元包括能够独立解码的图片数据、或视组件的组。所谓视组件,是构成立体视影像的构成要素,一张右眼影像、一张左眼影像分别相当于视组件。通过上述搜索,确定保存有关于该存取单元的存取单元定界符(delimiter)的源包的源包号码。执行根据该源包号码的读出及解码。在场景跳跃时,通过使用表示分支目的地的时间信息执行上述搜索,由此执行随机存取。将记载有确定变换式的数学式代码及修正参数的变换式参照表从蓝光等的光盘通过盘驱动器21读入,用于生成抵消图像。
本地储存器22是作为记载有确定变换式的数学式代码及修正参数的变换式参照表的接纳盘的,本地储存器22的保存内容始终被更新为最新的信息。
多路分离器23对输入流进行多路分离,输出多个种类的打包基本流。在这样输出的基本流中,有视频流、字幕用的图形流、对话用的图形流、音频流,将它们中的视频流向左眼视频解码器24a、右眼视频解码器24b输出。关于字幕用的图形流、对话用的图形流,向与它们对应的专用的图形解码器(未图示)送入,关于音频流,向音频解码器(未图示)送入。
左视频解码器24a将作为构成基本视视频流的视组件的左眼图像数据解码。
右眼视频解码器24b将作为构成从属视视频流的视组件的右眼图像数据解码。左眼视频解码器24a及右眼视频解码器24b都具备编码数据缓存、解码数据缓存,在将构成从属视视频流的视组件预装载到编码数据缓存中之后,将位于基本视视频流内的封闭GOP的开头的表示解码器更新的图片类型(IDR类型)的视组件解码。在该解码时,将编码数据缓存、解码数据缓存全部清空。在这样将IDR类型的视组件解码后,左眼视频解码器24a及右眼视频解码器24b将基于与该视组件的相关性被压缩编码的基本视视频流的后续的视组件、以及从属视视频流的视组件进行解码。如果通过解码得到关于该视组件的非压缩的图片数据,则向解码数据缓存保存,并将该图片数据作为参照图片。
使用该参照图片,左眼视频解码器24a及右眼视频解码器24b对基本视视频流的后续的视组件、以及从属视视频流的视组件进行运动补偿。如果通过运动补偿,关于基本视视频流的后续的视组件及从属视视频流的视组件得到非压缩的图片数据,则将它们向解码数据缓存保存,并作为参照图片。以上的解码在由各个存取单元的解码时间戳表示的解码开始时刻到来时进行。
左眼平面存储器25a将通过左眼视频解码器24a的解码得到的非压缩的左眼图片数据保存。
右眼平面存储器25b将通过右眼视频解码器24b的解码得到的非压缩的右眼图片数据保存。
在变换式参照表从盘介质被读出的情况下,配置寄存器26将该变换式参照表保存。该变换式参照表将多个变换式和模型名与画面模式的组合建立对应而表示。在第1实施方式中,将变换式与画面尺寸及画面模式的组建立了对应,但本实施方式的变换式参照表中,将变换式与显示装置的模型名及画面模式的组合建立了对应。这意味着,由于本实施方式的变换式参照表是由电影作品的制作者规定的,而电影作品的制作者不像显示装置的厂商那样掌握显示装置的详细特性,所以是在显示装置的1个模型是1个画面尺寸的假定下将与变换式的对应关系单纯化。在图19的一例中,将变换式分别与模型A的画面模式B的组合、模型C的画面模式D的组合建立对应。
通信控制部27从记载在变换式参照表中的变换式的组中,选择与从显示装置取得的作为连接对象的显示装置的模型名及选择中的画面模式符合的变换式,通过设备间接口28向显示装置设定。
设备间接口28例如通过依据HDMI规格的多媒体电缆、复合电缆、组件电缆,进行已解码的影像及声音的传送。特别是,HDMI除了影像以外还能够附加各种属性信息。在代替网络接口而使用设备间接口28的多媒体电缆接口的情况下,保存经由多媒体电缆接口执行显示处理的设备的性能信息。
如以上这样,将通过将基本视视频流解码而得到的左眼图像、通过将从属视视频流解码而得到的右眼图像作为抵消图像生成的对象,实现正图像-抵消图像的分时显示。
有关本实施方式的再现装置可以通过将上述那样的再现装置的各构成要素用硬件元件具体实现来进行工业生产。但是,再现装置也可以是基于软件的安装。即,通过将用计算机代码记述了上述那样的各构成要素的处理过程的程序预先装入到代码ROM中、使装置的硬件结构中的单一的处理部(CPU)执行该程序的处理过程,也能够将本装置进行工业生产。以下,参照流程图,对装置的软件安装所需要的处理过程进行说明。
图20是表示显示装置(显示器)初始化过程的流程图。在步骤S21中,将变换式参照表读出,在步骤S22中尝试与显示装置的连接。如果连接成功,则在步骤S23中将作为连接对象的显示装置的模型名、画面模式的取得请求发送。然后,在步骤S24中,等待接收模型名/画面模式,如果接收到,则在步骤S25从配置寄存器中的变换式参照表中的变换式之中,取得用于确定与所取得的模型名、画面模式相符的变换式的数学式代码及修正参数,将该变换式向显示装置(显示器)发送,使显示装置(显示器)侧进行设定(步骤S26),并进行设定是否成功的判断(步骤S27),如果成功,则使显示装置的抵消图像生成部进行使用该变换式得到的抵消图像的生成。
如以上这样,根据本实施方式,由于从光盘进行图像数据的读出的再现装置进行抵消图像的生成,所以通过再现装置按照从光盘装载的应用进行动作,进行遵循创作者的意图的抵消图像生成。由此,能够进一步提高抵消图像的品质。
此外,由于将记录在光盘中的表读出,从该表记载的变换式中选择对于显示装置而言最适当的变换式,所以能够使抵消图像反映内容的制作方的意图。由于熟知内容的图案及色彩的制作者的意思能够反映到变换式上,所以能够使通过抵消图像进行的抵消看起来更漂亮。
{发明的效果}
本实施方式所记载的再现装置的发明(以下,称作本发明)是对上述第1实施方式所记载的生成装置的发明追加了以下的限定事项的发明。即,生成装置是再现装置,具备从记录介质读出将多个变换式与画面尺寸及画面模式的组合建立了对应的变换式参照表的读出单元,上述生成单元从变换式参照表取出与连接的显示装置的模型名及画面模式的组合对应的变换式,基于所取出的变换式进行抵消图像的生成。在显示装置中存在高对比度模式、电影模式等的各种各样的模式的情况下,能够对应于这些模式的特性而选择适当的变换式。由此,能够避免在模式变化的中途、能看到左右图像的重合这样的不良状况。由于再现装置从记录介质将表读出,基于记载在该表中的变换式生成抵消图像,所以通过使用符合创作者的意图的变换式将正图像的亮度变换,能够得到抵消图像的亮度。此外,由于将记录在记录介质中的表读出,从该表记载的变换式中选择对于显示装置来说最合适的变换式,所以能够使抵消图像反映内容的制作方的意图。由于熟知内容的图案及色彩的制作者的意思被反映到变换式中,所以能够使通过抵消图像进行的抵消看起来更漂亮。
(第4实施方式)
在第3实施方式中,再现装置选择变换式而实现分时处理,但在本实施方式中,涉及在再现装置侧实现分时处理的改良。图21表示有关第5实施方式的再现装置的内部结构。本图是以图19的内部结构为基础作图的,与作为其基础的内部结构相比,新追加了以下的构成要素这一点是新的。
追加了对保存在平面存储器中的图像制作抵消图像的抵消图像制作部29a、29b、和将保存在平面存储器中的正图像、由抵消图像制作部制作的抵消图像向显示装置输出而用于分时显示的分时处理部30a、30b。
如以上这样,根据本实施方式,由于再现装置从记录介质将参照表读出,基于记载在该变换式参照表中的变换式生成抵消图像,所以通过使用遵循创作者的意图的变换式将正图像的亮度变换,能够得到抵消图像的亮度。
(第5实施方式)
在第1实施方式中,实现了仅关于影像的分时显示,但在本实施方式中,涉及实现对带有字幕的影像的空间划分显示的改良。在本实施方式中,在作为1帧期间内的分时显示的对象的图像中,有合成了字幕的图像、和合成了抵消字幕的图像。
实施了以上的改良的再现装置的内部结构为图22那样。图22表示有关第5实施方式的再现装置的内部结构。本图的内部结构以第4实施方式的内部结构图为基础作图,与作为其基础的结构相比,追加了属于字幕系统的构成要素这一点不同。
所谓追加的字幕系统,是进行字幕的解码的字幕解码器31、将由字幕解码得到的位图保存的字幕平面存储器32、对保存在字幕平面存储器中的位图进行平面移位而得到左眼字幕及右眼字幕的平面移位部33、得到作为关于通过平面移位得到的右眼字幕及左眼字幕的抵消图像的左眼抵消字幕及右眼抵消字幕的抵消字幕制作部34a、34b、将左眼字幕及右眼字幕或左眼抵消字幕及右眼抵消字幕以分时输出的分时处理部35a、35b、将输出的左眼字幕及右眼字幕或左眼抵消字幕及右眼抵消字幕向左眼图像及右眼图像合成的合成部36a、36b。在该内部结构中,抵消字幕制作部34a、34b是通过与第1实施方式所示的抵消图像制作部4a、4b相同的结构制作抵消字幕的单元。通过与第1实施方式所示的抵消图像制作部4a、4b相同的原理制作抵消字幕是因为,构成字幕的亮度具有与第1实施方式所示那样的图像的亮度相同的视觉特性。以下,对字幕解码器详细地说明。
在字幕解码器中,有图形解码器和文本字幕解码器。图形解码器包括:将从图形流读出的功能段保存的“编码数据缓存”、将用于规定图形的画面结构的画面结构段解码而得到对象的“流处理器”、将通过解码得到的对象保存的“对象缓存”、将画面结构段保存的“构成缓存(composition buffer)”、和将保存在构成缓存中的画面结构段解读,基于这些画面结构段中的控制项目使用在对象缓存中得到的对象在平面上进行画面构成的“构成控制器”。
文本字幕解码器包括:从存在于文本字幕流内的字幕记述数据分离文本代码和控制信息的“字幕处理器”、将从字幕记述数据分离出的文本代码保存的“管理信息缓存”、将控制信息保存的“控制信息缓存”、使用字体数据将管理信息缓存内的文本代码展开到位图的“文本绘制器”、将通过展开得到的位图保存的“对象缓存”、和使用从字幕记述数据分离出的控制信息执行沿着时间轴的文本字幕再现的控制的“描绘控制部”。
在文本字幕解码器的前段,存在进行字体数据的预装载的“字体预装载缓存”、调整构成文本字幕流的TS包的输入速度的“传输流(TS)缓存”、用来在播放项目的再现之前将文本字幕流预装载的“字幕预装载缓存”。以上是关于字幕解码器的说明。接着,对本实施方式的显示装置的详细情况进行说明。
图23是表示有关第5实施方式的显示装置的内部结构的图。本图的内部结构以第1实施方式的内部结构图为基础作图,与作为其基础的结构相比,追加了音频处理系统这一点不同。
追加的音频处理系统,是进行第1音频流的解码的1st音频解码器41、进行第2音频流的解码的2nd音频解码器42、使由2nd音频解码器输出的非压缩的音频数据的相位反转的相位反转器43、使扬声器进行主音频解码器的声音输出及次音频解码器的声音输出的声音输出部44、扬声器45、以及向闸门式眼镜进行了相位反转后的非压缩的音频数据发送的音频数据发送部46。音频数据发送部46将能够将从显示装置输出的声音抵消的抵消声音数据向闸门式眼镜发送,使闸门式眼镜进行所发送的抵消声音数据的输出。
以上是关于显示装置的说明。作为新的构成要素的说明的补充,对与已有的构成要素(同步信号发送部13)的关联进行说明。
同步信号发送部13将特殊的同步信号发送。该特殊的同步信号,是在合成了抵消字幕的图像的显示期间中执行将闸门式眼镜的闸门关闭的控制的信号。以上是关于显示装置的说明。接着,对闸门式眼镜的详细情况进行说明。
图24表示闸门式眼镜的内部结构。如本图所示,闸门式眼镜由接收从显示装置发送的同步信号的同步信号接收部51、按照接收到的同步信号进行左眼闸门、右眼闸门的开闭的闸门控制部52、接收从显示装置发送的音频数据的音频接收部53、进行接收到的声音的输出的扬声器54a、54b构成。
以上是关于有关本实施方式的闸门式眼镜的说明。接着,对通过上述内部结构将怎样的影像内容向用户提供进行说明。
图25表示以带字幕图像、无字幕图像为对象的分时显示。在该图25(a)中可知,在将1帧划分为4份的1/4帧的各自中,将带英语字幕图像、带抵消字幕图像、带英语字幕图像、带抵消字幕图像用于分时显示。图25(b)表示没有配戴闸门式眼镜下的视听。通过将带英语字幕图像、带抵消字幕图像同时显示,进行字幕的全消除。图25(c)表示由同步信号发送部发送的同步信号。最初的1/4帧的显示期间及第3个1/4帧是开,其余的显示期间是闭。在闸门为闭的期间中,是英语字幕被合成到图像中的期间,所以由此配戴着闸门式眼镜B的用户看到带英语字幕图像。
如图25那样,如果将带字幕图像和作为仅字幕部分为抵消影像的图像一边高速切换一边显示,则在没有配戴闸门式眼镜的情况下,虽然能看到影像部分,但字幕部分被重合而不能辨识。配戴着闸门式眼镜的人由于在显示带字幕图像的定时闸门打开,所以能够正确地看到带字幕图像。
图26表示以带字幕图像和关于特定语言的声音为对象的分时显示。在图26(a)中可知,在将1帧划分为8份的1/8帧的各自中,将无字幕图像、带英语字幕图像、无字幕图像、带英语字幕图像用于分时显示。图26(a)的下段表示来自显示装置的声音输出。如该下段所示,可知从显示装置仅输出了日语声音。图26(b)表示对于闸门式眼镜A的同步信号。可知第1个1/4帧、第3个1/4帧是开、其余的1/4帧是闭。在字幕的显示期间中,由于闸门式眼镜A的闸门被关闭,所以字幕变得看不到,配戴闸门式眼镜A的用户仅看到影像。
图26(c)表示由同步信号发送部发送的同步信号。第2个1/4帧、第4个1/4帧的显示期间是开,其余的显示期间是闭。由此,配戴着闸门式眼镜B的用户看到带英语字幕图像。图26(c)的下段表示应对闸门式眼镜B发送的声音数据。对于闸门式眼镜B,发送相对于日语声音的反相位的声音、和英语声音。反相位的声音是将来自显示装置的声音输出抵消的声音。这是与噪声消除器相同的原理。由此,来自显示装置的日语声音被抵消,配戴闸门式眼镜B的用户仅听到英语声音。
如以上这样,在图26中,是没有配戴闸门式眼镜A的人虽能看到影像但看不到字幕,从电视机的扬声器能听到日语声音,而配戴着闸门式眼镜的人能看到带字幕的影像、从闸门式眼镜附属的耳机能听到英语声音的例子。
从闸门式眼镜附属的耳机能听到的声音是与从扬声器传出的日语声音反相位的声音、英语声音。因此,如果与从电视机的扬声器传出的声音一起听到,则背景音及效果音能原样听到,日语声音被抵消,英语声音能一起听到。
如以上这样,根据本实施方式,能够实现配戴着闸门式眼镜A的人虽能看到影像但看不到字幕,从附属于闸门式眼镜或配对的耳机能听到日语声音,而配戴着闸门式眼镜B的人能看到带字幕的影像,从闸门式眼镜B附属的耳机能听到英语声音那样的按照用户的视听形式。当观看相同的电影时,儿童能够配戴闸门式眼镜A而观看配音版,成人能够配戴闸门式眼镜B而观看英语声音和日语字幕。在配戴着闸门式眼镜的用户和非配戴的用户间,字幕、声音的再现内容变化,所以能够构建组合了闸门式眼镜的视听环境。特别是,能够期待向语言学教材的发展。
{发明的效果}
本实施方式中记载的发明(以下,称作本发明)是对在上述第1实施方式中记载的显示装置的发明追加了以下的限定事项的发明。
即,在上述正图像中,有合成了字幕的正图像、和合成了抵消字幕的正图像;进行了字幕合成的正图像及合成了抵消字幕的正图像在1帧期间中以相同的频度出现;由上述发送单元发送的同步信号在抵消图像的显示期间中使左眼闸门的状态及右眼闸门的状态都为闭状态。根据本发明,例如在多个视听者以相同的画面观看相同的电影时,能够提供某个视听者不配戴眼镜而观看无字幕的配音版、别的视听者配戴眼镜而观看日语字幕的视听方法。
虽然是任意的,但上述显示装置也可以还具备将能够将从显示装置输出的声音抵消的抵消声音数据向眼镜发送的声音数据发送单元。配戴着眼镜A的人虽能看到影像但看不到字幕,从附属于眼镜或配对的耳机能听到日语声音,而配戴着眼镜B的人能看到带字幕的影像,从眼镜B附属的耳机能听到英语声音的例子。当观看相同的电影时,儿童能够配戴眼镜A而观看配音版,成人能够配戴眼镜B而观看英语声音和日语字幕。在配戴着眼镜的用户和非配戴的用户间,字幕、声音的再现内容变化,所以能够构建组合了眼镜的视听环境。特别是,能够期待向语言学教材的发展。
(第6实施方式)
本实施方式提供一种在没有配戴闸门式眼镜、或者配戴着闸门开闭的定时与图像的显示定时不一致的闸门式眼镜的情况下,通过抵消图像使画面的一部分或全部看不到那样的视听环境。
实施了以上的改良的再现装置的内部结构为图27那样。图27表示有关第6实施方式的再现装置的内部结构。本图的内部结构以第3实施方式的内部结构图为基础作图,与作为其基础的结构相比,追加了认证系统的构成要素这一点不同。
再现装置的认证系统由将从记录介质读出的登记闸门式眼镜列表保存的通用寄存器61;将显示装置中的闸门式眼镜的ID保存的闸门式眼镜ID保存部62;使用闸门式眼镜ID和闸门式眼镜登记列表进行显示装置中的闸门式眼镜是否正当的认证,在通过认证判明了正当性的情况下向显示装置通知该消息的认证部63构成。
图28表示显示装置的内部结构。显示装置具备生成作为码序列之一的随机数序列的随机数序列生成器65、将使闸门式眼镜生成码序列的信令信号向闸门式眼镜发送的信令信号发送部66、和按照所生成的码序列的各个码语执行正图像、抵消图像的切换的分时处理部67。
另一方面,第6实施方式的闸门式眼镜具备接收信令信号的信令信号接收部71、根据接收信号而生成码序列的随机数序列生成器72、和按照所生成的码序列的码语控制左眼闸门的开闭状态及右眼闸门的开闭状态的闸门控制部73。
由随机数序列生成器65、71生成的码序列是具有与闸门式眼镜中的码序列相同的规则性的码序列。闸门式眼镜的闸门控制部只要按照通过信令信号开始生成的码序列进行闸门的开闭,配戴着该闸门式眼镜的用户就能够视听按照显示装置的码序列显示的正图像、抵消图像。
接着,对有关本实施方式的显示装置及闸门式眼镜制作怎样的码序列进行说明。制作的码序列是PE调制比特序列。所谓PE调制比特序列,是将构成M序列随机数的比特序列通过PE(Phase Encode)调制而得到的比特序列。所谓M序列随机数,是将能够用某个原始多项式生成的最长比特序列作为1个循环的模拟随机数序列,具有“0”、“1”的某一方连续的概率较低的性质。
另一方面,相位调制是将构成M序列随机数的比特值“0”替换为2比特的"10"、将比特值“1”替换为“01”的调制,通过该调制,在随机数比特序列中各出现一半“0”、“1”。由于将该随机数比特序列的比特值“0”、比特值“1”分别分配给闸门开状态、闸门闭状态,所以一帧期间中的闭状态、开状态的出现概率相等。
图29是按照码序列使图像A的正图像、图像A的抵消图像依次显示的附图。在图29(a)中可知,在将1帧划分为8份的1/8帧的各自中,将正图像A、抵消图像A、抵消图像A、抵消图像A、正图像A、正图像A、抵消图像A、正图像A用于分时显示。通过将这些正图像、抵消图像同时显示,来进行全部消除。如图29(a)所示,如果没用闸门式眼镜观看,则正图像与抵消图像重合,与到目前为止同样能看到没有浓淡的画面,不能辨识正图像。
图29(b)表示通过无认证闸门式眼镜的视听。在无认证闸门式眼镜中,与正图像、抵消图像的输出有关地进行闸门的开闭控制。如该图29(b)所示,如果配戴开闭样式与正图像的显示定时不一致的闸门式眼镜观看显示装置的画面,则正图像及抵消图像都能看到,所以通过分时显示带来的重合图像成为没有浓淡的画面,不能辨识正图像。
图29(c)表示对于闸门式眼镜B的同步控制。假设闸门式眼镜B是由再现装置认证过的已认证闸门式眼镜。在图29(c)中,仅在第1个、第5个、第6个、第8个1/8帧期间中打开,其余关闭。由再现装置认证过的已认证闸门式眼镜生成具有与显示装置的码序列生成部相同的规则性的码序列,按照该码序列的码语控制左眼闸门、右眼闸门的开闭状态。由此,成为仅能看到图像A。如以上这样,在图29中,仅在配戴着开闭样式与正图像的显示定时一致的闸门式眼镜的情况下仅能够看到正图像,看不到抵消图像,所以能够正确地辨识正图像。以相同的规则性进行正图像、抵消图像的分时显示的画面区域也能够限定于画面的一部分区域中。
根据使用情形的状况补充本实施方式的构成要素的处理内容。图30(a)表示对画面的一部分区域采用抵消图像的使用情形。在显示装置的画面的中央附近,将正图像、抵消图像交替地显示。由此,中央附近的部分的影像被隐藏,成为实施了马赛克的部分。图中的马赛克表示中央附近被隐藏。图30(b)的上侧表示没有配戴闸门式眼镜、以及非认证闸门式眼镜下的视听影像。在非认证闸门式眼镜中,在抵消图像的显示期间中不能将闸门关闭,所以只能观看带马赛克的影像。图30(b)的下侧表示认证的闸门式眼镜的配戴时的视听。在已认证眼镜中,通过接收同步信号,在抵消图像的显示期间中将闸门关闭,所以能够仅视听正图像。
本实施方式的特征性的构成要素能够在笔记本型个人电脑和配对眼镜中采用。图30(c)表示本实施方式的显示装置、适用了闸门式眼镜的个人计算机、和闸门式眼镜的组。在此情况下,如果不是与个人计算机匹配的闸门式眼镜,则不能视听个人计算机,所以能够维持显示装置的安全性。此外,如图30(d)所示,还能够用于盗版对策。即,只要在记录在盘中的闸门式眼镜登记列表中不存在入口(entry),就不能进行通过闸门式眼镜的视听,所以只要将闸门式眼镜登记列表记录到不能复制的特殊区域中,就能够仅正当的盘的所有者视听影像。由此能够将盗版对策强化。
如以上这样,根据本实施方式,由于进行通过再现装置的认证,仅被正确地认证了的闸门式眼镜进行与显示装置相同的规则性的码序列的生成,进行闸门状态的开闭,所以仅被正确地认证了的闸门式眼镜能够进行同步,通过没有被正确地认证的闸门式眼镜不能进行同步。由此,仅视听正规的闸门式眼镜的用户能够视听影像。并且,如果将登记有正规的闸门式眼镜的列表记录到记录介质中,作为对象的闸门式眼镜仅在该列表中登记有闸门式眼镜的情况下发送用来生成码序列生成的信令信号,则仅配戴着提供商认定是正规的闸门式眼镜的闸门式眼镜的用户能够视听影像。
由于如果不配戴登记在光盘记录的闸门式眼镜登记列表中的闸门式眼镜就不能视听内容,所以使用户唤起必须购买正规版的光盘和闸门式眼镜的动力。由此,能够采取盗版对策。
{发明的效果}
本实施方式所记载的发明(以下,称作本发明)是对上述第1实施方式所记载的生成装置的发明追加了以下的限定事项的。
即,上述生成装置是显示装置,显示装置具备:码序列生成单元,生成在眼镜和显示装置中具有共用的规则性的码序列;显示部,按照所生成的码序列将正图像、抵消图像显示;以及发送单元,通过发送规定的信令信号,使眼镜开始按照码序列的码语(code word)的闸门的开闭控制。进行通过再现装置的认证,仅被正确地认证的眼镜进行与显示装置相同的规则性的码序列的生成,并进行闸门状态的开闭,所以仅正规品的眼镜能够进行同步,通过非正规品的眼镜不能进行同步。由此,仅视听正规的眼镜的用户能够视听影像。由此,如果没有配戴假设与显示装置成对使用的眼镜,则不能观看影像,所以能够与显示装置配对购买眼镜。
虽然是任意的,但也可以是,上述显示装置与从记录介质将内容读出并再现的再现装置连接,在上述记录介质中,记录有表示被许可视听内容的眼镜的眼镜登记列表;在再现装置使用上述眼镜登记列表正确地认证了与显示装置对应的眼镜的情况下,上述发送单元向眼镜发送规定的信令信号。如果将登记有正规的眼镜的列表记录到记录介质中,作为对象的眼镜仅在该列表中登记有眼镜的情况下发送用来生成码序列的信令信号,则仅配戴着提供商认定是正规眼镜的用户能够视听影像。由于如果不配戴登记在光盘记录的眼镜登记列表中的眼镜就不能视听内容,所以使用户唤起必须购买正规版的光盘和眼镜的动力。由此,能够采取盗版对策。
由于能从眼镜与记录介质配对的新的视点实现盗版对策,所以能够引导电影业界、出版业界、游戏业界、音乐业界等的内容制作业界的进一步的发展。通过该制作业界的发展,能够活跃国内产业、并实现国内产业的竞争力强化。
(第7实施方式)
本实施方式是实现通过将位宽扩展带来的误差对策的方式。具体地讲,通过将正图像的亮度Y、红色差Cr、蓝色差Cb的位宽扩展,降低对12位的亮度Y、红色差Cr、蓝色差Cb制作抵消图像的像素值时的误差。
图31是表示通过位宽扩展进行的误差对策的概念的图。图31(a)是设横轴为数据的亮度值、纵轴为反转图像的亮度值的曲线图。图31(b)是将正图像的4096灰度的亮度与反转图像的4096灰度的亮度、抵消图像的亮度的高位8比特、抵消图像的低位4比特建立对应表示的表。如本表的左侧所示,正图像的亮度在从0到4095的范围中变化。另一方面,反转图像的亮度在从4095到0的范围中变化。
在正图像的亮度灰度与抵消图像的亮度灰度的对应偏向较亮侧的情况下,如右的表中的8比特的列那样,尽管正图像的亮度值不同,但抵消图像的亮度值成为与取消有效数字(“去位”、日文“桁落ち”)的结果相同的值,不再能够保持灰度。在图31(a)、图31(b)中,框内的亮度范围(反转图像中的4080到4095的亮度范围)是在8比特表现中失去的"取消有效数字"部分。即,在正图像的亮度是4096灰度的情况下,如果用8比特的范围制作抵消图像的像素比特值,则正图像的亮度灰度中的4080~4095的范围全部成为255,成为相同的亮度。
所以,作为取消有效数字对策,在正图像的制作时,将表现各像素的位数扩展,将12位的位宽分配给正图像的亮度的灰度表现。此外,抵消图像生成部根据画面模式及画面尺寸将12位长的亮度变换为抵消图像的像素比特值。这样,在正图像的1~15的亮度范围中,抵消图像的亮度用高位8比特为255、低位12~4比特为12~4的比特值表现。由此,能够将抵消图像的亮度表现4080到4095的数值范围。
在正图像的亮度偏向较亮侧的情况下,抵消图像的亮度被用4095~4080的数值范围表现。如以上这样,通过将正图像的亮度数据设为12位,抵消图像生成部将该12位的亮度变换为抵消图像的亮度,能够消除位反转时的误差。
<备注>
以上,对在本申请的申请时点、申请人能够知道的最优的实施方式进行了说明,但关于以下所示的技术课题能够加以进一步的改良及变更实施。需要注意的是,是否如各实施方式所示那样实施、是否实施这些改良、变更都是任意的,取决于实施的人的主观。
(用于视听正图像、抵消图像的眼镜的变形)
例示了用于正图像、抵消图像的视听的眼镜是闸门式眼镜,但只要是选择在影像信号的1帧中分时显示的多个图像中的某个图像使用户视听,也可以采用闸门式以外的形态。具体地讲,只要是具有仅使正图像、抵消图像中的抵消图像看不到那样的光学构造,也可以采用偏向型的眼镜。
(作为便携终端的实施)
显示装置也可以作为带有立体视照片的摄影功能的便携装置实施。在此情况下,便携装置具备摄影部,将由摄影部得到的左眼图像数据、右眼图像数据保存到照片文件中,向记录介质写入。另一方面,便携终端从照片文件将压缩左眼图像数据、压缩右眼图像数据取出而用于再现。在这里的立体视照片文件中有MPO文件。所谓MPO(Multi picture object)文件,是能够通过任天堂株式会社的3DS、富士胶片FinePix REAL 3D W1及W3照相机摄影的文件,包括摄影日、尺寸、压缩左眼图像、压缩右眼图像,此外作为关于摄影地的地理的信息而包括地理的纬度、经度、标高、方位角、倾斜。压缩左眼图像、压缩右眼图像是以JPEG形式压缩的数据。由此,便携终端通过进行JPEG形式的数据的展开,得到右眼图像、左眼图像。通过生成关于这样得到的左眼图像、右眼图像的抵消图像,能够将第1实施方式的处理在便携终端上实现。
(作为电视广播接收装置的实施)
在上述实施方式中,公开了纯粹的显示装置的内部结构。这里,为了将显示装置构成为电视广播接收装置,需要将服务受理部、接收部、分离部、和显示判断部向显示装置追加。
服务受理部管理服务选择。具体而言,受理基于来自遥控器信号的用户的指示或来自应用的指示进行的服务的变更请求,向接收部通知。
接收部从天线或电缆接收被分发所选择的服务的传输流的输送波的频率上的信号并解调。并且,将解调后的传输流向分离部送出。
接收部包括对接收到的广播波进行IQ检波的调谐器单元、对进行了IQ检波的广播波进行QPSK解调、VSB解调、QAM解调的解调部、和传输解码器。
显示判断部分别参照从多路分离部通知的3D_system_info_descriptor、3D_service_info_descriptor、3D_combi_info_descriptor,掌握传输流的流结构。并且,在当前的画面模式中,将应作为多路分离的对象的TS包的PID向多路分离部通知。
此外,显示判断部在立体视再现方式为帧交换方式的情况下,参照3D_system_info_descriptor的2D_view_flag、3D_service_info_descriptor的frame_packing_arrangement_type,对显示处理部通知将左眼用图像、右眼用图像中的哪一方用于2D再现、视频流是否是Side-by-Side方式等。显示判断部参照由多路分离部提取出的3D_system_info_descriptor的3D_playback_type,判断接收到的传输流的再现方式。在再现方式是服务互换方式的情况下,参照3D_system_info_descriptor的2D_independent_flag,判断在2D再现中使用的视频流和在3D再现中使用的视频流是否被共享。
在2D_independent_flag的值是0的情况下,参照3D_combi_info_descriptor,确定流结构。在传输流的流结构是2D/L+R1+R2的情况下,将2D/L+R1+R2的流解码,得到左眼图像数据、右眼图像数据的组。
在传输流的流结构是2D/L+R的情况下,将2D/L+R的流解码,得到左眼图像数据、右眼图像数据的组。
在2D_independent_flag的值是1的情况下,显示判断部参照3D_combi_info_descriptor确定流结构。在传输流的流结构是MPEG2+MVC(Base)+MVC(Dependent)的情况下,将MPEG2+MVC(Base)+MVC(Dependent)的流解码,得到左眼图像数据、右眼图像数据的组。
在传输流的流结构是MPEG2+AVC+AVC的情况下,将MPEG2+AVC+AVC的流解码而得到左眼图像数据、右眼图像数据的组。
在再现方式是帧交换方式的情况下,参照3D_system_info_descriptor的2D_independent_flag,判断在2D再现中使用的视频流与在3D再现中使用的视频流是否被共用。在2D_independent_flag的值是0的情况下,将2D/SBS的流解码,得到左眼图像数据、右眼图像数据的组。
在2D_independent_flag的值是1的情况下,将2D+SBS的流解码,得到左眼图像数据、右眼图像数据的组。在frame_packing_arrangement_type是Side-by-Side形式的情况下,通过将左右存在的左眼用图像、右眼用图像显现出,进行3D再现。在frame_packing_arrangement_type不是Side-by-Side形式的情况下,确定为TopBottom方式,通过将上下存在的左眼用图像、右眼用图像显现出,进行3D再现。
通过按照通过以上的判断确定的流结构将视频流解码,能够得到左眼图像数据、右眼图像数据。
这样,也可以将通过电视广播波的解调及解码得到的图像作为正图像来制作抵消图像。
(集成电路的实施方式)
也可以将各实施方式所示的显示装置、再现装置、闸门式眼镜的硬件结构中的记录介质的驱动部、与外部的连接器等机构性的部分排除,将与逻辑电路及存储元件对应的部分、即逻辑电路的核心部分进行系统LSI化。所谓系统LSI,是指在高密度基板上安装裸芯片、进行封装的结构。通过将多个裸芯片安装到高密度基板上并封装而使多个裸芯片具有宛如1个LSI那样的外形构造的结构称作多芯片模块,但这样的结构也包含在系统LSI中。
这里,如果着眼于封装的种类,则在系统LSI中,有QFP(方形扁平封装)、PGA(引脚栅格阵列)的种类。QFP是在封装的四侧面上安装有引脚的系统LSI。PGA是在底面整体上安装有许多引脚的系统LSI。
这些引脚承担作为电源供给及接地、与其他电路的接口的作用。在系统LSI的引脚中,由于存在这样的接口的作用,所以通过在系统LSI的这些引脚上连接其他电路,系统LSI起到作为再现装置的核心的作用。
(程序的实施方式)
各实施方式所示的程序能够如以下这样制作。首先,软件开发者使用编程语言,记述实现各流程图、功能性的构成要素那样的源程序。在该记述时,软件开发者按照编程语言的句法,使用类构造体及变量、排列变量、外部函数的调用,记述将各流程图及功能性的构成要素具体实现的源程序。
将记述的源程序作为文件交给编译器。编译器将这些源程序翻译而生成对象程序。
编译器的翻译由句法解析、优化、资源分配、代码生成的过程构成。在句法解析中,进行源程序的字句解析、句法解析及意义解析,将源程序向中间程序变换。在优化中,对中间程序进行基本块化、控制流解析、数据流解析的作业。在资源分配中,为了实现适合作为目标的处理器的指令集,将中间程序中的变量分配给作为目标的处理器的处理器具有的寄存器或存储器。在代码生成中,将中间程序内的各中间指令向程序代码变换,得到对象程序。
这里生成的对象程序由使计算机执行由各实施方式表示的流程图的各步骤、功能的构成要素的各个过程那样的1个以上的程序代码构成。这里,程序代码如处理器的本机代码、JAVA(注册商标)字节代码那样有各种各样的种类。为了通过程序代码实现各步骤,有各种各样的形态。在能够利用外部函数实现各步骤的情况下,将该外部函数调用的调用语句为程序代码。此外,实现1个步骤那样的程序代码也有归属于不同的对象程序的情况。在指令种类被限制的RISC处理器中,也可以通过将算术运算指令及逻辑运算指令、分支指令等组合来实现流程图的各步骤。
如果生成对象程序,则编程者对它们起动链接程序(linker)。链接程序将这些对象程序及关联的库存程序分配给存储器空间,将它们结合为1个,生成装载模块。这样生成的装载模块是以通过计算机的读取为前提的,是使计算机执行各流程图所示的处理过程及功能性的构成要素的处理过程的。也可以将该计算机程序向非暂时性的计算机可读取的记录介质记录并向用户提供。
工业实用性
使用能够控制显示定时的显示装置和闸门式眼镜,不仅是3D影像,还提供各种各样的视听形态,能够活跃民生设备市场。因此,有关本发明的显示方法及显示装置在影像内容产业及民生设备产业具有较高的实用性。
标号说明
100 再现装置
101 光盘
102 遥控器
103 闸门式眼镜
200 显示装置

Claims (9)

1.一种生成装置,生成应使配戴着眼镜的用户视听的图像,其特征在于,
具备:
取得单元,取得正图像;以及
生成单元,生成关于所取得的正图像的抵消图像;
上述眼镜是用户在对影像信号的帧期间中分时显示的多个图像中的某个图像进行视听时所配戴的眼镜;
上述正图像及抵消图像是应作为上述分时显示的对象的图像;
构成上述抵消图像的各个像素的亮度设定为比从亮度的数值范围的最大值减去正图像的各个像素的亮度后的差分值大的值。
2.如权利要求1所述的显示装置,其特征在于,
上述眼镜是闸门式眼镜;
上述生成装置是显示装置;
具备:
显示单元,在1帧期间内,使正图像和抵消图像分时显示;
发送单元,向眼镜发送同步信号,该同步信号规定了当开始显示正图像或抵消图像中某一方时眼镜的左眼闸门的开闭状态及右眼闸门的开闭状态。
3.如权利要求2所述的显示装置,其特征在于,
在上述正图像中,有面向配戴着眼镜的用户的图像、和面向没有配戴眼镜的非配戴用户的图像,关于面向配戴用户的图像,1帧期间中的正图像及抵消图像的出现频度相等;
由上述发送单元发送的同步信号在抵消图像的显示期间中使左眼闸门的状态及右眼闸门的状态都为闭状态。
4.如权利要求2所述的显示装置,其特征在于,
在上述正图像中,有合成了字幕的正图像、和合成了抵消字幕的正图像;
进行了字幕合成的正图像及合成了抵消字幕的正图像在1帧期间中以相同的频度出现;
由上述发送单元发送的同步信号在抵消图像的显示期间中使左眼闸门的状态及右眼闸门的状态都为闭状态。
5.如权利要求4所述的显示装置,其特征在于,
上述显示装置还具备声音数据发送单元,该声音数据发送单元向眼镜发送能够抵消从显示装置输出的声音的抵消声音数据。
6.如权利要求1所述的显示装置,其特征在于,
上述生成装置是显示装置;
显示装置具备:
码序列生成单元,生成在眼镜和显示装置中具有共用的规则性的码序列;
显示部,按照生成的码序列显示正图像、抵消图像;以及
发送单元,通过发送规定的信令信号,使眼镜开始按照码序列的码语开闭控制闸门。
7.如权利要求6所述的显示装置,其特征在于,
上述显示装置与从记录介质将内容读出并再现的再现装置连接,在上述记录介质中,记录有表示被许可视听内容的眼镜的眼镜登记列表;
在再现装置使用上述眼镜登记列表正确地认证了与显示装置对应的眼镜的情况下,上述发送单元向眼镜发送规定的信令信号。
8.如权利要求1所述的显示装置,其特征在于,
上述生成装置是再现装置;
具备从记录介质读出变换式参照表的读出单元,该变换式参照表将多个变换式与画面尺寸及画面模式的组合建立了对应;
上述生成单元从变换式参照表取出与连接的显示装置的模型名及画面模式的组合对应的变换式,基于所取出的变换式进行抵消图像的生成。
9.一种眼镜,是用户视听由显示装置显示的图像时所配戴的眼镜,其特征在于,
具备选择在影像信号的帧期间中分时显示的多个图像中的某个图像的选择单元;
在由上述显示装置显示的图像中,有正图像和抵消图像;
上述正图像及抵消图像是应作为上述分时显示的对象的图像;
构成上述抵消图像的各个像素的亮度设定为比从亮度的数值范围的最大值减去正图像的各个像素的亮度后的差分值大的值。
CN2012800013570A 2011-03-18 2012-03-16 生成装置、显示装置、再现装置、眼镜 Pending CN102907108A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-060212 2011-03-18
JP2011060212 2011-03-18
PCT/JP2012/001852 WO2012127836A1 (ja) 2011-03-18 2012-03-16 生成装置、表示装置、再生装置、眼鏡

Publications (1)

Publication Number Publication Date
CN102907108A true CN102907108A (zh) 2013-01-30

Family

ID=46879016

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012800013570A Pending CN102907108A (zh) 2011-03-18 2012-03-16 生成装置、显示装置、再现装置、眼镜

Country Status (4)

Country Link
US (1) US20130057526A1 (zh)
JP (1) JPWO2012127836A1 (zh)
CN (1) CN102907108A (zh)
WO (1) WO2012127836A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111526366A (zh) * 2020-04-28 2020-08-11 深圳市思坦科技有限公司 图像处理方法、装置、摄像设备和存储介质
US12080030B2 (en) 2020-04-28 2024-09-03 Shenzhen Sitan Technology Co., Ltd. Image processing method and device, camera apparatus and storage medium

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110115806A (ko) * 2010-04-16 2011-10-24 삼성전자주식회사 디스플레이 장치 및 3d 안경, 그리고 이를 포함하는 디스플레이 시스템
CN202995143U (zh) * 2011-12-29 2013-06-12 三星电子株式会社 眼镜装置及显示装置
US20140210695A1 (en) * 2013-01-30 2014-07-31 Hewlett-Packard Development Company Securing information
KR102091519B1 (ko) * 2013-11-05 2020-03-20 엘지전자 주식회사 이동 단말기 및 이의 제어방법
JP2015118191A (ja) * 2013-12-17 2015-06-25 富士通株式会社 情報表示システム、情報表示装置及びメガネ
CN105472366B (zh) * 2015-12-07 2016-11-02 京东方科技集团股份有限公司 基于心理视觉调制的图像处理方法、装置及显示设备
US10142298B2 (en) * 2016-09-26 2018-11-27 Versa Networks, Inc. Method and system for protecting data flow between pairs of branch nodes in a software-defined wide-area network
EP3301940A1 (en) * 2016-09-30 2018-04-04 Advanced Digital Broadcast S.A. A method and a system for registering shutter glasses in an image generating device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003189208A (ja) * 2001-12-20 2003-07-04 Toshiba Corp 表示システム及び表示方法
JP2006245680A (ja) * 2005-02-28 2006-09-14 Victor Co Of Japan Ltd 映像音響再生方法及び映像音響再生装置
WO2008078630A1 (ja) * 2006-12-26 2008-07-03 Nec Corporation 表示装置及び表示方法
WO2008102883A1 (ja) * 2007-02-22 2008-08-28 Nec Corporation 画像処理装置及び方法、プログラム並びに表示装置
CN101765877A (zh) * 2007-06-13 2010-06-30 日本电气株式会社 图像显示设备、图像显示方法及图像显示程序

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100653090B1 (ko) * 2004-07-13 2006-12-06 삼성전자주식회사 디스플레이 사이즈 조정 장치 및 그 방법
US8902284B2 (en) * 2004-08-10 2014-12-02 Koninklijke Philips N.V. Detection of view mode
CN101681585B (zh) * 2007-05-25 2012-02-22 日本电气株式会社 用于图像处理的设备和方法以及显示装置
JP2009204948A (ja) * 2008-02-28 2009-09-10 Toshiba Corp 画像表示装置及びその方法
US8571217B2 (en) * 2008-12-18 2013-10-29 Nec Corporation Display system, control apparatus, display method, and program
US9524700B2 (en) * 2009-05-14 2016-12-20 Pure Depth Limited Method and system for displaying images of various formats on a single display
JP5444848B2 (ja) * 2009-05-26 2014-03-19 ソニー株式会社 画像表示装置、画像観察用眼鏡、および画像表示制御方法、並びにプログラム
US8446462B2 (en) * 2009-10-15 2013-05-21 At&T Intellectual Property I, L.P. Method and system for time-multiplexed shared display
US8624960B2 (en) * 2010-07-30 2014-01-07 Silicon Image, Inc. Multi-view display system
TW201226985A (en) * 2010-12-31 2012-07-01 Au Optronics Corp Display system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003189208A (ja) * 2001-12-20 2003-07-04 Toshiba Corp 表示システム及び表示方法
JP2006245680A (ja) * 2005-02-28 2006-09-14 Victor Co Of Japan Ltd 映像音響再生方法及び映像音響再生装置
WO2008078630A1 (ja) * 2006-12-26 2008-07-03 Nec Corporation 表示装置及び表示方法
WO2008102883A1 (ja) * 2007-02-22 2008-08-28 Nec Corporation 画像処理装置及び方法、プログラム並びに表示装置
CN101765877A (zh) * 2007-06-13 2010-06-30 日本电气株式会社 图像显示设备、图像显示方法及图像显示程序

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111526366A (zh) * 2020-04-28 2020-08-11 深圳市思坦科技有限公司 图像处理方法、装置、摄像设备和存储介质
CN111526366B (zh) * 2020-04-28 2021-08-06 深圳市思坦科技有限公司 图像处理方法、装置、摄像设备和存储介质
US12080030B2 (en) 2020-04-28 2024-09-03 Shenzhen Sitan Technology Co., Ltd. Image processing method and device, camera apparatus and storage medium

Also Published As

Publication number Publication date
JPWO2012127836A1 (ja) 2014-07-24
US20130057526A1 (en) 2013-03-07
WO2012127836A1 (ja) 2012-09-27

Similar Documents

Publication Publication Date Title
CN102907108A (zh) 生成装置、显示装置、再现装置、眼镜
TWI842191B (zh) 支援多個視圖的顯示器以及用於該顯示器的方法
CN102308589B (zh) 再现装置和再现方法
CN102685515B (zh) 再生装置、记录方法及记录介质再生系统
CN102598686B (zh) 再现装置、集成电路、再现方法
CN101682793B (zh) 创建三维图形数据
CN100437453C (zh) 标签信息显示控制设备及方法、信息处理设备和显示设备
RU2496157C2 (ru) Носитель записи, на котором записано 3d видео, устройство воспроизведения для воспроизведения 3d видео и большая интегральная схема системы
CN102461181B (zh) 用于提供3d用户界面的立体图像再现装置和方法
CN102027749B (zh) 考虑特殊再现的再现装置、集成电路、再现方法
CN102572475B (zh) 计算设备中的立体3d视频支持
CN109691094A (zh) 发送全向视频的方法、接收全向视频的方法、发送全向视频的装置和接收全向视频的装置
US20110164118A1 (en) Display apparatuses synchronized by one synchronization signal
US9872081B2 (en) Digital content spatial replacement system and method
CN102100076A (zh) 能够进行立体视再生的再生装置、再生方法、程序
JP2011525746A (ja) 三次元ビデオ映像処理方法及びその装置
CN106101682A (zh) 通用3‑d画面格式
CN103202021A (zh) 编码装置、解码装置、再现装置、编码方法及解码方法
US20210195168A1 (en) Virtual display engine
US10298552B2 (en) Digital broadcast methods using secure meshes and wavelets
CN106170985A (zh) 再现方法及再现装置
CN102227915B (zh) 再生装置、集成电路、再生方法
CN102823264A (zh) 能够变更立体视觉影像的进深的影像处理装置、系统、影像处理方法、影像处理程序
CN102172032A (zh) 立体视控制装置、集成电路、立体视控制方法
CN102282859B (zh) 数据结构、记录介质、播放设备和播放方法以及程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130130