JP5292026B2 - 3D image display apparatus and 3D image display method - Google Patents

3D image display apparatus and 3D image display method Download PDF

Info

Publication number
JP5292026B2
JP5292026B2 JP2008230741A JP2008230741A JP5292026B2 JP 5292026 B2 JP5292026 B2 JP 5292026B2 JP 2008230741 A JP2008230741 A JP 2008230741A JP 2008230741 A JP2008230741 A JP 2008230741A JP 5292026 B2 JP5292026 B2 JP 5292026B2
Authority
JP
Japan
Prior art keywords
transmittance
unit
shutter
image display
shutter unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008230741A
Other languages
Japanese (ja)
Other versions
JP2010066364A (en
Inventor
正子 柏木
達夫 最首
芳晴 桃井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2008230741A priority Critical patent/JP5292026B2/en
Publication of JP2010066364A publication Critical patent/JP2010066364A/en
Application granted granted Critical
Publication of JP5292026B2 publication Critical patent/JP5292026B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、多視点画像を用いた三次元画像表示装置および三次元画像表示方法に関する。   The present invention relates to a three-dimensional image display apparatus and a three-dimensional image display method using multi-viewpoint images.

めがね無しで三次元画像を観察できる三次元画像表示装置(裸眼式三次元画像表示装置)として、多眼式、稠密多眼式、インテグラルイメージング方式(II方式)、一次元II方式(1D−II方式:水平方向にのみ視差情報表示)等が知られている。これらは、液晶表示装置(LCD)に代表されるフラットパネルディスプレイ(FPD)の前面に、レンズアレイに代表される射出瞳を配するという共通の構造を持つ。射出瞳は一定間隔で設けられ、射出瞳ひとつに対して、複数のFPDの画素が割り当てられる。射出瞳は三次元画像表示装置の画素に相当し、観察位置に応じて射出瞳を経由して見える画素が切り替わる。すなわち、観察位置によって画素情報が変わる三次元画像表示用画素として振舞う。   As a three-dimensional image display device (naked eye type three-dimensional image display device) that can observe a three-dimensional image without glasses, a multi-view type, a dense multi-view type, an integral imaging method (II method), a one-dimensional II method (1D- II method: parallax information display only in the horizontal direction) is known. These have a common structure in which an exit pupil typified by a lens array is arranged on the front surface of a flat panel display (FPD) typified by a liquid crystal display (LCD). The exit pupils are provided at regular intervals, and a plurality of FPD pixels are assigned to one exit pupil. The exit pupil corresponds to a pixel of the three-dimensional image display device, and the pixel seen through the exit pupil is switched according to the observation position. That is, it behaves as a three-dimensional image display pixel whose pixel information changes depending on the observation position.

三次元画像表示装置に表示される三次元映像の視域・解像度・飛び出し量は、トレードオフの関係があり、視域・解像度・飛び出し量の特性を共に向上させる課題がある(非特許文献1)。   The viewing area, resolution, and pop-out amount of the three-dimensional image displayed on the three-dimensional image display device have a trade-off relationship, and there is a problem of improving both the characteristics of the viewing area, resolution, and pop-out amount (Non-Patent Document 1). ).

そこで、光線数をシャッターを用いて時分割で変化させることにより、単位時間当たりの解像度を向上させる方法がある(特許文献1)。
J.Opt.Soc.Am.A vol.15,p.2059(1998) 特開平07−92936号公報
Therefore, there is a method of improving the resolution per unit time by changing the number of light rays in a time-sharing manner using a shutter (Patent Document 1).
J. et al. Opt. Soc. Am. A vol. 15, p. 2059 (1998) Japanese Patent Application Laid-Open No. 07-92936

しかしながら、シャッターを例えば120Hzで駆動し、光線数を変化させた場合でも、シャッターのパターンが視認されてしまう表示妨害が発生してしまう。一方、シャッターの駆動周波数をさらに上げる事は、技術的困難度が高い上、消費電力削減やEMIの低減の難易度も高くなる。   However, even when the shutter is driven at, for example, 120 Hz and the number of light rays is changed, display disturbance occurs in which the shutter pattern is visually recognized. On the other hand, raising the shutter drive frequency further increases the technical difficulty, and also increases the difficulty in reducing power consumption and EMI.

本発明は、シャッターのパターンが視認されてしまう表示妨害を低減する三次元画像表示装置及び三次元画像表示方法を提供することを目的とする。   It is an object of the present invention to provide a three-dimensional image display apparatus and a three-dimensional image display method that reduce a display disturbance in which a shutter pattern is visually recognized.

本発明の一態ようによる三次元画像表示装置は、画素が第1方向および第1方向に直交する第2方向にマトリクス状に配列された平面画像表示部と、前記平面画像表示部に対向して配置され、前記画素からの光線を制御する射出瞳が複数配列された光線制御部と、前記光線制御部の平面画素表示部側とは反対の面に対向して配置され、透過する前記光線の透過率を変更するためのシャッター部と、前記シャッター部の透過率を制御するための制御部と、を有し、前記制御部は、前記平面画像表示部に一のフィールドにおける画像を表示する際には、各前記射出瞳同士の境界の一方側領域における前記シャッター部の透過率を第1透過率となるように、他方側領域における前記シャッター部の透過率を前記第1透過率より低い第2透過率となるように、前記一方側領域と前記他方側領域との間の境界領域における前記シャッター部の透過率を前記第1透過率より低く前記第2透過率より高い第3透過率となるように、前記シャッター部を制御する事を特徴とする。   A three-dimensional image display device according to an aspect of the present invention is opposed to a planar image display unit in which pixels are arranged in a matrix in a first direction and a second direction orthogonal to the first direction, and the planar image display unit. The light ray control unit in which a plurality of exit pupils that control the light rays from the pixels are arranged, and the light ray that is arranged opposite to the surface opposite to the plane pixel display side of the light ray control unit and transmits the light ray And a control unit for controlling the transmittance of the shutter unit, and the control unit displays an image in one field on the planar image display unit. In this case, the transmittance of the shutter part in the other side region is lower than the first transmittance so that the transmittance of the shutter part in the one side region of the boundary between the exit pupils becomes the first transmittance. 2nd transmittance In other words, the shutter has a third transmittance that is lower than the first transmittance and higher than the second transmittance in the boundary region between the one side region and the other side region. It is characterized by controlling the part.

また、本発明の一態ようによる三次元画像表示方法は、画素が第1方向および第1方向に直交する第2方向にマトリクス状に配列された平面画像表示部と、前記平面画像表示部に対向して配置され、前記画素からの光線を制御する射出瞳が複数配列された光線制御部と、前記光線制御部の平面画素表示部側とは反対の面に対向して配置され、透過する前記光線の透過率を変更するためのシャッター部と、を有する画像表示装置に三次元画像を表示する方法であって、前記平面画像表示部に一のフィールドにおける画像を表示する際には、各前記射出瞳同士の境界の一方側領域における前記シャッター部の透過率を第1透過率となるように、他方側領域における前記シャッター部の透過率を前記第1透過率より低い第2透過率となるように、前記一方側領域と前記他方側領域との間の境界領域における前記シャッター部の透過率を前記第1透過率より低く前記第2透過率より高い第3透過率となるように、前記シャッター部を制御する事を特徴とする。   The three-dimensional image display method according to one aspect of the present invention includes a planar image display unit in which pixels are arranged in a matrix in a first direction and a second direction orthogonal to the first direction, and the planar image display unit. A light beam control unit arranged opposite to each other and arranged with a plurality of exit pupils for controlling light beams from the pixels, and a surface opposite to the plane pixel display unit side of the light beam control unit are arranged and transmitted. A method of displaying a three-dimensional image on an image display device having a shutter unit for changing the light transmittance, and when displaying an image in one field on the planar image display unit, The transmittance of the shutter part in the one side region of the boundary between the exit pupils becomes the first transmittance, and the transmittance of the shutter part in the other side region is lower than the first transmittance. As before The shutter unit is controlled so that the transmittance of the shutter unit in the boundary region between the one side region and the other side region is lower than the first transmittance and higher than the second transmittance. It is characterized by doing.

本発明によれば、シャッターのパターンが視認されてしまう表示妨害を低減する三次元画像表示装置及び三次元画像表示方法を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the three-dimensional image display apparatus and the three-dimensional image display method which reduce the display disturbance which the pattern of a shutter is visually recognized can be provided.

以下、本発明の実施の形態を図面を参照して説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

(第1の実施の形態)
図1に第1の実施の形態に係る立体画像表示装置の構造を模式的に示す。なお、図1に示す観察者から見て手前側を上として説明する。また、本説明における上下左右等の方向は、図1に示す観察者の位置からの相対的な方向を指す。
(First embodiment)
FIG. 1 schematically shows the structure of the stereoscopic image display apparatus according to the first embodiment. The description will be made with the front side as viewed from the observer shown in FIG. In addition, directions such as up, down, left, and right in this description indicate relative directions from the position of the observer shown in FIG.

立体画像表示装置は、平面表示装置101と、光線制御素子102と、画像切替装置103とを有する。光線制御装置102は、平面表示装置101の表示面側に設けられている。画像切替装置103は、光線制御装置102の平面表示装置101側とは反対側に設けられている。従って、平面表示装置101の表示面から出射した光線は光線制御装置102を透過した後、画像切替装置103に入射する。   The stereoscopic image display device includes a flat display device 101, a light beam control element 102, and an image switching device 103. The light beam control device 102 is provided on the display surface side of the flat display device 101. The image switching device 103 is provided on the opposite side of the light beam control device 102 from the flat display device 101 side. Accordingly, the light beam emitted from the display surface of the flat display device 101 passes through the light beam control device 102 and then enters the image switching device 103.

平面表示装置101には、その表示面に例えばRGBの3色の光線を出射するためのサブピクセルの組(ピクセル)が、アレイ状に配置されている。具体的には、平面表示装置101には液晶表示パネルや有機ELパネル、プラズマパネル、SEDパネルなどを有する表示装置を用いる事が出来る。本実施の形態では、バックライト導光板1011と透過型液晶パネル1012とを有する液晶表示パネルを用いた例について説明する。   In the flat display device 101, a set of sub-pixels (pixels) for emitting, for example, RGB three-color rays is arranged in an array on the display surface. Specifically, a display device having a liquid crystal display panel, an organic EL panel, a plasma panel, an SED panel, or the like can be used for the flat display device 101. In this embodiment, an example in which a liquid crystal display panel including a backlight light guide plate 1011 and a transmissive liquid crystal panel 1012 is used will be described.

光線制御装置102は、平面表示装置101から出射した光線方向を制御するための射出瞳を有する光線制御素子を周期的に配置することによって、観察者が視差画像を視認可能とするために設けられている。光線制御素子には、ピンホールやスリット、レンズを用いる事ができる。本実施の形態では説明を簡略化するために、観察者が図1における左右方向(平面表示装置101の列方向)の一次元方向の視差画像を視認可能とする例について説明する。この場合、光線制御素子は図1に対して略鉛直方向(平面表示装置101の行方向)に延びるスリットやシリンドリカルレンズを用いる事ができる。光線制御素子の延びる方向と平面表示装置101の行方向とが所定の角度をもつように、光線制御装置102を設けることができる。   The light beam control device 102 is provided so that an observer can visually recognize a parallax image by periodically arranging light beam control elements having exit pupils for controlling the direction of light beams emitted from the flat display device 101. ing. A pinhole, a slit, or a lens can be used for the light beam control element. In this embodiment, an example in which the observer can visually recognize a one-dimensional parallax image in the left-right direction (column direction of the flat display device 101) in FIG. 1 will be described in order to simplify the description. In this case, the light beam control element can use a slit or a cylindrical lens extending in a substantially vertical direction (the row direction of the flat display device 101) with respect to FIG. The light beam control device 102 can be provided so that the direction in which the light beam control element extends and the row direction of the flat display device 101 have a predetermined angle.

画像切替装置103には、複数のシャッター部がアレイ状に配置されている。シャッター部には、例えば液晶を用いる事ができ、画像切替装置103は、透過型液晶パネルを用いる事が出来る。シャッター部は平面表示装置101のサブピクセルの配置に基づいて配置することができる。例えば、サブピクセル1つに対して後述するシャッター部1つが対応するように配置する。すなわち、サブピクセルのサイズとシャッター部とのピッチ、より詳しくは平面表示装置101の列方向および行方向のピッチを等しく配置することができる。   The image switching device 103 has a plurality of shutter portions arranged in an array. For example, a liquid crystal can be used for the shutter unit, and a transmissive liquid crystal panel can be used for the image switching device 103. The shutter unit can be arranged based on the arrangement of subpixels of the flat display device 101. For example, it arrange | positions so that the shutter part mentioned later may respond | correspond to one subpixel. That is, the subpixel size and the pitch between the shutter portions, more specifically, the pitch in the column direction and the row direction of the flat display device 101 can be arranged equally.

立体画像表示装置には、立体画像表示装置の外部から入力された映像入力信号が入力された際、観察者が立体画像を観察できるように、入力部104、同期手段105、制御部106、107が設けられている。入力部104、同期手段105、制御部106、107は、映像入力信号に基づいて、平面表示装置101および画像切替装置103へ制御信号を送信するために設けられている。   In the stereoscopic image display device, when a video input signal input from the outside of the stereoscopic image display device is input, an input unit 104, a synchronization unit 105, and control units 106 and 107 are provided so that an observer can observe a stereoscopic image. Is provided. The input unit 104, the synchronization unit 105, and the control units 106 and 107 are provided for transmitting control signals to the flat display device 101 and the image switching device 103 based on the video input signal.

入力部104には、映像入力信号が入力可能となるように入力インターフェースが設けられている。入力部は、例えば入力インターフェースにタイル画像等の多視差画像が入力されると、多視差画像に基づいて平面表示装置101を駆動するための駆動データを生成する。また、駆動データの生成と共に、画像切替装置103を駆動するための切替データを生成する。   The input unit 104 is provided with an input interface so that a video input signal can be input. For example, when a multi-parallax image such as a tile image is input to the input interface, the input unit generates drive data for driving the flat display device 101 based on the multi-parallax image. In addition to the generation of the driving data, switching data for driving the image switching device 103 is generated.

同期手段105は、生成された駆動データと切替データとの同期を取るために設けられている。具体的には、例えば入力部104で生成された駆動データを制御部106へ、また切替データを制御部107へ、クロック信号等の同期信号に基づいて同期した状態で送信する。   The synchronization means 105 is provided to synchronize the generated drive data and switching data. Specifically, for example, the drive data generated by the input unit 104 is transmitted to the control unit 106, and the switching data is transmitted to the control unit 107 in a synchronized state based on a synchronization signal such as a clock signal.

制御部106は、受信した駆動データに基づいて、平面表示装置101を制御するための制御信号を、平面表示装置101へ送信する。本実施の形態の場合、同期手段105がバックライト導光板1011近傍に設けられたバックライト(図示せず)を点灯すると共に、制御部106は透過型液晶パネル1012を制御する。   The control unit 106 transmits a control signal for controlling the flat display device 101 to the flat display device 101 based on the received drive data. In the case of the present embodiment, the synchronization unit 105 lights a backlight (not shown) provided in the vicinity of the backlight light guide plate 1011, and the control unit 106 controls the transmissive liquid crystal panel 1012.

制御部107は、受信した切替データに基づいて、画像切替装置103を制御するための制御信号を、画像切替装置103へ送信する。本実施の形態の場合、制御部106は画像切替装置103に設けられた複数のシャッター部を制御する。   The control unit 107 transmits a control signal for controlling the image switching device 103 to the image switching device 103 based on the received switching data. In the case of the present embodiment, the control unit 106 controls a plurality of shutter units provided in the image switching device 103.

同期手段105は、制御部106が送信する制御信号のうち、第1フィールド目の垂直走査信号から第Nフィールド目の垂直走査信号とに同期するように、切替データを生成する。ここで、Nは自然数であり、例えばフレーム映像を60Hzにて表示させる場合にN=2とすると、各フィールドは120Hzで表示される。切替データは、例えばシャッター部を奇数フィールド目と偶数フィールド目で交互に透過および遮光を切り替えるように生成され、平面表示装置101に表示された映像を時分割して表示するために生成される。   The synchronization unit 105 generates switching data so as to synchronize with the vertical scanning signal of the first field from the vertical scanning signal of the first field among the control signals transmitted by the control unit 106. Here, N is a natural number. For example, when a frame image is displayed at 60 Hz, if N = 2, each field is displayed at 120 Hz. The switching data is generated, for example, so that the shutter unit switches between transmission and shading alternately in the odd-numbered field and the even-numbered field, and is generated to display the video displayed on the flat display device 101 in a time-division manner.

図2に、切替データに基づいて、画像切替装置103が制御された結果の一例を示す。図2においては、図面手前側が平面表示装置101側、図面奥側が画像切替装置103側とした場合を示す。   FIG. 2 shows an example of a result of controlling the image switching device 103 based on the switching data. FIG. 2 shows a case where the front side of the drawing is the flat display device 101 side and the back side of the drawing is the image switching device 103 side.

光線制御装置102には光線制御素子としてシリンドリカルレンズを用いた例を示している。説明の便宜上それぞれのシリンドリカルレンズとの境界についても図示しているが、複数のシリンドリカルレンズを一体に形成したレンズアレイを光線制御装置102には用いる事ができる。   The light beam control device 102 shows an example in which a cylindrical lens is used as a light beam control element. Although the boundary with each cylindrical lens is also illustrated for convenience of explanation, a lens array in which a plurality of cylindrical lenses are integrally formed can be used for the light beam control device 102.

光線制御素子の延びる方向は、画素201の行方向に対して所定の角度をもって、斜め方向となっている。画素201には、例えばRGBの3つのサブピクセル202が含まれている。1つのサブピクセルに対して、一つのシャッター203が対応するように、画像切替装置103のシャッター部は設けられている。   The extending direction of the light beam control element is an oblique direction with a predetermined angle with respect to the row direction of the pixels 201. The pixel 201 includes, for example, three RGB subpixels 202. The shutter unit of the image switching device 103 is provided so that one shutter 203 corresponds to one subpixel.

切替データは、図2(a)と(b)に示されたパターンを交互に切り替えられるように生成される。具体的には、透過シャッター203aと遮光シャッター203cとが交互に切り替えられるように生成される。それぞれの光線制御素子(例えばシリンドリカルレンズ)との境界付近については中間階調の半透過シャッター203bとなるように生成される。この中間階調の半透過シャッター203bによって、表示妨害が軽減される。   The switching data is generated so that the patterns shown in FIGS. 2A and 2B can be switched alternately. Specifically, the transmission shutter 203a and the light-shielding shutter 203c are generated so as to be switched alternately. In the vicinity of the boundary with each light beam control element (for example, a cylindrical lens), it is generated so as to be a semi-transparent shutter 203b of intermediate gradation. This intermediate gradation semi-transparent shutter 203b reduces display interference.

図2においては奇数フィールドの際には(a)に示されたパターン、偶数フィールドの際には(b)に示されたパターンに切り替えられる例を示す。例えば、
透過シャッター203a → 遮光シャッター203c
遮光シャッター203c → 半透過シャッター203b(境界付近)
遮光シャッター203c → 透過シャッター203a(境界付近以外)
半透過シャッター203b → 遮光シャッター203c
のように切り替えることができる。
FIG. 2 shows an example in which the pattern shown in (a) is switched in the case of an odd field, and the pattern shown in (b) is switched in the case of an even field. For example,
Translucent shutter 203a → Shading shutter 203c
Shading shutter 203c → Translucent shutter 203b (near the boundary)
Light-shielding shutter 203c → Transmission shutter 203a (except near the boundary)
Translucent shutter 203b → light-shielding shutter 203c
Can be switched as follows.

図2において例示した切替データは、18サブピクセルを1つとして、透過シャッター203aと半透過シャッター203bとの組、半透過シャッター203bと遮光シャッター203cとの組とで、市松模様のように行方向および列方向に交互に並ぶように、生成される。   The switching data illustrated in FIG. 2 includes 18 subpixels as one, and a row direction like a checkerboard pattern in a set of a transmissive shutter 203a and a semi-transmissive shutter 203b and a set of a semi-transmissive shutter 203b and a light-shielded shutter 203c. And are alternately arranged in the column direction.

ここで、図2に示すpshは列方向における透過シャッター203aと半透過シャッター203bとの組、半透過シャッター203bと遮光シャッター203cとの組のピッチであり、サブピクセルの幅方向ピッチの整数倍であって光線制御装置102の光線制御素子(ピンホール、スリット、またはシリンドリカルレンズ)のピッチである。 Here, p sh shown in FIG. 2 is the pitch of the pair of the transmissive shutter 203a and the semi-transmissive shutter 203b and the pair of the semi-transmissive shutter 203b and the light-shielding shutter 203c in the column direction, and is an integral multiple of the sub-pixel width direction pitch. It is the pitch of the light beam control element (pinhole, slit, or cylindrical lens) of the light beam control device 102.

また、図2に示すpsvは行方向における透過シャッター203aと半透過シャッター203bとの組、半透過シャッター203bと遮光シャッター203cとの組のピッチであり、サブピクセルの高さ方向ピッチの整数倍である。 Further, p sv shown in FIG. 2 is a pitch of a pair of the transmissive shutter 203a and the semi-transmissive shutter 203b and a pair of the semi-transmissive shutter 203b and the light-shielding shutter 203c in the row direction, and is an integral multiple of the sub-pixel height direction pitch. It is.

また、半透過シャッター203bと隣接する透過シャッター203aまたは遮光シャッター203cとの幅方向間隔はサブピクセルの幅方向ピッチの整数倍であって、観察域に定められる、立体画像表示装置に表示する立体画像の想定視距離に基づいて最適化することができる。   In addition, the distance in the width direction between the translucent shutter 203b and the adjacent transmissive shutter 203a or the light-shielding shutter 203c is an integral multiple of the pitch in the width direction of the subpixels, and is a stereoscopic image displayed on the stereoscopic image display device that is defined in the observation area. Can be optimized based on the assumed viewing distance.

図3に、画像切替装置103のフリッカ防止を目的とした、シャッター203の極性を考慮した透過シャッター部203aの幅設定の一例を示す。フリッカを防止するために、透過シャッター203aの光線制御素子の延びる方向に近い方の幅(図3ではpsv)は、開口部301部分の極性の総和がゼロに近づくように設定される。この時、psvはサブピクセルの列方向ピッチの偶数倍となる。 FIG. 3 shows an example of the width setting of the transmissive shutter unit 203a in consideration of the polarity of the shutter 203 for the purpose of preventing flicker of the image switching device 103. In order to prevent flicker, the width of the transmissive shutter 203a closer to the direction in which the light beam control element extends (p sv in FIG. 3) is set such that the sum of the polarities of the opening 301 is close to zero. At this time, p sv is an even multiple of the pitch in the column direction of the subpixels.

一例として、平面表示装置101に液晶表示パネルを用いた際に、液晶表示パネルが2H2V駆動された場合について説明する。行方向に2行および列方向に2列(2H2V)毎に極性が反転するように、制御部107は制御信号を送信する。具体的には、マイナス電圧が印加されるマイナスシャッター302が2行2列続いた後に、プラス電圧が印加されるプラスシャッター303が2行2列さらに続き、これが繰り返されるように制御部107は制御信号を送信する。   As an example, a case where the liquid crystal display panel is driven by 2H2V when a liquid crystal display panel is used for the flat display device 101 will be described. The control unit 107 transmits a control signal so that the polarity is inverted every two rows in the row direction and every two columns (2H2V) in the column direction. Specifically, after the negative shutter 302 to which a negative voltage is applied continues for 2 rows and 2 columns, the positive shutter 303 to which a positive voltage is applied continues to 2 rows and 2 columns, and the control unit 107 performs control so that this is repeated. Send a signal.

理想的には、透過シャッター203aの開口部301部において、マイナスシャッター302とプラスシャッター303とが繰り返されるように、制御部107は制御信号を送信する。図3に示すようにpsvを2画素分の幅とすると、開口部301部分において、極性はプラスとマイナスとが1画素おきに繰り返され、極性の総和がゼロに近づくようになる。 Ideally, the control unit 107 transmits a control signal so that the minus shutter 302 and the plus shutter 303 are repeated in the opening 301 of the transmissive shutter 203a. As shown in FIG. 3, when p sv is a width of two pixels, the polarity of the opening 301 is repeated every other pixel, and the sum of the polarities approaches zero.

図4に、制御部106および制御部107が送信する、制御信号のタイミングの一例を示す。   FIG. 4 shows an example of the timing of the control signal transmitted by the control unit 106 and the control unit 107.

制御部107は、シャッター部をフレーム周期の奇数フィールド406目と偶数フィールド407目で交互に透過および遮光を切り替えるように制御する。具体的には、奇数フィールド406目に送信されるパターン、例えば図2(a)に示されたパターンに切り替えるための奇数フィールド制御信号401を、奇数フィールド406の開始から終了まで送信する。また、偶数フィールド407目に送信されるパターン、例えば図2(b)に示されたパターンに切り替えるための偶数フィールド制御信号402を、偶数フィールド407の開始から終了まで送信する。   The control unit 107 controls the shutter unit so that transmission and light shielding are alternately switched between the odd-numbered field 406 and the even-numbered field 407 of the frame period. Specifically, an odd field control signal 401 for switching to the pattern transmitted to the odd field 406, for example, the pattern shown in FIG. 2A is transmitted from the start to the end of the odd field 406. Further, an even field control signal 402 for switching to the pattern transmitted in the even field 407, for example, the pattern shown in FIG. 2B is transmitted from the start to the end of the even field 407.

一方、制御部106は、平面表示装置101を各フレーム毎の映像が表示されるように制御する。その際、フレーム周期毎に各フレーム間に暗画像(例えば黒画像)の映像が表示されるように、黒挿入を行う。   On the other hand, the control unit 106 controls the flat display device 101 so that an image for each frame is displayed. At that time, black insertion is performed so that a video of a dark image (for example, a black image) is displayed between the frames for each frame period.

具体的には、フレームが切り替わるタイミングを含む所定時間、暗画像を表示するための黒挿入制御信号403を送信する。それぞれの黒挿入制御信号403の間には、各フレームに対応する映像を表示するための画像制御データ404を送信する。所定時間は、例えば、フレームが切り替わるタイミングを中心に、所定時間前後の黒挿入時間幅408とすることができる。   Specifically, a black insertion control signal 403 for displaying a dark image is transmitted for a predetermined time including the timing at which the frame is switched. Image control data 404 for displaying a video corresponding to each frame is transmitted between the respective black insertion control signals 403. The predetermined time can be set to a black insertion time width 408 around the predetermined time, for example, with the timing at which the frame is switched.

この時、制御部106が黒挿入制御信号403を送信している間に、奇数フィールド制御信号401と偶数フィールド制御信号402とが切り替わるように、同期手段105は制御部106と制御部107との同期をとる。   At this time, the synchronization means 105 is connected between the control unit 106 and the control unit 107 so that the odd field control signal 401 and the even field control signal 402 are switched while the control unit 106 transmits the black insertion control signal 403. Synchronize.

必要に応じて、バックライト導光板1011の光源(図示せず)の点滅についても、制御部106が黒挿入制御信号403を送信している間に消灯するように、同期手段105は制御部106および制御部107と光源との同期をとる。   If necessary, the synchronization unit 105 also controls the control unit 106 so that the light source (not shown) of the backlight light guide plate 1011 is turned off while the control unit 106 transmits the black insertion control signal 403. And the control part 107 and a light source are synchronized.

また、フリッカ防止のために、各フレーム毎に、平面表示装置101に印加される信号の極性を反転するために、制御部106は反転駆動信号405を送信する。図4に示す例では、奇数フィールド406目ではプラス極、偶数フィールド407目ではマイナス極となるように、反転駆動信号405を送信する。   In order to prevent flicker, the control unit 106 transmits an inversion drive signal 405 to invert the polarity of the signal applied to the flat display device 101 for each frame. In the example shown in FIG. 4, the inverted drive signal 405 is transmitted so that the odd field 406 has a positive pole and the even field 407 has a negative pole.

このようにしてできた立体画像表示装置は、光線制御素子の境界付近については半透過シャッター203bとなるように、制御部107は制御信号を送信するように構成されている。従って、光線制御素子の境界付近が観察者に認識されにくくなり、表示妨害を軽減することができる。   In the stereoscopic image display apparatus thus formed, the control unit 107 is configured to transmit a control signal so that the vicinity of the boundary of the light beam control element becomes the semi-transmissive shutter 203b. Accordingly, the vicinity of the boundary of the light beam control element is not easily recognized by the observer, and display disturbance can be reduced.

また、透過シャッター203aと半透過シャッター203bとの組、半透過シャッター203bと遮光シャッター203cとの組とで、市松模様のように行方向および列方向に交互に並ぶように、制御部107は制御信号を送信するように構成されている。従って、光線制御素子の透過シャッター203aと遮光シャッター203cとが、広い範囲で交互に並ぶので、さらに表示妨害を軽減することができる。   Further, the control unit 107 performs control so that a pair of the transmissive shutter 203a and the semi-transmissive shutter 203b and a pair of the semi-transmissive shutter 203b and the light-shielding shutter 203c are alternately arranged in the row direction and the column direction like a checkered pattern. It is configured to transmit a signal. Therefore, the transmission shutter 203a and the light-shielding shutter 203c of the light beam control element are alternately arranged in a wide range, so that display disturbance can be further reduced.

また、平面表示装置101に時分割表示された映像は、黒挿入のタイミングで奇数フィールド406と偶数フィールド407とが切り替わるように同期がとられているため、クロストークを軽減することができる。   In addition, since the video displayed in a time-sharing manner on the flat display device 101 is synchronized so that the odd field 406 and the even field 407 are switched at the black insertion timing, crosstalk can be reduced.

(第2の実施の形態)
図5に第2の実施の形態に係る立体画像表示装置における切替データに基づいて、画像切替装置103が制御された結果の一例を示す。第1の実施の形態に係る立体画像表示装置と差異のある部分は、図2に示したように透過シャッター203aと遮光シャッター203cのパターンとが、市松模様状に交互に配置されたものであるのに対し、縞模様状に交互に配置されたものとなるように、制御部107は制御信号を画像切替装置103へ送信する点である。
(Second Embodiment)
FIG. 5 shows an example of the result of controlling the image switching device 103 based on the switching data in the stereoscopic image display device according to the second embodiment. The difference from the stereoscopic image display apparatus according to the first embodiment is that the patterns of the transmissive shutter 203a and the light-shielding shutter 203c are alternately arranged in a checkered pattern as shown in FIG. On the other hand, the control unit 107 transmits a control signal to the image switching device 103 so as to be alternately arranged in a striped pattern.

また、第1の実施の形態と同ように、それぞれの光線制御素子との境界付近が半透過シャッター203bとなるように、制御部107は制御信号を画像切替装置103へ送信する。   As in the first embodiment, the control unit 107 transmits a control signal to the image switching device 103 so that the vicinity of the boundary with each light beam control element is the semi-transmissive shutter 203b.

このようにしてできた立体画像表示装置は、第1の実施の形態に係る立体画像表示装置と同ように、光線制御素子の境界付近が観察者に認識されにくくなり、表示妨害を軽減することができる。また、クロストークを軽減することができる。   As in the stereoscopic image display device according to the first embodiment, the stereoscopic image display device thus formed makes it difficult for the observer to recognize the vicinity of the boundary of the light control element, and reduces display disturbance. Can do. Further, crosstalk can be reduced.

(変形例)
図6に第1の実施の形態に係る立体画像表示装置の変形例を示す。第1の実施の形態に係る立体画像表示装置と差異のある部分は、光線制御装置102の光線制御素子の延びる方向が、画素201の並ぶ方向と平行となっている点である。図6では、画素201の行方向に、光線制御素子が延びる例について図示している。
(Modification)
FIG. 6 shows a modification of the stereoscopic image display apparatus according to the first embodiment. The difference from the stereoscopic image display device according to the first embodiment is that the direction in which the light beam control elements of the light beam control device 102 extend is parallel to the direction in which the pixels 201 are arranged. FIG. 6 illustrates an example in which the light beam control element extends in the row direction of the pixels 201.

第1の実施の形態と同ように、画像切替装置103のフリッカ防止のためには、シャッター203の開口部301部分の極性の総和がゼロに近づけるように、psvを設定する。この時、psvはサブピクセルの列方向ピッチの奇数倍となる。 As in the first embodiment, in order to prevent the image switching apparatus 103 from flickering, p sv is set so that the sum of the polarities of the opening 301 portion of the shutter 203 approaches zero. At this time, p sv is an odd multiple of the sub-pixel column pitch.

このようにしてできた立体画像表示装置は、第1の実施の形態に係る立体画像表示装置と同ように、光線制御素子の境界付近が観察者に認識されにくくなり、表示妨害を軽減することができる。また、クロストークを軽減することができる。   As in the stereoscopic image display device according to the first embodiment, the stereoscopic image display device thus formed makes it difficult for the observer to recognize the vicinity of the boundary of the light control element, and reduces display disturbance. Can do. Further, crosstalk can be reduced.

図7に第2の実施の形態に係る立体画像表示装置の変形例を示す。第2の実施の形態に係る立体画像表示装置と差異のある部分は、光線制御装置102の光線制御素子の延びる方向が、画素201の並ぶ方向と平行となっている点である。図2では、画素201の行方向に、光線制御素子が延びる例について図示している。   FIG. 7 shows a modification of the stereoscopic image display apparatus according to the second embodiment. The difference from the stereoscopic image display device according to the second embodiment is that the direction in which the light beam control elements of the light beam control device 102 extend is parallel to the direction in which the pixels 201 are arranged. FIG. 2 illustrates an example in which the light beam control element extends in the row direction of the pixels 201.

このようにしてできた立体画像表示装置は、第2の実施の形態に係る立体画像表示装置と同ように、光線制御素子の境界付近が観察者に認識されにくくなり、表示妨害を軽減することができる。また、クロストークを軽減することができる。   The stereoscopic image display device thus made is less likely to be recognized by the observer near the boundary of the light beam control element, as in the stereoscopic image display device according to the second embodiment, thereby reducing display disturbance. Can do. Further, crosstalk can be reduced.

本発明の第1の実施の形態に係る立体表示装置3D display device according to first embodiment of the present invention 本発明の第1の実施の形態に係る立体表示装置が制御された結果の一例An example of a result of controlling the stereoscopic display device according to the first embodiment of the present invention 本発明の第1の実施の形態に係る立体表示装置の画像切替装置の極性の一例An example of the polarity of the image switching device of the stereoscopic display device according to the first embodiment of the present invention 本発明の第1の実施の形態に係る立体表示装置の制御信号の一例An example of a control signal of the stereoscopic display device according to the first embodiment of the present invention 本発明の第2の実施の形態に係る立体表示装置3D display device according to second embodiment of the present invention 第1の実施の形態に係る立体画像表示装置の変形例Modification of stereoscopic image display device according to first embodiment 第2の実施の形態に係る立体画像表示装置の変形例Modification of stereoscopic image display device according to second embodiment

符号の説明Explanation of symbols

101 平面表示装置
102 光線制御素子
103 画像切替装置
1011 バックライト導光板
1012 透過型液晶パネル
104 入力部
105 同期手段
106、107 制御部
201 画素
202 サブピクセル
203 シャッター
203a 透過シャッター
203b 半透過シャッター
203c 遮光シャッター
301 開口部
302 マイナスシャッター
303 プラスシャッター
401 奇数フィールド制御信号
402 偶数フィールド制御信号
403 黒挿入制御信号
404 画像制御データ
405 反転駆動信号
406 奇数フィールド
407 偶数フィールド
408 黒挿入時間幅
DESCRIPTION OF SYMBOLS 101 Flat display device 102 Light beam control element 103 Image switching apparatus 1011 Backlight light-guide plate 1012 Transmission-type liquid crystal panel 104 Input part 105 Synchronization means 106, 107 Control part 201 Pixel 202 Subpixel 203 Shutter 203a Transmission shutter 203b Semi-transmission shutter 203c Light-shielding shutter 301 opening 302 minus shutter 303 plus shutter 401 odd field control signal 402 even field control signal 403 black insertion control signal 404 image control data 405 inversion drive signal 406 odd field 407 even field 408 black insertion time width

Claims (7)

複数のサブ画素を有する画素が第1方向および第1方向に直交する第2方向にマトリクス状に配列された平面画像表示部と、
前記平面画像表示部に対向して配置され、前記画素からの光線の方向を制御し、前記第1方向及び前記第2方向と交差する第3方向に伸延する射出瞳が複数配列された光線制御部と、
前記光線制御部の平面画素表示部側とは反対の面に対向して配置され、透過する前記光線の透過率を領域ごとに制御可能なシャッター部と、
前記シャッター部の透過率を、前記平面画像表示部に一のフィールドにおける画像を表示する際には、各前記射出瞳同士の境界の一方側領域における前記シャッター部の透過率を第1透過率となるように、他方側領域における前記シャッター部の透過率を前記第1透過率より低い第2透過率となるように、前記一方側領域と前記他方側領域との間の境界領域における前記シャッター部の透過率を前記第1透過率より低く前記第2透過率より高い第3透過率となるように、制御する第一制御部と、
前記平面画像表示部の前記サブ画素ごとに印加される信号の極性を制御する第二制御部と、
を有し、
前記第一制御部は、前記シャッター部によって前記第1透過率で光が透過する前記サブ画素に印加される前記極性の総和がプラスとマイナスとで同数となるように前記シャッター部の透過率を制御する三次元画像表示装置。
A planar image display unit in which pixels having a plurality of subpixels are arranged in a matrix in a first direction and a second direction orthogonal to the first direction;
Light control in which a plurality of exit pupils arranged in a third direction intersecting the first direction and the second direction are arranged so as to be opposed to the planar image display unit and control the direction of light from the pixels. And
A shutter unit that is disposed opposite to the surface opposite to the plane pixel display unit side of the light beam control unit, and that can control the transmittance of the transmitted light beam for each region,
When the transmittance of the shutter unit is displayed on the planar image display unit in one field, the transmittance of the shutter unit in the one side region of the boundary between the exit pupils is defined as the first transmittance. The shutter unit in the boundary region between the one side region and the other side region so that the transmittance of the shutter unit in the other side region is a second transmittance lower than the first transmittance. A first control unit that controls the transmittance so that the third transmittance is lower than the first transmittance and higher than the second transmittance;
A second control unit that controls the polarity of a signal applied to each of the sub-pixels of the planar image display unit;
Have
The first control unit adjusts the transmittance of the shutter unit so that the sum of the polarities applied to the sub-pixels through which light is transmitted with the first transmittance by the shutter unit is the same as positive and negative. 3D image display device to be controlled.
前記画素は、前記第1方向に少なくとも3種類の異なる波長の光線を射出するためのサブ画素を有し、前記境界領域の前記第1方向のピッチと前記サブ画素の第1方向のピッチの整数倍とが一致することを特徴とする請求項1に記載の三次元画像表示装置。 The pixel has subpixels for emitting light beams of at least three different wavelengths in the first direction, and is an integer between the pitch of the boundary region in the first direction and the pitch of the subpixel in the first direction. The three-dimensional image display device according to claim 1, wherein doubles coincide with each other. 前記第一制御部は、前記一方側領域の第1方向における第一長さが、前記他方領域の第1方向における第二長さよりも短くなり、かつ前記境界領域の第1方向における第三長さが、前記第二長さ及び前記第一長さよりも短くなるよう前記シャッター部の透過率を制御することを特徴とする請求項1に記載の三次元画像表示装置。 The first control unit has a first length in the first direction of the one side region that is shorter than a second length in the first direction of the other region, and a third length in the first direction of the boundary region. The three-dimensional image display device according to claim 1, wherein the transmittance of the shutter unit is controlled to be shorter than the second length and the first length . 前記第一制御部は、前記一のフィールドの次のフィールドにおける画像を表示する際には、
前記一方側領域における前記シャッター部の透過率を第2透過率となるように、
前記他方側領域における前記シャッター部の透過率を前記第1透過率となるように、
前記境界領域における前記シャッター部の透過率を第3透過率となるように、
前記シャッター部を制御する事を特徴とする請求項1乃至請求項3のいずれか1項に記載の三次元画像表示装置。
When the first control unit displays an image in a field next to the one field,
In order that the transmittance of the shutter portion in the one side region becomes the second transmittance,
The transmittance of the shutter portion in the other side region is the first transmittance,
The transmittance of the shutter portion in the boundary region is the third transmittance,
The three-dimensional image display device according to claim 1, wherein the shutter unit is controlled.
前記第一制御部は、前記第1透過率となる前記シャッター部と前記第3透過率となる前記シャッター部との組と、前記第2透過率となる前記シャッター部と前記第3の透過率となる前記シャッター部との組とが、前記第1方向および前記第3方向に交互へ並ぶように、前記シャッター部を制御する事を特徴とする請求項1乃至請求項3のいずれか1項に記載の三次元画像表示装置。 The first control unit includes a set of the shutter unit serving as the first transmittance and the shutter unit serving as the third transmittance, and the shutter unit serving as the second transmittance and the third transmittance. 4. The shutter unit according to claim 1, wherein the shutter unit is controlled so that a set of the shutter unit and the second unit are alternately arranged in the first direction and the third direction. The three-dimensional image display apparatus described in 1. 前記第一制御部は、前記一のフィールドと前記次のフィールドとの間に表示される暗画像が、前記平面画像表示部に表示されている間に、前記シャッター部の透過率を変更する事を特徴とする、請求項4に記載の三次元画像表示装置。 The first control unit changes the transmittance of the shutter unit while a dark image displayed between the one field and the next field is displayed on the planar image display unit. The three-dimensional image display device according to claim 4, characterized in that: 複数のサブ画素を有する画素が第1方向および第1方向に直交する第2方向にマトリクス状に配列された平面画像表示部と、前記平面画像表示部に対向して配置され、前記画素からの光線の方向を制御し、前記第1方向及び前記第2方向と交差する第3方向に伸延する射出瞳が複数配列された光線制御部と、前記光線制御部の平面画素表示部側とは反対の面に対向して配置され、透過する前記光線の透過率を領域ごとに制御可能なシャッター部と、を有する画像表示装置に三次元画像を表示する方法であって、A planar image display unit in which pixels having a plurality of sub-pixels are arranged in a matrix in a first direction and a second direction orthogonal to the first direction, and disposed opposite to the planar image display unit. A light beam control unit in which a plurality of exit pupils extending in a third direction that intersects the first direction and the second direction are controlled, and the plane pixel display side of the light beam control unit is opposite to the light beam control unit. A method of displaying a three-dimensional image on an image display device having a shutter unit that is disposed opposite to the surface of the screen and capable of controlling the transmittance of the transmitted light for each region,
前記シャッター部の透過率を、前記平面画像表示部に一のフィールドにおける画像を表示する際には、各前記射出瞳同士の境界の一方側領域における前記シャッター部の透過率を第1透過率となるように、他方側領域における前記シャッター部の透過率を前記第1透過率より低い第2透過率となるように、前記一方側領域と前記他方側領域との間の境界領域における前記シャッター部の透過率を前記第1透過率より低く前記第2透過率より高い第3透過率となるように、制御し、前記シャッター部によって前記第1透過率で光が透過する前記サブ画素に印加される前記極性の総和がプラスとマイナスとで同数となるようにすること、  When the transmittance of the shutter unit is displayed on the planar image display unit in one field, the transmittance of the shutter unit in the one side region of the boundary between the exit pupils is defined as the first transmittance. The shutter unit in the boundary region between the one side region and the other side region so that the transmittance of the shutter unit in the other side region is a second transmittance lower than the first transmittance. Is controlled to be a third transmittance lower than the first transmittance and higher than the second transmittance, and is applied to the sub-pixel through which light is transmitted at the first transmittance by the shutter unit. The sum of the polarities to be the same number between plus and minus,
前記平面画像表示部の前記サブ画素ごとに印加される信号の極性を制御すること、  Controlling the polarity of a signal applied to each of the sub-pixels of the planar image display unit;
を特徴とする三次元画像表示方法。3D image display method characterized by the above.
JP2008230741A 2008-09-09 2008-09-09 3D image display apparatus and 3D image display method Expired - Fee Related JP5292026B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008230741A JP5292026B2 (en) 2008-09-09 2008-09-09 3D image display apparatus and 3D image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008230741A JP5292026B2 (en) 2008-09-09 2008-09-09 3D image display apparatus and 3D image display method

Publications (2)

Publication Number Publication Date
JP2010066364A JP2010066364A (en) 2010-03-25
JP5292026B2 true JP5292026B2 (en) 2013-09-18

Family

ID=42192028

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008230741A Expired - Fee Related JP5292026B2 (en) 2008-09-09 2008-09-09 3D image display apparatus and 3D image display method

Country Status (1)

Country Link
JP (1) JP5292026B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103562776B (en) * 2011-06-20 2016-11-16 松下电器(美国)知识产权公司 Image display and image display method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2352573A (en) * 1999-07-24 2001-01-31 Sharp Kk Parallax barrier for a autostereoscopic display
JP4331134B2 (en) * 2005-03-25 2009-09-16 株式会社東芝 Stereoscopic image display device
JP2007072217A (en) * 2005-09-07 2007-03-22 Hunet Inc Stereoscopic image display apparatus
JP2008046336A (en) * 2006-08-15 2008-02-28 Canon Inc Liquid crystal display and projector system

Also Published As

Publication number Publication date
JP2010066364A (en) 2010-03-25

Similar Documents

Publication Publication Date Title
JP4572095B2 (en) Liquid crystal display device, portable device, and driving method of liquid crystal display device
JP5215261B2 (en) Video display device
KR100856414B1 (en) Auto stereoscopic display
US7786953B2 (en) Apparatus displaying three-dimensional image
KR100813975B1 (en) High resolution 2D-3D switchable autostereoscopic display apparatus
RU2571403C2 (en) Autostereoscopic display device
KR101211343B1 (en) Display device and method of driving the same
JP2005010303A (en) Display device
JP6588840B2 (en) Display device
KR20110057530A (en) Image display device
KR20110129329A (en) Stereoscopic display apparatus and method of driving the same
KR20120013734A (en) Stereoscopic image display and driving method thereof
JP2010164852A (en) Stereoscopic image display device and stereoscopic image display method
KR100649251B1 (en) Stereoscopic display device and driving method thereof
KR20140011574A (en) Display device and driving method thereof
JP2005010304A (en) Display device, control method of display device, and control program
JP6411257B2 (en) Display device and control method thereof
JP5292026B2 (en) 3D image display apparatus and 3D image display method
KR20130062556A (en) Three-dimensional displaying device and method thereof
KR101646494B1 (en) Stereoscopic image display device, and driving apparatus the same
US20140118332A1 (en) Method of driving active barrier panel and display apparatus for performing the method
KR20130127764A (en) Method of displaying three-dimensional stereoscopic image and three-dimensional stereoscopic image display apparatus for performing the same
JP2014137511A (en) Stereoscopic image display device
KR101981581B1 (en) Display device using polarized glasses and method of driving the same
KR102034044B1 (en) Stereoscopic image display device and driving method the same

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110318

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20111125

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20111205

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120502

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120508

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120615

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130308

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130517

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130610

R151 Written notification of patent or utility model registration

Ref document number: 5292026

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

Free format text: JAPANESE INTERMEDIATE CODE: R313121

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees