JP2011082649A - Image generation device, image generation method, and program - Google Patents

Image generation device, image generation method, and program Download PDF

Info

Publication number
JP2011082649A
JP2011082649A JP2009231321A JP2009231321A JP2011082649A JP 2011082649 A JP2011082649 A JP 2011082649A JP 2009231321 A JP2009231321 A JP 2009231321A JP 2009231321 A JP2009231321 A JP 2009231321A JP 2011082649 A JP2011082649 A JP 2011082649A
Authority
JP
Japan
Prior art keywords
image
eye
display
unit
viewer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009231321A
Other languages
Japanese (ja)
Other versions
JP5428723B2 (en
Inventor
Kajiro Ushio
嘉次郎 潮
Yutaka Ichihara
裕 市原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2009231321A priority Critical patent/JP5428723B2/en
Publication of JP2011082649A publication Critical patent/JP2011082649A/en
Application granted granted Critical
Publication of JP5428723B2 publication Critical patent/JP5428723B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Stereoscopic And Panoramic Photography (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To reduce a sense of incongruity felt by a viewer when three-dimensionally viewing a right eye image and a left eye image. <P>SOLUTION: An image generation device for generating right eye images to be viewed by a viewer's right eye and left eye images to be viewed by a viewer's left eye includes an image generation unit in which a deviation amount being a difference between positions of correspondence points of a corresponding object in the right and left directions on a display screen is made different between a center area and a peripheral area in the right and left directions on the display screen to generate a right eye image and a left eye image. The image generation unit generates the right eye image and the left eye image where deviation amounts of the correspondence points on the display screen in the peripheral area of the display screen are smaller than that of the center area. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、画像生成装置、画像生成方法、および、プログラムに関する。   The present invention relates to an image generation device, an image generation method, and a program.

特殊なメガネを用いずに裸眼で立体(3D)画像を視認させる技術の一つとして、表示面の前面にパララックスバリアまたはレンチキュラレンズを用いる技術が知られている。例えば、表示面に表示した右眼用画像および左眼用画像を、パララックスバリアまたはレンチキュラレンズによりそれぞれ右眼および左眼に指向して射出する技術が知られている(例えば、特許文献1参照)。   As a technique for visually recognizing a stereoscopic (3D) image with the naked eye without using special glasses, a technique using a parallax barrier or a lenticular lens in front of the display surface is known. For example, a technique is known in which an image for the right eye and an image for the left eye displayed on the display surface are directed toward the right eye and the left eye by a parallax barrier or a lenticular lens, respectively (see, for example, Patent Document 1). ).

特開平7−287195号公報JP-A-7-287195

表示面上における観視者の正面の領域とその周辺領域とでは、観視者にとって視差融合のし易さが大きく異なる場合がある。周辺領域では立体的な像として認識しにくく、そこに大きな視差があると観視者は違和感を強く感じてしまう場合がある。   The ease of parallax fusion for the viewer may differ greatly between the region in front of the viewer on the display surface and the surrounding region. In the surrounding area, it is difficult to recognize as a three-dimensional image, and if there is a large parallax there, the viewer may feel strongly uncomfortable.

上記課題を解決するために、本発明の一態様においては、観視者の右眼で視認されるべき右眼用画像および観視者の左眼で視認されるべき左眼用画像を生成する画像生成装置であって、対応するオブジェクトの対応点の表示画面上における左右方向の位置の差であるズレ量を、表示画面の左右方向の中央領域と周辺領域とで異ならせて右眼用画像と左眼用画像とを生成する画像生成部を備える。   In order to solve the above problems, in one aspect of the present invention, a right-eye image that should be visually recognized by the viewer's right eye and a left-eye image that should be visually recognized by the viewer's left eye are generated. An image generating apparatus, wherein a right eye image is obtained by changing a shift amount, which is a difference in a horizontal position on a display screen of corresponding points of a corresponding object, in a central area and a peripheral area in the horizontal direction of the display screen. And an image generation unit that generates an image for the left eye.

画像生成部は、表示画面上における対応点のズレ量が、表示画面の周辺領域で中央領域より小さい右眼用画像と左眼用画像とを生成してよい。   The image generation unit may generate a right-eye image and a left-eye image in which the shift amount of the corresponding point on the display screen is smaller than the central region in the peripheral region of the display screen.

画像生成部は、2次元画像の中央領域を第1ズレ量だけ左右にずらし、2次元画像の周辺領域を第1ズレ量より小さい第2ズレ量だけ左右にずらすことにより、右眼用画像および左眼用画像を生成してよい。   The image generation unit shifts the center area of the two-dimensional image to the left and right by the first shift amount, and shifts the peripheral area of the two-dimensional image to the left and right by the second shift amount smaller than the first shift amount. An image for the left eye may be generated.

右眼用画像および左眼用画像を表示する表示画面の大きさを示す情報を取得する画面サイズ取得部をさらに備え、画像生成部は、画面サイズ取得部が取得した情報が所定サイズより小さい大きさを示す場合、表示画面の中央領域と周辺領域とでズレ量が同一の右眼用画像と左眼用画像とを生成し、画面サイズ取得部が取得した情報が所定サイズ以上の大きさを示す場合、表示画面の周辺領域で中央領域よりズレ量が小さい右眼用画像と左眼用画像とを生成してよい。   A screen size acquisition unit that acquires information indicating the size of the display screen that displays the right-eye image and the left-eye image is further provided, and the image generation unit is configured such that the information acquired by the screen size acquisition unit is smaller than a predetermined size. The right eye image and the left eye image having the same amount of deviation between the central area and the peripheral area of the display screen are generated, and the information acquired by the screen size acquisition unit is larger than a predetermined size. In the case of showing, a right-eye image and a left-eye image that are smaller in the peripheral area of the display screen than the central area may be generated.

右眼用画像および左眼用画像を表示する表示画面の大きさを示す情報を取得する画面サイズ取得部をさらに備え、画像生成部は、画面サイズ取得部が取得した情報が示す大きさがより大きい場合に、表示画面の周辺領域で中央領域よりズレ量がより小さい右眼用画像と左眼用画像とを生成してよい。   It further includes a screen size acquisition unit that acquires information indicating the size of the display screen that displays the image for the right eye and the image for the left eye, and the image generation unit has a larger size indicated by the information acquired by the screen size acquisition unit. When it is larger, a right-eye image and a left-eye image that are smaller in the peripheral area of the display screen than the central area may be generated.

画像生成部が生成した右眼用画像および左眼用画像を表示する表示部をさらに備えてよい。   You may further provide the display part which displays the image for right eyes and the image for left eyes which the image generation part produced | generated.

表示部の観視者側に設けられ、右眼用画像と左眼用画像とを異なる方向へ案内する画像案内部をさらに備えてよい。   You may further provide the image guidance part provided in the viewer side of the display part, and guides the image for right eyes and the image for left eyes in a different direction.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。   The above summary of the invention does not enumerate all necessary features of the present invention. In addition, a sub-combination of these feature groups can also be an invention.

一実施形態に係る表示装置10の構成例を示す図である。It is a figure which shows the structural example of the display apparatus 10 which concerns on one Embodiment. 画像処理部120の動作例を説明する図である。FIG. 6 is a diagram for explaining an operation example of an image processing unit 120. 画像案内部150を説明する図である。It is a figure explaining the image guide part. 画像生成部110の動作例を説明する図である。6 is a diagram for explaining an operation example of an image generation unit 110. FIG. ズレ量決定部160による処理例を示す図である。6 is a diagram illustrating an example of processing performed by a deviation amount determination unit 160. FIG. 表示装置10の動作例を示すフローチャートを示す図である。FIG. 10 is a flowchart illustrating an operation example of the display device 10. ズレ量の範囲を説明する図である。It is a figure explaining the range of deviation | shift amount. ズレ量の範囲を定める下限値の他の例を説明する図である。It is a figure explaining the other example of the lower limit which defines the range of deviation | shift amount. 斜め方向で表示面を観視している観視者に対するズレ量の一例を示す図である。It is a figure which shows an example of the deviation | shift amount with respect to the viewer who is viewing the display surface in the diagonal direction. 左眼用画像および右眼用画像の画像端部に対する処理例を示す図である。It is a figure which shows the example of a process with respect to the image edge part of the image for left eyes, and the image for right eyes. 画像端部に対する他の処理例を示す図である。It is a figure which shows the other example of a process with respect to an image edge part. 画像端部に対する更なる他の処理例を示す図である。It is a figure which shows the further another process example with respect to an image edge part. 画像端部に対する更なる他の処理例を示す図である。It is a figure which shows the further another process example with respect to an image edge part. 画像端部に対する更なる他の処理例を示す図である。It is a figure which shows the further another process example with respect to an image edge part. 他の実施形態に係るコンピュータ800のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of the computer 800 which concerns on other embodiment.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention, but the following embodiments do not limit the invention according to the claims. In addition, not all the combinations of features described in the embodiments are essential for the solving means of the invention.

図1は、一実施形態に係る表示装置10の構成例を示す図である。表示装置10は、観視者に立体的画像を提示する。具体的には、表示装置10は、観視者の右眼で視認されるべき右眼用画像と観視者の左眼で視認されるべき左眼用画像とを生成して、生成した右眼用画像および左眼用画像を、それぞれ観視者の右眼および観視者の左眼に提示することにより、立体的画像を観視者に提示する。   FIG. 1 is a diagram illustrating a configuration example of a display device 10 according to an embodiment. The display device 10 presents a stereoscopic image to the viewer. Specifically, the display device 10 generates a right-eye image that should be viewed with the viewer's right eye and a left-eye image that should be viewed with the viewer's left eye, and generates the generated right The stereoscopic image is presented to the viewer by presenting the eye image and the left eye image to the viewer's right eye and the viewer's left eye, respectively.

ここで、表示装置10は、デジタルフォトフレーム、テレビ受像機およびパーソナルコンピュータ用のモニタ等の表示装置であってよい。また、表示装置10は、デジタルスチルカメラ、デジタルビデオカメラなどの撮像機器の表示デバイスであってよく、携帯電話機などの携帯機器の表示デバイスであってもよい。   Here, the display device 10 may be a display device such as a digital photo frame, a television receiver, and a monitor for a personal computer. The display device 10 may be a display device of an imaging device such as a digital still camera or a digital video camera, or may be a display device of a mobile device such as a mobile phone.

表示装置10は、画像取得部100、画像生成部110、画像処理部120、表示部140、画像案内部150、ズレ量決定部160、画面サイズ取得部170、制御部180、および、観視者特定部190を備える。なお、表示装置10が備える構成要素のうち、画像案内部150を除く機能ブロックは、右眼用画像および左眼用画像を生成する画像生成装置として機能することができる。例えば、画像取得部100、画像生成部110、画像処理部120、表示部140、ズレ量決定部160、画面サイズ取得部170、制御部180、および、観視者特定部190を備える機能ブロックが、画像生成装置として機能することができる。   The display device 10 includes an image acquisition unit 100, an image generation unit 110, an image processing unit 120, a display unit 140, an image guide unit 150, a shift amount determination unit 160, a screen size acquisition unit 170, a control unit 180, and a viewer. A specifying unit 190 is provided. Note that, among the components included in the display device 10, functional blocks excluding the image guide unit 150 can function as an image generation device that generates a right-eye image and a left-eye image. For example, a functional block including an image acquisition unit 100, an image generation unit 110, an image processing unit 120, a display unit 140, a deviation amount determination unit 160, a screen size acquisition unit 170, a control unit 180, and a viewer identification unit 190. It can function as an image generation device.

画像取得部100は、表示部140に表示されるべき表示画像の元となる入力画像を取得する。例えば、画像取得部100は、記憶媒体が記憶している1以上の画像を、入力画像として記憶媒体から取得してよい。画像取得部100は、外部インターフェイスを通じて外部から供給される画像を、入力画像として取得してもよい。また、画像取得部100が入力画像として取得する画像は、静止画であってよく、静止画が連続した動画であってもよい。画像取得部100は複数の入力画像を取得して、画像生成部110に供給する。   The image acquisition unit 100 acquires an input image that is a source of a display image to be displayed on the display unit 140. For example, the image acquisition unit 100 may acquire one or more images stored in the storage medium from the storage medium as an input image. The image acquisition unit 100 may acquire an image supplied from the outside through an external interface as an input image. The image acquired by the image acquisition unit 100 as an input image may be a still image or a moving image in which still images are continuous. The image acquisition unit 100 acquires a plurality of input images and supplies them to the image generation unit 110.

入力画像としては、1視点からの画像である1つの2次元画像を例示することができる。例えば、入力画像は、いわゆる2次元カメラにより1視点から撮像されて得られた1つの2次元画像であってよい。他にも、入力画像は、右眼および左眼にそれぞれ対応する2視点からの画像である2つの2次元画像であってよい。例えば、入力画像は、いわゆる複眼カメラにより2視点から撮像されて得られた2つの2次元画像であってよい。   As an input image, one two-dimensional image that is an image from one viewpoint can be exemplified. For example, the input image may be a single two-dimensional image obtained by imaging from a single viewpoint with a so-called two-dimensional camera. In addition, the input image may be two two-dimensional images that are images from two viewpoints corresponding to the right eye and the left eye, respectively. For example, the input image may be two two-dimensional images obtained by imaging from two viewpoints with a so-called compound eye camera.

画像生成部110は、画像取得部100から取得した入力画像を用いて、表示部140に表示されるべき表示画像に含まれる右眼用画像および左眼用画像を生成する。具体的には、画像生成部110は、対応するオブジェクトの対応点の表示画面上における左右方向の位置の差であるズレ量を、表示画面の左右方向の中央領域と周辺領域とで異ならせて右眼用画像と左眼用画像とを生成する。ここで、左右方向とは、観視者の右眼および左眼に沿う方向とする。後述するように、画像生成部110が中央領域と周辺領域とでズレ量を異ならせて右眼用画像と左眼用画像とを生成することで、観視者に大きな違和感を与えることなく立体的な像を認識可能な表示画像を提供することができる。画像生成部110は、生成した右眼用画像および左眼用画像を画像処理部120に供給する。   The image generation unit 110 uses the input image acquired from the image acquisition unit 100 to generate a right eye image and a left eye image included in the display image to be displayed on the display unit 140. Specifically, the image generation unit 110 varies the shift amount, which is the difference in the horizontal position on the display screen of the corresponding points of the corresponding object, between the central area and the peripheral area in the horizontal direction of the display screen. A right-eye image and a left-eye image are generated. Here, the horizontal direction is a direction along the right and left eyes of the viewer. As will be described later, the image generation unit 110 generates a right-eye image and a left-eye image by varying the amount of deviation between the central region and the peripheral region, so that a three-dimensional image can be obtained without causing a great sense of discomfort to the viewer. A display image capable of recognizing a typical image can be provided. The image generation unit 110 supplies the generated right eye image and left eye image to the image processing unit 120.

画像処理部120は、画像生成部110が生成した右眼用画像および左眼用画像に所定の画像処理を施して表示画像を生成して、表示部140に供給する。例えば、画像処理部120は、右眼用画像および左眼用画像の少なくとも一方にぼかし処理を施してよい。例えば、画像処理部120は、画像の部分領域毎に複数の画素値を平均化することにより、右眼用画像および左眼用画像の少なくとも一方にぼかし処理を施してよい。   The image processing unit 120 performs predetermined image processing on the right-eye image and the left-eye image generated by the image generation unit 110 to generate a display image, and supplies the display image to the display unit 140. For example, the image processing unit 120 may perform blurring processing on at least one of the right eye image and the left eye image. For example, the image processing unit 120 may perform blurring processing on at least one of the right-eye image and the left-eye image by averaging a plurality of pixel values for each partial region of the image.

鮮明な右眼用画像および左眼用画像を観視者に提示するよりも、ぼかし処理を施した場合の方が、観視者は小さな負担で立体的な像を認識することができる場合がある。具体的には、2次元の表示面に表示された擬似的な立体画像である表示画像が観視者に与える空間情報は、実際の3次元空間の物体が与える空間情報とは完全に一致しておらず、観視者は表示画像から得られた視覚的情報に多少の矛盾を感じてしまう場合がある。   Rather than presenting a clear image for the right eye and a left eye to the viewer, the viewer may be able to recognize a three-dimensional image with a small burden when the blurring process is performed. is there. Specifically, the spatial information given to the viewer by the display image, which is a pseudo stereoscopic image displayed on the two-dimensional display surface, is completely the same as the spatial information given by the object in the actual three-dimensional space. The viewer may feel some contradiction in the visual information obtained from the display image.

観視者の脳は、右眼用画像および左眼用画像を融合して1つの立体的な像を認識しようとするが、右眼用画像および左眼用画像がどちらも鮮明であると矛盾が際立ってしまい、きちんと融合できなくなってしまう場合がある。また、表示画像をきちんと融合するのに観視者の脳に多大の負担をかけてしまい、観視者が疲れてしまう場合がある。   The viewer's brain tries to recognize one stereoscopic image by fusing the right-eye image and the left-eye image, but contradicts that both the right-eye image and the left-eye image are clear. May stand out and be unable to fuse properly. In addition, in order to fuse the displayed images properly, a great burden is placed on the viewer's brain, and the viewer may get tired.

右眼用画像および左眼用画像がどちらも鮮明な場合と比べると、画像処理部120が左眼用画像または右眼用画像の少なくとも一方をぼかすことによって矛盾を低減することができる。画像がぼかされたとしても、ぼけた画像を他方の画像に合わせて観視者の脳が都合良く認識することができるので、比較的容易に表示画像を立体的な像として認識することができる。また、観視者の脳は、ぼけた画像を鮮明なものとして都合良く認識することもできるので、観視者が認識する像の画質も実質的に劣化しない。   Compared to the case where both the right-eye image and the left-eye image are clear, the image processing unit 120 can reduce inconsistency by blurring at least one of the left-eye image and the right-eye image. Even if the image is blurred, the viewer's brain can conveniently recognize the blurred image with the other image, so the display image can be recognized as a three-dimensional image relatively easily. it can. In addition, since the viewer's brain can conveniently recognize a blurred image as a clear image, the image quality of the image recognized by the viewer is not substantially deteriorated.

画像処理部120によるぼかし処理により、観視者は小さな負担で表示画像を鮮明な立体的画像として認識することができる。このため、観視者は、表示装置10が提供する立体的画像を比較的長時間にわたって鑑賞し続けることができる。   By the blurring process by the image processing unit 120, the viewer can recognize the display image as a clear stereoscopic image with a small burden. For this reason, the viewer can continue to appreciate the stereoscopic image provided by the display device 10 for a relatively long time.

なお、画像処理部120は、入力画像、右眼用画像、および左眼用画像の少なくともいずれかの鮮明度を算出して、鮮明度が予め定められた値より大きいことを条件として、右眼用画像および左眼用画像の少なくとも一方にぼかし処理を施してよい。例えば、画像処理部120は、右眼用画像および左眼用画像の少なくとも一方が有する空間周波数成分に基づいて、鮮明度を決定してよい。例えば、画像処理部120は、予め定められた空間周波数より高い空間周波数領域においてより高い空間周波数成分を入力画像が有している場合に、より大きい値の鮮明度を決定してよい。   Note that the image processing unit 120 calculates the sharpness of at least one of the input image, the right-eye image, and the left-eye image, and the right eye is provided on the condition that the sharpness is larger than a predetermined value. Blur processing may be performed on at least one of the image for use and the image for the left eye. For example, the image processing unit 120 may determine the definition based on a spatial frequency component included in at least one of the right-eye image and the left-eye image. For example, when the input image has a higher spatial frequency component in a spatial frequency region higher than a predetermined spatial frequency, the image processing unit 120 may determine a sharpness with a larger value.

また、画像処理部120は、右眼用画像および左眼用画像のそれぞれを、所定の方向において所定の幅を有する複数のストライプ画像に分割する。そして、画像処理部120は、右眼用画像のストライプ画像および左眼用画像のストライプ画像を、所定の画像配列方向に交互に配列された表示画像を生成する。   In addition, the image processing unit 120 divides each of the right-eye image and the left-eye image into a plurality of stripe images having a predetermined width in a predetermined direction. Then, the image processing unit 120 generates a display image in which the stripe image of the right eye image and the stripe image of the left eye image are alternately arranged in a predetermined image arrangement direction.

画像処理部120が生成した表示画像は、表示部140に供給される。表示部140は、画像生成部110が生成した、観視者の右眼で視認されるべき右眼用画像、および観視者の左眼で視認されるべき左眼用画像を表示する。具体的には、表示部140は、右眼用画像のストライプ画像および左眼用画像のストライプ画像が交互に配列された表示画像を表示する。以下に説明するように、表示部140に表示された右眼用画像からの各ストライプ画像(R)は、画像案内部150により観視者の右眼に指向され、表示部140に表示された左眼用画像からの各ストライプ画像(L)は、画像案内部150により観視者の左眼に指向される。   The display image generated by the image processing unit 120 is supplied to the display unit 140. The display unit 140 displays the image for the right eye that should be viewed with the right eye of the viewer and the image for the left eye that should be viewed with the left eye of the viewer, generated by the image generation unit 110. Specifically, the display unit 140 displays a display image in which a stripe image of the right eye image and a stripe image of the left eye image are alternately arranged. As described below, each stripe image (R) from the image for the right eye displayed on the display unit 140 is directed to the right eye of the viewer by the image guide unit 150 and displayed on the display unit 140. Each stripe image (L) from the image for the left eye is directed to the left eye of the viewer by the image guide unit 150.

画像案内部150は、透過部および遮光部が交互に配置された、いわゆるパララックスバリアであってよい。例えば、画像案内部150は、交互に配置された透過部および遮光部を有する。透過部および遮光部は、当該延伸方向と直交するバリア配列方向に交互に配置され、表示部140が表示した右眼用画像および左眼用画像の対応するストライプ画像を異なる方向に射出させ、観視者の右眼および左眼にそれぞれ提示する。このような構成により、裸眼の観視者に立体的画像を提示することができる。   The image guide unit 150 may be a so-called parallax barrier in which transmission parts and light shielding parts are alternately arranged. For example, the image guide unit 150 includes alternately transmissive portions and light shielding portions. The transmission part and the light shielding part are alternately arranged in the barrier arrangement direction orthogonal to the extending direction, and the stripe images corresponding to the right eye image and the left eye image displayed by the display unit 140 are emitted in different directions for viewing. Present to the right and left eyes of the viewer. With such a configuration, a stereoscopic image can be presented to a naked eye viewer.

以上の説明のように、表示画像に含まれる右眼用画像と左眼用画像とにおいて、対応するオブジェクトの対応点の表示部140の表示画面上における位置の差が存在する場合に、観視者は表示画像を立体的に認識することができる。例えば、右眼用画像と左眼用画像とにおける対応するオブジェクトの対応点が観視者の瞳孔間距離に近い量だけずれていると、観視者の左眼および右眼の視線は実質的に平行状態となる。これにより、あたかも無限遠を見ているような像を観視者に認識させることができる。   As described above, when there is a difference in the position of the corresponding point of the corresponding object on the display screen of the display unit 140 between the right-eye image and the left-eye image included in the display image, the viewing is performed. The person can recognize the display image three-dimensionally. For example, if the corresponding points of the corresponding objects in the right eye image and the left eye image are shifted by an amount close to the distance between the pupils of the viewer, the eyes of the viewer's left eye and right eye are substantially It becomes a parallel state. This makes it possible for the viewer to recognize an image as if looking at infinity.

本明細書において、右眼用画像と左眼用画像とにおける対応するオブジェクトの対応点の表示画面上の位置の差を、ズレ量と呼ぶ。以下に説明するように、表示装置10は、表示領域毎にズレ量を調整することによって、観視者が違和感をより感じることのない表示画像を提示することができる。具体的には、画像生成部110は、表示画面上における対応点のズレ量が、表示画面の周辺領域で中央領域より小さい右眼用画像と左眼用画像とを生成する。表示部140の中央領域の前面から観視者が観視している場合に、周辺領域のオブジェクトが観視者の両眼で見えてしまったとしても、周辺領域のズレ量を比較的に小さくしてるので、周辺領域のオブジェクトの位置ズレを観視者は顕著に感じることはない。これにより周辺領域において観視者が感じる違和感を低減することができる。一方、表示部140の表示面の中央領域については、ズレ量を比較的に大きくしているので、観視者は立体感のある像を認識することができる。   In this specification, the difference in the position on the display screen of corresponding points of corresponding objects in the right-eye image and the left-eye image is referred to as a deviation amount. As will be described below, the display device 10 can present a display image in which the viewer does not feel more uncomfortable by adjusting the shift amount for each display region. Specifically, the image generation unit 110 generates a right-eye image and a left-eye image in which the shift amount of the corresponding point on the display screen is smaller than the central region in the peripheral region of the display screen. When the viewer is viewing from the front of the central area of the display unit 140, even if an object in the peripheral area is visible with both eyes of the viewer, the amount of shift in the peripheral area is relatively small. Therefore, the viewer does not feel the positional deviation of the objects in the peripheral area. Thereby, the uncomfortable feeling felt by the viewer in the peripheral area can be reduced. On the other hand, since the shift amount is relatively large in the central area of the display surface of the display unit 140, the viewer can recognize an image with a three-dimensional effect.

ここで、入力画像が2次元画像である場合に、画像生成部110は、入力画像を所与のズレ量だけ左右に相対的にずらすことにより、立体的な像として認識される表示画像を観視者に提示することができる。この場合に、画像生成部110は、2次元画像の中央領域を第1ズレ量だけ左右にずらし、2次元画像の周辺領域を第1ズレ量より小さい第2ズレ量だけ左右にずらすことにより、右眼用画像および左眼用画像を生成する。   Here, when the input image is a two-dimensional image, the image generation unit 110 views the display image recognized as a three-dimensional image by relatively shifting the input image left and right by a given amount of deviation. Can be presented to the viewer. In this case, the image generation unit 110 shifts the center area of the two-dimensional image left and right by the first shift amount, and shifts the peripheral area of the two-dimensional image left and right by the second shift amount smaller than the first shift amount. A right-eye image and a left-eye image are generated.

入力画像が、複眼カメラによる撮像画像である場合などのように2視点からの2次元画像であり、既にズレ量を含む場合には、画像生成部110は、右方の視点からの2次元画像および左方の視点からの2次元画像を以下のようにずらすことにより、それぞれ右眼用画像および左眼用画像を生成する。すなわち、画像生成部110は、右方の視点からの2次元画像と左方の視点からの2次元画像とにおける左右のズレ量が、中央領域において第1ズレ量となり、周辺領域において第1ズレ量より小さい第2ズレ量となるよう、右方の視点からの2次元画像および左方の視点からの2次元画像を領域毎に左右にずらすことにより、右眼用画像および左眼用画像を生成する。   When the input image is a two-dimensional image from two viewpoints, such as when the image is captured by a compound eye camera, and already includes a deviation amount, the image generation unit 110 displays the two-dimensional image from the right viewpoint. Then, the right-eye image and the left-eye image are generated by shifting the two-dimensional image from the left viewpoint as follows. That is, the image generation unit 110 has a left-right shift amount between the two-dimensional image from the right viewpoint and the two-dimensional image from the left viewpoint as the first shift amount in the central area and the first shift amount in the peripheral area. By shifting the two-dimensional image from the right viewpoint and the two-dimensional image from the left viewpoint to the left and right for each region so that the second shift amount is smaller than the amount, the right eye image and the left eye image are Generate.

表示領域毎のズレ量は、例えばズレ量決定部160により決定される。具体的には、ズレ量決定部160は、表示領域毎にズレ量を異ならせるか否かを判断して、表示領域毎にズレ量を異ならせる旨を判断した場合に、表示領域毎のズレ量を決定してよい。例えば、ズレ量決定部160は、表示部140の表示画面の大きさに基づき、表示領域毎にズレ量を異ならせるか否かを判断してよい。また、ズレ量決定部160は、表示部140の表示画面の大きさに基づき、表示領域毎にズレ量を決定してよい。   The shift amount for each display area is determined by the shift amount determination unit 160, for example. Specifically, when the shift amount determination unit 160 determines whether or not to change the shift amount for each display region, and determines that the shift amount is different for each display region, the shift amount for each display region is determined. The amount may be determined. For example, the shift amount determination unit 160 may determine whether or not to change the shift amount for each display area based on the size of the display screen of the display unit 140. Further, the shift amount determination unit 160 may determine the shift amount for each display area based on the size of the display screen of the display unit 140.

具体的には、画面サイズ取得部170は、右眼用画像および左眼用画像を表示する表示画面の大きさを示す情報を取得する。より具体的には、画面サイズ取得部170は、表示部140の表示画面の大きさを示す情報を取得する。ここで、表示画面の大きさを示す情報とは、表示部140の表示画面の左右方向のサイズを指標とすることができる。なお、表示画面の大きさとは、表示部140が表示画像を実際に表示する表示領域の大きさであってよい。例えば、表示部140が表示することができる最大の表示領域より小さな領域に表示画像を表示する場合には、表示画面の大きさとは、当該最大の表示領域より小さな、表示画像が実際に表示される領域の大きさを意味するとみなすことができる。   Specifically, the screen size acquisition unit 170 acquires information indicating the size of the display screen that displays the right-eye image and the left-eye image. More specifically, the screen size acquisition unit 170 acquires information indicating the size of the display screen of the display unit 140. Here, the information indicating the size of the display screen can use the horizontal size of the display screen of the display unit 140 as an index. The size of the display screen may be the size of the display area where the display unit 140 actually displays the display image. For example, when a display image is displayed in an area smaller than the maximum display area that can be displayed by the display unit 140, the size of the display screen is a display image that is actually smaller than the maximum display area. It can be regarded as meaning the size of the area.

ズレ量決定部160は、画面サイズ取得部170が取得した情報が所定サイズより小さい大きさを示す場合、表示画面の中央領域と周辺領域とで同一のズレ量を決定する。そして、画像生成部110は、画面サイズ取得部170が取得した情報が所定サイズより小さい大きさを示す場合、表示画面の中央領域と周辺領域とでズレ量が同一の右眼用画像と左眼用画像とを生成する。一方、ズレ量決定部160は、画面サイズ取得部170が取得した情報が所定サイズ以上の大きさを示す場合、表示画面の周辺領域で中央領域より小さいズレ量を決定する。そして、画像生成部110は、画面サイズ取得部170が取得した情報が所定サイズ以上の大きさを示す場合、表示画面の周辺領域で中央領域よりズレ量が小さい右眼用画像と左眼用画像とを生成する。このように、画像生成部110は、画面サイズ取得部170が取得した情報が示す大きさがより大きい場合に、表示画面の周辺領域で中央領域よりズレ量がより小さい右眼用画像と左眼用画像とを生成することができる。   When the information acquired by the screen size acquisition unit 170 indicates a size smaller than a predetermined size, the shift amount determination unit 160 determines the same shift amount between the central area and the peripheral area of the display screen. Then, when the information acquired by the screen size acquisition unit 170 indicates a size smaller than the predetermined size, the image generation unit 110 and the right eye image and the left eye that have the same amount of deviation between the central region and the peripheral region of the display screen Images. On the other hand, when the information acquired by the screen size acquisition unit 170 indicates a size greater than or equal to a predetermined size, the shift amount determination unit 160 determines a shift amount smaller than the central region in the peripheral area of the display screen. Then, when the information acquired by the screen size acquisition unit 170 indicates a size equal to or larger than a predetermined size, the image generation unit 110 has a right eye image and a left eye image that are smaller in the peripheral area of the display screen than the central area. And generate As described above, when the size indicated by the information acquired by the screen size acquisition unit 170 is larger, the image generation unit 110 causes the right eye image and the left eye to be smaller in the peripheral area of the display screen than in the central area. Images can be generated.

表示部140の表示画面が所定サイズより小さい場合には、観視者は表示画面の全領域において比較的に容易に右眼用画像と左眼用画像とを視差融合でき、1つの立体的な像として認識することができる。表示装置10は、表示画面が所定サイズより小さい場合には、例えば全領域にわたってズレ量が同一な表示画像を提供するので、観視者は画像全体にわたって立体的な像を楽しむことができる。一方、表示部140の表示画面が所定サイズ以上である場合には、観視者は表示画面の周辺領域においては右眼用画像と左眼用画像とを視差融合しにくくなり、ズレ量が大きいほど違和感をより強く感じてしまう。しかしながら、表示画面が所定サイズ以上である場合には、画像生成部110の制御により周辺領域におけるズレ量は中央領域より小さくされるので、観視者が周辺領域において違和感を強く感じることを防ぐことができる。一方で、表示装置10は、中央領域においては比較的に大きなズレ量の表示画像を提示するので、観視者は立体的な像を楽しむことができる。   When the display screen of the display unit 140 is smaller than a predetermined size, the viewer can easily perform parallax fusion between the right-eye image and the left-eye image in the entire area of the display screen. It can be recognized as an image. When the display screen is smaller than a predetermined size, for example, the display device 10 provides a display image with the same amount of displacement over the entire region, so that the viewer can enjoy a stereoscopic image over the entire image. On the other hand, when the display screen of the display unit 140 is equal to or larger than the predetermined size, it becomes difficult for the viewer to perform the parallax fusion between the right-eye image and the left-eye image in the peripheral area of the display screen, and the amount of deviation is large. I feel more uncomfortable. However, when the display screen is larger than the predetermined size, the shift amount in the peripheral area is made smaller than that in the central area by the control of the image generation unit 110, and thus the viewer is prevented from feeling a sense of discomfort strongly in the peripheral area. Can do. On the other hand, since the display device 10 presents a display image with a relatively large shift amount in the central region, the viewer can enjoy a stereoscopic image.

なお、入力画像が撮像された画像であったとしても、ズレ量決定部160は、当該入力画像の各領域内に撮像された複数の被写体までの実際の距離に関係なく、ズレ量を決定してよい。例えば周辺領域に撮像されている被写体が、中央領域に撮像されている被写体よりも実際には遠くに位置していたとしても、ズレ量決定部160は、中央領域におけるズレ量より大きい大きさのズレ量を周辺領域において決定してよい。   Even if the input image is a captured image, the shift amount determination unit 160 determines the shift amount regardless of the actual distance to a plurality of subjects captured in each area of the input image. It's okay. For example, even if the subject imaged in the peripheral area is actually located farther than the subject imaged in the central area, the deviation amount determination unit 160 has a larger magnitude than the deviation amount in the central area. The amount of deviation may be determined in the peripheral area.

以上の説明では、表示領域におけるズレ量を相対的に異ならせる処理について説明した。ここで、ズレ量の大きさは、表示部140の表示面と観視者との位置関係によって定めることができる。例えば、観視者特定部190は、表示部140の表示面と観視者との位置関係として、表示部140の表示面に対する観視者の顔の向きを特定する。また、観視者特定部190は、表示部140の表示面と観視者との位置関係として、観視者の両眼から表示部140の表示面までの距離および観視者の眼の向きを特定してもよい。そして、ズレ量決定部160は、表示部140の表示面と観視者との位置関係に基づき、ズレ量を決定してよい。   In the above description, the process of relatively changing the amount of deviation in the display area has been described. Here, the magnitude of the shift amount can be determined by the positional relationship between the display surface of the display unit 140 and the viewer. For example, the viewer specifying unit 190 specifies the orientation of the viewer's face with respect to the display surface of the display unit 140 as the positional relationship between the display surface of the display unit 140 and the viewer. Further, the viewer specifying unit 190 determines the distance from the viewer's eyes to the display surface of the display unit 140 and the orientation of the viewer's eyes as the positional relationship between the display surface of the display unit 140 and the viewer. May be specified. Then, the shift amount determination unit 160 may determine the shift amount based on the positional relationship between the display surface of the display unit 140 and the viewer.

例えば、ズレ量決定部160は、観視者特定部190が特定した向きに基づいて、ズレ量を決定してよい。具体的には、ズレ量決定部160は、観視者特定部190が特定した向きに基づき、観視者が観ている表示領域を特定して、当該表示領域におけるズレ量を決定してよい。このとき、ズレ量決定部160は、観視者特定部190が特定した向きと表示部140の表示面の法線方向とのなす角度が大きいほど、観視者が観ている表示領域のズレ量としてより大きい大きさのズレ量を決定してよい。そして、ズレ量決定部160は当該観視者が観ている表示領域の周辺領域のズレ量として、当該観視者が観ている表示領域のズレ量より小さい大きさのズレ量を決定してよい。   For example, the shift amount determination unit 160 may determine the shift amount based on the direction specified by the viewer specifying unit 190. Specifically, the deviation amount determination unit 160 may identify the display area that the viewer is viewing based on the orientation identified by the viewer identification unit 190 and may determine the deviation amount in the display area. . At this time, the shift amount determination unit 160 increases the shift of the display area that the viewer is watching as the angle between the orientation specified by the viewer specifying unit 190 and the normal direction of the display surface of the display unit 140 increases. A larger amount of displacement may be determined as the amount. Then, the shift amount determination unit 160 determines a shift amount smaller than the shift amount of the display region viewed by the viewer as the shift amount of the peripheral region of the display region viewed by the viewer. Good.

また、制御部180は、観視者特定部190が特定した向きまたは両眼からの表示面までの距離に基づき、画像案内部150が有する遮光部の位置およびピッチの少なくとも一方を決定してもよい。遮光部の位置とは、遮光部の左右方向の位置、および、表示部140の表示面の法線方向における遮光部の位置の少なくとも一方であってよい。また、制御部180は、決定した遮光部の位置またはピッチに対応する、各ストライプ画像の幅または配列ピッチを決定して、決定した幅のストライプ画像を画像処理部120に生成させてよい。また、制御部180は、決定したピッチでストライプ画像が配列された表示画像を画像処理部120に生成させてよい。   Further, the control unit 180 may determine at least one of the position and the pitch of the light shielding unit included in the image guide unit 150 based on the orientation specified by the viewer specifying unit 190 or the distance from both eyes to the display surface. Good. The position of the light shielding part may be at least one of the position of the light shielding part in the left-right direction and the position of the light shielding part in the normal direction of the display surface of the display unit 140. In addition, the control unit 180 may determine the width or arrangement pitch of each stripe image corresponding to the determined position or pitch of the light shielding unit, and cause the image processing unit 120 to generate a stripe image having the determined width. Further, the control unit 180 may cause the image processing unit 120 to generate a display image in which stripe images are arranged at the determined pitch.

図2は、画像処理部120の動作例を説明する図である。上述したように画像処理部120は、左眼用画像および右眼用画像を、複数のストライプ画像(L1、L2、L3、・・・、および、R1、R2、R3、・・・)に分割する。本例の画像処理部120は、水平方向の配列方向に沿って、所定の間隔で左眼用画像および右眼用画像を分割する。   FIG. 2 is a diagram for explaining an operation example of the image processing unit 120. As described above, the image processing unit 120 divides the left-eye image and the right-eye image into a plurality of stripe images (L1, L2, L3,..., R1, R2, R3,...). To do. The image processing unit 120 of this example divides the left-eye image and the right-eye image at predetermined intervals along the horizontal arrangement direction.

画像処理部120は、生成したストライプ画像を、右眼用画像および左眼用画像で交互に配列方向に配置して表示画像を生成する。なお、表示部140は、表示画像に含まれる右眼用画像および左眼用画像を同時に表示するので、画像処理部120は、左眼用画像および右眼用画像のそれぞれについて、ストライプ画像の配列方向における表示画素数を略半分にする。より具体的には、画像処理部120は、左眼用画像および右眼用画像のそれぞれのストライプ画像を、配列方向に1つおきに用いる。   The image processing unit 120 generates the display image by arranging the generated stripe images alternately in the arrangement direction of the right-eye image and the left-eye image. Since the display unit 140 simultaneously displays the right eye image and the left eye image included in the display image, the image processing unit 120 arranges the stripe image arrangement for each of the left eye image and the right eye image. The number of display pixels in the direction is approximately halved. More specifically, the image processing unit 120 uses every other stripe image of the left eye image and the right eye image in the arrangement direction.

図3は、画像案内部150を説明する図である。画像案内部150は、表示部140の観視者側に設けられたバリア部310およびバリア制御部320を有する。バリア部310は、右眼用画像と左眼用画像とを異なる方向へ案内する。   FIG. 3 is a diagram illustrating the image guide unit 150. The image guide unit 150 includes a barrier unit 310 and a barrier control unit 320 provided on the viewer side of the display unit 140. The barrier unit 310 guides the right-eye image and the left-eye image in different directions.

具体的には、バリア部310は、表示部140の観視者側に、所定の配列方向に沿って交互に設けられた透過部312および遮光部314を含む。透過部312は、左眼用画像の1つのストライプ画像、および、右眼用画像の1つのストライプ画像の組み合わせに対して1つずつ形成される。それぞれの透過部312は、対応する左眼用画像のストライプ画像を、観視者の左眼の方向に射出し、対応する右眼用画像のストライプ画像を、観視者の右眼の方向に射出する。なお、画像案内部150により複数視点用の画像を裸眼の観視者に提示する場合、ある観視位置において観視者の右眼でとらえられたストライプ画像が、他の観視位置では観視者の左眼でとらえられる場合がある。本実施形態において右眼用画像は、観視者の右眼でとらえられた画像であり、左眼用画像は、観視者の左眼でとらえられた画像であるとみなすことができる。具体的には、特定の透過部312から射出されたストライプ画像が実質的に観視者の右眼でとらえられた場合には、当該ストライプ画像は右眼用画像を形成するストライプ画像とみなすことができる。逆に、同じ特定の透過部312から射出されたストライプ画像が実質的に観視者の左眼でとらえられた場合には、当該ストライプ画像は左眼用画像を形成するストライプ画像とみなすことができる。つまり、画像案内部150は、複数視点用の画像を異なる方向へ案内するということができる。   Specifically, the barrier unit 310 includes a transmission unit 312 and a light shielding unit 314 provided alternately along a predetermined arrangement direction on the viewer side of the display unit 140. One transmissive portion 312 is formed for each combination of one stripe image of the left eye image and one stripe image of the right eye image. Each transmission unit 312 emits a corresponding stripe image of the left-eye image in the direction of the left eye of the viewer, and outputs a corresponding stripe image of the right-eye image in the direction of the right eye of the viewer. Eject. When the image guide unit 150 presents an image for a plurality of viewpoints to a naked eye viewer, a striped image captured by the viewer's right eye at a certain viewing position is viewed at another viewing position. May be caught by the left eye of a person. In the present embodiment, the image for the right eye is an image captured with the right eye of the viewer, and the image for the left eye can be regarded as an image captured with the left eye of the viewer. Specifically, when a stripe image emitted from a specific transmission unit 312 is substantially captured by the right eye of the viewer, the stripe image is regarded as a stripe image that forms an image for the right eye. Can do. Conversely, when a stripe image emitted from the same specific transmission part 312 is substantially captured by the left eye of the viewer, the stripe image can be regarded as a stripe image that forms an image for the left eye. it can. That is, it can be said that the image guide unit 150 guides images for a plurality of viewpoints in different directions.

バリア部310は、複数のシャッタ素子が配置されることにより形成されてよい。具体的には、バリア部310は、水平方向および垂直方向に沿ってマトリクス状に配置された複数のシャッタ素子を含んでよい。バリア制御部320は、制御部180の制御に基づき、これらのシャッタ素子のオン/オフを個別に設定することで、透過部および遮光部の延伸方向および配列方向を制御する。つまり、バリア制御部320は、透過部を形成すべき領域のシャッタ素子をオン状態とし、遮光部を形成すべき領域のシャッタ素子をオフ状態とすることで、任意の方向に透過部および遮光部を形成する。このように、バリア制御部320は、複数のシャッタ素子に光を透過させるか否かを制御することにより、光を遮光する遮光部314と光を透過する透過部312とをストライプ状に交互に形成させる。   The barrier unit 310 may be formed by arranging a plurality of shutter elements. Specifically, the barrier unit 310 may include a plurality of shutter elements arranged in a matrix along the horizontal direction and the vertical direction. The barrier control unit 320 controls the extending direction and the arrangement direction of the transmission unit and the light shielding unit by individually setting on / off of these shutter elements based on the control of the control unit 180. That is, the barrier control unit 320 turns on the shutter element in the region where the transmission part is to be formed and turns off the shutter element in the region where the light shielding part is to be formed. Form. As described above, the barrier control unit 320 controls whether or not light is transmitted through the plurality of shutter elements, whereby the light shielding unit 314 that shields light and the transmission unit 312 that transmits light are alternately arranged in stripes. Let it form.

ここで、立体的画像ではなくいわゆる2次元の画像を観視者に提示する場合には、バリア制御部320は、表示部140上の2次元画像の表示領域に対応する全シャッタ素子を実質的にオン状態にする。これにより、表示部140に表示された2次元画像は透過部により透過され、観視者の右眼および左眼により視認される。なお、遮光部314と透過部312とが交互に配列された状態でも、ズレ量のない同一の右眼用画像および左眼用画像から表示画像を生成することで、2次元の画像を観視者に提示することができる。   Here, when a so-called two-dimensional image is presented to the viewer instead of a stereoscopic image, the barrier control unit 320 substantially sets all shutter elements corresponding to the display area of the two-dimensional image on the display unit 140. Turn on. Thereby, the two-dimensional image displayed on the display unit 140 is transmitted by the transmission unit and visually recognized by the right and left eyes of the viewer. Even in the state where the light shielding units 314 and the transmission units 312 are alternately arranged, a two-dimensional image can be viewed by generating a display image from the same right-eye image and left-eye image with no deviation. Can be presented to the person.

なお、本図で例示したパララックスバリア方式の画像案内部150の他に、レンチキュラレンズ方式の画像案内部150を例示することができる。例えば、バリア部310による画像の案内方向を制御することに替えて、レンチキュラレンズにより、画像の案内方向を異ならせることができる。具体的には、複数の右眼用ストライプ画像と複数の左眼用ストライプ画像とを異なる方向へ案内するレンズアレイにより、対応する左眼用画像のストライプ画像を観視者の左眼の方向に指向させ、対応する右眼用画像のストライプ画像を観視者の右眼の方向に指向させることができる。これにより、画像案内部150は、複数の右眼用ストライプ画像と複数の左眼用ストライプ画像とを異なる方向へ案内することができる。   In addition to the parallax barrier type image guide unit 150 illustrated in the drawing, a lenticular lens type image guide unit 150 may be illustrated. For example, instead of controlling the guide direction of the image by the barrier unit 310, the guide direction of the image can be changed by a lenticular lens. Specifically, a lens array that guides a plurality of right-eye stripe images and a plurality of left-eye stripe images in different directions causes the corresponding left-eye stripe images to be directed toward the viewer's left eye. The corresponding stripe image of the right-eye image can be directed toward the viewer's right eye. Thereby, the image guide unit 150 can guide the plurality of right-eye stripe images and the plurality of left-eye stripe images in different directions.

図4は、画像生成部110の動作例を説明する図である。図4は、表示部140の画素配列の水平方向xおよび垂直方向yに対して座標が規定される画像データを示す。ここでは簡単のため、観視者の瞳孔間距離以下の距離であるズレ量Lの左眼用画像および右眼用画像を、2次元画像である入力画像の全体をずらすことにより生成する処理について説明する。具体的には、画像生成部110は、与えられる2次元画像を所定の軸における左にL/2シフトした画像を左眼用画像として生成するとともに、当該軸における右にL/2シフトした画像を右眼用画像として生成する。このように、画像生成部110は、2次元画像を表示画面上において左右にずらした右眼用画像および左眼用画像を生成する。   FIG. 4 is a diagram for explaining an operation example of the image generation unit 110. FIG. 4 shows image data whose coordinates are defined with respect to the horizontal direction x and the vertical direction y of the pixel array of the display unit 140. Here, for the sake of simplicity, a process for generating a left-eye image and a right-eye image having a shift amount L, which is a distance equal to or smaller than the interpupillary distance of the viewer, by shifting the entire input image that is a two-dimensional image. explain. Specifically, the image generation unit 110 generates an image obtained by shifting a given two-dimensional image to the left on a predetermined axis by L / 2 as an image for the left eye, and an image obtained by shifting L / 2 to the right on the axis. Is generated as a right-eye image. As described above, the image generation unit 110 generates a right-eye image and a left-eye image in which a two-dimensional image is shifted left and right on the display screen.

ここで、中央領域と周辺領域とでズレ量を異ならせる場合の処理を説明する。中央領域のズレ量を第1ズレ量L1とし、周辺領域のズレ量を第2ズレ量L2(<L1)とする場合には、画像生成部110は、2次元画像を左にL1/2シフトした第1左眼用画像と、2次元画像を左にL2/2シフトした第2左眼用画像とを生成する。そして、画像生成部110は、表示画面の中央領域に対応する第1左眼用画像内の部分領域と、表示画面の周辺領域に対応する第2左眼用画像内の部分領域とを組み合わせて、左眼用画像を生成する。   Here, processing when the amount of deviation is different between the central region and the peripheral region will be described. When the shift amount in the central region is the first shift amount L1 and the shift amount in the peripheral region is the second shift amount L2 (<L1), the image generation unit 110 shifts the two-dimensional image to the left by L1 / 2. The first left-eye image and the second left-eye image obtained by shifting the two-dimensional image to the left by L2 / 2 are generated. Then, the image generation unit 110 combines the partial area in the first left-eye image corresponding to the central area of the display screen and the partial area in the second left-eye image corresponding to the peripheral area of the display screen. The left eye image is generated.

また、画像生成部110は、2次元画像を右にL1/2シフトした第1右眼用画像と、2次元画像を右にL2/2シフトした第2右眼用画像とを生成する。そして、画像生成部110は、表示画面の中央領域に対応する第1右眼用画像内の部分領域と、表示画面の周辺領域に対応する第2右眼用画像内の部分領域とを組み合わせて、右眼用画像を生成する。これにより、画像生成部110は、中央領域と周辺領域とでズレ量が異なる右眼用画像および左眼用画像を生成することができる。なお、画像生成部110は、同様の方法により、3以上の異なるシフト量を表示領域毎に有する左眼用画像および右眼用画像を生成することもできる。   Further, the image generation unit 110 generates a first right eye image obtained by shifting the two-dimensional image to the right by L1 / 2 and a second right eye image obtained by shifting the two-dimensional image to the right by L2 / 2. Then, the image generation unit 110 combines the partial area in the first right eye image corresponding to the central area of the display screen and the partial area in the second right eye image corresponding to the peripheral area of the display screen. The right eye image is generated. Thereby, the image generation unit 110 can generate a right-eye image and a left-eye image in which the amount of deviation is different between the central region and the peripheral region. Note that the image generation unit 110 can also generate an image for the left eye and an image for the right eye having three or more different shift amounts for each display region by a similar method.

図5は、ズレ量決定部160による処理例を示す。本図の例では、表示部140の表示画面の大きさが所定サイズより大きい場合のズレ量を、表示画面における表示領域毎に示す。ここで、ズレ量決定部160は、中央の表示領域である第1表示領域500におけるズレ量として第1ズレ量L1を決定しており、第1表示領域500の左右に位置する第2表示領域510aおよび第2表示領域510bにおけるズレ量として第2ズレ量L2(<L1)を決定しているとする。また、ズレ量決定部160は、第2表示領域510aの左に位置する第3表示領域520aと第2表示領域510bの右に位置する第3表示領域520bとにおけるズレ量として第3ズレ量L3(<L2)を決定したとする。画像生成部110は、第1表示領域500、第2表示領域510、および第3表示領域520のそれぞれにおいて、それぞれL1、L2、およびL3のズレ量を有する右眼用画像および左眼用画像を生成する。   FIG. 5 shows a processing example by the deviation amount determination unit 160. In the example of this figure, the shift amount when the size of the display screen of the display unit 140 is larger than a predetermined size is shown for each display area on the display screen. Here, the shift amount determination unit 160 determines the first shift amount L1 as the shift amount in the first display region 500 which is the central display region, and the second display region located on the left and right of the first display region 500. It is assumed that the second shift amount L2 (<L1) is determined as the shift amount in 510a and the second display area 510b. Further, the displacement amount determination unit 160 uses the third displacement amount L3 as the displacement amount between the third display region 520a located to the left of the second display region 510a and the third display region 520b located to the right of the second display region 510b. Assume that (<L2) is determined. In each of the first display area 500, the second display area 510, and the third display area 520, the image generation unit 110 displays a right-eye image and a left-eye image having a shift amount of L1, L2, and L3, respectively. Generate.

なお、ズレ量決定部160は、画面サイズに対応するズレ量を、表示領域毎に予め記憶していてよい。例えば、ズレ量決定部160は、それぞれ画面サイズの範囲を示す複数の範囲情報に対応づけて、1以上の表示領域に対応するズレ量を予め記憶してよい。具体的には、ズレ量決定部160は、より大きい画面サイズを示す範囲情報に対応づけて、より多い数の表示領域におけるズレ量を記憶していてよい。ズレ量決定部160は、複数の表示領域のそれぞれにおけるズレ量を記憶している場合、より周辺の表示領域においてより小さいズレ量を記憶していてよい。   Note that the shift amount determination unit 160 may store a shift amount corresponding to the screen size in advance for each display area. For example, the shift amount determination unit 160 may store in advance shift amounts corresponding to one or more display areas in association with a plurality of pieces of range information each indicating a screen size range. Specifically, the shift amount determination unit 160 may store a shift amount in a larger number of display areas in association with range information indicating a larger screen size. When the shift amount determination unit 160 stores the shift amount in each of the plurality of display regions, the shift amount determination unit 160 may store a smaller shift amount in the peripheral display regions.

また、ズレ量決定部160は、より大きい画面サイズの範囲を示す範囲情報に対応づけて、中央領域から最も離れた周辺領域のズレ量として、中央領域のズレ量と比較してより小さいズレ量を記憶していてよい。例えば、ズレ量決定部160は、予め定められた閾値を超える画面サイズの範囲を示す範囲情報に対応づけて、最も離れた周辺領域において0のズレ量を記憶していてよい。   Further, the shift amount determination unit 160 associates with the range information indicating the range of the larger screen size, and sets a shift amount smaller than the shift amount of the central area as the shift amount of the peripheral area farthest from the central area. May be memorized. For example, the shift amount determination unit 160 may store a shift amount of 0 in the most distant peripheral region in association with range information indicating a screen size range that exceeds a predetermined threshold.

そして、ズレ量決定部160は、画面サイズ取得部170が取得した情報から表示部140の画面サイズを特定して、特定した画面サイズを含む範囲情報に対応づけて予め記憶している、1以上の表示領域におけるズレ量を読み出す。ズレ量決定部160は、読み出した1以上の表示領域におけるズレ量を、表示部140の表示画面において対応する1以上の表示領域のズレ量として決定する。   Then, the shift amount determination unit 160 specifies the screen size of the display unit 140 from the information acquired by the screen size acquisition unit 170 and stores it in advance in association with the range information including the specified screen size. The amount of deviation in the display area is read out. The shift amount determination unit 160 determines the read shift amount in the one or more display areas as the shift amount of the corresponding one or more display areas on the display screen of the display unit 140.

また、各観視者に適したズレ量を決定することを目的として、画像処理部120は同一の入力画像から表示領域間のズレ量の差異が異なる複数の表示画像を生成して、生成した複数の表示画像を順次に表示部140から観視者に提示してよい。そして、最も立体的に認識できた表示画像を特定する情報を観視者などから取得して、取得した表示画像における各表示領域のズレ量をズレ量決定部160が記憶してよい。このとき、観視者としての人物を識別する情報を取得して、取得した情報に対応づけて各表示領域におけるズレ量をズレ量決定部160が記憶してよい。後に、ズレ量決定部160は、表示部140を観視している人物を識別する情報に対応づけて記憶している各表示領域におけるズレ量を読み出して、読み出したズレ量を、表示部140の表示画面において対応する各表示領域のズレ量として決定することができる。   Further, for the purpose of determining a shift amount suitable for each viewer, the image processing unit 120 generates and generates a plurality of display images having different shift amounts between display areas from the same input image. A plurality of display images may be sequentially presented from the display unit 140 to the viewer. Then, information specifying the display image that can be recognized most stereoscopically may be acquired from a viewer or the like, and the shift amount determination unit 160 may store the shift amount of each display region in the acquired display image. At this time, information for identifying a person as a viewer may be acquired, and the shift amount determination unit 160 may store the shift amount in each display area in association with the acquired information. Later, the shift amount determination unit 160 reads the shift amount in each display area stored in association with information for identifying the person who is viewing the display unit 140, and displays the read shift amount as the display unit 140. It can be determined as a shift amount of each display area corresponding to the display screen.

図6は、表示装置10の動作例を示すフローチャートである。S602において、ズレ量決定部160は、画面サイズ取得部170から取得した情報に基づいて画面サイズを特定する。S604において、ズレ量決定部160は、画面サイズが所定サイズを超えるか否かを判断する。画面サイズが所定サイズを超える場合(YES)、S606において、ズレ量決定部160は、画面サイズに応じて複数の表示領域のそれぞれのズレ量を決定する。画面サイズが所定サイズを超えない場合(NO)、S608において、ズレ量決定部160は、表示部140の表示画面の全表示領域において同一のズレ量を決定する。   FIG. 6 is a flowchart illustrating an operation example of the display device 10. In step S <b> 602, the shift amount determination unit 160 specifies the screen size based on the information acquired from the screen size acquisition unit 170. In S604, the shift amount determination unit 160 determines whether or not the screen size exceeds a predetermined size. When the screen size exceeds the predetermined size (YES), in S606, the shift amount determination unit 160 determines the shift amounts of the plurality of display areas according to the screen size. When the screen size does not exceed the predetermined size (NO), in S608, the shift amount determination unit 160 determines the same shift amount in all display areas of the display screen of the display unit 140.

次に、S610において、画像取得部100は、表示部140に表示させる表示画像の元となる入力画像を取得する。S612において、画像生成部110は、S606またはS608において決定したズレ量に従って入力画像を相対的にシフトさせることにより、右眼用画像および左眼用画像を生成する。S614において、画像処理部120は右眼用画像および左眼用画像から表示画像を生成して、表示部140に表示させる。S616において、画像表示を終了するか否かを判断する。例えば、所定の全入力画像について画像を提示した場合に(YES)、画像表示を終了する旨を判断してよい。提示していないものが存在する場合に(NO)、次の入力画像を選択すべくS610の処理に移行する。   In step S <b> 610, the image acquisition unit 100 acquires an input image that is a source of a display image to be displayed on the display unit 140. In S612, the image generation unit 110 generates a right-eye image and a left-eye image by relatively shifting the input image according to the shift amount determined in S606 or S608. In step S <b> 614, the image processing unit 120 generates a display image from the right eye image and the left eye image and causes the display unit 140 to display the display image. In S616, it is determined whether or not to end the image display. For example, when images are presented for all predetermined input images (YES), it may be determined to end the image display. If there is something that is not presented (NO), the process proceeds to S610 to select the next input image.

図7は、ズレ量の範囲を説明する図である。ここまで、表示装置10が観視者の右眼および左眼の2視点に対して画像を提示する処理について説明した。このような1の観視者に立体的画像を提示する場合だけでなく、複数の観視者に対して立体的画像または2次元画像を提示する場合などのように、2以上の多視点に画像を提示する場合を考える。画像生成部110が入力画像をシフトさせることにより多視点用の画像を生成する場合に、ズレ量決定部160は、提示する視点数および表示部140の画素幅により、以下の説明のとおりに規定される範囲内のズレ量を決定する。   FIG. 7 is a diagram for explaining the range of the deviation amount. So far, the process in which the display device 10 presents an image to the two viewpoints of the viewer's right eye and left eye has been described. Not only when presenting a stereoscopic image to one viewer, but also when presenting a stereoscopic image or two-dimensional image to a plurality of viewers. Consider the case of presenting an image. When the image generation unit 110 generates an image for multi-viewpoints by shifting the input image, the deviation amount determination unit 160 is defined as described below according to the number of viewpoints to be presented and the pixel width of the display unit 140. Determine the amount of deviation within the range.

まず、ズレ量の上限値について、ズレ量は観視者の瞳孔間距離未満とすることが好ましい。例えば、ズレ量決定部160は、表示画面の中央領域におけるズレ量を、観視者の瞳孔間距離未満の値とする。例えば観視者特定部190は、観視者を撮像して得られた観視者画像から瞳孔間距離を特定して、特定した瞳孔間距離を示す情報をズレ量決定部160に供給してよい。そして、ズレ量決定部160は、供給された情報が示す瞳孔間距離未満のズレ量を決定する。   First, regarding the upper limit value of the shift amount, the shift amount is preferably less than the interpupillary distance of the viewer. For example, the shift amount determination unit 160 sets the shift amount in the center area of the display screen to a value less than the interpupillary distance of the viewer. For example, the viewer specifying unit 190 specifies the interpupillary distance from the viewer image obtained by imaging the viewer, and supplies information indicating the specified interpupillary distance to the shift amount determining unit 160. Good. Then, the shift amount determination unit 160 determines a shift amount less than the inter-pupil distance indicated by the supplied information.

既に説明したように入力画像をシフトすることにより得られた表示画像を観視者に提示することで、観視者が生理的に遠くを見ているような状態を現出することができる。これにより、心理的作用から立体感、臨場感のある像を観視者に提示することができる。特にズレ量を瞳孔間距離により近い大きさにすることで、観視者の眼がより遠くを観ている状態となるような表示画像を提示することができ、画面のスケール感を著しく強調することができる。特に表示部140が大型ディスプレイであるほど、この効果は顕著となる。   As described above, by presenting the display image obtained by shifting the input image to the viewer, it is possible to present a state in which the viewer is looking physiologically far away. As a result, it is possible to present to the viewer an image having a three-dimensional effect and a sense of reality from a psychological action. In particular, by setting the amount of displacement closer to the interpupillary distance, it is possible to present a display image that makes the viewer's eyes look farther, and remarkably enhance the scale feeling of the screen. be able to. In particular, this effect becomes more prominent as the display unit 140 is a large display.

一方で、裸眼での視差融合により立体的に見せる表示装置10においては、ズレ量が大きくなるほど多くの人にとって視差融合しにくくなる可能性がある。また、後述するように、入力画像を左右にずらして右眼用画像および左眼用画像を生成すると、表示領域の左右の両端部において左眼用画像および右眼用画像の一方が存在しない領域が現れる。ズレ量が一定であれば、表示画面の大きさに対する当該領域の大きさの割合は、表示画面が小型であるほど高くなってしまう。   On the other hand, in the display device 10 that displays stereoscopically by parallax fusion with the naked eye, there is a possibility that parallax fusion becomes difficult for many people as the amount of deviation increases. In addition, as described later, when the right-eye image and the left-eye image are generated by shifting the input image to the left and right, an area in which one of the left-eye image and the right-eye image does not exist at the left and right ends of the display area Appears. If the amount of deviation is constant, the ratio of the size of the area to the size of the display screen becomes higher as the display screen is smaller.

ズレ量を小さくすると、観視者には表示部140の実際の表示面により近い位置にオブジェクト面が存在するように見える。表示部140が大型の表示面を有する場合にはズレ量を小さくしすぎるとあまり立体的に見えなくなる場合がある。しかしながら表示部140の表示画面が小型である場合には、ズレ量を比較的に小さくして表示部140よりわずか後方にオブジェクト面があるように見せるだけでも、観視者には十分に立体感のある像に認識され得る。したがって、特に表示部140が小型である場合には、多くの人にとってより効果的に立体視させるには、ズレ量を小さくすることが好ましい場合が多い。   When the amount of deviation is reduced, it appears to the viewer that the object plane exists at a position closer to the actual display surface of the display unit 140. In the case where the display unit 140 has a large display surface, if the amount of deviation is too small, it may become less visible in three dimensions. However, when the display screen of the display unit 140 is small, even if the amount of deviation is relatively small and the object surface is displayed slightly behind the display unit 140, the viewer can sufficiently feel the stereoscopic effect. Can be recognized. Therefore, especially when the display unit 140 is small, it is often preferable to reduce the amount of displacement in order to make stereoscopic viewing more effective for many people.

ここで、ズレ量の範囲を定める下限値は、以下に説明するように、視点数および表示部140の画素幅によって定めることができる。図示されるように、表示部140は、RGBストライプ配列の表示素子を有しており、1画素幅dのディスプレイであるとする。つまり、水平方向(左右方向)に連続するR、G、Bの表示素子により、表示画像の1画素が表される。本図において各表示素子に付された1〜6の数値は、表示素子からの光が指向される視点を識別する数値であり、上述した遮光部314またはレンチキュラレンズにより、垂直インターリーブ方式でこれら6視点に向けて画像が提示されるとする。   Here, the lower limit value that determines the range of the deviation amount can be determined by the number of viewpoints and the pixel width of the display unit 140 as described below. As shown in the figure, the display unit 140 includes display elements having an RGB stripe arrangement, and is a display having a one-pixel width d. That is, one pixel of the display image is represented by R, G, and B display elements that are continuous in the horizontal direction (left and right direction). In this figure, the numerical values 1 to 6 given to the display elements are numerical values for identifying the viewpoint to which the light from the display element is directed, and these values are 6 in a vertical interleaved manner by the light shielding unit 314 or the lenticular lens described above. Assume that an image is presented toward the viewpoint.

図示されるように、各視点には、実効的に6dの間隔で配列された画素で形成された画像が提示される。この場合、ズレ量を6dより大きい値とすることが好ましい。より一般には、視点数をnとすると、ズレ量をn×dより大きい値とすることが好ましい。このようにズレ量を定めることにより、観視者は平面的ではない立体的な像を認識することができる。   As shown in the figure, each viewpoint is presented with an image formed by pixels that are effectively arranged at intervals of 6d. In this case, it is preferable to set the deviation amount to a value larger than 6d. More generally, when the number of viewpoints is n, it is preferable that the amount of deviation is larger than n × d. By determining the shift amount in this way, the viewer can recognize a three-dimensional image that is not planar.

図8は、ズレ量の範囲を定める下限値の他の例を説明する図である。本図においても各表示素子に付された1〜6の数値は、表示素子からの光が指向される視点を識別する数値であるとする。図示の配列では、各視点への画像の1画素を形成する表示画素は斜め方向に配置されており、遮光部314、レンチキュラレンズの配列も垂直方向ではなく、表示画素の配置方向に対応する斜め方向であるであるとする。本配置例では、1画素分の表示画素を垂直方向に3行にわたって分配することで、実効的に2列分の画素間隔の画像を各視点に提示することができる。これにより、下限値をn×dより小さい値にすることができる。具体的には、本配置例による6視点の例では、ズレ量を2dより大きい値とすることが好ましい。2視点の場合であれば、ズレ量を2d/3より大きい値とすることが好ましい。   FIG. 8 is a diagram illustrating another example of the lower limit value that defines the range of the deviation amount. Also in this figure, the numerical values 1 to 6 given to the display elements are numerical values for identifying the viewpoints to which the light from the display elements is directed. In the illustrated arrangement, the display pixels forming one pixel of the image for each viewpoint are arranged in an oblique direction, and the arrangement of the light shielding portion 314 and the lenticular lens is not in the vertical direction, but in an oblique direction corresponding to the arrangement direction of the display pixels. Suppose that it is a direction. In this arrangement example, by distributing display pixels for one pixel over three rows in the vertical direction, it is possible to effectively present images with pixel intervals for two columns at each viewpoint. Thereby, a lower limit can be made into a value smaller than nxd. Specifically, in the example of 6 viewpoints according to this arrangement example, it is preferable that the amount of deviation is larger than 2d. In the case of two viewpoints, it is preferable to set the deviation amount to a value larger than 2d / 3.

図9は、観視者が表示面を斜め方向で観視している状態における、ズレ量の一例を示す。ここでは、表示部140の表示面の法線方向に対する観視者の顔面の左右方向の角度がαであるとする。観視者の両眼におけるズレ量Lの右眼用画像および左眼用画像を提示すべき場合には、ズレ量決定部160は、右眼用画像および左眼用画像におけるズレ量としてL/cos(α)を決定する。これにより、観視者は、観視者の眼において望ましいズレ量Lだけずれた右眼用画像および左眼用画像を視認することができる。   FIG. 9 shows an example of the shift amount in a state where the viewer is viewing the display surface in an oblique direction. Here, it is assumed that the angle in the left-right direction of the viewer's face with respect to the normal direction of the display surface of the display unit 140 is α. When the right-eye image and the left-eye image with the deviation amount L in both eyes of the viewer are to be presented, the deviation amount determination unit 160 calculates L / L as the deviation amount in the right-eye image and the left-eye image. Determine cos (α). Thereby, the viewer can visually recognize the right-eye image and the left-eye image that are shifted by a desired shift amount L in the viewer's eyes.

なお、観視者特定部190は、表示部140の表示面に対して固定された方向で観視者を撮像して得られた観視者画像を取得して、取得した観視者画像に含まれる観視者の顔の画像から、観視者画像の撮像方向に対する顔面の向きを特定してよい。当該顔面の向きは、例えば観視者の顔画像中における目、口、鼻の相対的な位置関係などに基づき特定することができる。観視者特定部190は、表示部140の表示面に対する観視者画像の撮像方向と、観視者画像の撮像方向に対する観視者の顔面の向きとに基づき、角度αを特定することができる。   Note that the viewer specifying unit 190 acquires a viewer image obtained by imaging the viewer in a direction fixed with respect to the display surface of the display unit 140, and converts the acquired viewer image into the acquired viewer image. The orientation of the face relative to the image capturing direction of the viewer image may be specified from the image of the viewer's face included. The orientation of the face can be specified based on, for example, the relative positional relationship between the eyes, mouth, and nose in the face image of the viewer. The viewer specifying unit 190 may specify the angle α based on the imaging direction of the viewer image with respect to the display surface of the display unit 140 and the orientation of the face of the viewer with respect to the imaging direction of the viewer image. it can.

また、ズレ量決定部160は、観視者の顔向きの方向の一部の表示領域900のズレ量L1として上述のL/cos(α)を決定して、表示領域900の左右の周囲の表示領域910aおよび910bにおけるズレ量として、L1より小さい値を決定してよい。観視者が観ている領域の周囲の領域においてズレ量を比較的に小さくすることができるので、観視者が感じる違和感を低減することができる。   Further, the shift amount determination unit 160 determines the above-mentioned L / cos (α) as the shift amount L1 of a part of the display area 900 in the direction of the face of the viewer, and the left and right surroundings of the display area 900 A value smaller than L1 may be determined as the shift amount in the display areas 910a and 910b. Since the amount of deviation can be made relatively small in the area around the area that the viewer is watching, the uncomfortable feeling felt by the viewer can be reduced.

なお、制御部180は、観視者の顔向きに応じて、バリア部310の配置を制御してよい。すなわち、制御部180は、表示部140を斜めから観ている観視者の右眼および左眼にそれぞれ右眼用画像および左眼用画像が指向されるよう遮光部314の位置を制御してよい。具体的には、バリア制御部320は、制御部180の制御に従って、上述したシャッタ素子のオン/オフを個別に設定することにより遮光部314の位置を制御する。バリア制御部320は、観視者の右眼および左眼にそれぞれ右眼用画像および左眼用画像が指向されるよう、遮光部314のピッチを制御してもよい。また、上記シャッタ素子が表示部140の表人面の法線方向に複数配列されている場合には、各列のシャッタ素子を個別にオン/オフ設定することにより、表示面の法線方向における遮光部314の位置を制御することもできる。この場合に、バリア制御部320は、観視者の右眼および左眼にそれぞれ右眼用画像および左眼用画像が指向されるよう、表示面の法線方向における遮光部314の位置を制御してよい。   Note that the control unit 180 may control the arrangement of the barrier unit 310 according to the face orientation of the viewer. That is, the control unit 180 controls the position of the light shielding unit 314 so that the right eye image and the left eye image are directed to the right eye and the left eye of the viewer who is viewing the display unit 140 from an oblique direction, respectively. Good. Specifically, the barrier control unit 320 controls the position of the light shielding unit 314 by individually setting on / off of the shutter elements described above according to the control of the control unit 180. The barrier control unit 320 may control the pitch of the light shielding unit 314 so that the right eye image and the left eye image are directed to the right and left eyes of the viewer, respectively. In addition, when a plurality of the shutter elements are arranged in the normal direction of the front face of the display unit 140, the shutter elements in each column are individually turned on / off so that the shutter elements in the normal direction of the display face are set. The position of the light shielding part 314 can also be controlled. In this case, the barrier control unit 320 controls the position of the light shielding unit 314 in the normal direction of the display surface so that the right-eye image and the left-eye image are directed to the viewer's right eye and left eye, respectively. You can do it.

図10は、左眼用画像および右眼用画像における画像端部の処理例を示す。本図の処理例では、単一色の右端画像が付加された左眼用画像の一例、および、単一色の左端画像が付加された右眼用画像の一例を示す。画像処理部120は、一例として、左眼用画像の右側に、表示領域の右端から所定の範囲内に表示される単一色の右端画像を付加する。画像処理部120は、一例として、左眼用画像の右側に、表示領域の右端から所定の範囲内に表示される黒等の暗色または白等の明色の右端画像を付加する。画像処理部120は、一例として、元の2次元画像を左方向にずらした結果できる、表示領域内における左眼用画像の右側の空白部分に、黒等の暗色または白等の明色の右端画像を付加する。   FIG. 10 shows a processing example of the image edge portion in the left-eye image and the right-eye image. The processing example in this figure shows an example of a left-eye image to which a single-color right-end image is added and an example of a right-eye image to which a single-color left-end image is added. For example, the image processing unit 120 adds a single-color right-end image displayed within a predetermined range from the right end of the display area to the right side of the left-eye image. As an example, the image processing unit 120 adds the right end image of dark color such as black or light color such as white displayed within a predetermined range from the right end of the display area to the right side of the left eye image. As an example, the image processing unit 120 shifts the original two-dimensional image to the left, and the right end of a dark color such as black or a light color such as white is displayed on the right side of the left eye image in the display area. Add an image.

また、画像処理部120は、一例として、右眼用画像の左側に、表示領域の左端から所定の範囲内に表示される、黒等の暗色または白等の明色の左端画像を付加する。画像処理部120は、一例として、元の2次元画像を右方向にずらした結果できる、表示領域内における右眼用画像の左側の空白部分に、黒等の暗色または白等の明色の左端画像を付加する。   Further, as an example, the image processing unit 120 adds a left end image of a dark color such as black or a light color such as white, which is displayed within a predetermined range from the left end of the display area, to the left side of the right eye image. As an example, the image processing unit 120 can be obtained by shifting the original two-dimensional image in the right direction, and the left end of a dark color such as black or a light color such as white in the left blank portion of the right-eye image in the display area. Add an image.

画像処理部120は、このような右端画像および左端画像を付加することにより、表示領域における右端部および左端部において、枠を意識させるような表示をすることができる。これにより、画像処理部120は、窓枠から外の風景を見ているような自然な立体画像を観視者に提供することができる。   The image processing unit 120 can display such that a frame is conscious at the right end and the left end in the display area by adding such a right end image and a left end image. Thereby, the image processing unit 120 can provide a viewer with a natural three-dimensional image that looks like the scenery outside from the window frame.

また、画像処理部120は、一例として、右端画像が付加された左眼用画像における、左側および右側のそれぞれに、瞳孔間距離以上の幅の黒等の暗色または白等の明色の枠画像を更に付加する。同様に、画像処理部120は、一例として、左端画像が付加された右眼用画像における、右側および左側のそれぞれに、瞳孔間距離以上の幅の黒等の暗色または白等の明色の枠画像を更に付加する。これにより、画像処理部120は、表示画面内に明確な枠を表示することができる。   Further, as an example, the image processing unit 120 has a dark frame image such as black or a light color frame such as white having a width equal to or greater than the distance between the pupils on the left side and the right side in the image for the left eye to which the right end image is added. Is further added. Similarly, the image processing unit 120, for example, in the right eye image to which the left end image is added, on each of the right side and the left side, a dark color frame such as black or a light color frame such as white having a width equal to or greater than the interpupillary distance. Add more images. Thereby, the image processing unit 120 can display a clear frame in the display screen.

図11は、画像端部の他の処理例として、右眼用画像の一部分をコピーした右端画像が付加された左眼用画像の一例、および、左眼用画像の一部分をコピーした左端画像が付加された右眼用画像の一例を示す。画像処理部120は、一例として、左眼用画像の右側に、右眼用画像における表示領域の右端から所定の範囲内に表示される部分を右端画像として付加する。画像処理部120は、一例として、右眼用画像における表示領域の右端から、左眼用画像の右端に対応する位置までの範囲内に表示される部分をコピーして、右端画像として左眼用画像の右側に付加する。   FIG. 11 shows another example of processing of the image edge, in which an example of a left-eye image to which a right-end image obtained by copying a part of the right-eye image is added, and a left-end image obtained by copying a part of the left-eye image are displayed. An example of the added image for the right eye is shown. As an example, the image processing unit 120 adds, as a right end image, a portion displayed within a predetermined range from the right end of the display area in the right eye image on the right side of the left eye image. As an example, the image processing unit 120 copies a portion displayed within a range from the right end of the display area in the right eye image to a position corresponding to the right end of the left eye image, and uses the left eye image as the right end image. Append to the right side of the image.

また、画像処理部120は、一例として、右眼用画像の左側に、左眼用画像における表示領域の左端から所定の範囲内に表示される部分を左端画像として付加する。画像処理部120は、一例として、左眼用画像における表示領域の左端から、右眼用画像の左端に対応する位置までの範囲内に表示される部分をコピーして、左端画像として右眼用画像の左側に付加する。   For example, the image processing unit 120 adds, as a left end image, a portion displayed within a predetermined range from the left end of the display area in the left eye image on the left side of the right eye image. As an example, the image processing unit 120 copies a portion displayed within a range from the left end of the display region in the left eye image to a position corresponding to the left end of the right eye image, and uses the left eye image as the left end image. Append to the left side of the image.

表示領域の右端部または左端部に注目している場合において輻輳が生起されると、右眼と左眼との間で見ているものが異なる視野闘争の問題が生じる。この場合、右眼に与えられる画像と左眼に与えられる画像とがかけ離れているほど、人間に与える不自然感は大きい。しかし、本例に係る画像処理部120は、表示領域の右端部または左端部において右眼および左眼に同一の画像を与える。従って、本例に係る画像処理部120は、表示領域の右端部または左端部において輻輳が生起された場合であっても、視野闘争を軽減して、不自然に感じない画像を提供することができる。なお、表示領域の中央部においては、両目融合の条件が保たれているので、端部と比較して輻輳が生起される可能性は低い。   When convergence occurs when attention is paid to the right end or left end of the display area, there is a problem of visual field struggle that is different between what is seen between the right eye and the left eye. In this case, the greater the distance between the image given to the right eye and the image given to the left eye, the greater the unnatural feeling given to humans. However, the image processing unit 120 according to the present example gives the same image to the right eye and the left eye at the right end or the left end of the display area. Therefore, the image processing unit 120 according to the present example can provide an image that does not feel unnatural even when congestion occurs in the right end portion or the left end portion of the display area, and the visual field struggle is reduced. it can. It should be noted that, in the central portion of the display area, the condition for fusion of both eyes is maintained, so that it is less likely that congestion will occur compared to the end portion.

また、画像処理部120は、一例として、左眼用画像の右側に、右眼用画像における表示領域の右端から所定の範囲内に表示される部分をぼかした画像を右端画像として付加してもよい。また、画像処理部120は、一例として、右眼用画像の左側に、左眼用画像における表示領域の左端から所定の範囲内に表示される部分をぼかした画像を左端画像として付加してもよい。   Further, as an example, the image processing unit 120 may add, as a right end image, an image obtained by blurring a portion displayed within a predetermined range from the right end of the display area in the right eye image on the right side of the left eye image. Good. Further, as an example, the image processing unit 120 may add an image obtained by blurring a portion displayed within a predetermined range from the left end of the display area in the left eye image as the left end image on the left side of the right eye image. Good.

右眼および左眼にフォーカスレベルが異なる画像が与えられた場合、人間は、与えられる画像を立体的に感じる。従って、このような画像処理部120は、表示領域の右端部または左端部において輻輳が生起された場合、視野闘争を軽減するとともに、観視者に立体感を感じさせることができる。   When images with different focus levels are given to the right eye and the left eye, a human feels the given image three-dimensionally. Therefore, such an image processing unit 120 can reduce the visual field struggle and make the viewer feel a stereoscopic effect when congestion occurs in the right end portion or the left end portion of the display area.

また、画像処理部120は、一例として、右端画像の色を、右眼用画像における、表示領域の右端から所定の範囲内に表示される部分の平均色としてもよい。さらに、これに加えてまたはこれに代えて、画像処理部120は、右端画像の輝度を、右眼用画像における、表示領域の右端から所定の範囲内に表示される部分の平均輝度としてもよい。また、画像処理部120は、一例として、左端画像の色を、左眼用画像における、表示領域の左端から所定の範囲内に表示される部分の平均色としてもよい。さらに、これに加えてまたはこれに代えて、画像処理部120は、左端画像の輝度を、左眼用画像における、表示領域の左端から所定の範囲内に表示される部分の平均輝度としてもよい。このような画像処理部120は、表示領域の右端部または左端部において輻輳が生起された場合、色合いまたは輝度の同じ画像を左眼と右眼に与えることができるので、視野闘争を軽減することができる。   For example, the image processing unit 120 may use the color of the right end image as the average color of the portion of the right eye image that is displayed within a predetermined range from the right end of the display area. Further, in addition to or instead of this, the image processing unit 120 may set the luminance of the right-end image as the average luminance of the portion of the right-eye image that is displayed within a predetermined range from the right end of the display area. . Further, as an example, the image processing unit 120 may set the color of the left end image as an average color of a portion displayed in a predetermined range from the left end of the display area in the left eye image. Further, in addition to or instead of this, the image processing unit 120 may set the luminance of the left-end image as the average luminance of the portion of the left-eye image that is displayed within a predetermined range from the left end of the display area. . Such an image processing unit 120 can give the left eye and the right eye images having the same hue or luminance when congestion occurs in the right end portion or the left end portion of the display area. Can do.

図12は、画像端部の更なる他の処理例として、右方向に拡大した左眼用画像の一例、および、左方向に拡大した右眼用画像の一例を示す。画像処理部120は、一例として、左眼用画像を右に拡大して左眼用画像および右端画像を含む画像を生成する。この場合において、画像処理部120は、左眼用画像を左右の端部に近いほど大きい拡大率で右へと拡大して左眼用画像および右端画像を含む画像を生成する。更に、この場合において、画像処理部120は、左眼用画像の所定位置(例えば中央位置)から左側の画像を拡大しなくてもよい。   FIG. 12 shows an example of the image for the left eye enlarged in the right direction and an example of the image for the right eye enlarged in the left direction as still another processing example of the image edge. As an example, the image processing unit 120 enlarges the left eye image to the right and generates an image including the left eye image and the right end image. In this case, the image processing unit 120 enlarges the left-eye image to the right at a larger enlargement ratio as it approaches the left and right ends, and generates an image including the left-eye image and the right-end image. Further, in this case, the image processing unit 120 may not enlarge the image on the left side from a predetermined position (for example, the center position) of the left-eye image.

また、画像処理部120は、一例として、右眼用画像を左に拡大して右眼用画像および左端画像を含む画像を生成する。この場合において、画像処理部120は、右眼用画像を左右の端部に近いほど大きい拡大率で左へと拡大して右眼用画像および左端画像を含む画像を生成する。更に、この場合において、画像処理部120は、右眼用画像の所定位置(例えば中央位置)から右側の画像を拡大しなくてもよい。このような本例に係る画像処理部120は、端部において画像が連続した自然な画像を提供することができる。   Further, as an example, the image processing unit 120 enlarges the right eye image to the left, and generates an image including the right eye image and the left end image. In this case, the image processing unit 120 generates an image including the right-eye image and the left-end image by enlarging the right-eye image to the left with a larger enlargement ratio as it is closer to the left and right ends. Furthermore, in this case, the image processing unit 120 does not have to enlarge the image on the right side from a predetermined position (for example, the center position) of the right-eye image. The image processing unit 120 according to this example can provide a natural image in which images are continuous at the end.

また、画像処理部120および画像処理部120は、右方向および左方向への拡大率に合わせて、左眼用画像および右眼用画像を上下に拡大してもよい。この場合、画像処理部120および画像処理部120は、上下に拡大した結果、左眼用画像および右眼用画像における表示領域外となった部分を削除する。   Further, the image processing unit 120 and the image processing unit 120 may enlarge the image for the left eye and the image for the right eye up and down in accordance with the enlargement ratio in the right direction and the left direction. In this case, the image processing unit 120 and the image processing unit 120 delete portions that are out of the display area in the left-eye image and the right-eye image as a result of being enlarged vertically.

また、画像処理部120は、一例として、左眼用画像の右側に、当該左眼用画像における表示領域の右端から所定の範囲内に表示される部分(例えば、右端から1列分または数列分の画素列)を、右方向に繰り返す画像を右端画像として付加してもよい。また、画像処理部120は、一例として、右眼用画像の左側に、当該右眼用画像における表示領域の左端から所定の範囲内に表示される部分(例えば、左端から1列分または数列分の画素列)を、左方向に繰り返す画像を左端画像として付加してもよい。このような画像処理部120は、端部において画像が連続した自然な画像を提供することができる。   Further, as an example, the image processing unit 120 displays, on the right side of the left-eye image, a portion displayed within a predetermined range from the right end of the display area in the left-eye image (for example, one column or several columns from the right end). The pixel column) may be added as a right end image. In addition, as an example, the image processing unit 120 displays, on the left side of the right-eye image, a portion displayed within a predetermined range from the left end of the display area in the right-eye image (for example, one column or several columns from the left end). The pixel column) may be added as a left-end image. Such an image processing unit 120 can provide a natural image with continuous images at the end.

図13は、画像端部の更なる他の処理例として、左端部分を削除した左眼用画像の一例、および、右端部分を削除した右眼用画像の一例を示す。画像処理部120は、一例として、左眼用画像の右側に右端画像を付加することに代えて、右眼用画像の右側の所定の範囲を削除する。また、画像処理部120は、一例として、右眼用画像の左側に左端画像を付加することに代えて、左眼用画像の左側の所定の範囲を削除する。   FIG. 13 shows an example of an image for the left eye from which the left end portion is deleted and an example of an image for the right eye from which the right end portion is deleted as still another processing example of the image end portion. For example, instead of adding the right end image to the right side of the left eye image, the image processing unit 120 deletes a predetermined range on the right side of the right eye image. Further, as an example, the image processing unit 120 deletes a predetermined range on the left side of the left eye image instead of adding the left end image to the left side of the right eye image.

このような画像処理部120は、立体画像を提供することができない画像領域を無くした画像を表示することができる。ここで、表示部140は、表示領域中における画像が削除された部分から、暗色(例えば黒画像)等を出力する。従って、このような画像処理部120は、外枠を設けた場合と同様に、自然な立体画像を提供することができる。   Such an image processing unit 120 can display an image without an image area where a stereoscopic image cannot be provided. Here, the display unit 140 outputs a dark color (for example, a black image) or the like from a portion where the image in the display area is deleted. Therefore, such an image processing unit 120 can provide a natural stereoscopic image as in the case where the outer frame is provided.

図14は、画像端部の更なる他の処理例として、2次元画像を拡大した後に、左眼用画像および右眼用画像を生成した場合の一例を示す。画像処理部120は、一例として、次のような処理を行ってもよい。   FIG. 14 shows an example of a case where a left-eye image and a right-eye image are generated after a two-dimensional image is enlarged as still another processing example of the image edge portion. For example, the image processing unit 120 may perform the following processing.

まず、画像生成部110は、2次元画像を所定の距離分左右に拡大する。例えば、画像生成部110は、横幅が、表示領域の横幅と瞳孔間距離とを加算した距離となるように左右方向に拡大する。この場合において、画像生成部110は、2次元画像の上下方向についても、左右方向と同じ拡大率で拡大してもよい。   First, the image generation unit 110 enlarges the two-dimensional image left and right by a predetermined distance. For example, the image generation unit 110 enlarges the horizontal width in the left-right direction so that the horizontal width becomes a distance obtained by adding the horizontal width of the display area and the inter-pupil distance. In this case, the image generation unit 110 may enlarge the two-dimensional image in the vertical direction at the same magnification as that in the horizontal direction.

続いて、画像生成部110は、拡大した2次元画像を表示領域内において所定の距離分左右にずらした左眼用画像および右眼用画像を生成する。画像生成部110は、一例として、左眼用画像を左側に瞳孔間距離の1/2の距離分ずらし、右眼用画像を右側に瞳孔間距離の1/2の距離分ずらす。   Subsequently, the image generation unit 110 generates a left-eye image and a right-eye image in which the enlarged two-dimensional image is shifted left and right by a predetermined distance within the display area. As an example, the image generation unit 110 shifts the left-eye image to the left by a distance corresponding to ½ of the inter-pupil distance, and shifts the right-eye image to the right side by a distance corresponding to ½ the inter-pupil distance.

続いて、画像処理部120は、左眼用画像の右側に右端画像を付加することに代えて、右眼用画像の右側の所定の距離の範囲を削除する。画像処理部120は、一例として、右眼用画像の右端から、瞳孔間距離分の範囲を削除する。   Subsequently, the image processing unit 120 deletes a predetermined distance range on the right side of the right eye image instead of adding the right end image to the right side of the left eye image. As an example, the image processing unit 120 deletes the range corresponding to the interpupillary distance from the right end of the right-eye image.

また、画像処理部120は、右眼用画像の左側に左端画像を付加することに代えて、左眼用画像の左側の所定の距離の範囲を削除する。画像処理部120は、一例として、左眼用画像の左端から、瞳孔間距離分の範囲を削除する。   Further, the image processing unit 120 deletes a predetermined distance range on the left side of the left eye image instead of adding the left end image to the left side of the right eye image. As an example, the image processing unit 120 deletes the range corresponding to the inter-pupil distance from the left end of the left-eye image.

このような画像処理部120は、立体画像を提供することができない画像領域を無くした画像を表示することができる。従って、このような画像処理部120は、自然な立体画像を提供することができる。なお、2次元画像を上下方向にも拡大した場合、画像処理部120は、左眼用画像および右眼用画像における、表示範囲の上下の境界を超える部分について削除してよい。   Such an image processing unit 120 can display an image without an image area where a stereoscopic image cannot be provided. Therefore, such an image processing unit 120 can provide a natural stereoscopic image. Note that when the two-dimensional image is enlarged in the vertical direction, the image processing unit 120 may delete a portion of the left-eye image and the right-eye image that exceeds the upper and lower boundaries of the display range.

図15は、他の実施形態に係るコンピュータ800のハードウェア構成の一例を示す。コンピュータ800は、与えられるプログラムに応じて、図1から図14に関連して説明した画像取得部100、画像生成部110、画像処理部120、表示部140、ズレ量決定部160、画面サイズ取得部170、制御部180、および、観視者特定部190として機能する。また、コンピュータ800は、バリア制御部320として更に機能してもよい。   FIG. 15 shows an example of a hardware configuration of a computer 800 according to another embodiment. The computer 800, in accordance with a given program, acquires the image acquisition unit 100, the image generation unit 110, the image processing unit 120, the display unit 140, the shift amount determination unit 160, and the screen size acquisition described with reference to FIGS. Functions as the unit 170, the control unit 180, and the viewer specifying unit 190. The computer 800 may further function as the barrier control unit 320.

本実施形態に係るコンピュータ800は、ホスト・コントローラ2082により相互に接続されるCPU2000、RAM2020、グラフィック・コントローラ2075、及び表示装置2080を有するCPU周辺部と、入出力コントローラ2084によりホスト・コントローラ2082に接続される通信インターフェイス2030、ハードディスクドライブ2040、及びCD−ROMドライブ2060を有する入出力部と、入出力コントローラ2084に接続されるROM2010、フレキシブルディスク・ドライブ2050、及び入出力チップ2070を有するレガシー入出力部とを備える。   A computer 800 according to the present embodiment is connected to a CPU peripheral unit having a CPU 2000, a RAM 2020, a graphic controller 2075, and a display device 2080 connected to each other by a host controller 2082, and to the host controller 2082 by an input / output controller 2084. Input / output unit having communication interface 2030, hard disk drive 2040, and CD-ROM drive 2060, and legacy input / output unit having ROM 2010, flexible disk drive 2050, and input / output chip 2070 connected to input / output controller 2084 With.

ホスト・コントローラ2082は、RAM2020と、高い転送レートでRAM2020をアクセスするCPU2000及びグラフィック・コントローラ2075とを接続する。CPU2000は、ROM2010及びRAM2020に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ2075は、CPU2000等がRAM2020内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置2080上に表示させる。これに代えて、グラフィック・コントローラ2075は、CPU2000等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。   The host controller 2082 connects the RAM 2020 to the CPU 2000 and the graphic controller 2075 that access the RAM 2020 at a high transfer rate. The CPU 2000 operates based on programs stored in the ROM 2010 and the RAM 2020 and controls each unit. The graphic controller 2075 acquires image data generated by the CPU 2000 or the like on a frame buffer provided in the RAM 2020 and displays it on the display device 2080. Instead of this, the graphic controller 2075 may include a frame buffer for storing image data generated by the CPU 2000 or the like.

入出力コントローラ2084は、ホスト・コントローラ2082と、比較的高速な入出力装置である通信インターフェイス2030、ハードディスクドライブ2040、CD−ROMドライブ2060を接続する。通信インターフェイス2030は、ネットワークを介して他の装置と通信する。ハードディスクドライブ2040は、コンピュータ800内のCPU2000が使用するプログラム及びデータを格納する。CD−ROMドライブ2060は、CD−ROM2095からプログラム又はデータを読み取り、RAM2020を介してハードディスクドライブ2040に提供する。   The input / output controller 2084 connects the host controller 2082 to the communication interface 2030, the hard disk drive 2040, and the CD-ROM drive 2060, which are relatively high-speed input / output devices. The communication interface 2030 communicates with other devices via a network. The hard disk drive 2040 stores programs and data used by the CPU 2000 in the computer 800. The CD-ROM drive 2060 reads a program or data from the CD-ROM 2095 and provides it to the hard disk drive 2040 via the RAM 2020.

また、入出力コントローラ2084には、ROM2010と、フレキシブルディスク・ドライブ2050、及び入出力チップ2070の比較的低速な入出力装置とが接続される。ROM2010は、コンピュータ800が起動時に実行するブート・プログラム、及び/又は、コンピュータ800のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ2050は、フレキシブルディスク2090からプログラム又はデータを読み取り、RAM2020を介してハードディスクドライブ2040に提供する。入出力チップ2070は、フレキシブルディスク・ドライブ2050を入出力コントローラ2084へと接続すると共に、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を入出力コントローラ2084へと接続する。   The input / output controller 2084 is connected to the ROM 2010, the flexible disk drive 2050, and the relatively low-speed input / output device of the input / output chip 2070. The ROM 2010 stores a boot program that is executed when the computer 800 is started and / or a program that depends on the hardware of the computer 800. The flexible disk drive 2050 reads a program or data from the flexible disk 2090 and provides it to the hard disk drive 2040 via the RAM 2020. The input / output chip 2070 connects the flexible disk drive 2050 to the input / output controller 2084 and inputs / outputs various input / output devices via, for example, a parallel port, a serial port, a keyboard port, a mouse port, and the like. Connect to controller 2084.

RAM2020を介してハードディスクドライブ2040に提供されるプログラムは、フレキシブルディスク2090、CD−ROM2095、又はICカード等の記録媒体に格納されて利用者によって提供される。プログラムは、記録媒体から読み出され、RAM2020を介してコンピュータ800内のハードディスクドライブ2040にインストールされ、CPU2000において実行される。   A program provided to the hard disk drive 2040 via the RAM 2020 is stored in a recording medium such as the flexible disk 2090, the CD-ROM 2095, or an IC card and provided by the user. The program is read from the recording medium, installed in the hard disk drive 2040 in the computer 800 via the RAM 2020, and executed by the CPU 2000.

コンピュータ800にインストールされ、コンピュータ800により実行されるプログラムは、CPU2000等に働きかけて、コンピュータ800を、画像取得部100、画像生成部110、画像処理部120、表示部140、ズレ量決定部160、画面サイズ取得部170、制御部180、および、観視者特定部190などとして機能させる。これらのプログラムに記述された情報処理は、コンピュータ800に読込まれることにより、ソフトウェアと上述した各種のハードウェア資源とが協働した具体的手段である画像取得部100、画像生成部110、画像処理部120、表示部140、ズレ量決定部160、画面サイズ取得部170、制御部180、および、観視者特定部190などとして機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ800の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の画像取得部100、画像生成部110、画像処理部120、表示部140、ズレ量決定部160、画面サイズ取得部170、制御部180、および、観視者特定部190などが構築される。   A program installed in the computer 800 and executed by the computer 800 works on the CPU 2000 or the like to cause the computer 800 to operate as an image acquisition unit 100, an image generation unit 110, an image processing unit 120, a display unit 140, a deviation amount determination unit 160, It functions as the screen size acquisition unit 170, the control unit 180, the viewer specifying unit 190, and the like. The information processing described in these programs is read into the computer 800, whereby the image acquisition unit 100, the image generation unit 110, the image, which are specific means in which the software and the various hardware resources described above cooperate with each other. It functions as a processing unit 120, a display unit 140, a deviation amount determination unit 160, a screen size acquisition unit 170, a control unit 180, a viewer identification unit 190, and the like. Then, by realizing the calculation or processing of information according to the purpose of use of the computer 800 in the present embodiment by these specific means, the specific image acquisition unit 100, the image generation unit 110, the image according to the purpose of use are realized. A processing unit 120, a display unit 140, a shift amount determination unit 160, a screen size acquisition unit 170, a control unit 180, a viewer identification unit 190, and the like are constructed.

一例として、コンピュータ800と外部の装置等との間で通信を行う場合には、CPU2000は、RAM2020上にロードされた通信プログラムを実行し、通信プログラムに記述された処理内容に基づいて、通信インターフェイス2030に対して通信処理を指示する。通信インターフェイス2030は、CPU2000の制御を受けて、RAM2020、ハードディスクドライブ2040、フレキシブルディスク2090、又はCD−ROM2095等の記憶装置上に設けた送信バッファ領域等に記憶された送信データを読み出してネットワークへと送信し、もしくは、ネットワークから受信した受信データを記憶装置上に設けた受信バッファ領域等へと書き込む。このように、通信インターフェイス2030は、DMA(ダイレクト・メモリ・アクセス)方式により記憶装置との間で送受信データを転送してもよく、これに代えて、CPU2000が転送元の記憶装置又は通信インターフェイス2030からデータを読み出し、転送先の通信インターフェイス2030又は記憶装置へとデータを書き込むことにより送受信データを転送してもよい。   As an example, when communication is performed between the computer 800 and an external device or the like, the CPU 2000 executes a communication program loaded on the RAM 2020, and based on the processing contents described in the communication program, the communication interface A communication process is instructed to 2030. Under the control of the CPU 2000, the communication interface 2030 reads transmission data stored in a transmission buffer area or the like provided on a storage device such as the RAM 2020, the hard disk drive 2040, the flexible disk 2090, or the CD-ROM 2095, and sends it to the network. The reception data transmitted or received from the network is written into a reception buffer area or the like provided on the storage device. As described above, the communication interface 2030 may transfer transmission / reception data to / from the storage device by a DMA (direct memory access) method. Instead, the CPU 2000 transfers the storage device or the communication interface 2030 as a transfer source. The transmission / reception data may be transferred by reading the data from the data and writing the data to the communication interface 2030 or the storage device of the transfer destination.

また、CPU2000は、ハードディスクドライブ2040、CD−ROMドライブ2060(CD−ROM2095)、フレキシブルディスク・ドライブ2050(フレキシブルディスク2090)等の外部記憶装置に格納されたファイルまたはデータベース等の中から、全部または必要な部分をDMA転送等によりRAM2020へと読み込ませ、RAM2020上のデータに対して各種の処理を行う。そして、CPU2000は、処理を終えたデータを、DMA転送等により外部記憶装置へと書き戻す。このような処理において、RAM2020は、外部記憶装置の内容を一時的に保持するものとみなせるから、本実施形態においてはRAM2020および外部記憶装置等をメモリ、記憶部、または記憶装置等と総称する。本実施形態における各種のプログラム、データ、テーブル、データベース等の各種の情報は、このような記憶装置上に格納されて、情報処理の対象となる。なお、CPU2000は、RAM2020の一部をキャッシュメモリに保持し、キャッシュメモリ上で読み書きを行うこともできる。このような形態においても、キャッシュメモリはRAM2020の機能の一部を担うから、本実施形態においては、区別して示す場合を除き、キャッシュメモリもRAM2020、メモリ、及び/又は記憶装置に含まれるものとする。   The CPU 2000 is all or necessary from among files or databases stored in an external storage device such as a hard disk drive 2040, a CD-ROM drive 2060 (CD-ROM 2095), and a flexible disk drive 2050 (flexible disk 2090). This portion is read into the RAM 2020 by DMA transfer or the like, and various processes are performed on the data on the RAM 2020. Then, CPU 2000 writes the processed data back to the external storage device by DMA transfer or the like. In such processing, since the RAM 2020 can be regarded as temporarily holding the contents of the external storage device, in the present embodiment, the RAM 2020 and the external storage device are collectively referred to as a memory, a storage unit, or a storage device. Various types of information such as various programs, data, tables, and databases in the present embodiment are stored on such a storage device and are subjected to information processing. Note that the CPU 2000 can also hold a part of the RAM 2020 in the cache memory and perform reading and writing on the cache memory. Even in such a form, the cache memory bears a part of the function of the RAM 2020. Therefore, in the present embodiment, the cache memory is also included in the RAM 2020, the memory, and / or the storage device unless otherwise indicated. To do.

また、CPU2000は、RAM2020から読み出したデータに対して、プログラムの命令列により指定された、本実施形態中に記載した各種の演算、情報の加工、条件判断、情報の検索・置換等を含む各種の処理を行い、RAM2020へと書き戻す。例えば、CPU2000は、条件判断を行う場合においては、本実施形態において示した各種の変数が、他の変数または定数と比較して、大きい、小さい、以上、以下、等しい等の条件を満たすかどうかを判断し、条件が成立した場合(又は不成立であった場合)に、異なる命令列へと分岐し、またはサブルーチンを呼び出す。   In addition, the CPU 2000 performs various operations, such as various operations, information processing, condition determination, information search / replacement, etc., described in the present embodiment, specified for the data read from the RAM 2020 by the instruction sequence of the program. Is written back to the RAM 2020. For example, when performing the condition determination, the CPU 2000 determines whether or not the various variables shown in the present embodiment satisfy the conditions such as large, small, above, below, equal, etc., compared to other variables or constants. If the condition is satisfied (or not satisfied), the program branches to a different instruction sequence or calls a subroutine.

また、CPU2000は、記憶装置内のファイルまたはデータベース等に格納された情報を検索することができる。例えば、第1属性の属性値に対し第2属性の属性値がそれぞれ対応付けられた複数のエントリが記憶装置に格納されている場合において、CPU2000は、記憶装置に格納されている複数のエントリの中から第1属性の属性値が指定された条件と一致するエントリを検索し、そのエントリに格納されている第2属性の属性値を読み出すことにより、所定の条件を満たす第1属性に対応付けられた第2属性の属性値を得ることができる。   Further, the CPU 2000 can search for information stored in a file or database in the storage device. For example, in the case where a plurality of entries in which the attribute value of the second attribute is associated with the attribute value of the first attribute are stored in the storage device, the CPU 2000 displays the plurality of entries stored in the storage device. The entry that matches the condition in which the attribute value of the first attribute is specified is retrieved, and the attribute value of the second attribute that is stored in the entry is read, thereby associating with the first attribute that satisfies the predetermined condition The attribute value of the specified second attribute can be obtained.

以上に示したプログラム又はモジュールは、外部の記録媒体に格納されてもよい。記録媒体としては、フレキシブルディスク2090、CD−ROM2095の他に、DVD又はCD等の光学記録媒体、MO等の光磁気記録媒体、テープ媒体、ICカード等の半導体メモリ等を用いることができる。また、専用通信ネットワーク又はインターネットに接続されたサーバシステムに設けたハードディスク又はRAM等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをコンピュータ800に提供してもよい。   The program or module shown above may be stored in an external recording medium. As the recording medium, in addition to the flexible disk 2090 and the CD-ROM 2095, an optical recording medium such as DVD or CD, a magneto-optical recording medium such as MO, a tape medium, a semiconductor memory such as an IC card, and the like can be used. Further, a storage device such as a hard disk or a RAM provided in a server system connected to a dedicated communication network or the Internet may be used as a recording medium, and the program may be provided to the computer 800 via the network.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。   The order of execution of each process such as operations, procedures, steps, and stages in the apparatus, system, program, and method shown in the claims, the description, and the drawings is particularly “before” or “prior to”. It should be noted that the output can be realized in any order unless the output of the previous process is used in the subsequent process. Regarding the operation flow in the claims, the description, and the drawings, even if it is described using “first”, “next”, etc. for convenience, it means that it is essential to carry out in this order. It is not a thing.

10 表示装置、100 画像取得部、110 画像生成部、120 画像処理部、140 表示部、150 画像案内部、160 ズレ量決定部、170 画面サイズ取得部、180 制御部、190 観視者特定部、310 バリア部、312 透過部、314 遮光部、320 バリア制御部、500 第1表示領域、510 第2表示領域、520 第3表示領域、900 表示領域、910 表示領域、800 コンピュータ、2000 CPU、2010 ROM、2020 RAM、2030 通信インターフェイス、2040 ハードディスクドライブ、2050 フレキシブルディスク・ドライブ、2060 CD−ROMドライブ、2070 入出力チップ、2075 グラフィック・コントローラ、2080 表示装置、2082 ホスト・コントローラ、2084 入出力コントローラ、2090 フレキシブルディスク、2095 CD−ROM DESCRIPTION OF SYMBOLS 10 Display apparatus, 100 Image acquisition part, 110 Image generation part, 120 Image processing part, 140 Display part, 150 Image guidance part, 160 Deviation amount determination part, 170 Screen size acquisition part, 180 Control part, 190 Viewer identification part , 310 barrier unit, 312 transmission unit, 314 light shielding unit, 320 barrier control unit, 500 first display region, 510 second display region, 520 third display region, 900 display region, 910 display region, 800 computer, 2000 CPU, 2010 ROM, 2020 RAM, 2030 communication interface, 2040 hard disk drive, 2050 flexible disk drive, 2060 CD-ROM drive, 2070 input / output chip, 2075 graphic controller, 2080 display device, 2082 host Controller, 2084 input-output controller, 2090 a flexible disk, 2095 CD-ROM

Claims (9)

観視者の右眼で視認されるべき右眼用画像および観視者の左眼で視認されるべき左眼用画像を生成する画像生成装置であって、
対応するオブジェクトの対応点の表示画面上における左右方向の位置の差であるズレ量を、前記表示画面の左右方向の中央領域と周辺領域とで異ならせて前記右眼用画像と前記左眼用画像とを生成する画像生成部
を備える画像生成装置。
An image generating device that generates an image for the right eye that should be visually recognized by the right eye of the viewer and an image for the left eye that should be visually recognized by the left eye of the viewer,
The right-eye image and the left-eye image are obtained by making the amount of deviation, which is the difference between the horizontal positions of the corresponding points of the corresponding objects on the display screen, different between the central area and the peripheral area in the horizontal direction of the display screen. An image generation apparatus including an image generation unit that generates an image.
前記画像生成部は、前記表示画面上における対応点のズレ量が、前記表示画面の前記周辺領域で前記中央領域より小さい前記右眼用画像と前記左眼用画像とを生成する請求項1に記載の画像生成装置。   The said image generation part produces | generates the said image for right eyes, and the said image for left eyes in which the deviation | shift amount of the corresponding point on the said display screen is smaller than the said center area | region in the said surrounding area of the said display screen. The image generating apparatus described. 前記画像生成部は、2次元画像の前記中央領域を第1ズレ量だけ左右にずらし、前記2次元画像の前記周辺領域を前記第1ズレ量より小さい第2ズレ量だけ左右にずらすことにより、前記右眼用画像および前記左眼用画像を生成する請求項1または2に記載の画像生成装置。   The image generation unit shifts the central region of the two-dimensional image left and right by a first shift amount, and shifts the peripheral region of the two-dimensional image left and right by a second shift amount smaller than the first shift amount, The image generation apparatus according to claim 1, wherein the image for the right eye and the image for the left eye are generated. 前記右眼用画像および前記左眼用画像を表示する表示画面の大きさを示す情報を取得する画面サイズ取得部
をさらに備え、
前記画像生成部は、前記画面サイズ取得部が取得した情報が所定サイズより小さい大きさを示す場合、前記表示画面の前記中央領域と前記周辺領域とでズレ量が同一の前記右眼用画像と前記左眼用画像とを生成し、前記画面サイズ取得部が取得した情報が所定サイズ以下の大きさを示す場合、前記表示画面の前記周辺領域で前記中央領域よりズレ量が小さい前記右眼用画像と前記左眼用画像とを生成する請求項1から3のいずれかに記載の画像生成装置。
A screen size acquisition unit that acquires information indicating a size of a display screen that displays the right-eye image and the left-eye image;
The image generation unit, when the information acquired by the screen size acquisition unit indicates a size smaller than a predetermined size, the right eye image having the same amount of deviation in the central region and the peripheral region of the display screen When the information for the left eye is generated and the information acquired by the screen size acquisition unit indicates a size equal to or smaller than a predetermined size, the shift amount for the right eye is smaller in the peripheral area of the display screen than in the central area. The image generation device according to claim 1, wherein the image generation device generates an image and the image for the left eye.
前記右眼用画像および前記左眼用画像を表示する表示画面の大きさを示す情報を取得する画面サイズ取得部
をさらに備え、
前記画像生成部は、前記画面サイズ取得部が取得した情報が示す大きさがより大きい場合に、前記表示画面の前記周辺領域で前記中央領域よりズレ量がより小さい前記右眼用画像と前記左眼用画像とを生成する請求項1から3のいずれかに記載の画像生成装置。
A screen size acquisition unit that acquires information indicating a size of a display screen that displays the right-eye image and the left-eye image;
The image generation unit, when the size indicated by the information acquired by the screen size acquisition unit is larger, the right eye image and the left eye having a smaller shift amount than the central region in the peripheral region of the display screen. The image generation apparatus according to claim 1, which generates an ophthalmic image.
前記画像生成部が生成した前記右眼用画像および前記左眼用画像を表示する表示部
をさらに備える請求項1から5のいずれかに記載の画像生成装置。
The image generation apparatus according to claim 1, further comprising a display unit that displays the right-eye image and the left-eye image generated by the image generation unit.
前記表示部の観視者側に設けられ、前記右眼用画像と前記左眼用画像とを異なる方向へ案内する画像案内部
をさらに備える請求項6に記載の画像生成装置。
The image generation apparatus according to claim 6, further comprising an image guide unit that is provided on a viewer side of the display unit and guides the right-eye image and the left-eye image in different directions.
観視者の右眼で視認されるべき右眼用画像および観視者の左眼で視認されるべき左眼用画像を生成する画像生成方法であって、
対応するオブジェクトの対応点の表示画面上における左右方向の位置の差であるズレ量を、前記表示画面の左右方向の中央領域と周辺領域とで異ならせて前記右眼用画像と前記左眼用画像とを生成する画像生成段階
を備える画像生成方法。
An image generation method for generating an image for a right eye to be visually recognized with a right eye of a viewer and an image for a left eye to be visually recognized with a left eye of a viewer,
The right-eye image and the left-eye image are obtained by making the amount of deviation, which is the difference between the horizontal positions of the corresponding points of the corresponding objects on the display screen, different between the central area and the peripheral area in the horizontal direction of the display screen. An image generation method comprising an image generation step of generating an image.
観視者の右眼で視認されるべき右眼用画像および観視者の左眼で視認されるべき左眼用画像を生成する画像生成装置用のプログラムであって、コンピュータを、
対応するオブジェクトの対応点の表示画面上における左右方向の位置の差であるズレ量を、前記表示画面の左右方向の中央領域と周辺領域とで異ならせて前記右眼用画像と前記左眼用画像とを生成する画像生成部
として機能させるプログラム。
A program for an image generation device that generates an image for a right eye to be visually recognized by a viewer's right eye and an image for a left eye to be visually recognized by a viewer's left eye, the computer comprising:
The right-eye image and the left-eye image are obtained by making the amount of deviation, which is the difference between the horizontal positions of the corresponding points of the corresponding objects on the display screen, different between the central area and the peripheral area in the horizontal direction of the display screen. A program that functions as an image generation unit that generates an image.
JP2009231321A 2009-10-05 2009-10-05 Image generating apparatus, image generating method, and program Expired - Fee Related JP5428723B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009231321A JP5428723B2 (en) 2009-10-05 2009-10-05 Image generating apparatus, image generating method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009231321A JP5428723B2 (en) 2009-10-05 2009-10-05 Image generating apparatus, image generating method, and program

Publications (2)

Publication Number Publication Date
JP2011082649A true JP2011082649A (en) 2011-04-21
JP5428723B2 JP5428723B2 (en) 2014-02-26

Family

ID=44076280

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009231321A Expired - Fee Related JP5428723B2 (en) 2009-10-05 2009-10-05 Image generating apparatus, image generating method, and program

Country Status (1)

Country Link
JP (1) JP5428723B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013140702A1 (en) * 2012-03-22 2013-09-26 Necカシオモバイルコミュニケーションズ株式会社 Image processing device, image processing method, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004320189A (en) * 2003-04-14 2004-11-11 Sharp Corp Method for converting two-dimensional image into three-dimensional image
JP2005033696A (en) * 2003-07-11 2005-02-03 Nobuaki Hiromitsu Three-dimensional display device
JP2009135686A (en) * 2007-11-29 2009-06-18 Mitsubishi Electric Corp Stereoscopic video recording method, stereoscopic video recording medium, stereoscopic video reproducing method, stereoscopic video recording apparatus, and stereoscopic video reproducing apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004320189A (en) * 2003-04-14 2004-11-11 Sharp Corp Method for converting two-dimensional image into three-dimensional image
JP2005033696A (en) * 2003-07-11 2005-02-03 Nobuaki Hiromitsu Three-dimensional display device
JP2009135686A (en) * 2007-11-29 2009-06-18 Mitsubishi Electric Corp Stereoscopic video recording method, stereoscopic video recording medium, stereoscopic video reproducing method, stereoscopic video recording apparatus, and stereoscopic video reproducing apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013140702A1 (en) * 2012-03-22 2013-09-26 Necカシオモバイルコミュニケーションズ株式会社 Image processing device, image processing method, and program
JPWO2013140702A1 (en) * 2012-03-22 2015-08-03 Necカシオモバイルコミュニケーションズ株式会社 Image processing apparatus, image processing method, and program

Also Published As

Publication number Publication date
JP5428723B2 (en) 2014-02-26

Similar Documents

Publication Publication Date Title
JP5476910B2 (en) Image generating apparatus, image generating method, and program
CN103595988B (en) Stereoscopic image display device, image processing device, and image processing method
TWI508519B (en) An image processing apparatus, a program, an image processing method, a recording method, and a recording medium
KR101675961B1 (en) Apparatus and Method for Rendering Subpixel Adaptively
JP5515301B2 (en) Image processing apparatus, program, image processing method, recording method, and recording medium
US8000521B2 (en) Stereoscopic image generating method and apparatus
US9167223B2 (en) Stereoscopic video processing device and method, and program
JP5396877B2 (en) Image processing apparatus, program, image processing method, and recording method
JP2011205195A (en) Image processing device, program, image processing method, chair, and appreciation system
JP2010259017A (en) Display device, display method and display program
JP2018157331A (en) Program, recording medium, image generating apparatus, image generation method
JP2011081630A (en) Image generating apparatus, image generating method, and program
JP2010226390A (en) Imaging apparatus and imaging method
JP2015043187A (en) Image generation device and image generation program
JP2011082698A (en) Image generation device, image generation method, and program
JP5428723B2 (en) Image generating apparatus, image generating method, and program
JP5663854B2 (en) Display device, display method, and program
JP2010226391A (en) Image processing unit, program, and method of processing image
JP2011085868A (en) Image generating device, image generating method and program
CN114637391A (en) VR content processing method and equipment based on light field
US20060152580A1 (en) Auto-stereoscopic volumetric imaging system and method
JP2011081632A (en) Image generating apparatus, image generating method and program
JP2011077719A (en) Image producing device, image producing method, and program
JP2010259022A (en) Display device, display method, and display program
US20240193896A1 (en) Information processing apparatus, program, and information processing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121005

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130515

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130528

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130718

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131011

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131118

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5428723

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees