JP2007121625A - Image display device - Google Patents

Image display device Download PDF

Info

Publication number
JP2007121625A
JP2007121625A JP2005312746A JP2005312746A JP2007121625A JP 2007121625 A JP2007121625 A JP 2007121625A JP 2005312746 A JP2005312746 A JP 2005312746A JP 2005312746 A JP2005312746 A JP 2005312746A JP 2007121625 A JP2007121625 A JP 2007121625A
Authority
JP
Japan
Prior art keywords
display
image
unit
luminance
light amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005312746A
Other languages
Japanese (ja)
Inventor
Masaru Shintani
大 新谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Photo Imaging Inc
Original Assignee
Konica Minolta Photo Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Photo Imaging Inc filed Critical Konica Minolta Photo Imaging Inc
Priority to JP2005312746A priority Critical patent/JP2007121625A/en
Publication of JP2007121625A publication Critical patent/JP2007121625A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Liquid Crystal Display Device Control (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a technique for improving visibility of a display image on an image display device which is put on the head or face and through which the outside can be seen. <P>SOLUTION: A control unit detects luminance and color temperature and sets coefficients (a), (b), (c) based upon an image signal obtained through imaging operation of a camera unit 7 (#3) and determines the large/small relation between the measured luminance and a specified threshold α (#4). When the measured luminance is larger than the threshold α (YES at #4), the quantity of light of an LED (the quantity of display light of the LED) is adjusted according to the measured luminance (#5). Then the control unit determines whether the color temperature of the image deviates from a specified range (#6) and adjusts display colors according to a value (k) calculated by using large/small relation between (a) and ad, large/small relation between (c) and cd, the coefficients (a), (b), (c), and an expression (1), when the color temperature deviates from the specified range (YES at #6). <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、頭部又は顔面に取り付けられ、使用者が外界をシースルー可能な画像表示装置に関する。   The present invention relates to an image display device that is attached to a head or a face and allows a user to see through the outside world.

従来、使用者の頭部や顔面に取り付けられ、使用者の眼球にその近傍位置で画像を提供する画像表示装置が知られており、下記特許文献1〜3には、この種の画像表示装置に係る技術が提案されている。   Conventionally, there is known an image display device that is attached to a user's head or face and provides an image to the user's eyeball in the vicinity thereof. Patent Documents 1 to 3 listed below include this type of image display device. The technology concerning is proposed.

下記特許文献1には、使用者の顔面に装着可能に構成された表示部を有するヘッドマウントディスプレイユニットにおいて、作図画像と該作図画像に係る作図のついてのメニューとを表示部に同時に表示する場合に、作図画像及びメニューの視認性を考慮して、使用者の視線を検出する視線検出手段と、検出された使用者の視線に応じて表示部における所定の表示領域における表示形態を変化させる技術が開示されている。   In the following Patent Document 1, in a head-mounted display unit having a display unit configured to be attachable to a user's face, a drawing image and a menu for drawing related to the drawing image are simultaneously displayed on the display unit In addition, in consideration of the visibility of the drawing image and the menu, the line-of-sight detecting means for detecting the line of sight of the user, and the technology for changing the display form in a predetermined display area in the display unit according to the detected line of sight of the user Is disclosed.

下記特許文献2には、左右両眼にそれぞれ視差を有する別の画像を提供し、両眼の輻輳角の相違による立体視機能を利用して物体の奥行きを視覚的に感じさせる画像表示装置に関する記載がある。   The following Patent Document 2 relates to an image display device that provides different images having parallax for both the left and right eyes, and visually senses the depth of an object using a stereoscopic function based on a difference in convergence angle between both eyes. There is a description.

下記特許文献3には、表示情報を同一視野内において、観察者の前方視野の被写体の映像情報に空間的にオーバーラップさせて眼球に導く表示装置において、表示情報のうち文字情報を前記外界の映像情報(シースルー画像)に対して空間的に立体表示する構成が提案されている。
特開平9−191438号公報 特開2002−92656号公報 特開平9−127455号公報
In the following Patent Document 3, in a display device in which display information is spatially overlapped with video information of a subject in a front vision of an observer and guided to an eyeball within the same field of view, character information of the display information is transmitted to the outside world. A configuration for spatially displaying stereoscopic information with respect to video information (see-through image) has been proposed.
JP-A-9-191438 JP 2002-92656 A JP-A-9-127455

前記特許文献3のような外界をシースルー可能な画像表示装置にあっては、表示部の透過率が比較的高い場合、外界の像と表示画像との識別が困難となることにより表示画像の視認性が低下することとなる。また、外界の像に高周波成分が含まれている場合には、表示画像の判別が困難となり、特に文字の視認性が低下することとなる。さらには、外界の像が特定の色に偏ったものであるときには、表示画像の色が現実の色と大きく異なるものとなる虞がある。なお、前記特許文献1,2には、外界をシースルー可能な画像表示装置に関する記載はなされていない。   In the image display device capable of see-through the outside world as in Patent Document 3, when the transmittance of the display unit is relatively high, it becomes difficult to distinguish between the image of the outside world and the display image. The performance will be reduced. In addition, when a high-frequency component is included in an external image, it becomes difficult to distinguish a display image, and in particular, the visibility of characters is reduced. Furthermore, when the image of the outside world is biased to a specific color, the color of the display image may be significantly different from the actual color. Note that Patent Documents 1 and 2 do not describe an image display device that can see through the outside world.

本発明は、上記事情に鑑みてなされたもので、頭部又は顔面に取り付けられ、使用者が外界をシースルー可能な画像表示装置における表示画像の視認性を向上させる技術を提供することを目的とする。   The present invention has been made in view of the above circumstances, and an object thereof is to provide a technique for improving the visibility of a display image in an image display device that is attached to a head or a face and allows a user to see through the outside. To do.

請求項1に記載の発明は、頭部又は顔面に取り付けられ、外界をシースルー可能な画像表示装置であって、画像を表示する表示手段と、被写体の光像を受光して光電変換動作を行う撮像手段の撮像動作により得られた画像に応じて前記画像の表示態様を変更する表示態様変更手段とを備えることを特徴とするものである。   The invention described in claim 1 is an image display device attached to the head or the face and capable of see-through from the outside, and performs a photoelectric conversion operation by receiving a display means for displaying an image and a light image of a subject. And a display mode changing unit that changes a display mode of the image according to an image obtained by an imaging operation of the imaging unit.

この発明によれば、撮像手段の撮像動作により得られた画像に応じて前記画像の表示態様を変更するようにしたので、画像表示装置における表示画像の視認性を向上させることが可能となる。   According to the present invention, since the display mode of the image is changed according to the image obtained by the imaging operation of the imaging means, it is possible to improve the visibility of the display image in the image display device.

請求項2に記載の発明は、請求項1に記載の画像表示装置において、前記表示態様変更手段は、前記撮像手段の撮像動作により得られた画像の色温度を検出する色温度検出手段と、前記色温度検出手段により検出された色温度に応じて画像の表示色を調整する表示色調整手段と、前記表示色調整手段により表示色が調整された画像を前記表示手段に表示させる表示制御手段とを備えることを特徴とするものである。   According to a second aspect of the present invention, in the image display device according to the first aspect, the display mode changing means includes a color temperature detecting means for detecting a color temperature of an image obtained by an imaging operation of the imaging means, Display color adjusting means for adjusting the display color of the image according to the color temperature detected by the color temperature detecting means, and display control means for causing the display means to display an image whose display color has been adjusted by the display color adjusting means. Are provided.

この発明によれば、画像の色温度を検出し、検出した色温度に応じて表示手段の画像の表示色を調整し、その色温度を調整した画像を表示手段に表示するようにしたので、表示手段に表示する画像が実際の被写体と大きく異なるという状態が発生するのを抑制することができる。   According to this invention, the color temperature of the image is detected, the display color of the image on the display unit is adjusted according to the detected color temperature, and the image on which the color temperature has been adjusted is displayed on the display unit. It is possible to suppress the occurrence of a state in which the image displayed on the display means is significantly different from the actual subject.

請求項3に記載の発明は、請求項2に記載の画像表示装置において、前記画像の輝度を検出する輝度検出手段と、前記輝度検出手段により検出された輝度に応じて前記表示手段の画像の表示光量を調整する表示光量調整手段とを更に備えることを特徴とするものである。   According to a third aspect of the present invention, in the image display device according to the second aspect, a luminance detection unit that detects the luminance of the image, and an image of the display unit according to the luminance detected by the luminance detection unit. A display light amount adjusting means for adjusting the display light amount is further provided.

この発明によれば、画像の輝度を検出し、検出した輝度に応じて表示手段の画像の表示光量を調整するようにしたので、例えば外界の被写体の輝度が非常に高い場合に、表示手段に表示する画像の視認性が低下するのを抑制することができる。   According to the present invention, the brightness of the image is detected, and the display light amount of the image on the display means is adjusted according to the detected brightness. For example, when the brightness of the external subject is very high, the display means It can suppress that the visibility of the image to display falls.

請求項4に記載の発明は、請求項1に記載の画像表示装置において、前記表示態様変更手段は、前記撮像手段の撮像動作により得られた画像の空間周波数を検出する空間周波数検出手段と、前記空間周波数検出手段により検出された空間周波数に応じて前記表示手段の画像の表示光量を調整する表示光量調整手段と、前記表示光量調整手段により表示光量が調整された画像を前記表示手段に表示させる表示制御手段とを備えることを特徴とするものである。   According to a fourth aspect of the present invention, in the image display device according to the first aspect, the display mode changing means includes a spatial frequency detecting means for detecting a spatial frequency of an image obtained by the imaging operation of the imaging means, Display light amount adjusting means for adjusting the display light amount of the image on the display means according to the spatial frequency detected by the spatial frequency detecting means, and displaying the image whose display light amount is adjusted by the display light amount adjusting means on the display means And a display control means.

この発明によれば、画像の空間周波数を検出し、検出した空間周波数に応じて表示手段の画像の表示光量を調整し、画像をその表示光量で表示手段に表示するようにしたので、表示手段に表示する画像、特に文字の視認性の低下を抑制することができる。   According to this invention, the spatial frequency of the image is detected, the display light amount of the image on the display means is adjusted according to the detected spatial frequency, and the image is displayed on the display means with the display light amount. It is possible to suppress a decrease in the visibility of images displayed on the screen, particularly characters.

請求項5に記載の発明は、請求項4に記載の画像表示装置において、前記画像の輝度を検出する輝度検出手段を更に備え、前記表示光量調整手段は、前記空間周波数検出手段により検出された空間周波数と前記輝度検出手段により検出された輝度とに応じて画像の表示光量を調整することを特徴とするものである。   According to a fifth aspect of the present invention, in the image display device according to the fourth aspect of the present invention, the image display device further includes a luminance detection unit that detects the luminance of the image, and the display light amount adjustment unit is detected by the spatial frequency detection unit. The display light quantity of the image is adjusted in accordance with the spatial frequency and the brightness detected by the brightness detecting means.

この発明によれば、画像の空間周波数だけでなく画像の輝度をも検出し、検出した空間周波数と輝度とに応じて表示手段の画像の表示光量を調整するようにしたので、例えば外界の被写体の輝度が非常に高い場合に、表示手段に表示する画像の視認性が低下するのを抑制することができる。   According to the present invention, not only the spatial frequency of the image but also the luminance of the image is detected, and the display light amount of the image on the display means is adjusted according to the detected spatial frequency and luminance. It is possible to suppress a reduction in the visibility of the image displayed on the display means when the brightness of the screen is very high.

本発明によれば、画像の色温度、輝度及び空間周波数のうち少なくとも1の要素に応じて、表示手段の画像の表示色又は表示光量を調整するようにしたので、当該画像表示装置における表示画像の視認性を向上させることができる。   According to the present invention, the display color or the display light amount of the image on the display means is adjusted according to at least one element among the color temperature, luminance, and spatial frequency of the image. Visibility can be improved.

本発明に係る画像表示装置の実施形態について説明する。図1は、本発明に係る画像表示装置の一実施形態の構成を示す正面図、図2は、図1に対する平面図、図3は、図1に対する右側面図である。なお、図1の左右方向をX軸、上下方向をY軸、紙面に直交する方向をZ軸とする3次元座標系を設定するものとする。   An embodiment of an image display device according to the present invention will be described. 1 is a front view showing a configuration of an embodiment of an image display apparatus according to the present invention, FIG. 2 is a plan view with respect to FIG. 1, and FIG. 3 is a right side view with respect to FIG. It is assumed that a three-dimensional coordinate system is set in which the left-right direction of FIG.

図1〜図3に示すように、画像表示装置1は、当該画像表示装置1の使用者の眼球の近傍位置に配置されて使用される頭部装着型表示装置(ヘッドマウンテッドディスプレイ(HMD))であり、第1、第2透明基板2,3と、ブリッジ4と、フレーム5,6と、カメラユニット7と、表示筐体8,9とを有して構成されている。   As shown in FIGS. 1 to 3, the image display device 1 is a head-mounted display device (head mounted display (HMD)) that is used by being placed in the vicinity of the eyeball of the user of the image display device 1. The first and second transparent substrates 2 and 3, the bridge 4, the frames 5 and 6, the camera unit 7, and the display housings 8 and 9.

第1、第2透明基板2,3は、左右の眼球にそれぞれ対応して備えられたU字型で略平板状の透明体である。後述するように、第1、第2透明基板2,3に囲まれて形成されるスペースに表示筐体8,9が嵌め込まれている。   The first and second transparent substrates 2 and 3 are U-shaped and substantially flat transparent bodies respectively provided corresponding to the left and right eyeballs. As will be described later, the display housings 8 and 9 are fitted in a space formed by being surrounded by the first and second transparent substrates 2 and 3.

ブリッジ4は、XY平面に平行で且つX軸方向に並べて配置された第1、第2透明基板2,3の互いに対向する所定位置に架け渡された短尺の棒状部材であり、第1透明基板2と第2透明基板3とを一定の間隙を介した相対位置関係に保持するものである。   The bridge 4 is a short rod-like member that spans a predetermined position facing each other of the first and second transparent substrates 2 and 3 that are arranged parallel to the XY plane and arranged in the X-axis direction. 2 and the second transparent substrate 3 are held in a relative positional relationship with a predetermined gap therebetween.

フレーム5,6は、可撓性を有する弾性材等により構成された長尺状の部材であり、使用者の耳や側頭部に掛止され、画像表示装置1の頭部への保持及び装着位置の調整を行うためのものである。なお、フレーム5,6は、回動部5a,6aにおいて矢印P,Q方向に回動可能に構成されており、当該画像表示装置1を使用しない場合には、フレーム5,6を矢印P,Q方向に回動させて第1、第2透明基板2,3に沿わせることにより、コンパクト化することができる。   The frames 5 and 6 are long members made of a flexible elastic material or the like. The frames 5 and 6 are hooked on the user's ears or the temporal region, and are held on the head of the image display device 1. This is for adjusting the mounting position. The frames 5 and 6 are configured to be rotatable in the directions of arrows P and Q in the rotating portions 5a and 6a. When the image display device 1 is not used, the frames 5 and 6 are indicated by the arrows P and It can be made compact by rotating in the Q direction along the first and second transparent substrates 2 and 3.

カメラユニット7は、使用者の眼前の被写体を撮影するものであり、例えば一方のフレーム5に取り付けられている。図4は、カメラユニット7の内部構成を示す断面図である。図4に示すように、カメラユニット7は、筒状の筐体10内にズームレンズ光学系を配置してなるレンズユニット11と、該レンズユニット11により導かれた被写体の光像を撮像(光電変換)する撮像素子12と、撮像素子12を支持する撮像素子基板13と、撮像素子12の撮像動作により得られる画素信号を図略の制御ユニットに送信するためのケーブル14とを有して構成されている。なお、レンズユニット11の変倍レンズ群及びフォーカスレンズ群は、図略のモータにより光軸方向に駆動可能に構成されており、変倍レンズ群が光軸方向に駆動されたときには表示倍率が変更され、フォーカスレンズ群が光軸方向に駆動されたときには焦点調節が行われる。   The camera unit 7 captures a subject in front of the user's eyes, and is attached to, for example, one frame 5. FIG. 4 is a cross-sectional view showing the internal configuration of the camera unit 7. As shown in FIG. 4, the camera unit 7 takes a lens unit 11 in which a zoom lens optical system is arranged in a cylindrical housing 10 and an optical image of a subject guided by the lens unit 11 (photoelectric sensor). Image sensor 12 to be converted), an image sensor substrate 13 that supports the image sensor 12, and a cable 14 for transmitting a pixel signal obtained by the imaging operation of the image sensor 12 to a control unit (not shown). Has been. The variable power lens group and the focus lens group of the lens unit 11 are configured to be driven in the optical axis direction by a motor (not shown), and the display magnification is changed when the variable power lens group is driven in the optical axis direction. When the focus lens group is driven in the optical axis direction, focus adjustment is performed.

撮像素子12は、前記レンズユニット11により結像された被写体光像の光量に応じて、R、G、B各成分の画像信号に光電変換するものである。撮像素子12は、CCD(Charge Coupled Device)が2次元的に配置されたエリアセンサの各CCDの表面に、R(赤)、G(緑)、B(青)のカラーフィルタが市松模様状に貼り付けられた、所謂ベイヤー方式と呼ばれる単板式カラーエリアセンサで構成されている。なお、撮像素子12としては、CCDイメージセンサ、CMOSイメージセンサ、VMISイメージセンサ等が採用可能である。   The image pickup device 12 performs photoelectric conversion into image signals of R, G, and B components according to the amount of light of the subject light image formed by the lens unit 11. The image sensor 12 has R (red), G (green), and B (blue) color filters in a checkered pattern on the surface of each CCD of an area sensor in which CCDs (Charge Coupled Devices) are two-dimensionally arranged. It is composed of a single-plate type color area sensor that is affixed to a so-called Bayer system. As the image pickup element 12, a CCD image sensor, a CMOS image sensor, a VMIS image sensor, or the like can be employed.

表示筐体8,9は、同様の構成を有しており、カメラユニット7で撮影した画像(映像)を表示し眼球に提供するものである。図5は、図2の矢印A−A線からみた矢視断面図であり、主に表示筐体8,9の内部構成を示している。   The display housings 8 and 9 have the same configuration, and display an image (video) taken by the camera unit 7 and provide it to the eyeball. FIG. 5 is a cross-sectional view taken along line AA in FIG. 2 and mainly shows the internal configuration of the display housings 8 and 9.

図5に示すように、表示筐体8,9は、筐体部15と、LED(Light Emitting Diode)16と、コリメータレンズ17と、LCD(Liquid Crystal Display)18と、プリズム19と、HOE(Holographic Optical Element)20とを有し、LED16、コリメータレンズ17及びLCD18が筐体部15に内蔵された状態で、該筐体部15がプリズム19の上端部において上斜め前方(図5では右斜め上方向)に突出する態様で取り付けられている。   As shown in FIG. 5, the display housings 8 and 9 include a housing portion 15, an LED (Light Emitting Diode) 16, a collimator lens 17, an LCD (Liquid Crystal Display) 18, a prism 19, and a HOE (HOE). Holographic Optical Element) 20, and the LED 16, the collimator lens 17, and the LCD 18 are built in the casing 15. It is attached in a manner that protrudes upward.

LED16は、所定波長色を含む白色発光ダイオード(LED)からなる点光源である。コリメータレンズ17は、LED16の光をほぼ平行光にしてLCD18に投光するものである。LCD18は、カメラユニット7の画像信号に基づき映像を生成するものであり、例えば透過型の液晶表示パネルである。   The LED 16 is a point light source composed of a white light emitting diode (LED) including a predetermined wavelength color. The collimator lens 17 makes the light from the LED 16 substantially parallel and projects it onto the LCD 18. The LCD 18 generates video based on the image signal of the camera unit 7 and is, for example, a transmissive liquid crystal display panel.

プリズム19は、ガラスや透明樹脂等からなる略板状の透明部材であり、LCD18からの光を内部で複数回の反射を行わせるものである。プリズム19の上端部は、LCD18からの光の大部分を内部に採光できるように、上方に向かってより肉厚となるように前面側が楔形状に形成された肉厚部19aが形成されている。   The prism 19 is a substantially plate-like transparent member made of glass, transparent resin, or the like, and reflects light from the LCD 18 a plurality of times inside. The upper end portion of the prism 19 is formed with a thick portion 19a whose front side is formed in a wedge shape so as to be thicker upward so that most of the light from the LCD 18 can be collected inside. .

また、プリズム19の下端部には、テーパ面19bが形成されており、プリズム19は、第1、第2透明基板2,3に形成されたテーパ面2a,3aに対しHOE20を介して接合(例えば接着)されている。また、プリズム19の表裏面は、第1、第2透明基板2,3の表裏面に対して面一とされている。これにより、プリズム19は、第1、第2透明基板2,3と一枚の板状に一体化されている。   A tapered surface 19b is formed at the lower end of the prism 19, and the prism 19 is joined to the tapered surfaces 2a and 3a formed on the first and second transparent substrates 2 and 3 via the HOE 20 ( For example, it is bonded. The front and back surfaces of the prism 19 are flush with the front and back surfaces of the first and second transparent substrates 2 and 3. Thus, the prism 19 is integrated with the first and second transparent substrates 2 and 3 in a single plate shape.

HOE20は、光学的に軸非対称な所謂自由曲面で構成されて正のパワーを有する体積位相型のホログラム光学素子であり、プリズム19の下端部において所定の傾斜角を有して支持されている。HOE20は、プリズム19により導光された光が照射されることにより、光の干渉現象を用いてホログラム映像を眼球に提供する。   The HOE 20 is a volume phase type hologram optical element having a positive power, which is configured by a so-called free-form surface that is optically axisymmetric, and is supported at a lower end portion of the prism 19 with a predetermined inclination angle. The HOE 20 irradiates the light guided by the prism 19 to provide a hologram image to the eyeball using the light interference phenomenon.

以上のような構成を有する表示筐体8,9においては、LED16から射出された光は、コリメータレンズ17を通してLCD18を照明し、この照明によりLCD18で生成された被写体光は、プリズム19内で複数回の全反射を行った後、HOE20により回折し虚像として使用者の眼球に導かれる。   In the display housings 8 and 9 having the above configuration, the light emitted from the LED 16 illuminates the LCD 18 through the collimator lens 17, and a plurality of subject lights generated by the LCD 18 by this illumination are within the prism 19. After the total reflection is performed once, it is diffracted by the HOE 20 and guided to the user's eyeball as a virtual image.

さらに、プリズム19は、前方から入射する光を使用者の眼球に導くようになっている。これにより、使用者は、外界(前方の被写体)をシースルー可能となり、カメラユニット7により撮影された画像(映像)を外界(前方の被写体)と重畳して視認することとなる。   Furthermore, the prism 19 guides light incident from the front to the user's eyeball. As a result, the user can see through the outside world (front subject) and can visually recognize the image (video) taken by the camera unit 7 superimposed on the outside world (front subject).

なお、第1、第2透明基板2,3に形成されたテーパ面2a,3aは、プリズム19のテーパ面19bでの光の屈折をキャンセル(相殺)する、すなわち、テーパ面19bにおけるプリズム効果により矢印W側からの光が上方に屈曲するのを防止するため、使用者は、プリズム19、第1、第2透明基板2,3及びHOE20を通して、外界光を歪むことなく観察することができる。   The tapered surfaces 2a and 3a formed on the first and second transparent substrates 2 and 3 cancel (cancel) light refraction at the tapered surface 19b of the prism 19, that is, due to the prism effect on the tapered surface 19b. In order to prevent the light from the arrow W side from bending upward, the user can observe the external light through the prism 19, the first and second transparent substrates 2, 3 and the HOE 20 without distortion.

図6は、画像表示装置1の電気的な構成を示すブロック図である。   FIG. 6 is a block diagram showing an electrical configuration of the image display apparatus 1.

図6に示すように、画像表示装置1は、カメラユニット7と、LCD18と、信号処理部21と、A/D変換部22と、タイミング制御回路23と、画像メモリ24と、VRAM25と、制御部26とを有する。   As shown in FIG. 6, the image display device 1 includes a camera unit 7, an LCD 18, a signal processing unit 21, an A / D conversion unit 22, a timing control circuit 23, an image memory 24, a VRAM 25, and a control. Part 26.

カメラユニット7は、図1,2,4に示すカメラユニット7に相当するものであり、画像表示装置1を装着した使用者の眼前の被写体を撮影するものである。LCD18は、図5に示すLCD18に相当するものであり、カメラユニット7により得られた画像データに基づく画像を表示するものである。   The camera unit 7 corresponds to the camera unit 7 shown in FIGS. 1, 2, and 4, and photographs a subject in front of the user wearing the image display device 1. The LCD 18 corresponds to the LCD 18 shown in FIG. 5 and displays an image based on the image data obtained by the camera unit 7.

信号処理部21は、撮像素子12から出力されるアナログの画像信号に所定のアナログ信号処理を施すものである。信号処理部21は、CDS(相関二重サンプリング)回路とAGC(オートゲインコントロール)回路とを有し、CDS回路により画像信号のノイズの低減を行い、AGC回路により画像信号のレベル調整を行う。   The signal processing unit 21 performs predetermined analog signal processing on the analog image signal output from the image sensor 12. The signal processing unit 21 includes a CDS (correlated double sampling) circuit and an AGC (auto gain control) circuit. The CDS circuit reduces noise of the image signal, and the AGC circuit adjusts the level of the image signal.

A/D変換部22は、信号処理部21により出力されたアナログのR,G,Bの画素信号を、複数のビット(例えば10ビット)からなるデジタルの画素信号にそれぞれ変換するものである。A/D変換部22のA/D変換処理後の信号を画像データというものとする。   The A / D conversion unit 22 converts the analog R, G, and B pixel signals output from the signal processing unit 21 into digital pixel signals composed of a plurality of bits (for example, 10 bits). The signal after the A / D conversion process of the A / D conversion unit 22 is referred to as image data.

タイミング制御回路23は、制御部26から出力される基準クロックCLK0に基づいてクロックCLK1,CLK2を生成し、クロックCLK1をカメラユニット7内の撮像素子12(図4参照)に、また、クロックCLK2をA/D変換部22にそれぞれ出力することにより、撮像素子12及びA/D変換部22の動作を制御する。   The timing control circuit 23 generates clocks CLK1 and CLK2 based on the reference clock CLK0 output from the control unit 26. The clock CLK1 is supplied to the image sensor 12 (see FIG. 4) in the camera unit 7, and the clock CLK2 is also supplied. The operations of the image sensor 12 and the A / D converter 22 are controlled by outputting them to the A / D converter 22 respectively.

画像メモリ24は、制御部26により画像データに対する各種の処理を行うための作業領域として用いられるメモリである。VRAM25は、LCD18の画素数に対応した画像信号の記録容量を有し、LCD18に再生表示される画像を構成する画素信号のバッファメモリである。   The image memory 24 is a memory used as a work area for performing various processing on image data by the control unit 26. The VRAM 25 has an image signal recording capacity corresponding to the number of pixels of the LCD 18, and is a pixel signal buffer memory constituting an image reproduced and displayed on the LCD 18.

制御部26は、各制御プログラム等を記憶するROM(Read Only Memory)、演算処理や制御処理などのデータを一時的に格納するRAM(Random Access Memory)、及び上記制御プログラム等をROMから読み出して実行するCPU(中央演算処理装置)等からなり、図略の撮影開始スイッチからの信号を受けて、カメラユニット7の撮像動作やLCD18の表示動作の制御を行うものである。なお、制御部26は、前記制御ユニットに搭載されており、前記ケーブル14を介してカメラユニット7やLCD18との間で画像の授受を行う。   The control unit 26 reads a ROM (Read Only Memory) that stores each control program, a RAM (Random Access Memory) that temporarily stores data such as arithmetic processing and control processing, and the control program from the ROM. It comprises a CPU (central processing unit) to be executed, etc., and receives a signal from a shooting start switch (not shown) to control the imaging operation of the camera unit 7 and the display operation of the LCD 18. The control unit 26 is mounted on the control unit, and exchanges images with the camera unit 7 and the LCD 18 via the cable 14.

本実施形態の画像表示装置1は、前述したように、当該画像表示装置1を使用者が装着したときに外界(前方の被写体)がシースルー可能に構成されているため、外界の被写体の輝度が比較的高い場合や該被写体が特定の色に偏っている場合、当該画像表示装置1により表示される画像の視認性が低下したり、被写体の実際の色と大きく異なったりすることが考えられる。   As described above, the image display device 1 of the present embodiment is configured so that the outside (front subject) can see through when the user wears the image display device 1, so that the brightness of the outside subject is high. When it is relatively high or when the subject is biased to a specific color, it is conceivable that the visibility of the image displayed by the image display device 1 is lowered or significantly different from the actual color of the subject.

そこで、本実施形態では、この問題を解決するべく、制御部26は、輝度検出部27と、色温度検出部28と、表示光量調整部29と、表示色調整部30とを機能的に有している。   Therefore, in this embodiment, in order to solve this problem, the control unit 26 functionally includes a luminance detection unit 27, a color temperature detection unit 28, a display light amount adjustment unit 29, and a display color adjustment unit 30. is doing.

輝度検出部27は、A/D変換部22によるA/D変換処理後の画像データに係る画像全体の平均輝度を検出するものである。すなわち、輝度検出部27は、撮像素子12の各画素から得られたA/D変換処理後の各画素値の平均値を算出し、この平均値に基づいて輝度を検出するものである。輝度検出部27は、前記輝度検出手段に相当するものである。   The luminance detection unit 27 detects the average luminance of the entire image related to the image data after the A / D conversion processing by the A / D conversion unit 22. That is, the luminance detection unit 27 calculates an average value of each pixel value after A / D conversion processing obtained from each pixel of the image sensor 12, and detects the luminance based on this average value. The luminance detection unit 27 corresponds to the luminance detection unit.

色温度検出部28は、A/D変換部22によるA/D変換処理後の画像データに係る画像の色温度を検出するものである。色温度は、R(赤)の画素の画素値を「R」、G(緑)の画素の画素値を「G」、B(青)の画素の画素値を「B」と表すものとすると、G(緑)の画素の画素値とR(赤)の画素の画素値との比G/Rと、G(緑)の画素の画素値とB(青)の画素の画素値との比G/Bとの間に所定の関係を有しているので、前記比G/R及び比G/Bと色温度との関係をテーブル形式で例えば制御部26のROMに格納しておき、色温度検出部28は、A/D変換部22から画像データが出力されると、この画像データから前記比G/R及び比G/Bを算出し、この算出した比G/R及び比G/Bに対応する色温度を前記ROMを参照して導出する。色温度検出部28は、前記色温度検出手段に相当するものである。   The color temperature detection unit 28 detects the color temperature of the image related to the image data after the A / D conversion processing by the A / D conversion unit 22. As for the color temperature, the pixel value of the R (red) pixel is represented by “R”, the pixel value of the G (green) pixel is represented by “G”, and the pixel value of the B (blue) pixel is represented by “B”. , The ratio G / R of the pixel value of the G (green) pixel and the pixel value of the R (red) pixel, and the ratio of the pixel value of the G (green) pixel and the pixel value of the B (blue) pixel Since there is a predetermined relationship with G / B, the relationship between the ratio G / R and the ratio G / B and the color temperature is stored in a table format, for example, in the ROM of the control unit 26, and the color When the image data is output from the A / D converter 22, the temperature detector 28 calculates the ratio G / R and the ratio G / B from the image data, and the calculated ratio G / R and ratio G / B. The color temperature corresponding to B is derived with reference to the ROM. The color temperature detection unit 28 corresponds to the color temperature detection means.

表示光量調整部29は、輝度検出部27により検出された輝度に応じて、LCD18の表示光量を調整するものである。本実施形態では、表示光量調整部29は、輝度検出部27により検出された輝度が所定の閾値α以上のときに、その輝度の増大に応じてLED16の発光量を増大する。表示光量調整部29は、前記表示光量調整手段に相当するものである。   The display light amount adjustment unit 29 adjusts the display light amount of the LCD 18 according to the luminance detected by the luminance detection unit 27. In the present embodiment, the display light amount adjustment unit 29 increases the light emission amount of the LED 16 in accordance with the increase in luminance when the luminance detected by the luminance detection unit 27 is equal to or greater than the predetermined threshold value α. The display light amount adjustment unit 29 corresponds to the display light amount adjustment means.

表示色調整部30は、色温度検出部28により検出された色温度に応じて、LCD18の表示色を調整するものである。本実施形態では、表示色調整部30は、色温度検出部28により検出された色温度が所定の範囲からずれているとき、LCD18の表示色をそのずれている方向と逆方向に調整する。   The display color adjustment unit 30 adjusts the display color of the LCD 18 according to the color temperature detected by the color temperature detection unit 28. In the present embodiment, when the color temperature detected by the color temperature detection unit 28 deviates from a predetermined range, the display color adjustment unit 30 adjusts the display color of the LCD 18 in the direction opposite to the direction of the deviation.

具体的には、本実施形態のように撮像素子12が、R(赤)、G(緑)、B(青)のカラーフィルタが市松模様状に貼り付けられた所謂ベイヤー方式の撮像素子である場合、表示色調整部30は、R(赤)の画素の画素値R、G(緑)の画素の画素値G及びB(青)の画素の画素値Bにそれぞれ所定の係数を掛けた上で足し合わせたものが白色となるように、前記所定の係数を設定する。すなわち、表示色調整部30は、前記所定の係数をa,b,cと表すものとすると、aR+bG+cB=L(白色)となるように、係数a,b,cを設定する。   Specifically, as in the present embodiment, the image sensor 12 is a so-called Bayer image sensor in which R (red), G (green), and B (blue) color filters are attached in a checkered pattern. In this case, the display color adjusting unit 30 multiplies the pixel value R of the R (red) pixel, the pixel value G of the G (green) pixel, and the pixel value B of the B (blue) pixel by a predetermined coefficient. The predetermined coefficient is set so that the sum of the colors becomes white. That is, the display color adjusting unit 30 sets the coefficients a, b, and c so that aR + bG + cB = L (white) when the predetermined coefficients are represented as a, b, and c.

そして、表示色調整部30は、太陽光線(d線)による照明下において前述の方法により設定した各係数がad,bd,cdである場合において、a<ad,c<cdのときには色温度が高く、a>ad,c>cdの場合には色温度が低いと判断し、画像の色温度を反対側にシフトする。色温度は、青、白、赤の順に高いので、例えば画像が赤みを帯びている場合には、青側にシフトする。そのシフト量は、
k=(a−ad)/(c−cd) ・・・(1)
で算出されるkの値に応じて決定される。なお、表示色調整部30は、前記表示色調整手段に相当するものである。また、表示光量調整部29及び表示色調整部30は、表示制御手段を構成するものである。
The display color adjusting unit 30 then adjusts the color temperature when a <ad, c <cd when the coefficients set by the above-described method are ad, bd, cd under illumination by sunlight (d-line). If a> ad, c> cd, the color temperature is determined to be low, and the color temperature of the image is shifted to the opposite side. Since the color temperature is higher in the order of blue, white, and red, for example, when the image is reddish, the color temperature is shifted to the blue side. The shift amount is
k = (a-ad) / (c-cd) (1)
It is determined according to the value of k calculated in The display color adjustment unit 30 corresponds to the display color adjustment unit. The display light amount adjustment unit 29 and the display color adjustment unit 30 constitute display control means.

次に、制御部26による表示処理について説明する。図7は、この表示処理を示すフローチャートである。   Next, display processing by the control unit 26 will be described. FIG. 7 is a flowchart showing this display processing.

図7に示すように、図略の電源ボタンにより電源がオンされると(ステップ♯1でYES)、制御部26は、カメラユニット7(撮像素子12)に撮像動作を実行させる(ステップ♯2)。制御部26は、この撮像動作により得られた画像信号に基づいて、輝度及び色温度の検出と、前記係数a,b,cの設定とを行う(ステップ♯3)。   As shown in FIG. 7, when the power is turned on by an unillustrated power button (YES in step # 1), the control unit 26 causes the camera unit 7 (image sensor 12) to perform an imaging operation (step # 2). ). The control unit 26 detects the luminance and color temperature and sets the coefficients a, b, and c based on the image signal obtained by this imaging operation (step # 3).

そして、制御部26は、測定した輝度(以下、測定輝度という)と所定の閾値αとの大小関係を判断する(ステップ♯4)。その判断の結果、前記測定輝度が、前記閾値α以上である場合には(ステップ♯4でYES)、その測定輝度に応じてLED16の光量(LCD18の表示光量)を調整する(ステップ♯5)一方、前記閾値α未満である場合には(ステップ♯4でNO)、ステップ♯5の処理を実行しないでステップ♯6の処理に進む。   Then, the control unit 26 determines the magnitude relationship between the measured luminance (hereinafter referred to as measured luminance) and a predetermined threshold value α (step # 4). As a result of the determination, if the measured luminance is equal to or greater than the threshold value α (YES in step # 4), the light amount of the LED 16 (display light amount of the LCD 18) is adjusted according to the measured luminance (step # 5). On the other hand, if it is less than the threshold value α (NO in step # 4), the process proceeds to step # 6 without executing step # 5.

ステップ♯4又は♯5の処理後、制御部26は、ステップ♯3で検出した画像の色温度が所定範囲からずれているか否かを判断する(ステップ♯6)。その判断の結果、色温度が所定範囲からずれていない場合には(ステップ♯6でNO)、ステップ♯2の処理に戻る一方、前記色温度が所定範囲からずれている場合には(ステップ♯6でYES)、表示色を、aとadとの大小関係、cとcdとの大小関係及び前記係数a,b,cと前記式(1)とを用いて算出されるkの値に応じて調整する(ステップ♯7)。   After the processing of step # 4 or # 5, the control unit 26 determines whether or not the color temperature of the image detected in step # 3 is deviated from the predetermined range (step # 6). As a result of the determination, if the color temperature is not deviated from the predetermined range (NO in step # 6), the process returns to step # 2, while if the color temperature deviates from the predetermined range (step #). 6), the display color depends on the magnitude relationship between a and ad, the magnitude relationship between c and cd, and the value of k calculated using the coefficients a, b and c and the equation (1). (Step # 7).

そして、電源ボタンにより電源がオフされるまで(ステップ♯8でNO)、制御部26は、カメラユニットによる1回の撮像動作ごとにステップ♯3〜♯8の処理を実行し、電源がオフされると(ステップ♯8でYES)、一連の処理を終了する。なお、人間の眼は、色より輝度の方が高い感度を有するため、前記表示処理において、輝度についての処理(ステップ♯4,♯5)を色温度についての処理(ステップ♯6,♯7)より先に行っている。   Until the power is turned off by the power button (NO in step # 8), control unit 26 executes the processes of steps # 3 to # 8 for each imaging operation by the camera unit, and the power is turned off. Then (YES in step # 8), a series of processing is terminated. Since the human eye has higher sensitivity than luminance, the luminance processing (Steps # 4 and # 5) is replaced with the processing regarding color temperature (Steps # 6 and # 7) in the display processing. Go ahead.

以上のように、撮像した画像の色温度に応じて表示色を調整し、該画像の輝度に応じて表示光量を調整するようにしたので、従来では外界の色と表示画像との色とが混ざり合うような場合でも、当該画像表示装置1の表示画像の良好な視認性を確保することができる。   As described above, the display color is adjusted according to the color temperature of the captured image, and the display light amount is adjusted according to the luminance of the image. Conventionally, the color of the outside world and the color of the display image are different from each other. Even when they are mixed, good visibility of the display image of the image display device 1 can be ensured.

本件は、前記実施形態に加えて、あるいは前記実施形態に代えて次の形態[1]〜[3]に説明する変形形態も含むものである。   This case includes modifications described in the following [1] to [3] in addition to the above embodiment or instead of the above embodiment.

[1]前記第1の実施形態では、画像の輝度に応じて表示光量を調整するようにしたが、これに限らず、画像の輝度と空間周波数とに応じて表示光量を調整するようにしてもよい。図8は、本発明に係る画像表示装置の第2の実施形態の電気的な構成を示すブロック図である。   [1] In the first embodiment, the display light amount is adjusted according to the luminance of the image. However, the present invention is not limited to this, and the display light amount is adjusted according to the luminance and spatial frequency of the image. Also good. FIG. 8 is a block diagram showing an electrical configuration of the second embodiment of the image display apparatus according to the present invention.

図8に示すように、本実施形態の画像表示装置1’は、制御部26’の機能が第1の実施形態における制御部26の機能と異なるのみで、他の構成については略同様であるため、相違点についてのみ説明する。なお、第1の実施形態と同一の部材等については第1の実施形態と同一の番号を付している。   As shown in FIG. 8, the image display device 1 ′ of the present embodiment is substantially the same in other configurations except that the function of the control unit 26 ′ is different from the function of the control unit 26 in the first embodiment. Therefore, only the differences will be described. The same members as those in the first embodiment are denoted by the same numbers as those in the first embodiment.

本実施形態における制御部26’は、輝度検出部27と、空間周波数解析部31と、表示光量調整部32とを機能的に有している。なお、輝度検出部27は、第1の実施形態における輝度検出部27と略同様の機能を有するものである。   The control unit 26 ′ in the present embodiment functionally includes a luminance detection unit 27, a spatial frequency analysis unit 31, and a display light amount adjustment unit 32. Note that the luminance detection unit 27 has substantially the same function as the luminance detection unit 27 in the first embodiment.

空間周波数解析部31は、輝度検出部27により検出された輝度(以下、検出輝度という)が前記閾値α以上である場合に、撮像した画像(A/D変換部22によるA/D変換処理後の画像データに係る画像)の空間周波数の解析を行うものである。空間周波数解析部31による空間周波数の解析は、例えば次のようにして行われる。   The spatial frequency analysis unit 31 captures a captured image (after A / D conversion processing by the A / D conversion unit 22) when the luminance detected by the luminance detection unit 27 (hereinafter referred to as detection luminance) is equal to or higher than the threshold value α. The spatial frequency of the image) is analyzed. The spatial frequency analysis by the spatial frequency analysis unit 31 is performed as follows, for example.

図9に示すように、撮像素子12における撮像面の所定領域、マトリックス状に配列された画素のうち或る水平画素列L1における所定長さrの領域(以下、注目領域)に位置するG(緑)の画素G〜Gに注目し、その画素G〜Gの出力の平均値を算出して該平均値を閾値Gthとする。ここで、G(緑)のフィルタが設置された画素に着目しているのは、R(赤)やB(青)のフィルタに比して、透過する光源光の種類が最も多いためである。 As shown in FIG. 9, a predetermined region on the imaging surface of the image sensor 12 and a G ( Focusing on the green (G) pixels G 1 to G 5 , the average value of the outputs of the pixels G 1 to G 5 is calculated, and this average value is set as the threshold value Gth. Here, the reason why attention is paid to the pixel in which the G (green) filter is installed is that there are the most types of transmitted light source light compared to the R (red) and B (blue) filters. .

また、前記画素G〜Gの配列を横軸、前記閾値に対する各画素G〜Gの画素値の相対値を縦軸とするグラフを作成する。図10(a)〜(c)は、グラフを示す。このように作成したグラフにおいて、隣接する画素の相対値を結んでなる曲線が、前記閾値Gthと交差する回数で空間周波数を決定する。 Also, creating a graph with the pixel G 1 horizontal axis the sequence of ~G 5, the vertical axis the relative value of the pixel values of the pixels G 1 ~G 5 relative to the threshold. FIGS. 10A to 10C show graphs. In the graph created in this way, the spatial frequency is determined by the number of times that the curve formed by connecting the relative values of adjacent pixels intersects the threshold Gth.

空間周波数解析部31は、例えば図10(a)に示すグラフに対しては、曲線が前記閾値Gthと交差する回数が比較的少なく、空間周波数が低いと解析する。この場合、表示光量を変更する必要が無い。また、図10(b)に示すグラフに対しては、曲線が閾値Gthと交差する回数が比較的多く、空間周波数が高いと解析する。この場合、表示画像と背景とが混ざり合うことにより視認性が低下することが考えられることから、表示光量を変更(増加)する必要がある。図10(c)に示すグラフに対しては、曲線が閾値Gthと交差する回数が比較的多いが、閾値Gthを中心とする所定範囲Gw内で相対値が変化しており、画像の濃淡が少ないと解析する。この場合、表示光量を変更する必要が無い。なお、空間周波数解析部31は、空間周波数検出手段に相当するものである。   For example, for the graph shown in FIG. 10A, the spatial frequency analysis unit 31 analyzes that the number of times the curve intersects the threshold Gth is relatively small and the spatial frequency is low. In this case, there is no need to change the display light quantity. Further, for the graph shown in FIG. 10B, it is analyzed that the number of times the curve intersects the threshold Gth is relatively large and the spatial frequency is high. In this case, since it is considered that the visibility is lowered by mixing the display image and the background, it is necessary to change (increase) the display light amount. In the graph shown in FIG. 10C, the number of times the curve intersects the threshold value Gth is relatively large, but the relative value changes within a predetermined range Gw centered on the threshold value Gth, so that the density of the image is Analyzes when there are few. In this case, there is no need to change the display light quantity. The spatial frequency analysis unit 31 corresponds to a spatial frequency detection unit.

表示光量調整部32は、輝度検出部27による検出輝度と空間周波数解析部31による空間周波数の解析結果とに応じて、LCD18の表示光量を調整するものである。すなわち、表示光量調整部32は、検出輝度が前記閾値α以上である場合において、曲線が前記閾値Gthと交差する回数と所定範囲Gwとから算出される基準値βに対して解析した空間周波数が小さい場合(例えば図10(a),(c)に示すグラフの場合)には、LCD18の表示光量の調整は必要ないと判断する一方、解析した空間周波数が前記基準値β以上である場合(例えば図10(b)に示すグラフの場合)には、検出した輝度と空間周波数とに応じてLCD18の表示光量を調整するものである。表示光量調整部32は、前記表示光量調整手段に相当するものである。また、空間周波数解析部31及び表示光量調整部32は表示制御手段を構成するものである。   The display light amount adjustment unit 32 adjusts the display light amount of the LCD 18 according to the detection luminance by the luminance detection unit 27 and the spatial frequency analysis result by the spatial frequency analysis unit 31. That is, when the detected luminance is equal to or higher than the threshold value α, the display light amount adjustment unit 32 has a spatial frequency analyzed with respect to the reference value β calculated from the number of times the curve intersects the threshold value Gth and the predetermined range Gw. If it is small (for example, in the case of the graphs shown in FIGS. 10A and 10C), it is determined that adjustment of the display light quantity of the LCD 18 is not necessary, while the analyzed spatial frequency is equal to or higher than the reference value β ( For example, in the case of the graph shown in FIG. 10B, the amount of light displayed on the LCD 18 is adjusted according to the detected luminance and spatial frequency. The display light amount adjustment unit 32 corresponds to the display light amount adjustment unit. The spatial frequency analyzing unit 31 and the display light amount adjusting unit 32 constitute display control means.

図11は、本実施形態における表示処理のフローチャートである。   FIG. 11 is a flowchart of the display process in the present embodiment.

図11に示すように、図略の電源ボタンにより電源がオンされると(ステップ♯11でYES)、制御部26は、カメラユニット7(撮像素子12)に撮像動作を実行させる(ステップ♯12)。制御部26は、この撮像動作により得られた画像信号に基づいて輝度を測定する(ステップ♯13)。   As shown in FIG. 11, when the power is turned on by an unillustrated power button (YES in step # 11), the control unit 26 causes the camera unit 7 (image sensor 12) to perform an imaging operation (step # 12). ). The control unit 26 measures the luminance based on the image signal obtained by this imaging operation (step # 13).

そして、制御部26は、ステップ♯13で検出した輝度(以下、検出輝度という)と所定の閾値αとの大小関係を判断する(ステップ♯14)。その判断の結果、前記検出輝度が前記閾値α未満である場合には(ステップ♯14でNO)、ステップ♯12の処理に戻る一方、前記検出輝度が前記閾値α以上である場合には(ステップ♯14でYES)、前述のように撮像した画像の空間周波数の解析を行う(ステップ♯15)。   Then, the control unit 26 determines the magnitude relationship between the luminance detected in step # 13 (hereinafter referred to as detected luminance) and the predetermined threshold value α (step # 14). As a result of the determination, if the detected luminance is less than the threshold α (NO in step # 14), the process returns to step # 12, whereas if the detected luminance is equal to or higher than the threshold α (step In step # 15, the spatial frequency of the captured image is analyzed (step # 15).

そして、制御部26は、解析した空間周波数と該空間周波数についての基準値β(曲線が前記閾値Gthと交差する回数と所定範囲Gwとから算出される基準値)との大小関係を判断する(ステップ♯16)。その判断の結果、解析した空間周波数が前記基準値β未満の場合には(ステップ♯16でNO)、ステップ♯12に戻る一方、解析した空間周波数と該空間周波数についての基準値β以上の場合には(ステップ♯16でYES)、ステップ♯13で検出した輝度とステップ♯15で解析した空間周波数とに応じて、LCD18の表示光量を調整する(ステップ♯17)。   Then, the control unit 26 determines the magnitude relationship between the analyzed spatial frequency and the reference value β (reference value calculated from the number of times the curve intersects the threshold Gth and the predetermined range Gw) for the spatial frequency ( Step # 16). As a result of the determination, if the analyzed spatial frequency is less than the reference value β (NO in step # 16), the process returns to step # 12, while the analyzed spatial frequency and the reference value β for the spatial frequency are greater than or equal to the reference value β. (YES in step # 16), the amount of light displayed on the LCD 18 is adjusted according to the luminance detected in step # 13 and the spatial frequency analyzed in step # 15 (step # 17).

そして、電源ボタンにより電源がオフされるまで(ステップ♯18でNO)、制御部26は、カメラユニットによる1回の撮像動作ごとにステップ♯12〜♯18の処理を実行し、電源がオフされると(ステップ♯18でYES)、一連の処理を終了する。   Until the power is turned off by the power button (NO in step # 18), control unit 26 executes the processing of steps # 12 to # 18 for each imaging operation by the camera unit, and the power is turned off. Then (YES in step # 18), a series of processing is terminated.

このように、撮像した画像の空間周波数と輝度との両方に応じて表示光量を調整することでも、当該画像表示装置1の表示画像の良好な視認性を確保することができる。なお、撮像した画像の空間周波数と輝度との両方に応じて表示光量を調整するようにしたが、これに限らず、前記空間周波数のみに応じて表示光量を調整するようにしてもよい。   As described above, it is also possible to ensure good visibility of the display image of the image display device 1 by adjusting the display light amount according to both the spatial frequency and the luminance of the captured image. Although the display light amount is adjusted according to both the spatial frequency and the brightness of the captured image, the present invention is not limited to this, and the display light amount may be adjusted only according to the spatial frequency.

[2]前記第1の実施形態では、撮像した画像の色温度に応じて表示色を調整し、該画像の輝度に応じて表示光量を調整するようにしたが、画像の輝度に応じた表示光量の調整は行わず、画像の色温度に応じた表示色の調整のみを行う形態も想定できる。   [2] In the first embodiment, the display color is adjusted according to the color temperature of the captured image, and the display light amount is adjusted according to the luminance of the image. It is also possible to assume a form in which only the adjustment of the display color according to the color temperature of the image is performed without adjusting the light amount.

[3]前記各実施形態の画像表示装置は、両眼にそれぞれ画像を提供するものであるが、表示筐体8,9のうちいずれか一方のみを設置して、片側の眼球に画像を提供するものであってもよい。   [3] The image display device of each embodiment provides images to both eyes, but only one of the display housings 8 and 9 is installed to provide an image to one eyeball. You may do.

本発明に係る画像表示装置の第1の実施形態の構成を示す正面図である。1 is a front view showing a configuration of a first embodiment of an image display device according to the present invention. 図1に対する平面図である。It is a top view with respect to FIG. 図1に対する右側面図である。It is a right view with respect to FIG. カメラユニットの内部構成を示す断面図である。It is sectional drawing which shows the internal structure of a camera unit. 図2の矢印A−A線からみた矢視断面図である。It is arrow sectional drawing seen from the arrow AA line of FIG. 画像表示装置の電気的な構成を示すブロック図である。It is a block diagram which shows the electrical structure of an image display apparatus. 表示処理を示すフローチャートである。It is a flowchart which shows a display process. 本発明に係る画像表示装置の第2の実施形態の電気的な構成を示すブロック図である。It is a block diagram which shows the electric constitution of 2nd Embodiment of the image display apparatus which concerns on this invention. 空間周波数の解析方法を説明するための図である。It is a figure for demonstrating the analysis method of a spatial frequency. 画素G〜Gの配列を横軸、前記閾値に対する各画素G〜Gの画素値の相対値を縦軸とするグラフである。The horizontal axis an array of pixels G 1 ~G 5, a graph of the vertical axis the relative value of the pixel values of the pixels G 1 ~G 5 relative to the threshold. 第2の実施形態における表示処理のフローチャートである。It is a flowchart of the display process in 2nd Embodiment.

符号の説明Explanation of symbols

1 画像表示装置
7 カメラユニット
8,9 表示筐体
10 筐体
11 レンズユニット
12 撮像素子
13 撮像素子基板
14 ケーブル
15 筐体部
16 LED
17 コリメータレンズ
18 LCD
19 プリズム
19a 肉厚部
19b テーパ面
20 HOE
26 制御ユニット
27 輝度検出部
28 色温度検出部
29,32 表示光量調整部
30 表示色調整部
31 空間周波数解析部
DESCRIPTION OF SYMBOLS 1 Image display apparatus 7 Camera unit 8, 9 Display housing | casing 10 Housing | casing 11 Lens unit 12 Image pick-up element 13 Image pick-up element board | substrate 14 Cable 15 Case part 16 LED
17 Collimator lens 18 LCD
19 Prism 19a Thick part 19b Tapered surface 20 HOE
26 Control Unit 27 Luminance Detection Unit 28 Color Temperature Detection Units 29 and 32 Display Light Amount Adjustment Unit 30 Display Color Adjustment Unit 31 Spatial Frequency Analysis Unit

Claims (5)

頭部又は顔面に取り付けられ、使用者が外界をシースルー可能な画像表示装置であって、
画像を表示する表示手段と、
被写体の光像を受光して光電変換動作を行う撮像手段の撮像動作により得られた画像に応じて前記画像の表示態様を変更する表示態様変更手段と
を備えることを特徴とする画像表示装置。
An image display device that is attached to the head or face and allows the user to see through the outside world,
Display means for displaying an image;
An image display apparatus comprising: a display mode changing unit that changes a display mode of the image according to an image obtained by an imaging operation of an imaging unit that receives a light image of a subject and performs a photoelectric conversion operation.
前記表示態様変更手段は、
前記撮像手段の撮像動作により得られた画像の色温度を検出する色温度検出手段と、
前記色温度検出手段により検出された色温度に応じて画像の表示色を調整する表示色調整手段と、
前記表示色調整手段により表示色が調整された画像を前記表示手段に表示させる表示制御手段と
を備えることを特徴とする請求項1に記載の画像表示装置。
The display mode changing means includes
Color temperature detection means for detecting the color temperature of an image obtained by the imaging operation of the imaging means;
Display color adjusting means for adjusting the display color of the image according to the color temperature detected by the color temperature detecting means;
The image display apparatus according to claim 1, further comprising: a display control unit that causes the display unit to display an image whose display color has been adjusted by the display color adjustment unit.
前記画像の輝度を検出する輝度検出手段と、
前記輝度検出手段により検出された輝度に応じて前記表示手段の画像の表示光量を調整する表示光量調整手段とを更に備えることを特徴とする請求項2に記載の画像表示装置。
Luminance detection means for detecting the luminance of the image;
The image display apparatus according to claim 2, further comprising: a display light amount adjusting unit that adjusts a display light amount of the image on the display unit according to the luminance detected by the luminance detection unit.
前記表示態様変更手段は、
前記撮像手段の撮像動作により得られた画像の空間周波数を検出する空間周波数検出手段と、
前記空間周波数検出手段により検出された空間周波数に応じて前記表示手段の画像の表示光量を調整する表示光量調整手段と、
前記表示光量調整手段により表示光量が調整された画像を前記表示手段に表示させる表示制御手段と
を備えることを特徴とする請求項1に記載の画像表示装置。
The display mode changing means includes
Spatial frequency detection means for detecting a spatial frequency of an image obtained by the imaging operation of the imaging means;
Display light amount adjusting means for adjusting the display light amount of the image on the display means according to the spatial frequency detected by the spatial frequency detecting means;
The image display apparatus according to claim 1, further comprising a display control unit that causes the display unit to display an image whose display light amount has been adjusted by the display light amount adjustment unit.
前記画像の輝度を検出する輝度検出手段を更に備え、
前記表示光量調整手段は、前記空間周波数検出手段により検出された空間周波数と前記輝度検出手段により検出された輝度とに応じて画像の表示光量を調整することを特徴とする請求項4に記載の画像表示装置。
A luminance detecting means for detecting the luminance of the image;
5. The display light amount adjusting unit adjusts the display light amount of an image according to a spatial frequency detected by the spatial frequency detecting unit and a luminance detected by the luminance detecting unit. Image display device.
JP2005312746A 2005-10-27 2005-10-27 Image display device Pending JP2007121625A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005312746A JP2007121625A (en) 2005-10-27 2005-10-27 Image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005312746A JP2007121625A (en) 2005-10-27 2005-10-27 Image display device

Publications (1)

Publication Number Publication Date
JP2007121625A true JP2007121625A (en) 2007-05-17

Family

ID=38145543

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005312746A Pending JP2007121625A (en) 2005-10-27 2005-10-27 Image display device

Country Status (1)

Country Link
JP (1) JP2007121625A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010047212A1 (en) * 2008-10-20 2010-04-29 コニカミノルタオプト株式会社 Video display device
WO2012074091A1 (en) * 2010-12-03 2012-06-07 ブラザー工業株式会社 See-through image display device and see-through image display method
JP2013171074A (en) * 2012-02-17 2013-09-02 Nec Corp Automatic display adjustment apparatus and automatic display adjustment method
WO2015002377A1 (en) * 2013-07-02 2015-01-08 Lg Electronics Inc. Display device and method of controlling the same
WO2015174276A1 (en) * 2014-05-12 2015-11-19 シャープ株式会社 Image display device
WO2016039301A1 (en) * 2014-09-08 2016-03-17 国立大学法人東京大学 Image processing device and image processing method
JP2018163204A (en) * 2017-03-24 2018-10-18 ヤンマー株式会社 Head-mounted display device for color diagnosis, and display device for color diagnosis
JP2020129000A (en) * 2020-05-08 2020-08-27 ヤンマーパワーテクノロジー株式会社 Display for color diagnosis

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010047212A1 (en) * 2008-10-20 2010-04-29 コニカミノルタオプト株式会社 Video display device
WO2012074091A1 (en) * 2010-12-03 2012-06-07 ブラザー工業株式会社 See-through image display device and see-through image display method
JP2013171074A (en) * 2012-02-17 2013-09-02 Nec Corp Automatic display adjustment apparatus and automatic display adjustment method
WO2015002377A1 (en) * 2013-07-02 2015-01-08 Lg Electronics Inc. Display device and method of controlling the same
WO2015174276A1 (en) * 2014-05-12 2015-11-19 シャープ株式会社 Image display device
CN106461991A (en) * 2014-05-12 2017-02-22 夏普株式会社 Image display device
US9984612B2 (en) 2014-05-12 2018-05-29 Sharp Kabushiki Kaisha Image display device
WO2016039301A1 (en) * 2014-09-08 2016-03-17 国立大学法人東京大学 Image processing device and image processing method
US10055873B2 (en) 2014-09-08 2018-08-21 The University Of Tokyo Image processing device and image processing method
JP2018163204A (en) * 2017-03-24 2018-10-18 ヤンマー株式会社 Head-mounted display device for color diagnosis, and display device for color diagnosis
JP2020129000A (en) * 2020-05-08 2020-08-27 ヤンマーパワーテクノロジー株式会社 Display for color diagnosis
JP7025476B2 (en) 2020-05-08 2022-02-24 ヤンマーパワーテクノロジー株式会社 Display device for color diagnosis

Similar Documents

Publication Publication Date Title
JP5250834B2 (en) Head-mounted image display device
JP2007121625A (en) Image display device
JP2013534083A (en) 2-sensor imaging system
JP2007214964A (en) Video display device
JP2007129550A (en) Image display device
CN111432201A (en) Display system, control method thereof, information processing apparatus, and recording medium
JP4900277B2 (en) Head-mounted image display device
JP5251323B2 (en) Imaging device
JP2008009490A (en) Information input device
JP2007122340A (en) Image display system
JP2008123257A (en) Remote operation support system and display control method
JP2009192583A (en) Head-mounted type video display device
CN110088662B (en) Imaging system and method for generating background image and focusing image
JP2011101300A (en) Photographing device and remote operation support system
JP5199156B2 (en) Camera and wearable image display device
JP4952204B2 (en) Remote work support system and display method thereof
JP2007219069A (en) Image display
JP2008113317A (en) Remote operation support system
JP5948232B2 (en) Imaging device
US20060221200A1 (en) Display device and portable imaging device
JP2007199593A (en) Video display device
JP4020882B2 (en) Camera module focus adjustment device
JP2007193254A (en) Video display apparatus
JP2000132329A (en) Device and method for recognizing surface and virtual image solid synthesizer
JP2011109462A (en) Image transmission device, imaging device, and remote work support system