JP5249743B2 - Information display device - Google Patents

Information display device Download PDF

Info

Publication number
JP5249743B2
JP5249743B2 JP2008331207A JP2008331207A JP5249743B2 JP 5249743 B2 JP5249743 B2 JP 5249743B2 JP 2008331207 A JP2008331207 A JP 2008331207A JP 2008331207 A JP2008331207 A JP 2008331207A JP 5249743 B2 JP5249743 B2 JP 5249743B2
Authority
JP
Japan
Prior art keywords
user
display
head
image
half mirror
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008331207A
Other languages
Japanese (ja)
Other versions
JP2010016793A (en
Inventor
信吾 湯浅
百合子 上垣
逸人 松田
理恵 岡井
秀育 穐原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2008331207A priority Critical patent/JP5249743B2/en
Publication of JP2010016793A publication Critical patent/JP2010016793A/en
Application granted granted Critical
Publication of JP5249743B2 publication Critical patent/JP5249743B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、反射像を映すのみならず、鏡面に様々な情報を表示する情報表示装置に関する。   The present invention relates to an information display device that displays not only a reflected image but also various information on a mirror surface.

化粧設備において、ユーザの姿を映し出す機能を備える部材として、ミラー(鏡)の他に、当該ミラーを使用しているユーザを撮影するカメラと、ミラー面内に設けられた、カメラの撮影像を映すモニター画面とを備えるものが知られている(例えば、特許文献1参照)。特許文献1の化粧設備によれば、カメラで撮影したユーザの背後や上方などからの像もモニター画面で見ることができる。   In a makeup facility, as a member having a function of projecting a user's figure, in addition to a mirror (mirror), a camera for photographing a user who uses the mirror, and a photographed image of the camera provided in the mirror surface There is known one provided with a monitor screen for projection (see, for example, Patent Document 1). According to the cosmetic facility of Patent Document 1, images from behind or above the user taken by the camera can also be seen on the monitor screen.

また、入射する光の一部を反射し、一部を透過する機能を備えるハーフミラーを用いることにより、ハーフミラーの表側に居るユーザは、反射面に映し出される自分の姿の他に、ハーフミラーの裏側を透かして見ることができる。このハーフミラーの裏側に、入射する光線を拡散する機能を備える拡散層を重ね合わせた映像表示部と、ハーフミラーの裏側から拡散層に向けて光線を投射することで映像表示部に映像を投影するプロジェクタとを備える情報表示装置が知られている(例えば、特許文献2参照)。特許文献2の情報表示装置によれば、ハーフミラーが反射する光により形成される鏡像の他に、拡散層が拡散する光線により構成される映像を表示することができる。   In addition, by using a half mirror that has a function of reflecting a part of incident light and transmitting a part of the light, the user on the front side of the half mirror can see the half mirror You can see through the back side of. A video display unit with a diffusion layer that has a function of diffusing incident light rays on the back side of the half mirror, and a light beam is projected from the back side of the half mirror toward the diffusion layer to project an image on the video display unit. An information display device including a projector is known (for example, see Patent Document 2). According to the information display device of Patent Literature 2, in addition to the mirror image formed by the light reflected by the half mirror, it is possible to display an image composed of the light rays diffused by the diffusion layer.

更に、利用者を撮影するカメラと、カメラによって撮影された映像などをスクリーンに投影するプロジェクタを備え、ハーフミラーに正対した利用者のハーフミラーに対する相対的な位置に応じて、ハーフミラーによって反射される利用者の反射像、又はハーフミラーによって透過されるスクリーンに投影された映像を選択的に提示する映像提示システムが知られている(例えば、特許文献3参照)。
実開平5−15867号公報 特開2006−145645号公報 特開2007−166548号公報
In addition, a camera that captures the user and a projector that projects the image captured by the camera onto the screen are reflected by the half mirror according to the relative position of the user with respect to the half mirror. There has been known a video presentation system that selectively presents a reflected image of a user or a video projected on a screen transmitted by a half mirror (for example, see Patent Document 3).
Japanese Utility Model Publication No. 5-15867 JP 2006-145645 A JP 2007-166548 A

しかし、特許文献1の化粧設備では、映像を表示する位置が固定されているので、使用者によっては、鏡像の頭部と映像が重なってしまい、視認性が悪くなる。   However, since the position for displaying an image is fixed in the cosmetic facility of Patent Document 1, the head of the mirror image overlaps with the image depending on the user, resulting in poor visibility.

また、特許文献2の情報表示装置では、ハーフミラーの裏側に拡散層を重ね合わせた映像表示部に、ユーザの鏡像と当該ユーザを撮影した映像とを共に鏡像の頭部と映像とが重なることなく表示することができない。   Moreover, in the information display apparatus of patent document 2, the mirror image head and the video are overlapped with the mirror image of the user and the video shot of the user on the video display unit in which the diffusion layer is superimposed on the back side of the half mirror. Can not be displayed without.

特許文献3の映像提示システムでは、同一平面に映像と鏡像とを共に鏡像の頭部と映像とが重なることなく表示させることは出来ない。   In the video presentation system of Patent Document 3, it is impossible to display the video and the mirror image on the same plane without overlapping the head of the mirror image and the video.

本発明は、上記問題点を解決するために成されたものであり、その目的は、ハーフミラー像における少なくともユーザの頭部と映像とが重なることなく鏡像及び当該ユーザを撮影した映像を表示する情報表示装置を提供することである。   The present invention has been made to solve the above-described problems, and an object of the present invention is to display a mirror image and an image obtained by photographing the user without overlapping at least the user's head and the image in the half mirror image. It is to provide an information display device.

本発明の情報表示装置は、ユーザの顔部の映像を撮影するカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、少なくともユーザの頭部位置を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、鏡像表示位置検出手段は、ユーザの顔面部の映像に基づいて、ハーフミラー像におけるユーザの頭部の位置及び大きさを検出することを特徴とする。 Information display device of the present invention includes a camera for capturing an image of the face surface section of the user, and a display means for the camera to display the image captured, a half mirror superimposed on the display surface of the display unit, at least the user's head User position detection means for detecting the position of the part, mirror image display position detection means for detecting the display position of the user's head in the half mirror image from the user's head position, and display of the head detected by the mirror image display position detection means A display position control means for controlling the display position of the video photographed by the camera so that the video photographed by the camera and at least the user's head in the half mirror image do not overlap based on the position, and a mirror image display position detection means Is characterized by detecting the position and size of the user's head in the half-mirror image based on the image of the user's face .

本発明によれば、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。 According to the onset bright, the display unit superposed half mirror, and at least the head and the image of both image half mirror and a video taken the half mirror image and the user of the user overlaps the display surface of the display means Can be displayed without any problem.

本発明の情報表示装置において、ユーザ位置検出手段は、ユーザとハーフミラーとの距離を求める距離測定手段を備え、鏡像表示位置検出手段は、当該距離に基づいてユーザの頭部の面積を特定してもよい。 In the information display device of the present invention, Yu chromatography The position detecting means includes distance measuring means for obtaining a distance between the user and the half mirror, mirror image display position detection means, the area of the head of the user based on the distance You may specify.

本発明の情報表示装置は、ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のうち少なくとも1つの映像を撮影するカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、少なくともユーザの頭部位置を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、表示位置制御手段は、カメラが撮影した映像をハーフミラー像と同じ大きさに表示面積を制御して表示することを特徴とする本発明によれば、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。 An information display device according to the present invention includes a camera that captures at least one image of the user's top, back, face, left and right heads, display means that displays images captured by the camera, and a display. A half mirror superimposed on the display surface of the means, a user position detecting means for detecting at least the user's head position, and a mirror image display position for detecting the display position of the user's head in the half mirror image from the user's head position Based on the display position of the head detected by the detection means and the mirror image display position detection means, the display position of the video shot by the camera so that the video shot by the camera and at least the user's head in the half mirror image do not overlap and a display position control means for controlling the display position control means controls the display area of the video camera is recorded on the same size as the half mirror image table Characterized in that it. According to the present invention, at least the head of the half mirror image and the video overlap each other on the display unit in which the half mirror is superimposed on the display surface of the display unit. Can be displayed.

本発明の情報表示装置はユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のうち少なくとも1つの映像を撮影するカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、カメラが撮影した映像からハーフミラーに対するユーザの頭部の位置及び距離を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段と、ユーザ位置検出手段が検出した位置及び距離から表示面上におけるユーザの視野範囲を推定する視野判断手段とを備え、表示位置制御手段は、視野判断手段が推定したユーザの視野範囲に基づいて、前記ユーザの頭部の鏡像を見るユーザの同一視野範囲内にカメラが撮影した映像を表示することを特徴とする。これにより、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。また、ユーザの映像に対する視認性が向上する。ここで「同一視野範囲」は、顔を動かさず視線の小さな移動で見ることができる範囲等を示す。 An information display device according to the present invention includes a camera that captures at least one image of the user's top, back, face, left and right heads, display means that displays images captured by the camera, and a display. A half mirror superimposed on the display surface of the means, a user position detecting means for detecting the position and distance of the user's head relative to the half mirror from the image captured by the camera, and the user's position in the half mirror image from the user's head position. Based on the mirror image display position detection means for detecting the display position of the head and the display position of the head detected by the mirror image display position detection means, the image captured by the camera overlaps at least the user's head in the half mirror image. a display position control means for the camera so as not to control the display position of the image captured, the display surface on the position and distance of the user position detection unit detects Definitive Bei example a field determination means for estimating a field of view of the user, the display position control means, based on the field of view of the user field of view determination means is estimated, the same field of view of the user viewing the mirror image of the head of the user wherein the camera displays an image captured within. As a result, the display unit in which the half mirror is superimposed on the display surface of the display means displays both the user's half mirror image and the video captured by the user without overlapping at least the head of the half mirror image and the video. be able to. Moreover, the visibility with respect to a user's image | video improves. Here, the “same visual field range” indicates a range that can be viewed with a small movement of the line of sight without moving the face.

本発明の情報表示装置は、ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のそれぞれの映像を撮影する複数のカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、少なくともユーザの頭部位置を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、表示位置制御手段は、ハーフミラー像におけるユーザの頭部を複数のカメラが撮影した複数の映像で囲んで表示することを特徴とする。これにより、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。また、ユーザの上半身の鏡像を見るユーザの同一視野内に映像を表示することができる。更に、表示位置制御手段は、ハーフミラー像におけるユーザの頭部の上側に頭頂部の映像、ハーフミラー像におけるユーザの頭部の左側に左側頭部の映像、ハーフミラー像におけるユーザの頭部の右側に右側頭部の映像、及びハーフミラー像におけるユーザの頭部の下側に後頭部の映像を表示しても構わない。ハーフミラー像の頭部に対する各映像の表示位置を指定することにより、各映像が頭部のどの部位であるかをユーザに容易に認識させることができる。 An information display device according to the present invention includes a plurality of cameras that capture images of the user's top, back, face, left and right heads, display means that displays images captured by the camera, and display A half mirror superimposed on the display surface of the means, a user position detecting means for detecting at least the user's head position, and a mirror image display position for detecting the display position of the user's head in the half mirror image from the user's head position Based on the display position of the head detected by the detection means and the mirror image display position detection means, the display position of the video shot by the camera so that the video shot by the camera and at least the user's head in the half mirror image do not overlap and a display position control means for controlling the display position control means, surrounded by a plurality of images of the user's head a plurality of cameras were taken in the half-mirror image Characterized in that it displays. As a result, the display unit in which the half mirror is superimposed on the display surface of the display means displays both the user's half mirror image and the video captured by the user without overlapping at least the head of the half mirror image and the video. be able to. Moreover, an image can be displayed in the same visual field of the user who sees a mirror image of the upper body of the user. Further, the display position control means includes an image of the top of the head above the user's head in the half mirror image, an image of the left head on the left side of the user's head in the half mirror image, and the image of the user's head in the half mirror image. The right head image may be displayed on the right side, and the back head image may be displayed below the user's head in the half mirror image. By designating the display position of each image with respect to the head of the half mirror image, the user can easily recognize which part of the head each image is.

本発明の情報表示装置において、表示手段は生活情報映像を表示し、表示位置制御手段は、生活情報映像とハーフミラー像における少なくともユーザの頭部及びカメラが撮影した映像とが重ならないように生活情報映像の表示位置を制御してもよい。更に、情報表示装置は、ユーザの行動を検出する行動検出手段を更に備え、表示手段は、生活情報映像として、検出されたユーザの行動に関連する映像を表示してもよい。ユーザの行動に関連する映像、例えば、天気予報、紫外線情報、スケジュール、タイムキーパなどを表示することにより、ユーザに有益な情報を教示することができる。 In the information display device of the present invention, the display means displays the life information video, and the display position control means lives so that the life information video and at least the user's head and the video taken by the camera in the half mirror image do not overlap. The display position of the information video may be controlled. Furthermore, the information display device may further include a behavior detection unit that detects the user's behavior, and the display unit may display a video related to the detected user's behavior as the life information video. By displaying images related to the user's behavior, such as weather forecast, ultraviolet information, schedule, time keeper, etc., useful information can be taught to the user.

本発明によれば、ハーフミラー像における少なくともユーザの頭部と映像とが重なることなく鏡像及び当該ユーザを撮影した映像を表示する情報表示装置を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the information display apparatus which displays a mirror image and the image | video which image | photographed the said user can be provided, without the user's head and image | video overlapping at least in a half mirror image.

以下図面を参照して、本発明の実施の形態を説明する。図面の記載において同一部分には同一符号を付している。
(第1の実施の形態)
図1を参照して、本発明の第1の実施の形態に係わる情報表示装置の構成を説明する。情報表示装置は、映像を表示する表示手段の一例としてのフラットパネルディスプレイ24と、フラットパネルディスプレイ24の表示面に直接に重ね合わされたハーフミラー21と、フラットパネルディスプレイ24の表側FSに居るユーザPの頭頂部、後頭部及び顔面部各々の映像を撮影する複数のカメラ14a〜14cと、カメラ14a〜14cを制御するコンピュータ13とを備える。図1は、フラットパネルディスプレイ24の表示面に垂直な断面における各部材の配置例を示している。
Embodiments of the present invention will be described below with reference to the drawings. In the description of the drawings, the same parts are denoted by the same reference numerals.
(First embodiment)
With reference to FIG. 1, the structure of the information display apparatus concerning the 1st Embodiment of this invention is demonstrated. The information display device includes a flat panel display 24 as an example of display means for displaying an image, a half mirror 21 directly superimposed on the display surface of the flat panel display 24, and a user P who is on the front side FS of the flat panel display 24. A plurality of cameras 14 a to 14 c that capture images of the top of the R , the back of the head, and the face, and a computer 13 that controls the cameras 14 a to 14 c are provided. FIG. 1 shows an arrangement example of each member in a cross section perpendicular to the display surface of the flat panel display 24.

フラットパネルディスプレイ24として、例えば、プラズマディスプレイパネル(PDP)及び液晶表示装置(LCD)を用いる。ハーフミラー21は、入射する光の一部を反射し、一部を透過する性質を有する。フラットパネルディスプレイ24及びハーフミラー21は表示ユニット15を構成している。   As the flat panel display 24, for example, a plasma display panel (PDP) and a liquid crystal display device (LCD) are used. The half mirror 21 has a property of reflecting a part of incident light and transmitting a part thereof. The flat panel display 24 and the half mirror 21 constitute a display unit 15.

ハーフミラー21の上記性質を利用することにより、フラットパネルディスプレイ24の表側FSにおいてハーフミラー21が反射する光により作り出されるユーザPの鏡像と、フラットパネルディスプレイ24に表示される映像とがフラットパネルディスプレイ24の表側FSへ向けて表示される。よって、フラットパネルディスプレイ24の表側FSに居るユーザPは、自己の鏡像及び映像を視認することができる。 By utilizing the above properties of the half mirror 21, a mirror image of the user P R of the half mirror 21 is created by the light reflected at the front side FS of the flat panel display 24, the video and a flat panel displayed on the flat panel display 24 It is displayed toward the front side FS of the display 24. Thus, the user P R which are in the front side FS of the flat panel display 24 can be visually recognized its own mirror image and video.

カメラ14a〜14cとして、USBケーブルにより通信が可能なUSBカメラを用いることができる。この場合、カメラ14a〜14cとコンピュータ13はUSBケーブルによりそれぞれ接続される。ハーフミラー21は、半透過膜シートを透明板の表面に貼り付けて形成してもよいし、金属膜を金属蒸着させて形成してもよい。フラットパネルディスプレイ24は、コンピュータ13から映像ケーブル或いは無線通信により映像データを受信し、映像データを解析して映像を表示する。   As the cameras 14a to 14c, USB cameras capable of communication using a USB cable can be used. In this case, the cameras 14a to 14c and the computer 13 are connected by a USB cable. The half mirror 21 may be formed by attaching a semi-permeable membrane sheet to the surface of the transparent plate, or may be formed by metal deposition of a metal film. The flat panel display 24 receives video data from the computer 13 via a video cable or wireless communication, analyzes the video data, and displays the video.

なお、図1は、ユーザPがフラットパネルディスプレイ24の表示面に対して正対している場合を示している。 Incidentally, FIG. 1 shows a case where the user P R is directly facing the display surface of the flat panel display 24.

図2を参照して、図1のフラットパネルディスプレイ24及びハーフミラー21を含む表示ユニット15の詳細な構成を説明する。表示ユニット15は、ハーフミラー21と、フラットパネルディスプレイ24と、フラットパネルディスプレイ24の形状に合わせて切り欠き部25aが形成された表示枠部25と、フラットパネルディスプレイ24の表示面に対向する面に接続される取付け金具26と、取付け金具26を通じてフラットパネルディスプレイ24が取付けられる取付け台27と、取付け台27とフラットパネルディスプレイ24の間に挿入されるスペーサ28a、28bとを備える。   A detailed configuration of the display unit 15 including the flat panel display 24 and the half mirror 21 of FIG. 1 will be described with reference to FIG. The display unit 15 includes a half mirror 21, a flat panel display 24, a display frame portion 25 in which a cutout portion 25 a is formed in accordance with the shape of the flat panel display 24, and a surface facing the display surface of the flat panel display 24. And a mounting base 27 to which the flat panel display 24 is mounted through the mounting bracket 26, and spacers 28a and 28b inserted between the mounting base 27 and the flat panel display 24.

フラットパネルディスプレイ24の表示面はハーフミラー21の面に直接重ね合わされ、フラットパネルディスプレイ24の外周は切り欠き部25aが形成された表示枠部25によって取り囲まれている。フラットパネルディスプレイ24は、その表示面に対向する面が取付け金具26を通じて取付け台27に固定されることにより、取付け台27に支持されている。また、縦横自在に配置可能なスペーサ28a、28bを用いて、フラットパネルディスプレイ24の表示面の向きをハーフミラー21の面に平行になるように調整して、フラットパネルディスプレイ24とハーフミラー21との密着性を高めている。この密着性を高めることにより、フラットパネルディスプレイ24に表示された映像のハーフミラー21による反射を抑制することができる。   The display surface of the flat panel display 24 is directly superimposed on the surface of the half mirror 21, and the outer periphery of the flat panel display 24 is surrounded by a display frame portion 25 in which a cutout portion 25a is formed. The flat panel display 24 is supported by the mounting base 27 by fixing the surface facing the display surface to the mounting base 27 through the mounting bracket 26. Further, the orientation of the display surface of the flat panel display 24 is adjusted to be parallel to the surface of the half mirror 21 by using spacers 28a and 28b that can be arranged vertically and horizontally, and the flat panel display 24 and the half mirror 21 To improve the adhesion. By improving the adhesion, reflection of the image displayed on the flat panel display 24 by the half mirror 21 can be suppressed.

図2では、スペーサ28a、28bが水平方向に向けて配置された例を示すが、フラットパネルディスプレイ24の表示面の傾きによっては、スペーサ28a、28bを垂直方向に向けて配置しても構わない。また、フラットパネルディスプレイ24に表示された映像のハーフミラー21による反射を更に抑制するために、フラットパネルディスプレイ24とハーフミラー21との間に液体を注入した部材を挿入して重ね合わせても構わない。また、フラットパネルディスプレイ24をその長辺が水平方向に向けて設置する場合を示すが、もちろん、長辺を垂直方向に向けて配置しても構わない。   Although FIG. 2 shows an example in which the spacers 28a and 28b are arranged in the horizontal direction, depending on the inclination of the display surface of the flat panel display 24, the spacers 28a and 28b may be arranged in the vertical direction. . Further, in order to further suppress the reflection of the image displayed on the flat panel display 24 by the half mirror 21, a member into which a liquid is injected may be inserted between the flat panel display 24 and the half mirror 21 and overlapped. Absent. Moreover, although the case where the long side is installed in the horizontal direction is shown in the flat panel display 24, it is a matter of course that the long side may be arranged in the vertical direction.

図3は、図1のフラットパネルディスプレイ24の表示面を表側FSから見た平面図である。情報表示装置は、フラットパネルディスプレイ24の表側FSに居るユーザPの左側頭部、右側頭部各々の映像を撮影するカメラ14d、14eを更に備える。カメラ14d、14eは、カメラ14a〜14cと同様にしてUSBカメラを用いることができる。 FIG. 3 is a plan view of the display surface of the flat panel display 24 of FIG. 1 viewed from the front side FS. Information display apparatus further comprises left temporal user P R which are in the front side FS of the flat panel display 24, a camera 14d for shooting the image of the right temporal each of 14e. As the cameras 14d and 14e, USB cameras can be used in the same manner as the cameras 14a to 14c.

図4は、図1のコンピュータ13の構成を示すブロック図である。コンピュータ13は、データの演算処理機能を備える処理演算部(CPU)31と、データを格納するデータベース32と、インターネット51、情報端末52、及びカメラ14a〜14eとの間でデータの入出力を制御する入出力部33を備える。   FIG. 4 is a block diagram showing a configuration of the computer 13 of FIG. The computer 13 controls input / output of data among a processing arithmetic unit (CPU) 31 having a data arithmetic processing function, a database 32 for storing data, the Internet 51, the information terminal 52, and the cameras 14a to 14e. The input / output unit 33 is provided.

処理演算部31は、カメラ14a〜14eの動作を制御するカメラ制御部36と、少なくともユーザPの頭部位置を検出するユーザ位置検出部と、検出されたユーザPの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出部40(鏡像表示位置検出手段)と、カメラ14a〜14eが撮影したユーザPの映像からハーフミラー21に対するユーザPの頭部の位置及び距離を検出するユーザ位置検出部37(ユーザ位置検出手段)と、ユーザ位置検出部37が検出したユーザPの頭部の位置及び距離からフラットパネルディスプレイ24の表示面上におけるユーザPの視野範囲を推定する視野判断部44(視野判断手段)と、フラットパネルディスプレイ24の動作を制御する表示制御部38と、ユーザPによる操作を受け付けるユーザインターフェース部39(操作手段)と、ユーザPの行動を検出する行動検出部45(行動検出手段)とを備える。 Processing computation section 31 includes a camera control unit 36 for controlling the operation of the camera 14a-14e, the user position detection unit for detecting a head position of at least the user P R, half from the head position of the detected user P R a mirror display position detecting section 40 that detects the display position of the user's head in the mirror image (mirror image display position detection means), the head of the user P R for the half mirror 21 from the user P R video camera 14a~14e have taken a user position detection unit 37 for detecting the position and distance of the parts (user position detection means), a user from the location and distance of the head of the user P R on the display surface of the flat panel display 24 by the user position detection unit 37 has detected a field determination unit 44 that estimates the visual field range of P R (field determination means), a display control for controlling the operation of the flat panel display 24 Includes a 38, a user interface unit 39 for receiving an operation by the user P R and (operation means), behavior detecting unit 45 for detecting the behavior of the user P R and (action detection means).

カメラ制御部36は、カメラ14a〜14eが撮影する映像の撮影面積の大きさを制御する撮影面積制御部46を有する。「撮影面積の大きさを制御する」ことの例としては、カメラ14a〜14eのズーム機能を用いて映像を拡大したり、縮小したりすることが挙げられる。   The camera control unit 36 includes a shooting area control unit 46 that controls the size of the shooting area of the images shot by the cameras 14a to 14e. An example of “controlling the size of the shooting area” includes enlarging or reducing an image using the zoom function of the cameras 14a to 14e.

表示制御部38は、各カメラ14a〜14eが撮影した映像の表示位置を制御する表示位置制御部47と、各カメラ14a〜14eが撮影した映像の表示面積の大きさを制御する表示面積制御部48とを備える。ここで、「映像の表示位置」とは、フラットパネルディスプレイ24の表示面内における映像の表示位置である。また、「映像の表示面積の大きさを制御する」ことは、各カメラ14a〜14eが撮影した映像の表示面積の大きさを画像処理により大きくしたり、小さくしたりすることであり、カメラ14a〜14eのズーム機能を用いる等によって撮影面積の大きさを制御することと異なる概念である。   The display control unit 38 includes a display position control unit 47 that controls the display positions of the images captured by the cameras 14a to 14e, and a display area control unit that controls the display area size of the images captured by the cameras 14a to 14e. 48. Here, the “video display position” is a video display position within the display surface of the flat panel display 24. Further, “controlling the size of the display area of the video” means that the size of the display area of the video captured by each of the cameras 14a to 14e is increased or decreased by image processing. This is a different concept from controlling the size of the photographing area by using a zoom function of ˜14e.

データベース32は、カメラ14a〜14eが撮影した映像のデータを格納する映像データ部41と、ユーザPに関連する情報を格納したユーザ関連データ部42と、処理演算部31が行う演算処理のアルゴリズムを規定したコンピュータプログラムのデータを格納したプログラムデータ部43とを備える。コンピュータプログラムには、カメラで撮影した映像をフラットパネルディスプレイ24に表示するためのアプリケーションソフトウェア(FLASH、C++などのプログラミング言語で記述されたもの)やオペレーティングシステム(OS)等の基本ソフトウェアが含まれる。 Database 32, a video data section 41 of the camera 14a~14e stores data of images captured, and user-related data portion 42 stores information related to user P R, the algorithm of the arithmetic processing processing computation section 31 performs And a program data section 43 that stores data of a computer program that defines the above. The computer program includes basic software such as application software (written in a programming language such as FLASH or C ++) for displaying video captured by the camera on the flat panel display 24 and an operating system (OS).

ユーザ位置検出部は、ユーザの顔面部を撮影するカメラ14cを備える。ユーザ位置検出部は、ユーザとハーフミラー21との距離を求める距離測定手段を備え、鏡像表示位置検出部40は、当該距離に基づいてユーザの頭部の面積を特定する。鏡像表示位置検出部40は、ユーザの顔面部の映像に基づいて、ハーフミラー像におけるユーザの頭部の位置及び大きさを検出する。   The user position detection unit includes a camera 14c that captures an image of the user's face. The user position detection unit includes a distance measurement unit that obtains the distance between the user and the half mirror 21, and the mirror image display position detection unit 40 specifies the area of the user's head based on the distance. The mirror image display position detection unit 40 detects the position and size of the user's head in the half mirror image based on the video of the user's face.

この他にも、例えば、フラットパネルディスプレイ24の近傍にある一点から出力される音波やレーザを頭部で反射させ、反射された音波やレーザを用いて頭部の3次元的な位置を検出する距離画像計やレーザ光切断法等を用いて、ユーザの頭部位置を検出してもよい。また、ある程度離れた位置に設置された2台のカメラで顔画像をステレオ式に認識することにより、ユーザPの頭部の3次元的な位置を検出することができる。例えば、ユーザPの正面に配置されたカメラ14cと左側に配置されたカメラ14dの組み合わせ、或いは、ユーザPの正面に配置されたカメラ14cと右側に配置されたカメラ14eの組み合わせによって頭部位置を認識すればよい。更に、頭部の3次元的な位置から座標変換することにより、フラットパネルディスプレイ24においてハーフミラー像の頭部が映し出される位置を特定することができる。特定されたハーフミラー像の頭部が映し出される位置に基づいて、表示位置制御部47は、ユーザPのハーフミラー像における少なくともユーザの頭部とカメラ14a〜14dが撮影した映像とが重ならないように、カメラ14a〜14dが撮影した映像の表示位置を制御する。 In addition to this, for example, a sound wave or laser output from one point in the vicinity of the flat panel display 24 is reflected by the head, and the three-dimensional position of the head is detected using the reflected sound wave or laser. The user's head position may be detected using a distance image meter, a laser beam cutting method, or the like. Moreover, by recognizing the face image to a stereoscopic by two cameras installed in some distance position, it is possible to detect the three-dimensional position of the head of the user P R. For example, the user P combination of disposed in front of the R camera 14c and the camera 14d which are disposed on the left side, or the head by a combination of a camera 14e arranged in the camera 14c and the right side, which is disposed on the front of the user P R What is necessary is just to recognize a position. Further, by converting the coordinates from the three-dimensional position of the head, the position where the head of the half mirror image is projected on the flat panel display 24 can be specified. Based on the position where the head of the half mirror images identified projected, the display position control unit 47 does not overlap the image of at least the user's head and the camera 14a~14d is taken in the half-mirror image of the user P R As described above, the display positions of the images taken by the cameras 14a to 14d are controlled.

更に、ユーザ位置検出部37がハーフミラー21に対するユーザPの頭部の位置及び距離を検出し、検出した位置及び距離から視野判断部44がフラットパネルディスプレイ24の表示面上におけるユーザPの視野範囲を推定する。そして、表示位置制御部47は、視野判断部44が推定したユーザPの視野範囲に基づいて、ユーザPの頭部の鏡像を見るユーザPの同一視野範囲内にカメラ14a〜14dが撮影した映像を表示する。同一視野範囲Aの一例を図3に示す。 Furthermore, the user position detection unit 37 detects the position and distance of the head of the user P R for the half mirror 21, the field determination unit 44 from the detected position and distance of the user P R on the display surface of the flat panel display 24 Estimate the field of view. Then, the display position control unit 47 based on the field of view of the user P R viewing determination unit 44 is estimated, the camera 14a~14d in the same field of view of the user P R See mirror image of the head of the user P R Display the shot video. An example of the same visual field range A is shown in FIG.

ユーザインターフェース部39は、ユーザPによるコントローラのボタン操作を受け付けたり、ユーザPのジェスチャーを認識するジェスチャー認識システムであったり、あるいは、ユーザPが発する音声を認識する音声認識システムである。 The user interface unit 39, and receives a button operation of the controller by the user P R, or a user P R gesture recognition system for recognizing a gesture, or a speech recognition system for recognizing a voice user P R emitted.

行動検出部45は、ユーザインターフェース部39の音声認識機能を用いた音声入力やボタン入力によってユーザPの行動を検出してもよいし、自らの判断でユーザPの行動を検出しても構わない。 Action detecting section 45 may detect user behavior P R by voice input or a button input using a voice recognition function of the user interface unit 39, be detected user behavior P R at its discretion I do not care.

次に、図5を参照して、図4のCPU31の動作例を説明する。   Next, an example of the operation of the CPU 31 in FIG. 4 will be described with reference to FIG.

(イ)先ずS01段階において、カメラ14a〜14dが撮影したユーザPの頭部のカメラ映像が入力される。S03段階に進み、鏡像表示位置検出部40は、カメラ映像におけるユーザの頭部の座標を特定する。例えば、カメラ14cの中心軸を(0,0)とし、カメラ14cが撮影したカメラ映像における両眼の中点の座標をそれぞれ特定する。 (A) First, in step S01, the camera 14a~14d camera image of the head of the user P R taken are input. Proceeding to step S03, the mirror image display position detection unit 40 identifies the coordinates of the user's head in the camera video. For example, the central axis of the camera 14c is set to (0, 0), and the coordinates of the middle point of both eyes in the camera image captured by the camera 14c are specified.

(ロ)S05段階に進み、ユーザ位置検出部37は、カメラ14d及びカメラ14eが撮影したユーザPの映像における頭部のカメラ座標からハーフミラー21とユーザPの頭部との距離を検出する。或いは、ハーフミラー21の上部あるいは近傍に新たに設けたレーザや超音波などを用いた距離測定手段を用いて、ユーザとハーフミラー21との距離を特定しても構わない。また或いは、距離画像カメラ(x、y、z)を用いたり、2台以上のカメラからなるステレオ式カメラを用いて、(イ)及び(ロ)を同時に行ってもよい。なお、所定の床面に足跡のマークを付し、ユーザに対して立ち位置を示している場合、ユーザの頭部とハーフミラー21との距離が固定されるので、S05段階は不要となる。 (B) the process proceeds to S05 step, the user position detection unit 37, a camera 14d and the camera 14e detect the distance between the head of the user P half mirror 21 from the head of the camera coordinate in the images of the R and the user P R taken To do. Alternatively, the distance between the user and the half mirror 21 may be specified using distance measuring means using a laser or ultrasonic wave newly provided on or near the half mirror 21. Alternatively, (b) and (b) may be performed simultaneously using a range image camera (x, y, z) or a stereo camera composed of two or more cameras. When a footprint mark is added to a predetermined floor surface to indicate the standing position for the user, the distance between the user's head and the half mirror 21 is fixed, so step S05 is not necessary.

(ハ)S07段階に進み、鏡像表示位置検出部40は、S05段階で求めたユーザとハーフミラー21との距離に基づいて、S03段階で特定されたカメラ映像における頭部の座標を、ハーフミラー像における頭部の表示位置へ変換する。つまり、カメラ映像における両眼中点の座標を、両眼の中点から地面に対して水平な線がハーフミラー面と直角に交わる位置へ変換する。なぜなら、例えばカメラ14cが撮影したカメラ映像における両眼の座標が同じであっても、ユーザとハーフミラー21との距離が異なれば、ハーフミラー像における両眼の表示位置は変化するからである。なお、カメラ中心軸上では、距離が異なってもハーフミラー像における両眼の表示位置は変化しないが、カメラ中心軸から離れるほど変化は大きくなる。カメラ14cの中心軸からのずれ角及びユーザとカメラ14c或いはハーフミラー21との距離に応じて変化する変換係数を予め定めてそのデータを例えばテーブルとして記憶しておけばよい。また、頭部輪郭を総て座標変換しても良いが、両眼中心などの代表点のみの座標を変換しても構わない。次に、鏡像表示位置検出部40は、S05段階で求めたハーフミラー21とユーザPの頭部との距離に基づいて、ユーザの顔面部のカメラ映像から、ユーザの頭部(顔面部)の面積を特定する。ここで、ハーフミラー像における頭部の面積は、ユーザの頭部(又は顔面部)の面積の1/4の面積となるので、S07段階で座標変換したハーフミラー像における両眼中点の位置に、ユーザの頭部(又は顔面部)の1/4の面積でハーフミラー像が見えることになる。この処理によって、鏡像表示位置検出部40は、ハーフミラー像の表示位置を検出することができる。 (C) Proceeding to step S07, the mirror image display position detection unit 40 determines the coordinates of the head in the camera image specified in step S03 based on the distance between the user and the half mirror 21 obtained in step S05. Convert to the display position of the head in the image. That is, the coordinates of the binocular midpoint in the camera image are converted to a position where a line horizontal from the midpoint of both eyes to the ground intersects with the half mirror surface at a right angle. This is because, for example, even if the coordinates of both eyes in the camera image taken by the camera 14c are the same, if the distance between the user and the half mirror 21 is different, the display position of both eyes in the half mirror image changes. On the camera central axis, the display position of both eyes in the half mirror image does not change even if the distance is different, but the change increases as the distance from the camera central axis increases. A conversion coefficient that changes in accordance with the deviation angle from the central axis of the camera 14c and the distance between the user and the camera 14c or the half mirror 21 may be determined in advance, and the data may be stored as a table, for example. Further, the coordinates of all head contours may be converted, but the coordinates of only representative points such as the center of both eyes may be converted. Next, the mirror image display position detecting section 40, based on the distance between the head of the half mirror 21 and the user P R determined in S05 step, the camera image of the face of the user, the user's head (face part) Specify the area. Here, the area of the head in the half mirror image is ¼ of the area of the user's head (or face), and therefore, at the position of the middle point of both eyes in the half mirror image coordinate-converted in step S07. A half mirror image can be seen in an area of 1/4 of the user's head (or face). By this processing, the mirror image display position detection unit 40 can detect the display position of the half mirror image.

(ニ)S09段階に進み、視野判断部44は、S05段階で検出したハーフミラー21とユーザPの頭部との距離及び位置からフラットパネルディスプレイ24の表示面上におけるユーザPの視野範囲を推定する。視野範囲の定義及び視野範囲の推定は一般的な人間の視野を基準に予め設定されている。 (D) the process proceeds to S09 step, field determination unit 44, field of view of the user P R on the display surface of the flat panel display 24 from the distance and position of the head of the half mirror 21 and the user P R detected in S05 step Is estimated. The definition of the visual field range and the estimation of the visual field range are set in advance based on a general human visual field.

(ホ)S11段階に進み、表示位置制御部47は、カメラ14a〜14dが撮影した各ユーザ映像をフラットパネルディスプレイ24に表示させる。この時、表示位置制御部47は、S07段階で特定されたハーフミラー像の頭部が映し出される位置に基づいて、ハーフミラー像における少なくともユーザの頭部とカメラ14a〜14dが撮影した映像とが重ならないように、カメラ14a〜14dが撮影した映像の表示位置を制御する。また、表示位置制御部47は、S09段階で推定したユーザPの視野範囲に基づいて、ユーザPの頭部の鏡像を見るユーザPの同一視野範囲内にカメラ14a〜14dが撮影した映像が表示されるように、カメラ14a〜14dが撮影した映像の表示位置を制御する。
(第1の表示例)
図6は、図1のハーフミラー21の表側FSに表示されるユーザPの鏡像P及び映像T、B、R、Lの第1の表示例を示す平面図である。ユーザPの鏡像Pは、ハーフミラー21の表側FSにおいてハーフミラー21が反射する光により作り出される、左右反転された像である。図1においてユーザPは表示面に正対しているため、図6の例においてユーザPの鏡像Pの一部に顔面が映し出されている。また、図4の表示位置制御部47は、ユーザPの顔面を中心として上下左右方向にそれぞれ、カメラ14a、14b、14d、14eが撮影した映像(頭頂部映像T、後頭部映像B、右側頭部映像R、及び左側頭部映像L)を表示している。更に、図4の表示位置制御部47は、自己の鏡像Pの顔面部分を見ているユーザPの同一視野範囲A内に頭頂部映像T、後頭部映像B、右側頭部映像R及び左側頭部映像L各々を同時に表示する。
(E) Proceeding to step S11, the display position controller 47 causes the flat panel display 24 to display the respective user images captured by the cameras 14a to 14d. At this time, based on the position where the head of the half mirror image specified in step S07 is displayed, the display position control unit 47 obtains at least the user's head in the half mirror image and the video captured by the cameras 14a to 14d. The display positions of the images taken by the cameras 14a to 14d are controlled so as not to overlap. Further, the display position control unit 47 based on the field of view of the user P R estimated in S09 step, the camera 14a~14d is taken in the same field of view of the user P R See mirror image of the head of the user P R The display positions of the images taken by the cameras 14a to 14d are controlled so that the images are displayed.
(First display example)
Figure 6 is a plan view showing a mirror image P M and image T P of the user P R that is displayed on the front side FS of the half mirror 21 of FIG. 1, B P, R P, the first display example of L P. Mirror image P M user P R is the half mirror 21 is created by the light reflected at the front side FS of the half mirror 21, a left-right inverted image. Since the user P R are faces the display surface in FIG. 1, the face is displayed on a part of the mirror image P M user P R in the example of FIG. Further, the display position control unit 47 of FIG. 4, the user P respectively face in the vertical and horizontal directions about the R, cameras 14a, 14b, 14d, image 14e is captured (parietal image T P, occipital video B P, The right head image R P and the left head image L P ) are displayed. Further, the display position control unit 47 of FIG. 4, the top portion image T P in the same field of view range A of the user P R watching a facial feature of the own mirror image P M, occipital video B P, right temporal image R Each of P and left-side head image L P is displayed simultaneously.

頭頂部映像T、後頭部映像B、右側頭部映像R及び左側頭部映像L各々の表示位置は、例えば図6に示す位置に予め設定されている場合(第1の設定)と、鏡像Pの顔面部分の表示位置に応じて、ユーザPの同一視野内に位置するように調整される場合(第2の設定)とがある。ユーザPは図4のユーザインターフェース部39を介していずれかの設定を選択することができる。 Parietal image T P, occipital video B P, the right temporal image R P and the display position of the left temporal image L P each, for example, if it is preset in the position shown in FIG. 6 (a first configuration) , in accordance with the display position of the face portion of the mirror image P M, and a case (second configuration) to be adjusted to lie within the same visual field of the user P R. The user P R can select any of the settings through the user interface unit 39 of FIG.

第2の設定を選択した場合、図5に示したフローチャートに従って、ハーフミラー像における頭部の位置を検出し、ハーフミラー像の頭部が映し出される位置を中心として上下左右方向に各映像T、B、R、Lを表示するように、各映像T、B、R、Lの表示位置を制御すればよい。これにより、表示ユニット15に、ハーフミラー像の顔面部分を複数のカメラ14が撮影した複数の映像T、B、R、Lで囲んで表示させることができる。更に、表示ユニット15に、ハーフミラー像の顔面部分の上側に頭頂部の映像T、ハーフミラー像の左側に左側頭部の映像L、ハーフミラー像の右側に右側頭部の映像R、及びハーフミラー像の下側に後頭部の映像Bを表示させることができる。 If you choose the second set, according to the flowchart shown in FIG. 5, to detect the position of the head in the half-mirror images, each image T P in the vertical and horizontal direction around the position where the head of the half mirror images are displayed , B P, R P, so as to display the L P, the image T P, B P, may be controlled display position of R P, L P. Thus, the display unit 15, a plurality of picture T P of the facial portion of the half mirror image plurality of cameras 14 are captured, B P, R P, can be displayed enclosed in L P. Further, the display unit 15 has an image T P on the top of the head on the face portion of the half mirror image, an image L P on the left head on the left side of the half mirror image, and an image R P on the right head on the right side of the half mirror image. And the BP image of the back of the head can be displayed below the half mirror image.

第1の設定を選択した場合、表示位置制御部47は、図1のフラットパネルディスプレイ24が表示する映像T、B、R、L各々の表示位置を図6に示すような位置に予め設定し、ユーザインターフェース部39は、ユーザPのハーフミラー像の顔面部分が表示ユニット15の表示面の中央に位置するように音声案内或いは画像表示によってユーザPに対して促せばよい。このようにして、第1及び第2の設定のいずれにおいても、ユーザPは、同一視野範囲A内で映像T、B、R、L各々を顔の向きを変えることなく容易に視認することができる。なお、ユーザPのハーフミラー像の顔面部分から映像T、B、R、L各々までの表示面上における距離はユーザPの視野の広さに応じてユーザPが任意に設定すればよい。
(第2の表示例)
図8は、図1の表示ユニット15の表側FSに表示されるユーザPの鏡像F及び映像T、B、R、LP2の第2の表示例を示す平面図である。第2の表示例では、ユーザインターフェース部39が受け付けたユーザPの操作に基づいて、図4の表示面積制御部48が表示ユニット15に表示される映像T、B、R、LP2の表示面積の大きさを制御して、左側頭部映像LP2を通常よりも拡大して表示した場合を示す。なお、表示面積制御部48は、表示面積の大きさを拡大するのみならず、縮小することも可能である。ユーザPは、ユーザインターフェース部39を介して、表示面積の大きさを制御する映像(または当該映像を撮影するカメラ)を特定し、制御内容(拡大・縮小)を決定することができる。例えば、リモコン操作によって制御する場合、ユーザインターフェース部39は、ユーザPのリモコン操作により発信される電気信号を受信して処理する機能を備える。或いは、ユーザPの発話音声によって制御する場合、ユーザインターフェース部39は、発話音声を入力して認識し、音声が示す制御内容を実行する機能を備える。このようなユーザインターフェース部39の機能により、ユーザPは、表示面の前から移動すること無く、映像の表示面積の大きさを操作することができる。なお、図8では、左側頭部映像LP2の表示面積の大きさを制御した場合を示したが、勿論、その他の映像T、B、Rの表示面積の大きさを制御しても構わない。
When the first setting is selected, the display position control unit 47 sets the display positions of the images T P , B P , R P , and L P displayed on the flat panel display 24 of FIG. 1 as shown in FIG. preset, the user interface unit 39 may be Unagase the user P R by the voice guidance or the image display as facial feature of the half mirror image of the user P R is located at the center of the display surface of the display unit 15 . In this manner, in both the first and second set, the user P R, the video T P in the same field of view range A, B P, R P, easily without the L P each changing the direction of the face Can be visually recognized. The user P R video T P from the face portion of the half mirror image, B P, R P, any user P R is in accordance with the size of the field of view of the distance the user P R on the display surface on to each L P Should be set.
(Second display example)
Figure 8 is a plan view showing a mirror image F M and image T P of the user P R that is displayed on the front side FS of the display unit 15 in FIG. 1, B P, R P, a second display example of L P2. In the second display example, on the basis of the operation of the user P R to the user interface unit 39 accepts a video T P of the display area control unit 48 of FIG. 4 is displayed on the display unit 15, B P, R P, L The case where the size of the display area of P2 is controlled and the left-side head image L P2 is enlarged and displayed than usual is shown. Note that the display area control unit 48 can not only increase the size of the display area but also reduce it. The user P R may be via the user interface unit 39, identifies an image for controlling the size of the display area (or a camera for photographing the image), it determines the control content (the scale). For example, when controlling by remote control operation, the user interface unit 39 has a function of receiving and processing the electrical signal emitted by the remote control operation of the user P R. Alternatively, when controlling the speech of the user P R, the user interface unit 39 recognizes enter the speech, a function to perform a control content indicated by the voice. These features of the user interface unit 39, the user P R, without moving from the front of the display surface, it is possible to manipulate the size of a display area of the image. In FIG. 8, a case of controlling the size of the display area of the left temporal image L P2, of course, other image T P, B P, by controlling the size of the display area of the R P It doesn't matter.

表示ユニット15が表示する映像LP2の表示面積の大きさを制御することにより、ユーザPはカメラ14a〜14eのズーム機能を用いずに所望の映像を拡大或いは縮小して表示させることができる。 By controlling the size of a display area of the image L P2 of the display unit 15 displays, the user P R may be displayed in an enlarged or reduced a desired image without using the zoom function of the camera 14a~14e .

なお、図8〜11の各表示例において、ユーザPの鏡像として顔面Fだけを図示し、顔面Fを除く部分は省略している。
(第3の表示例)
図9は、図1の表示ユニット15の表側FSに表示されるユーザPの鏡像F及び映像T、B、R、LP3の第3の表示例を示す平面図である。第3の表示例において、図4の撮影面積制御部46は、ユーザインターフェース部39が受け付けたユーザPの操作に基づいて、カメラ14dが撮影する左側頭部映像Lの撮影面積の大きさを制御して、撮影面積の大きさを通常よりも縮小(ズームイン)して撮影された映像LP3を表示した場合を示す。なお、撮影面積制御部46は、撮影面積の大きさを縮小するのみならず、拡大(ズームアウト)することも可能である。ユーザPは、ユーザインターフェース部39を介して、撮影面積の大きさを制御するカメラ或いは映像を特定し、制御内容(ズームイン或いはズームアウト)を決定することができる。なお、図9では、カメラ14dで撮影された映像LP3について示したが、勿論、その他のカメラ14a、14b、14eの撮影面積の大きさを制御しても構わない。
In each display example of FIG. 8-11, illustrated only facial F M as a mirror image of the user P R, portion except for the face F M are omitted.
(Third display example)
Figure 9 is a plan view showing a mirror image F M and image T P of the user P R that is displayed on the front side FS of the display unit 15 in FIG. 1, B P, R P, the third display example of L P3. In a third display example, imaging the area control unit 46 of Figure 4, based on the user P R to the user interface unit 39 has received, the size of the imaging area of the left temporal image L P camera 14d captures Is controlled to display a video image LP3 that has been shot with the size of the shooting area reduced (zoom-in) than usual. Note that the imaging area control unit 46 can not only reduce the size of the imaging area but also enlarge (zoom out) it. The user P R may be via the user interface unit 39, identifies a camera or video to control the size of the imaging area, it determines the control content (zoom or zoom out). In FIG. 9, but shows the image L P3 captured by the camera 14d, of course, other cameras 14a, 14b, it is also possible to control the size of the imaging area 14e.

カメラ14a〜14eが撮影する映像の撮影面積の大きさを制御することにより、ユーザPは映像の表示面積の大きさを変えずに所望の映像を拡大或いは縮小して表示させることができる。
(第4の表示例)
フラットパネルディスプレイ24は生活情報映像を表示し、表示位置制御部47は、生活情報映像とハーフミラー像における少なくともユーザの頭部及びカメラ14a、14b、14d、14eが撮影した映像とが重ならないようにユーザの行動に関連する映像の表示位置を制御する。ハーフミラー像の位置及び大きさ及びカメラ14a、14b、14d、14eが撮影した映像の位置及び大きさは分かっているので、生活情報映像をハーフミラー像及びカメラ映像に重ならない位置に制御する。
By camera 14a~14e controls the size of the imaging area of the image to be photographed, the user P R may be displayed in an enlarged or reduced a desired image without changing the size of the display area of the image.
(Fourth display example)
The flat panel display 24 displays the life information video, and the display position control unit 47 prevents the life information video and at least the user's head in the half mirror image and the video taken by the cameras 14a, 14b, 14d, and 14e from overlapping. The display position of the video related to the user's action is controlled. Since the position and size of the half mirror image and the position and size of the images taken by the cameras 14a, 14b, 14d, and 14e are known, the life information image is controlled to a position that does not overlap the half mirror image and the camera image.

図11は、図1の表示ユニット15の表側FSに表示されるユーザPの鏡像F、映像T、B、R、L及び生活情報映像の第4の表示例を示す平面図である。第4の表示例では、図6に示したユーザPの鏡像F、映像T、B、R、Lに加えて、ユーザPの肌(顔面の皮膚)を拡大して撮影した映像66、67が、生活情報映像として表示ユニット15に表示される。図11の例では、過去に撮影した肌の拡大映像66と現在の肌の拡大映像67とが同時に表示される。 Figure 11 is a plan showing a mirror image F M user P R that is displayed on the front side FS of the display unit 15 in FIG. 1, the image T P, B P, R P , the fourth display example between L P and living information image FIG. In the fourth display example, mirror image F M user P R shown in FIG. 6, picture T P, B P, in addition R P, the L P, an enlarged skin of the user P R (facial skin) The captured images 66 and 67 are displayed on the display unit 15 as life information images. In the example of FIG. 11, an enlarged image 66 of the skin photographed in the past and an enlarged image 67 of the current skin are displayed at the same time.

過去に撮影した肌の拡大映像66のデータは、図4の映像データ部41に予め格納されている。ユーザPは、リモコン操作または音声操作を行うことにより過去の拡大映像66が撮影された日時を特定する。ユーザインターフェース部39はこのリモコン操作または音声操作を認識し、図4の表示制御部38は、過去の拡大映像66のデータを映像データ部41から読み出し、フラットパネルディスプレイ24で過去の拡大映像66を表示する。 The data of the enlarged skin image 66 of the skin photographed in the past is stored in advance in the video data section 41 of FIG. The user P R is past enlarged image 66 to identify the time taken by performing a remote control operation or voice operation. The user interface unit 39 recognizes this remote control operation or voice operation, and the display control unit 38 in FIG. 4 reads the past enlarged video 66 data from the video data unit 41 and displays the past enlarged video 66 on the flat panel display 24. indicate.

このようなユーザインターフェース部39の機能により、ユーザPは、表示面の前から移動すること無く、映像データ部41に格納された映像を表示ユニット15に表示させることができる。 These features of the user interface unit 39, the user P R, without moving from the front of the display surface, it is possible to display an image stored in the video data section 41 to the display unit 15.

なお、図11の例では、肌(顔面の皮膚)の拡大映像を生活情報映像として表示させた場合を示したが、これに限らず、頭部のその他の部位の皮膚(例えば、頭皮など)の拡大映像であっても構わない。頭皮の拡大映像としては、カメラ14aが撮影した頭頂部の拡大映像を用いればよい。   In the example of FIG. 11, a case where an enlarged image of the skin (facial skin) is displayed as a life information image is shown, but the present invention is not limited to this, and the skin of other parts of the head (for example, the scalp). It may be an enlarged image of. As the enlarged image of the scalp, an enlarged image of the top of the head taken by the camera 14a may be used.

カメラ14aを用いて頭頂部の拡大映像を撮影する場合、例えば、図12に示すように、コンピュータ13は、照明制御装置72を介してユーザPの頭頂部に光を照射する照明装置71を点灯させる。このように、頭頂部の照度を高めることにより、より鮮明な拡大映像を撮影することができる。コンピュータ13を介してカメラ14aの露出と照明装置71の輝度を連携させることにより更に鮮明な拡大映像を撮影して表示ユニット15に表示することができる。なお、頭頂部に限らず、カメラ14a〜14eの配置位置に対応してユーザPの頭部に光を照射する照明装置を配置しても構わない。 When shooting the enlarged image of the top of the head with the camera 14a, for example, as shown in FIG. 12, the computer 13, an illumination device 71 which irradiates light to the top of the user P R through a lighting control device 72 Light up. Thus, a clearer enlarged image can be taken by increasing the illuminance at the top of the head. By linking the exposure of the camera 14 a and the luminance of the illumination device 71 via the computer 13, a clearer enlarged image can be taken and displayed on the display unit 15. The present invention is not limited to the top of the head, it may be disposed a lighting device for irradiating the light to the head of the user P R corresponding to the arrangement position of the camera 14a-14e.

また、図1において、フラットパネルディスプレイ24の直下或いはフラットパネルディスプレイ24の周辺にUSBカメラを配置し、USBカメラがハーフミラー21越しにFS側にいるユーザPを撮影してもよい。これにより、ユーザPにUSBカメラが配置されていることを意識させること無くユーザPの映像を取得し、ユーザPの手や足などの身体の動きをセンシングすることができる。
(第5の表示例)
図10は、図1の表示ユニット15の表側FSに表示されるユーザPの鏡像F、映像T、B、R、L及び生活情報映像の第5の表示例を示す平面図である。第5の表示例では、図6に示したユーザPの鏡像F、映像T、B、R、Lに加えて、行動検出部45が検出したユーザPの行動に基づいて、ユーザPの行動に関連する映像61〜64が、生活情報映像として表示ユニット15に表示される。
Further, in FIG. 1, a USB camera is arranged on the periphery of just under or flat panel display 24 of the flat panel display 24 may be captured user P R a USB camera is in the FS side to the half mirror 21 over. Thus, it is possible to get an image of no user P R be aware that it is positioned a USB camera to the user P R, sensing the movement of the body such as hands and feet of the user P R.
(Fifth display example)
Figure 10 is a plan showing a mirror image F M user P R that is displayed on the front side FS of the display unit 15 in FIG. 1, the image T P, B P, R P , the fifth display example between L P and living information image FIG. In the fifth display example, in addition to the mirror F M, image T P, B P, R P , L P of the user P R shown in FIG. 6, based on the behavior of the user P R of action detection unit 45 has detected Te, video 61-64 relating to the behavior of the user P R is displayed on the display unit 15 as a living information image.

例えば、行動検出部45は、月〜金曜日の午前9時において、ユーザが外出する「お出かけ行動」を自動で検出する。そして、お出かけ行動に関連する映像として、天気予報61、紫外線情報62などの映像を表示する。行動検出部45が、ユーザの入浴行動を検出した場合、入浴行動に関連する映像として、美容情報を表示する。また、行動検出部45は、ユーザPのスケジュールを管理する管理ソフトウェアがインストールされたパーソナルコンピュータやスマートフォン、携帯電話、携帯情報端末(PDA)などの情報端末52と連動してユーザの行動を検出してもよい。 For example, the behavior detecting unit 45 automatically detects the “going out behavior” that the user goes out at 9:00 am from Monday to Friday. Then, images such as weather forecast 61 and ultraviolet information 62 are displayed as images related to the going-out behavior. When the behavior detection unit 45 detects the user's bathing behavior, the beauty information is displayed as an image related to the bathing behavior. In addition, the behavior detection unit 45, a personal computer or a smart phone management software has been installed to manage the schedule of the user P R, a mobile phone, a personal digital assistant (PDA) in conjunction with the information terminal 52, such as detecting the behavior of the user May be.

また、情報表示装置は、ユーザの取り得る複数の行動とこれらの行動に関連する映像との関係を示す行動情報関係テーブルを予めユーザ関連データ部42に格納している。   In addition, the information display device stores in advance in the user-related data section 42 an action information relationship table that indicates the relationship between a plurality of actions that can be taken by the user and images related to these actions.

図1の表示ユニット15に、鏡像Fを見ているユーザPの同一視野内に映像T、B、R、L及びユーザPの行動に関連する映像61〜64各々を同時に表示させる。ユーザPの行動に関連する映像61〜64として、例えば、天気予報61、紫外線情報62、ユーザPのスケジュール63、タイムキーパ64などを表示することにより、ユーザPに対して有益な情報を教示することができる。天気予報61、紫外線情報62は、例えば、図4のインターネット51を介して入手することができ、スケジュール63、タイムキーパ64は、ユーザPのスケジュールを管理する管理ソフトウェアがインストールされたパーソナルコンピュータやスマートフォン、携帯電話、携帯情報端末(PDA)などの情報端末52から入手することができる。 The display unit 15 in FIG. 1, the image T P in the same field of view of the user P R viewing the mirror image F M, B P, R P , the image 61 to 64 respectively associated with the behavior between L P and the user P R Display at the same time. As picture 61 to 64 related to the behavior of the user P R, for example, weather forecasts 61, ultraviolet information 62, schedule 63 users P R, by displaying a timekeeper 64, the useful information to the user P R Can be taught. Weather 61, ultraviolet information 62 is, for example, can be obtained via the Internet 51 in FIG. 4, schedule 63, timekeeper 64, a personal computer or a smart phone management software that manages the schedule of the user P R is installed It can be obtained from an information terminal 52 such as a mobile phone or a personal digital assistant (PDA).

これらの情報映像の利用例としては、現在の天気や利用当日の天気予報(降水確率や最高最低気温等を含む)を表示したり、ユーザPが女性であることを情報表示装置に入力するか或いは情報表示装置が認識することによりその日の紫外線量の情報を表示したり、利用当日のタイムスケジュールを表示したり、情報表示装置を利用することが許される時間や時刻をこのタイムスケジュールから算出してタイムキーパ64として表示したり、当該時刻においてアラームを鳴らすなどにより、所定の行動を促すなどがある。 The example of the use of these information the video, or to view the weather forecast for the current weather and use the day (including the probability of precipitation and maximum and minimum temperature, etc.), enter the user P R are women in the information display device Or, the information display device recognizes the amount of ultraviolet rays for the day, displays the time schedule for the day of use, and calculates the time and time allowed to use the information display device from this time schedule. Then, it is displayed as the time keeper 64, or a predetermined action is urged by sounding an alarm at the time.

ユーザPが情報表示装置を化粧台に使用している場合、紫外線量が気になるユーザPに対して紫外線情報を表示させる。なおこの時、ユーザPが化粧をする行動を行動検出部45が検出する。
(第2の実施の形態)
図13を参照して、本発明の第2の実施の形態に係わる情報表示装置の構成を説明する。本発明の第2の実施の形態に係わる情報表示装置においては、図1のフラットパネルディスプレイ24の代りに、光線を投射するプロジェクタ11とプロジェクタ11から投射された光線を拡散する拡散層23とを有する表示手段を用いた場合について説明する。
If the user P R is using the information display device in vanity and displays the UV information to the user P R amount ultraviolet anxious. At this time, the behavior detection unit 45 detects the behavior that the user PR applies makeup.
(Second Embodiment)
With reference to FIG. 13, the structure of the information display apparatus concerning the 2nd Embodiment of this invention is demonstrated. In the information display apparatus according to the second embodiment of the present invention, instead of the flat panel display 24 of FIG. 1, a projector 11 that projects light rays and a diffusion layer 23 that diffuses light rays projected from the projector 11 are provided. A case where the display means having the above is used will be described.

拡散層23は透明板22を介してハーフミラー21の裏側BSに重ね合わされている。プロジェクタ11は、複数のカメラ14a〜14cが撮影した映像を構成する光線をハーフミラー21の裏側BSから投射する。投射された光線が拡散層23において拡散されることにより映像が拡散層23に表示される。よって、ハーフミラー21の表側FSにおいてハーフミラー21が反射する光により作り出されるユーザPの鏡像と、ハーフミラー21の裏側からプロジェクタ11により投射され且つ拡散層23により拡散される光線により作り出される映像とがハーフミラー21の表側FSへ向けて表示される。拡散層23、透明板22及びハーフミラー21は表示ユニット12を構成している。 The diffusion layer 23 is superimposed on the back side BS of the half mirror 21 via the transparent plate 22. The projector 11 projects a light beam that constitutes an image captured by the plurality of cameras 14 a to 14 c from the back side BS of the half mirror 21. The projected light beam is diffused in the diffusion layer 23, whereby an image is displayed on the diffusion layer 23. Therefore, the image half mirror 21 at the front side FS of the half mirror 21 is being produced by light rays are diffused and mirror image of the user P R, produced by light reflected by and the diffusion layer 23 is projected by the projector 11 from the back side of the half mirror 21 Are displayed toward the front side FS of the half mirror 21. The diffusion layer 23, the transparent plate 22, and the half mirror 21 constitute the display unit 12.

透明板22はアクリルまたはガラスを材料として形成することができる。また、拡散層23は、シート状の拡散部材で形成し、これを透明板22に貼り付けてもよいし、透明板22の一部に研磨加工などを施して透明板22の裏側BSの主面に拡散機能を生成してもよい。プロジェクタ11は、コンピュータ13から映像ケーブル或いは無線通信により映像データを受信し、映像データを解析してカメラ14a〜14cが撮影した映像を構成する光線を投射する。   The transparent plate 22 can be formed using acrylic or glass as a material. Further, the diffusion layer 23 may be formed of a sheet-like diffusion member, which may be affixed to the transparent plate 22, or a part of the transparent plate 22 is subjected to polishing or the like so that the main side of the back side BS of the transparent plate 22 A diffusion function may be generated on the surface. The projector 11 receives video data from the computer 13 via a video cable or wireless communication, analyzes the video data, and projects light rays that constitute video shot by the cameras 14a to 14c.

なお、図13は、ユーザPが表示ユニット12の表示面に対して正対している場合を示している。 Incidentally, FIG. 13 shows a case where the user P R is directly opposite to the display surface of the display unit 12.

第2の実施の形態に係わる情報表示装置の他の構成及び動作例は第1の実施の形態に係わる情報表示装置と同じであり、図示及び説明を省略する。
(その他の実施の形態)
上記のように、本発明は、2つの実施の形態及び第1〜第5の表示例によって記載したが、この開示の一部をなす論述及び図面はこの発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
Other configurations and operation examples of the information display apparatus according to the second embodiment are the same as those of the information display apparatus according to the first embodiment, and illustration and description thereof are omitted.
(Other embodiments)
As described above, the present invention has been described by the two embodiments and the first to fifth display examples. However, it is understood that the description and drawings constituting a part of this disclosure limit the present invention. Should not. From this disclosure, various alternative embodiments, examples and operational techniques will be apparent to those skilled in the art.

図1において、カメラ14cは表示ユニット15の表側FSに配置されている場合を示したが、カメラ14cは表示ユニット15の裏側BSに配置されていてもよい。この場合、カメラ14cを、フラットパネルディスプレイ24の表示面と重ならない位置に配置し、ハーフミラー21を介してユーザを撮影すればよい。   Although FIG. 1 shows the case where the camera 14c is arranged on the front side FS of the display unit 15, the camera 14c may be arranged on the back side BS of the display unit 15. In this case, the camera 14 c may be arranged at a position that does not overlap the display surface of the flat panel display 24 and the user may be photographed via the half mirror 21.

図13に示した表示ユニット12は、ハーフミラー21と拡散層23との間に透明板22を配置した場合を示したが、ハーフミラー21と拡散層23を透明板22を介さずに直接重ね合わせても構わない。例えば、ハーフミラー21の裏側BSに拡散シートを直接貼り付けても構わない。これにより、表示ユニット12を薄くすることができる。また、図7に示す距離αと距離βの差を縮めることができる。   In the display unit 12 shown in FIG. 13, the transparent plate 22 is disposed between the half mirror 21 and the diffusion layer 23, but the half mirror 21 and the diffusion layer 23 are directly overlapped without using the transparent plate 22. You can match them. For example, a diffusion sheet may be directly attached to the back side BS of the half mirror 21. Thereby, the display unit 12 can be made thin. Further, the difference between the distance α and the distance β shown in FIG. 7 can be reduced.

また、ハーフミラー21、透明板22、拡散層23の積層順序は、ユーザP側から、ハーフミラー21、拡散層23及び透明板22の順であっても、或いは、透明板22、ハーフミラー21及び拡散層23の順であっても構わない。 Further, the half mirror 21, a transparent plate 22, stacking order of the diffusion layer 23, the user P R side, the half mirror 21, even the order of the diffusion layer 23 and the transparent plate 22, or the transparent plate 22, a half mirror 21 and the diffusion layer 23 may be in this order.

第4の表示例において肌の拡大映像を表示する場合を示したが、肌の拡大映像から肌の色やつや、肌に含まれる水分量、肌年齢、或いは頭皮の状態などを診断する機能を付加してもよい。これにより、これらの診断結果をその他の映像(情報映像)として表示することができる。   In the fourth display example, the case where an enlarged image of the skin is displayed has been shown. However, the function of diagnosing the skin color and skin, the amount of moisture contained in the skin, the age of the skin, or the state of the scalp from the enlarged image of the skin is shown. It may be added. Thereby, these diagnosis results can be displayed as other images (information images).

このように、本発明はここでは記載していない様々な実施の形態等を包含するということを理解すべきである。したがって、本発明はこの開示から妥当な特許請求の範囲に係る発明特定事項によってのみ限定されるものである。   Thus, it should be understood that the present invention includes various embodiments and the like not described herein. Therefore, the present invention is limited only by the invention specifying matters according to the scope of claims reasonable from this disclosure.

本発明の実施の形態に係わる情報表示装置は、洗面台、化粧台、美容台(床屋の鏡など)に適用することができる。   The information display device according to the embodiment of the present invention can be applied to a washstand, a dressing table, and a beauty table (such as a mirror in a barber shop).

本発明の第1の実施の形態に係わる情報表示装置の構成を示すブロック図であり、表示ユニット15の表示面に垂直な断面における配置例を示す。1 is a block diagram showing a configuration of an information display device according to a first embodiment of the present invention, and shows an arrangement example in a cross section perpendicular to a display surface of a display unit 15. FIG. 図1のフラットパネルディスプレイ24及びハーフミラー21を含む表示ユニット15の詳細な構成を示す斜視図である。FIG. 2 is a perspective view showing a detailed configuration of a display unit 15 including the flat panel display 24 and the half mirror 21 of FIG. 1. 図1のフラットパネルディスプレイ24の表示面を表側FSから見た平面図である。It is the top view which looked at the display surface of the flat panel display 24 of FIG. 1 from front side FS. 図1のコンピュータ13の構成を示すブロック図である。It is a block diagram which shows the structure of the computer 13 of FIG. 図4のCPU31の動作例を示すフローチャートである。It is a flowchart which shows the operation example of CPU31 of FIG. 図1の表示ユニット15及び図13の表示ユニット12の表側FSに表示される鏡像及び映像の第1の表示例を示す平面図である。It is a top view which shows the 1st example of a display of the mirror image displayed on the front side FS of the display unit 15 of FIG. 1, and the display unit 12 of FIG. ユーザPの眼から鏡像P及び映像までの距離を示す断面図である。It is a cross-sectional view showing the distance from the eye of the user P R to mirror images P M and video. 図1の表示ユニット15及び図13の表示ユニット12の表側FSに表示される鏡像及び映像の第2の表示例を示す平面図である。It is a top view which shows the 2nd example of a display of the mirror image displayed on the front side FS of the display unit 15 of FIG. 1, and the display unit 12 of FIG. 図1の表示ユニット15及び図13の表示ユニット12の表側FSに表示される鏡像及び映像の第3の表示例を示す平面図である。It is a top view which shows the 3rd example of a display of the mirror image displayed on the front side FS of the display unit 15 of FIG. 1, and the display unit 12 of FIG. 図1の表示ユニット15及び図13の表示ユニット12の表側FSに表示される鏡像及び映像の第5の表示例を示す平面図である。It is a top view which shows the 5th example of a display of the mirror image displayed on the front side FS of the display unit 15 of FIG. 1, and the display unit 12 of FIG. 図1の表示ユニット15及び図13の表示ユニット12の表側FSに表示される鏡像及び映像の第4の表示例を示す平面図である。It is a top view which shows the 4th example of a display of the mirror image displayed on the front side FS of the display unit 15 of FIG. 1, and the display unit 12 of FIG. 頭頂部に光を照射する照明装置71及び照明装置71を制御する照明制御装置72の配置例を示す断面図である。It is sectional drawing which shows the example of arrangement | positioning of the illuminating device 71 which irradiates light to a head part, and the illumination control apparatus 72 which controls the illuminating device 71. FIG. 本発明の第2の実施の形態に係わる情報表示装置の構成を示すブロック図であり、表示ユニット12の表示面に垂直な断面における配置例を示す。It is a block diagram which shows the structure of the information display apparatus concerning the 2nd Embodiment of this invention, and shows the example of arrangement | positioning in the cross section perpendicular | vertical to the display surface of the display unit 12. FIG.

符号の説明Explanation of symbols

11…プロジェクタ
12、15…表示ユニット
13…コンピュータ
14a〜14e…カメラ
21…ハーフミラー
22…透明板
23…拡散層
24…フラットパネルディスプレイ(表示手段)
25…表示枠部
25a…切り欠き部
26…取付け金具
27…取付け台
28a、28b…スペーサ
31…処理演算部
32…データベース
33…入出力部
36…カメラ制御部
37…ユーザ位置検出部(ユーザ位置検出手段)
38…表示制御部
39…ユーザインターフェース部(操作手段)
40…鏡像表示位置検出部(鏡像表示位置検出手段)
41…映像データ部
42…ユーザ関連データ部
43…プログラムデータ部
44…視野判断部(視野判断手段)
45…行動検出部(行動検出手段)
46…撮影面積制御部
47…表示位置制御部(表示位置制御手段)
48…表示面積制御部
51…インターネット
52…情報端末
61…天気予報
62…紫外線情報
63…スケジュール
64…タイムキーパ
66、67…肌の拡大映像
71…照明装置
72…照明制御装置
…後頭部映像
BS…裏側
…顔面
FS…表側
…左側頭部映像
…鏡像
…ユーザ
…右側頭部映像
…頭頂部映像
DESCRIPTION OF SYMBOLS 11 ... Projector 12, 15 ... Display unit 13 ... Computer 14a-14e ... Camera 21 ... Half mirror 22 ... Transparent plate 23 ... Diffusion layer 24 ... Flat panel display (display means)
25 ... Display frame part 25a ... Notch part 26 ... Mounting bracket 27 ... Mounting base 28a, 28b ... Spacer 31 ... Processing operation part 32 ... Database 33 ... Input / output part 36 ... Camera control part 37 ... User position detection part (user position) Detection means)
38 ... display control unit 39 ... user interface unit (operation means)
40: Mirror image display position detector (mirror image display position detector)
41 ... Video data part 42 ... User related data part 43 ... Program data part 44 ... Visual field judgment part (visual field judgment means)
45 ... Behavior detection unit (behavior detection means)
46: Shooting area control unit 47 ... Display position control unit (display position control means)
48 ... display area control unit 51 ... Internet 52 ... information terminal 61 ... weather forecast 62 ... ultraviolet information 63 ... schedule 64 ... timekeeper 66, 67 ... enlarged image 71 ... lighting device skin 72 ... lighting controller B P ... occiput video BS ... back F M ... facial FS ... front L P ... left temporal image P M ... mirror images P R ... user R P ... right temporal image T P ... parietal video

Claims (8)

ユーザの顔部の映像を撮影するカメラと、
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
少なくともユーザの頭部位置を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え
前記鏡像表示位置検出手段は、ユーザの顔面部の映像に基づいて、ハーフミラー像におけるユーザの頭部の位置及び大きさを検出する
ことを特徴とする情報表示装置。
A camera for photographing the image of the face of the user surface portion,
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detecting means for detecting at least the user's head position;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling ,
The information display device, wherein the mirror image display position detection means detects the position and size of the user's head in the half mirror image based on the image of the user's face .
前記ユーザ位置検出手段は、ユーザと前記ハーフミラーとの距離を求める距離測定手段を備え、
前記鏡像表示位置検出手段は、当該距離に基づいてユーザの頭部の面積を特定する
ことを特徴とする請求項1に記載の情報表示装置。
The user position detecting means includes a distance measuring means for obtaining a distance between the user and the half mirror,
The information display apparatus according to claim 1, wherein the mirror image display position detection unit specifies an area of a user's head based on the distance .
ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のうち少なくとも1つの映像を撮影するカメラと、
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
少なくともユーザの頭部位置を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、
前記表示位置制御手段は、前記カメラが撮影した映像をハーフミラー像と同じ大きさに表示面積を制御して表示する
ことを特徴とする情報表示装置。
A camera that captures at least one image of the user's top, back, face, left and right heads;
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detecting means for detecting at least the user's head position;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling,
The display position control means, information display you characterized in that the camera is displayed by controlling the display area of the image captured at the same size as the half mirror image.
ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のうち少なくとも1つの映像を撮影するカメラと、
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
前記カメラが撮影した映像から前記ハーフミラーに対するユーザの頭部の位置及び距離を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段と、
前記ユーザ位置検出手段が検出した前記位置及び距離から表示面上におけるユーザの視野範囲を推定する視野判断手段とを備え、
前記表示位置制御手段は、前記視野判断手段が推定したユーザの視野範囲に基づいて、前記ユーザの頭部の鏡像を見る前記ユーザの同一視野範囲内に前記カメラが撮影した映像を表示する
ことを特徴とする情報表示装置。
A camera that captures at least one image of the user's top, back, face, left and right heads;
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detection means for detecting the position and distance of the user's head relative to the half mirror from the video taken by the camera;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling,
Visual field judgment means for estimating the visual field range of the user on the display surface from the position and distance detected by the user position detection means,
The display position control means displays the video imaged by the camera in the same visual field range of the user who views the mirror image of the user's head based on the visual field range of the user estimated by the visual field judgment means. information display device shall be the feature.
ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のそれぞれの映像を撮影する複数のカメラと、
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
少なくともユーザの頭部位置を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、
前記表示位置制御手段は、前記ハーフミラー像におけるユーザの頭部を前記複数のカメラが撮影した複数の映像で囲んで表示する
ことを特徴とする情報表示装置。
A plurality of cameras that capture images of the user's top, back, face, left and right heads,
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detecting means for detecting at least the user's head position;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling,
The display position control means, a plurality of information display you means displays enclosed in the video the user's head and photographed the plurality of cameras in the half-mirror image.
前記表示位置制御手段は、前記ハーフミラー像におけるユーザの頭部の上側に頭頂部の映像、前記ハーフミラー像におけるユーザの頭部の左側に左側頭部の映像、前記ハーフミラー像におけるユーザの頭部の右側に右側頭部の映像、及び前記ハーフミラー像におけるユーザの頭部の下側に後頭部の映像を表示することを特徴とする請求項記載の情報表示装置。 The display position control means includes an image of the top of the head above the user's head in the half mirror image, an image of the left head on the left side of the user's head in the half mirror image, and the user's head in the half mirror image. 6. The information display device according to claim 5 , wherein an image of the right head is displayed on the right side of the unit, and an image of the back of the head is displayed below the user's head in the half mirror image . 前記表示手段は、生活情報映像を表示し、
前記表示位置制御手段は、生活情報映像とハーフミラー像における少なくともユーザの頭部及び前記カメラが撮影した映像とが重ならないように前記生活情報映像の表示位置を制御する
ことを特徴とする請求項1から5のいずれか一項に記載の情報表示装置。
The display means displays a life information video,
The display position control means controls the display position of the life information video so that at least the user's head and the video taken by the camera in the life information video and the half mirror image do not overlap. The information display device according to any one of 1 to 5 .
前記ユーザの行動を検出する行動検出手段を更に備え、
前記表示手段は、前記生活情報映像として、検出されたユーザの行動に関連する映像を表示する
ことを特徴とする請求項記載の情報表示装置
It further comprises behavior detection means for detecting the user's behavior,
The information display apparatus according to claim 7 , wherein the display unit displays an image related to the detected user action as the life information image .
JP2008331207A 2007-12-25 2008-12-25 Information display device Active JP5249743B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008331207A JP5249743B2 (en) 2007-12-25 2008-12-25 Information display device

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2007333087 2007-12-25
JP2007333087 2007-12-25
JP2008147488 2008-06-04
JP2008147488 2008-06-04
JP2008331207A JP5249743B2 (en) 2007-12-25 2008-12-25 Information display device

Publications (2)

Publication Number Publication Date
JP2010016793A JP2010016793A (en) 2010-01-21
JP5249743B2 true JP5249743B2 (en) 2013-07-31

Family

ID=41702435

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008331207A Active JP5249743B2 (en) 2007-12-25 2008-12-25 Information display device

Country Status (1)

Country Link
JP (1) JP5249743B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109982616A (en) * 2016-09-27 2019-07-05 皇家飞利浦有限公司 For supporting at least one user to execute the movable device and method of personal nursing

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3062195A1 (en) * 2015-02-27 2016-08-31 Iconmobile Gmbh Interactive mirror
US10970025B1 (en) 2019-08-26 2021-04-06 William Brian Richardson Smart electric mirrors
FR3131961A1 (en) * 2022-01-20 2023-07-21 Vasile DILAN Imaging system for presenting the front image and the back image of a subject

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5161968U (en) * 1974-11-08 1976-05-15
JPH11112970A (en) * 1997-10-08 1999-04-23 Sony Corp Television receiver having function for makeup
JP3505575B2 (en) * 2001-03-23 2004-03-08 独立行政法人産業技術総合研究所 Digital mirror device
JP4364464B2 (en) * 2001-09-17 2009-11-18 株式会社リコー Digital camera imaging device
JP2004357103A (en) * 2003-05-30 2004-12-16 Pioneer Electronic Corp Mirror device with display device
JP4654905B2 (en) * 2005-12-16 2011-03-23 パナソニック電工株式会社 Video presentation system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109982616A (en) * 2016-09-27 2019-07-05 皇家飞利浦有限公司 For supporting at least one user to execute the movable device and method of personal nursing

Also Published As

Publication number Publication date
JP2010016793A (en) 2010-01-21

Similar Documents

Publication Publication Date Title
US10423837B2 (en) Method and apparatus for a wearable computer
CN106471419B (en) Management information is shown
JP6786792B2 (en) Information processing device, display device, information processing method, and program
US11809623B2 (en) Head-mounted display device and operating method of the same
JP4814080B2 (en) Mirror assembly with integrated display device
US20060103627A1 (en) Information displaying device
US20190227694A1 (en) Device for providing augmented reality service, and method of operating the same
US9998654B2 (en) Information processing device and method for controlling information processing device
JP5249743B2 (en) Information display device
KR20180098071A (en) Digital signage
US11450113B1 (en) Method and apparatus for a wearable computer
JP5439281B2 (en) User viewpoint space video presentation device, user viewpoint space video presentation method and program
TWI670646B (en) Method of displaying information and displaying system thereof
JP5571895B2 (en) Information display device
JP2022546053A (en) Virtual mirror system and method
JP2017173455A (en) Information processing device, information processing method, and program
JP2010237884A (en) Device, method, and program for controlling display
US20170337707A1 (en) Method and system for transforming between physical images and virtual images
WO2021020069A1 (en) Display device, display method, and program
CN113661433A (en) Head-mounted display device and operation method thereof
US11527004B2 (en) Electronic device and operation method thereof
US20230112939A1 (en) A system for providing guidance
EP3903668A1 (en) A system for providing guidance
JP2016144071A (en) Position control device, program, image display device, and image display method
KR20240030881A (en) Method for outputting a virtual content and an electronic device supporting the same

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20111207

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20111207

A621 Written request for application examination

Effective date: 20111214

Free format text: JAPANESE INTERMEDIATE CODE: A621

RD05 Notification of revocation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7425

Effective date: 20111215

A711 Notification of change in applicant

Effective date: 20120113

Free format text: JAPANESE INTERMEDIATE CODE: A712

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121225

A521 Written amendment

Effective date: 20130225

Free format text: JAPANESE INTERMEDIATE CODE: A523

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130319

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130412

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 3

Free format text: PAYMENT UNTIL: 20160419