JP5249743B2 - Information display device - Google Patents
Information display device Download PDFInfo
- Publication number
- JP5249743B2 JP5249743B2 JP2008331207A JP2008331207A JP5249743B2 JP 5249743 B2 JP5249743 B2 JP 5249743B2 JP 2008331207 A JP2008331207 A JP 2008331207A JP 2008331207 A JP2008331207 A JP 2008331207A JP 5249743 B2 JP5249743 B2 JP 5249743B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- display
- head
- image
- half mirror
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、反射像を映すのみならず、鏡面に様々な情報を表示する情報表示装置に関する。 The present invention relates to an information display device that displays not only a reflected image but also various information on a mirror surface.
化粧設備において、ユーザの姿を映し出す機能を備える部材として、ミラー(鏡)の他に、当該ミラーを使用しているユーザを撮影するカメラと、ミラー面内に設けられた、カメラの撮影像を映すモニター画面とを備えるものが知られている(例えば、特許文献1参照)。特許文献1の化粧設備によれば、カメラで撮影したユーザの背後や上方などからの像もモニター画面で見ることができる。 In a makeup facility, as a member having a function of projecting a user's figure, in addition to a mirror (mirror), a camera for photographing a user who uses the mirror, and a photographed image of the camera provided in the mirror surface There is known one provided with a monitor screen for projection (see, for example, Patent Document 1). According to the cosmetic facility of Patent Document 1, images from behind or above the user taken by the camera can also be seen on the monitor screen.
また、入射する光の一部を反射し、一部を透過する機能を備えるハーフミラーを用いることにより、ハーフミラーの表側に居るユーザは、反射面に映し出される自分の姿の他に、ハーフミラーの裏側を透かして見ることができる。このハーフミラーの裏側に、入射する光線を拡散する機能を備える拡散層を重ね合わせた映像表示部と、ハーフミラーの裏側から拡散層に向けて光線を投射することで映像表示部に映像を投影するプロジェクタとを備える情報表示装置が知られている(例えば、特許文献2参照)。特許文献2の情報表示装置によれば、ハーフミラーが反射する光により形成される鏡像の他に、拡散層が拡散する光線により構成される映像を表示することができる。 In addition, by using a half mirror that has a function of reflecting a part of incident light and transmitting a part of the light, the user on the front side of the half mirror can see the half mirror You can see through the back side of. A video display unit with a diffusion layer that has a function of diffusing incident light rays on the back side of the half mirror, and a light beam is projected from the back side of the half mirror toward the diffusion layer to project an image on the video display unit. An information display device including a projector is known (for example, see Patent Document 2). According to the information display device of Patent Literature 2, in addition to the mirror image formed by the light reflected by the half mirror, it is possible to display an image composed of the light rays diffused by the diffusion layer.
更に、利用者を撮影するカメラと、カメラによって撮影された映像などをスクリーンに投影するプロジェクタを備え、ハーフミラーに正対した利用者のハーフミラーに対する相対的な位置に応じて、ハーフミラーによって反射される利用者の反射像、又はハーフミラーによって透過されるスクリーンに投影された映像を選択的に提示する映像提示システムが知られている(例えば、特許文献3参照)。
しかし、特許文献1の化粧設備では、映像を表示する位置が固定されているので、使用者によっては、鏡像の頭部と映像が重なってしまい、視認性が悪くなる。 However, since the position for displaying an image is fixed in the cosmetic facility of Patent Document 1, the head of the mirror image overlaps with the image depending on the user, resulting in poor visibility.
また、特許文献2の情報表示装置では、ハーフミラーの裏側に拡散層を重ね合わせた映像表示部に、ユーザの鏡像と当該ユーザを撮影した映像とを共に鏡像の頭部と映像とが重なることなく表示することができない。 Moreover, in the information display apparatus of patent document 2, the mirror image head and the video are overlapped with the mirror image of the user and the video shot of the user on the video display unit in which the diffusion layer is superimposed on the back side of the half mirror. Can not be displayed without.
特許文献3の映像提示システムでは、同一平面に映像と鏡像とを共に鏡像の頭部と映像とが重なることなく表示させることは出来ない。 In the video presentation system of Patent Document 3, it is impossible to display the video and the mirror image on the same plane without overlapping the head of the mirror image and the video.
本発明は、上記問題点を解決するために成されたものであり、その目的は、ハーフミラー像における少なくともユーザの頭部と映像とが重なることなく鏡像及び当該ユーザを撮影した映像を表示する情報表示装置を提供することである。 The present invention has been made to solve the above-described problems, and an object of the present invention is to display a mirror image and an image obtained by photographing the user without overlapping at least the user's head and the image in the half mirror image. It is to provide an information display device.
本発明の情報表示装置は、ユーザの顔面部の映像を撮影するカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、少なくともユーザの頭部位置を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、鏡像表示位置検出手段は、ユーザの顔面部の映像に基づいて、ハーフミラー像におけるユーザの頭部の位置及び大きさを検出することを特徴とする。 Information display device of the present invention includes a camera for capturing an image of the face surface section of the user, and a display means for the camera to display the image captured, a half mirror superimposed on the display surface of the display unit, at least the user's head User position detection means for detecting the position of the part, mirror image display position detection means for detecting the display position of the user's head in the half mirror image from the user's head position, and display of the head detected by the mirror image display position detection means A display position control means for controlling the display position of the video photographed by the camera so that the video photographed by the camera and at least the user's head in the half mirror image do not overlap based on the position, and a mirror image display position detection means Is characterized by detecting the position and size of the user's head in the half-mirror image based on the image of the user's face .
本発明によれば、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。 According to the onset bright, the display unit superposed half mirror, and at least the head and the image of both image half mirror and a video taken the half mirror image and the user of the user overlaps the display surface of the display means Can be displayed without any problem.
本発明の情報表示装置において、ユーザ位置検出手段は、ユーザとハーフミラーとの距離を求める距離測定手段を備え、鏡像表示位置検出手段は、当該距離に基づいてユーザの頭部の面積を特定してもよい。 In the information display device of the present invention, Yu chromatography The position detecting means includes distance measuring means for obtaining a distance between the user and the half mirror, mirror image display position detection means, the area of the head of the user based on the distance You may specify.
本発明の情報表示装置は、ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のうち少なくとも1つの映像を撮影するカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、少なくともユーザの頭部位置を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、表示位置制御手段は、カメラが撮影した映像をハーフミラー像と同じ大きさに表示面積を制御して表示することを特徴とする。本発明によれば、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。 An information display device according to the present invention includes a camera that captures at least one image of the user's top, back, face, left and right heads, display means that displays images captured by the camera, and a display. A half mirror superimposed on the display surface of the means, a user position detecting means for detecting at least the user's head position, and a mirror image display position for detecting the display position of the user's head in the half mirror image from the user's head position Based on the display position of the head detected by the detection means and the mirror image display position detection means, the display position of the video shot by the camera so that the video shot by the camera and at least the user's head in the half mirror image do not overlap and a display position control means for controlling the display position control means controls the display area of the video camera is recorded on the same size as the half mirror image table Characterized in that it. According to the present invention, at least the head of the half mirror image and the video overlap each other on the display unit in which the half mirror is superimposed on the display surface of the display unit. Can be displayed.
本発明の情報表示装置は、ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のうち少なくとも1つの映像を撮影するカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、カメラが撮影した映像からハーフミラーに対するユーザの頭部の位置及び距離を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段と、ユーザ位置検出手段が検出した位置及び距離から表示面上におけるユーザの視野範囲を推定する視野判断手段とを備え、表示位置制御手段は、視野判断手段が推定したユーザの視野範囲に基づいて、前記ユーザの頭部の鏡像を見るユーザの同一視野範囲内にカメラが撮影した映像を表示することを特徴とする。これにより、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。また、ユーザの映像に対する視認性が向上する。ここで「同一視野範囲」は、顔を動かさず視線の小さな移動で見ることができる範囲等を示す。 An information display device according to the present invention includes a camera that captures at least one image of the user's top, back, face, left and right heads, display means that displays images captured by the camera, and a display. A half mirror superimposed on the display surface of the means, a user position detecting means for detecting the position and distance of the user's head relative to the half mirror from the image captured by the camera, and the user's position in the half mirror image from the user's head position. Based on the mirror image display position detection means for detecting the display position of the head and the display position of the head detected by the mirror image display position detection means, the image captured by the camera overlaps at least the user's head in the half mirror image. a display position control means for the camera so as not to control the display position of the image captured, the display surface on the position and distance of the user position detection unit detects Definitive Bei example a field determination means for estimating a field of view of the user, the display position control means, based on the field of view of the user field of view determination means is estimated, the same field of view of the user viewing the mirror image of the head of the user wherein the camera displays an image captured within. As a result, the display unit in which the half mirror is superimposed on the display surface of the display means displays both the user's half mirror image and the video captured by the user without overlapping at least the head of the half mirror image and the video. be able to. Moreover, the visibility with respect to a user's image | video improves. Here, the “same visual field range” indicates a range that can be viewed with a small movement of the line of sight without moving the face.
本発明の情報表示装置は、ユーザの頭頂部、後頭部、顔面部、左側頭部及び右側頭部のそれぞれの映像を撮影する複数のカメラと、カメラが撮影した映像を表示する表示手段と、表示手段の表示面に重ね合わされたハーフミラーと、少なくともユーザの頭部位置を検出するユーザ位置検出手段と、ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないようにカメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、表示位置制御手段は、ハーフミラー像におけるユーザの頭部を複数のカメラが撮影した複数の映像で囲んで表示することを特徴とする。これにより、表示手段の表示面にハーフミラーを重ね合わせた表示ユニットに、ユーザのハーフミラー像と当該ユーザを撮影した映像とを共にハーフミラー像の少なくとも頭部と映像とが重なることなく表示させることができる。また、ユーザの上半身の鏡像を見るユーザの同一視野内に映像を表示することができる。更に、表示位置制御手段は、ハーフミラー像におけるユーザの頭部の上側に頭頂部の映像、ハーフミラー像におけるユーザの頭部の左側に左側頭部の映像、ハーフミラー像におけるユーザの頭部の右側に右側頭部の映像、及びハーフミラー像におけるユーザの頭部の下側に後頭部の映像を表示しても構わない。ハーフミラー像の頭部に対する各映像の表示位置を指定することにより、各映像が頭部のどの部位であるかをユーザに容易に認識させることができる。 An information display device according to the present invention includes a plurality of cameras that capture images of the user's top, back, face, left and right heads, display means that displays images captured by the camera, and display A half mirror superimposed on the display surface of the means, a user position detecting means for detecting at least the user's head position, and a mirror image display position for detecting the display position of the user's head in the half mirror image from the user's head position Based on the display position of the head detected by the detection means and the mirror image display position detection means, the display position of the video shot by the camera so that the video shot by the camera and at least the user's head in the half mirror image do not overlap and a display position control means for controlling the display position control means, surrounded by a plurality of images of the user's head a plurality of cameras were taken in the half-mirror image Characterized in that it displays. As a result, the display unit in which the half mirror is superimposed on the display surface of the display means displays both the user's half mirror image and the video captured by the user without overlapping at least the head of the half mirror image and the video. be able to. Moreover, an image can be displayed in the same visual field of the user who sees a mirror image of the upper body of the user. Further, the display position control means includes an image of the top of the head above the user's head in the half mirror image, an image of the left head on the left side of the user's head in the half mirror image, and the image of the user's head in the half mirror image. The right head image may be displayed on the right side, and the back head image may be displayed below the user's head in the half mirror image. By designating the display position of each image with respect to the head of the half mirror image, the user can easily recognize which part of the head each image is.
本発明の情報表示装置において、表示手段は生活情報映像を表示し、表示位置制御手段は、生活情報映像とハーフミラー像における少なくともユーザの頭部及びカメラが撮影した映像とが重ならないように生活情報映像の表示位置を制御してもよい。更に、情報表示装置は、ユーザの行動を検出する行動検出手段を更に備え、表示手段は、生活情報映像として、検出されたユーザの行動に関連する映像を表示してもよい。ユーザの行動に関連する映像、例えば、天気予報、紫外線情報、スケジュール、タイムキーパなどを表示することにより、ユーザに有益な情報を教示することができる。 In the information display device of the present invention, the display means displays the life information video, and the display position control means lives so that the life information video and at least the user's head and the video taken by the camera in the half mirror image do not overlap. The display position of the information video may be controlled. Furthermore, the information display device may further include a behavior detection unit that detects the user's behavior, and the display unit may display a video related to the detected user's behavior as the life information video. By displaying images related to the user's behavior, such as weather forecast, ultraviolet information, schedule, time keeper, etc., useful information can be taught to the user.
本発明によれば、ハーフミラー像における少なくともユーザの頭部と映像とが重なることなく鏡像及び当該ユーザを撮影した映像を表示する情報表示装置を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the information display apparatus which displays a mirror image and the image | video which image | photographed the said user can be provided, without the user's head and image | video overlapping at least in a half mirror image.
以下図面を参照して、本発明の実施の形態を説明する。図面の記載において同一部分には同一符号を付している。
(第1の実施の形態)
図1を参照して、本発明の第1の実施の形態に係わる情報表示装置の構成を説明する。情報表示装置は、映像を表示する表示手段の一例としてのフラットパネルディスプレイ24と、フラットパネルディスプレイ24の表示面に直接に重ね合わされたハーフミラー21と、フラットパネルディスプレイ24の表側FSに居るユーザPRの頭頂部、後頭部及び顔面部各々の映像を撮影する複数のカメラ14a〜14cと、カメラ14a〜14cを制御するコンピュータ13とを備える。図1は、フラットパネルディスプレイ24の表示面に垂直な断面における各部材の配置例を示している。
Embodiments of the present invention will be described below with reference to the drawings. In the description of the drawings, the same parts are denoted by the same reference numerals.
(First embodiment)
With reference to FIG. 1, the structure of the information display apparatus concerning the 1st Embodiment of this invention is demonstrated. The information display device includes a
フラットパネルディスプレイ24として、例えば、プラズマディスプレイパネル(PDP)及び液晶表示装置(LCD)を用いる。ハーフミラー21は、入射する光の一部を反射し、一部を透過する性質を有する。フラットパネルディスプレイ24及びハーフミラー21は表示ユニット15を構成している。
As the flat panel display 24, for example, a plasma display panel (PDP) and a liquid crystal display device (LCD) are used. The
ハーフミラー21の上記性質を利用することにより、フラットパネルディスプレイ24の表側FSにおいてハーフミラー21が反射する光により作り出されるユーザPRの鏡像と、フラットパネルディスプレイ24に表示される映像とがフラットパネルディスプレイ24の表側FSへ向けて表示される。よって、フラットパネルディスプレイ24の表側FSに居るユーザPRは、自己の鏡像及び映像を視認することができる。
By utilizing the above properties of the
カメラ14a〜14cとして、USBケーブルにより通信が可能なUSBカメラを用いることができる。この場合、カメラ14a〜14cとコンピュータ13はUSBケーブルによりそれぞれ接続される。ハーフミラー21は、半透過膜シートを透明板の表面に貼り付けて形成してもよいし、金属膜を金属蒸着させて形成してもよい。フラットパネルディスプレイ24は、コンピュータ13から映像ケーブル或いは無線通信により映像データを受信し、映像データを解析して映像を表示する。
As the
なお、図1は、ユーザPRがフラットパネルディスプレイ24の表示面に対して正対している場合を示している。
Incidentally, FIG. 1 shows a case where the user P R is directly facing the display surface of the
図2を参照して、図1のフラットパネルディスプレイ24及びハーフミラー21を含む表示ユニット15の詳細な構成を説明する。表示ユニット15は、ハーフミラー21と、フラットパネルディスプレイ24と、フラットパネルディスプレイ24の形状に合わせて切り欠き部25aが形成された表示枠部25と、フラットパネルディスプレイ24の表示面に対向する面に接続される取付け金具26と、取付け金具26を通じてフラットパネルディスプレイ24が取付けられる取付け台27と、取付け台27とフラットパネルディスプレイ24の間に挿入されるスペーサ28a、28bとを備える。
A detailed configuration of the
フラットパネルディスプレイ24の表示面はハーフミラー21の面に直接重ね合わされ、フラットパネルディスプレイ24の外周は切り欠き部25aが形成された表示枠部25によって取り囲まれている。フラットパネルディスプレイ24は、その表示面に対向する面が取付け金具26を通じて取付け台27に固定されることにより、取付け台27に支持されている。また、縦横自在に配置可能なスペーサ28a、28bを用いて、フラットパネルディスプレイ24の表示面の向きをハーフミラー21の面に平行になるように調整して、フラットパネルディスプレイ24とハーフミラー21との密着性を高めている。この密着性を高めることにより、フラットパネルディスプレイ24に表示された映像のハーフミラー21による反射を抑制することができる。
The display surface of the
図2では、スペーサ28a、28bが水平方向に向けて配置された例を示すが、フラットパネルディスプレイ24の表示面の傾きによっては、スペーサ28a、28bを垂直方向に向けて配置しても構わない。また、フラットパネルディスプレイ24に表示された映像のハーフミラー21による反射を更に抑制するために、フラットパネルディスプレイ24とハーフミラー21との間に液体を注入した部材を挿入して重ね合わせても構わない。また、フラットパネルディスプレイ24をその長辺が水平方向に向けて設置する場合を示すが、もちろん、長辺を垂直方向に向けて配置しても構わない。
Although FIG. 2 shows an example in which the
図3は、図1のフラットパネルディスプレイ24の表示面を表側FSから見た平面図である。情報表示装置は、フラットパネルディスプレイ24の表側FSに居るユーザPRの左側頭部、右側頭部各々の映像を撮影するカメラ14d、14eを更に備える。カメラ14d、14eは、カメラ14a〜14cと同様にしてUSBカメラを用いることができる。
FIG. 3 is a plan view of the display surface of the
図4は、図1のコンピュータ13の構成を示すブロック図である。コンピュータ13は、データの演算処理機能を備える処理演算部(CPU)31と、データを格納するデータベース32と、インターネット51、情報端末52、及びカメラ14a〜14eとの間でデータの入出力を制御する入出力部33を備える。
FIG. 4 is a block diagram showing a configuration of the
処理演算部31は、カメラ14a〜14eの動作を制御するカメラ制御部36と、少なくともユーザPRの頭部位置を検出するユーザ位置検出部と、検出されたユーザPRの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出部40(鏡像表示位置検出手段)と、カメラ14a〜14eが撮影したユーザPRの映像からハーフミラー21に対するユーザPRの頭部の位置及び距離を検出するユーザ位置検出部37(ユーザ位置検出手段)と、ユーザ位置検出部37が検出したユーザPRの頭部の位置及び距離からフラットパネルディスプレイ24の表示面上におけるユーザPRの視野範囲を推定する視野判断部44(視野判断手段)と、フラットパネルディスプレイ24の動作を制御する表示制御部38と、ユーザPRによる操作を受け付けるユーザインターフェース部39(操作手段)と、ユーザPRの行動を検出する行動検出部45(行動検出手段)とを備える。
カメラ制御部36は、カメラ14a〜14eが撮影する映像の撮影面積の大きさを制御する撮影面積制御部46を有する。「撮影面積の大きさを制御する」ことの例としては、カメラ14a〜14eのズーム機能を用いて映像を拡大したり、縮小したりすることが挙げられる。
The
表示制御部38は、各カメラ14a〜14eが撮影した映像の表示位置を制御する表示位置制御部47と、各カメラ14a〜14eが撮影した映像の表示面積の大きさを制御する表示面積制御部48とを備える。ここで、「映像の表示位置」とは、フラットパネルディスプレイ24の表示面内における映像の表示位置である。また、「映像の表示面積の大きさを制御する」ことは、各カメラ14a〜14eが撮影した映像の表示面積の大きさを画像処理により大きくしたり、小さくしたりすることであり、カメラ14a〜14eのズーム機能を用いる等によって撮影面積の大きさを制御することと異なる概念である。
The
データベース32は、カメラ14a〜14eが撮影した映像のデータを格納する映像データ部41と、ユーザPRに関連する情報を格納したユーザ関連データ部42と、処理演算部31が行う演算処理のアルゴリズムを規定したコンピュータプログラムのデータを格納したプログラムデータ部43とを備える。コンピュータプログラムには、カメラで撮影した映像をフラットパネルディスプレイ24に表示するためのアプリケーションソフトウェア(FLASH、C++などのプログラミング言語で記述されたもの)やオペレーティングシステム(OS)等の基本ソフトウェアが含まれる。
ユーザ位置検出部は、ユーザの顔面部を撮影するカメラ14cを備える。ユーザ位置検出部は、ユーザとハーフミラー21との距離を求める距離測定手段を備え、鏡像表示位置検出部40は、当該距離に基づいてユーザの頭部の面積を特定する。鏡像表示位置検出部40は、ユーザの顔面部の映像に基づいて、ハーフミラー像におけるユーザの頭部の位置及び大きさを検出する。
The user position detection unit includes a
この他にも、例えば、フラットパネルディスプレイ24の近傍にある一点から出力される音波やレーザを頭部で反射させ、反射された音波やレーザを用いて頭部の3次元的な位置を検出する距離画像計やレーザ光切断法等を用いて、ユーザの頭部位置を検出してもよい。また、ある程度離れた位置に設置された2台のカメラで顔画像をステレオ式に認識することにより、ユーザPRの頭部の3次元的な位置を検出することができる。例えば、ユーザPRの正面に配置されたカメラ14cと左側に配置されたカメラ14dの組み合わせ、或いは、ユーザPRの正面に配置されたカメラ14cと右側に配置されたカメラ14eの組み合わせによって頭部位置を認識すればよい。更に、頭部の3次元的な位置から座標変換することにより、フラットパネルディスプレイ24においてハーフミラー像の頭部が映し出される位置を特定することができる。特定されたハーフミラー像の頭部が映し出される位置に基づいて、表示位置制御部47は、ユーザPRのハーフミラー像における少なくともユーザの頭部とカメラ14a〜14dが撮影した映像とが重ならないように、カメラ14a〜14dが撮影した映像の表示位置を制御する。
In addition to this, for example, a sound wave or laser output from one point in the vicinity of the
更に、ユーザ位置検出部37がハーフミラー21に対するユーザPRの頭部の位置及び距離を検出し、検出した位置及び距離から視野判断部44がフラットパネルディスプレイ24の表示面上におけるユーザPRの視野範囲を推定する。そして、表示位置制御部47は、視野判断部44が推定したユーザPRの視野範囲に基づいて、ユーザPRの頭部の鏡像を見るユーザPRの同一視野範囲内にカメラ14a〜14dが撮影した映像を表示する。同一視野範囲Aの一例を図3に示す。
Furthermore, the user
ユーザインターフェース部39は、ユーザPRによるコントローラのボタン操作を受け付けたり、ユーザPRのジェスチャーを認識するジェスチャー認識システムであったり、あるいは、ユーザPRが発する音声を認識する音声認識システムである。
The
行動検出部45は、ユーザインターフェース部39の音声認識機能を用いた音声入力やボタン入力によってユーザPRの行動を検出してもよいし、自らの判断でユーザPRの行動を検出しても構わない。
次に、図5を参照して、図4のCPU31の動作例を説明する。
Next, an example of the operation of the
(イ)先ずS01段階において、カメラ14a〜14dが撮影したユーザPRの頭部のカメラ映像が入力される。S03段階に進み、鏡像表示位置検出部40は、カメラ映像におけるユーザの頭部の座標を特定する。例えば、カメラ14cの中心軸を(0,0)とし、カメラ14cが撮影したカメラ映像における両眼の中点の座標をそれぞれ特定する。
(A) First, in step S01, the
(ロ)S05段階に進み、ユーザ位置検出部37は、カメラ14d及びカメラ14eが撮影したユーザPRの映像における頭部のカメラ座標からハーフミラー21とユーザPRの頭部との距離を検出する。或いは、ハーフミラー21の上部あるいは近傍に新たに設けたレーザや超音波などを用いた距離測定手段を用いて、ユーザとハーフミラー21との距離を特定しても構わない。また或いは、距離画像カメラ(x、y、z)を用いたり、2台以上のカメラからなるステレオ式カメラを用いて、(イ)及び(ロ)を同時に行ってもよい。なお、所定の床面に足跡のマークを付し、ユーザに対して立ち位置を示している場合、ユーザの頭部とハーフミラー21との距離が固定されるので、S05段階は不要となる。
(B) the process proceeds to S05 step, the user
(ハ)S07段階に進み、鏡像表示位置検出部40は、S05段階で求めたユーザとハーフミラー21との距離に基づいて、S03段階で特定されたカメラ映像における頭部の座標を、ハーフミラー像における頭部の表示位置へ変換する。つまり、カメラ映像における両眼中点の座標を、両眼の中点から地面に対して水平な線がハーフミラー面と直角に交わる位置へ変換する。なぜなら、例えばカメラ14cが撮影したカメラ映像における両眼の座標が同じであっても、ユーザとハーフミラー21との距離が異なれば、ハーフミラー像における両眼の表示位置は変化するからである。なお、カメラ中心軸上では、距離が異なってもハーフミラー像における両眼の表示位置は変化しないが、カメラ中心軸から離れるほど変化は大きくなる。カメラ14cの中心軸からのずれ角及びユーザとカメラ14c或いはハーフミラー21との距離に応じて変化する変換係数を予め定めてそのデータを例えばテーブルとして記憶しておけばよい。また、頭部輪郭を総て座標変換しても良いが、両眼中心などの代表点のみの座標を変換しても構わない。次に、鏡像表示位置検出部40は、S05段階で求めたハーフミラー21とユーザPRの頭部との距離に基づいて、ユーザの顔面部のカメラ映像から、ユーザの頭部(顔面部)の面積を特定する。ここで、ハーフミラー像における頭部の面積は、ユーザの頭部(又は顔面部)の面積の1/4の面積となるので、S07段階で座標変換したハーフミラー像における両眼中点の位置に、ユーザの頭部(又は顔面部)の1/4の面積でハーフミラー像が見えることになる。この処理によって、鏡像表示位置検出部40は、ハーフミラー像の表示位置を検出することができる。
(C) Proceeding to step S07, the mirror image display
(ニ)S09段階に進み、視野判断部44は、S05段階で検出したハーフミラー21とユーザPRの頭部との距離及び位置からフラットパネルディスプレイ24の表示面上におけるユーザPRの視野範囲を推定する。視野範囲の定義及び視野範囲の推定は一般的な人間の視野を基準に予め設定されている。
(D) the process proceeds to S09 step,
(ホ)S11段階に進み、表示位置制御部47は、カメラ14a〜14dが撮影した各ユーザ映像をフラットパネルディスプレイ24に表示させる。この時、表示位置制御部47は、S07段階で特定されたハーフミラー像の頭部が映し出される位置に基づいて、ハーフミラー像における少なくともユーザの頭部とカメラ14a〜14dが撮影した映像とが重ならないように、カメラ14a〜14dが撮影した映像の表示位置を制御する。また、表示位置制御部47は、S09段階で推定したユーザPRの視野範囲に基づいて、ユーザPRの頭部の鏡像を見るユーザPRの同一視野範囲内にカメラ14a〜14dが撮影した映像が表示されるように、カメラ14a〜14dが撮影した映像の表示位置を制御する。
(第1の表示例)
図6は、図1のハーフミラー21の表側FSに表示されるユーザPRの鏡像PM及び映像TP、BP、RP、LPの第1の表示例を示す平面図である。ユーザPRの鏡像PMは、ハーフミラー21の表側FSにおいてハーフミラー21が反射する光により作り出される、左右反転された像である。図1においてユーザPRは表示面に正対しているため、図6の例においてユーザPRの鏡像PMの一部に顔面が映し出されている。また、図4の表示位置制御部47は、ユーザPRの顔面を中心として上下左右方向にそれぞれ、カメラ14a、14b、14d、14eが撮影した映像(頭頂部映像TP、後頭部映像BP、右側頭部映像RP、及び左側頭部映像LP)を表示している。更に、図4の表示位置制御部47は、自己の鏡像PMの顔面部分を見ているユーザPRの同一視野範囲A内に頭頂部映像TP、後頭部映像BP、右側頭部映像RP及び左側頭部映像LP各々を同時に表示する。
(E) Proceeding to step S11, the
(First display example)
Figure 6 is a plan view showing a mirror image P M and image T P of the user P R that is displayed on the front side FS of the
頭頂部映像TP、後頭部映像BP、右側頭部映像RP及び左側頭部映像LP各々の表示位置は、例えば図6に示す位置に予め設定されている場合(第1の設定)と、鏡像PMの顔面部分の表示位置に応じて、ユーザPRの同一視野内に位置するように調整される場合(第2の設定)とがある。ユーザPRは図4のユーザインターフェース部39を介していずれかの設定を選択することができる。
Parietal image T P, occipital video B P, the right temporal image R P and the display position of the left temporal image L P each, for example, if it is preset in the position shown in FIG. 6 (a first configuration) , in accordance with the display position of the face portion of the mirror image P M, and a case (second configuration) to be adjusted to lie within the same visual field of the user P R. The user P R can select any of the settings through the
第2の設定を選択した場合、図5に示したフローチャートに従って、ハーフミラー像における頭部の位置を検出し、ハーフミラー像の頭部が映し出される位置を中心として上下左右方向に各映像TP、BP、RP、LPを表示するように、各映像TP、BP、RP、LPの表示位置を制御すればよい。これにより、表示ユニット15に、ハーフミラー像の顔面部分を複数のカメラ14が撮影した複数の映像TP、BP、RP、LPで囲んで表示させることができる。更に、表示ユニット15に、ハーフミラー像の顔面部分の上側に頭頂部の映像TP、ハーフミラー像の左側に左側頭部の映像LP、ハーフミラー像の右側に右側頭部の映像RP、及びハーフミラー像の下側に後頭部の映像BPを表示させることができる。
If you choose the second set, according to the flowchart shown in FIG. 5, to detect the position of the head in the half-mirror images, each image T P in the vertical and horizontal direction around the position where the head of the half mirror images are displayed , B P, R P, so as to display the L P, the image T P, B P, may be controlled display position of R P, L P. Thus, the
第1の設定を選択した場合、表示位置制御部47は、図1のフラットパネルディスプレイ24が表示する映像TP、BP、RP、LP各々の表示位置を図6に示すような位置に予め設定し、ユーザインターフェース部39は、ユーザPRのハーフミラー像の顔面部分が表示ユニット15の表示面の中央に位置するように音声案内或いは画像表示によってユーザPRに対して促せばよい。このようにして、第1及び第2の設定のいずれにおいても、ユーザPRは、同一視野範囲A内で映像TP、BP、RP、LP各々を顔の向きを変えることなく容易に視認することができる。なお、ユーザPRのハーフミラー像の顔面部分から映像TP、BP、RP、LP各々までの表示面上における距離はユーザPRの視野の広さに応じてユーザPRが任意に設定すればよい。
(第2の表示例)
図8は、図1の表示ユニット15の表側FSに表示されるユーザPRの鏡像FM及び映像TP、BP、RP、LP2の第2の表示例を示す平面図である。第2の表示例では、ユーザインターフェース部39が受け付けたユーザPRの操作に基づいて、図4の表示面積制御部48が表示ユニット15に表示される映像TP、BP、RP、LP2の表示面積の大きさを制御して、左側頭部映像LP2を通常よりも拡大して表示した場合を示す。なお、表示面積制御部48は、表示面積の大きさを拡大するのみならず、縮小することも可能である。ユーザPRは、ユーザインターフェース部39を介して、表示面積の大きさを制御する映像(または当該映像を撮影するカメラ)を特定し、制御内容(拡大・縮小)を決定することができる。例えば、リモコン操作によって制御する場合、ユーザインターフェース部39は、ユーザPRのリモコン操作により発信される電気信号を受信して処理する機能を備える。或いは、ユーザPRの発話音声によって制御する場合、ユーザインターフェース部39は、発話音声を入力して認識し、音声が示す制御内容を実行する機能を備える。このようなユーザインターフェース部39の機能により、ユーザPRは、表示面の前から移動すること無く、映像の表示面積の大きさを操作することができる。なお、図8では、左側頭部映像LP2の表示面積の大きさを制御した場合を示したが、勿論、その他の映像TP、BP、RPの表示面積の大きさを制御しても構わない。
When the first setting is selected, the display
(Second display example)
Figure 8 is a plan view showing a mirror image F M and image T P of the user P R that is displayed on the front side FS of the
表示ユニット15が表示する映像LP2の表示面積の大きさを制御することにより、ユーザPRはカメラ14a〜14eのズーム機能を用いずに所望の映像を拡大或いは縮小して表示させることができる。
By controlling the size of a display area of the image L P2 of the
なお、図8〜11の各表示例において、ユーザPRの鏡像として顔面FMだけを図示し、顔面FMを除く部分は省略している。
(第3の表示例)
図9は、図1の表示ユニット15の表側FSに表示されるユーザPRの鏡像FM及び映像TP、BP、RP、LP3の第3の表示例を示す平面図である。第3の表示例において、図4の撮影面積制御部46は、ユーザインターフェース部39が受け付けたユーザPRの操作に基づいて、カメラ14dが撮影する左側頭部映像LPの撮影面積の大きさを制御して、撮影面積の大きさを通常よりも縮小(ズームイン)して撮影された映像LP3を表示した場合を示す。なお、撮影面積制御部46は、撮影面積の大きさを縮小するのみならず、拡大(ズームアウト)することも可能である。ユーザPRは、ユーザインターフェース部39を介して、撮影面積の大きさを制御するカメラ或いは映像を特定し、制御内容(ズームイン或いはズームアウト)を決定することができる。なお、図9では、カメラ14dで撮影された映像LP3について示したが、勿論、その他のカメラ14a、14b、14eの撮影面積の大きさを制御しても構わない。
In each display example of FIG. 8-11, illustrated only facial F M as a mirror image of the user P R, portion except for the face F M are omitted.
(Third display example)
Figure 9 is a plan view showing a mirror image F M and image T P of the user P R that is displayed on the front side FS of the
カメラ14a〜14eが撮影する映像の撮影面積の大きさを制御することにより、ユーザPRは映像の表示面積の大きさを変えずに所望の映像を拡大或いは縮小して表示させることができる。
(第4の表示例)
フラットパネルディスプレイ24は生活情報映像を表示し、表示位置制御部47は、生活情報映像とハーフミラー像における少なくともユーザの頭部及びカメラ14a、14b、14d、14eが撮影した映像とが重ならないようにユーザの行動に関連する映像の表示位置を制御する。ハーフミラー像の位置及び大きさ及びカメラ14a、14b、14d、14eが撮影した映像の位置及び大きさは分かっているので、生活情報映像をハーフミラー像及びカメラ映像に重ならない位置に制御する。
By
(Fourth display example)
The
図11は、図1の表示ユニット15の表側FSに表示されるユーザPRの鏡像FM、映像TP、BP、RP、LP及び生活情報映像の第4の表示例を示す平面図である。第4の表示例では、図6に示したユーザPRの鏡像FM、映像TP、BP、RP、LPに加えて、ユーザPRの肌(顔面の皮膚)を拡大して撮影した映像66、67が、生活情報映像として表示ユニット15に表示される。図11の例では、過去に撮影した肌の拡大映像66と現在の肌の拡大映像67とが同時に表示される。
Figure 11 is a plan showing a mirror image F M user P R that is displayed on the front side FS of the
過去に撮影した肌の拡大映像66のデータは、図4の映像データ部41に予め格納されている。ユーザPRは、リモコン操作または音声操作を行うことにより過去の拡大映像66が撮影された日時を特定する。ユーザインターフェース部39はこのリモコン操作または音声操作を認識し、図4の表示制御部38は、過去の拡大映像66のデータを映像データ部41から読み出し、フラットパネルディスプレイ24で過去の拡大映像66を表示する。
The data of the
このようなユーザインターフェース部39の機能により、ユーザPRは、表示面の前から移動すること無く、映像データ部41に格納された映像を表示ユニット15に表示させることができる。
These features of the
なお、図11の例では、肌(顔面の皮膚)の拡大映像を生活情報映像として表示させた場合を示したが、これに限らず、頭部のその他の部位の皮膚(例えば、頭皮など)の拡大映像であっても構わない。頭皮の拡大映像としては、カメラ14aが撮影した頭頂部の拡大映像を用いればよい。
In the example of FIG. 11, a case where an enlarged image of the skin (facial skin) is displayed as a life information image is shown, but the present invention is not limited to this, and the skin of other parts of the head (for example, the scalp). It may be an enlarged image of. As the enlarged image of the scalp, an enlarged image of the top of the head taken by the
カメラ14aを用いて頭頂部の拡大映像を撮影する場合、例えば、図12に示すように、コンピュータ13は、照明制御装置72を介してユーザPRの頭頂部に光を照射する照明装置71を点灯させる。このように、頭頂部の照度を高めることにより、より鮮明な拡大映像を撮影することができる。コンピュータ13を介してカメラ14aの露出と照明装置71の輝度を連携させることにより更に鮮明な拡大映像を撮影して表示ユニット15に表示することができる。なお、頭頂部に限らず、カメラ14a〜14eの配置位置に対応してユーザPRの頭部に光を照射する照明装置を配置しても構わない。
When shooting the enlarged image of the top of the head with the
また、図1において、フラットパネルディスプレイ24の直下或いはフラットパネルディスプレイ24の周辺にUSBカメラを配置し、USBカメラがハーフミラー21越しにFS側にいるユーザPRを撮影してもよい。これにより、ユーザPRにUSBカメラが配置されていることを意識させること無くユーザPRの映像を取得し、ユーザPRの手や足などの身体の動きをセンシングすることができる。
(第5の表示例)
図10は、図1の表示ユニット15の表側FSに表示されるユーザPRの鏡像FM、映像TP、BP、RP、LP及び生活情報映像の第5の表示例を示す平面図である。第5の表示例では、図6に示したユーザPRの鏡像FM、映像TP、BP、RP、LPに加えて、行動検出部45が検出したユーザPRの行動に基づいて、ユーザPRの行動に関連する映像61〜64が、生活情報映像として表示ユニット15に表示される。
Further, in FIG. 1, a USB camera is arranged on the periphery of just under or
(Fifth display example)
Figure 10 is a plan showing a mirror image F M user P R that is displayed on the front side FS of the
例えば、行動検出部45は、月〜金曜日の午前9時において、ユーザが外出する「お出かけ行動」を自動で検出する。そして、お出かけ行動に関連する映像として、天気予報61、紫外線情報62などの映像を表示する。行動検出部45が、ユーザの入浴行動を検出した場合、入浴行動に関連する映像として、美容情報を表示する。また、行動検出部45は、ユーザPRのスケジュールを管理する管理ソフトウェアがインストールされたパーソナルコンピュータやスマートフォン、携帯電話、携帯情報端末(PDA)などの情報端末52と連動してユーザの行動を検出してもよい。
For example, the
また、情報表示装置は、ユーザの取り得る複数の行動とこれらの行動に関連する映像との関係を示す行動情報関係テーブルを予めユーザ関連データ部42に格納している。
In addition, the information display device stores in advance in the user-related
図1の表示ユニット15に、鏡像FMを見ているユーザPRの同一視野内に映像TP、BP、RP、LP及びユーザPRの行動に関連する映像61〜64各々を同時に表示させる。ユーザPRの行動に関連する映像61〜64として、例えば、天気予報61、紫外線情報62、ユーザPRのスケジュール63、タイムキーパ64などを表示することにより、ユーザPRに対して有益な情報を教示することができる。天気予報61、紫外線情報62は、例えば、図4のインターネット51を介して入手することができ、スケジュール63、タイムキーパ64は、ユーザPRのスケジュールを管理する管理ソフトウェアがインストールされたパーソナルコンピュータやスマートフォン、携帯電話、携帯情報端末(PDA)などの情報端末52から入手することができる。
The
これらの情報映像の利用例としては、現在の天気や利用当日の天気予報(降水確率や最高最低気温等を含む)を表示したり、ユーザPRが女性であることを情報表示装置に入力するか或いは情報表示装置が認識することによりその日の紫外線量の情報を表示したり、利用当日のタイムスケジュールを表示したり、情報表示装置を利用することが許される時間や時刻をこのタイムスケジュールから算出してタイムキーパ64として表示したり、当該時刻においてアラームを鳴らすなどにより、所定の行動を促すなどがある。
The example of the use of these information the video, or to view the weather forecast for the current weather and use the day (including the probability of precipitation and maximum and minimum temperature, etc.), enter the user P R are women in the information display device Or, the information display device recognizes the amount of ultraviolet rays for the day, displays the time schedule for the day of use, and calculates the time and time allowed to use the information display device from this time schedule. Then, it is displayed as the
ユーザPRが情報表示装置を化粧台に使用している場合、紫外線量が気になるユーザPRに対して紫外線情報を表示させる。なおこの時、ユーザPRが化粧をする行動を行動検出部45が検出する。
(第2の実施の形態)
図13を参照して、本発明の第2の実施の形態に係わる情報表示装置の構成を説明する。本発明の第2の実施の形態に係わる情報表示装置においては、図1のフラットパネルディスプレイ24の代りに、光線を投射するプロジェクタ11とプロジェクタ11から投射された光線を拡散する拡散層23とを有する表示手段を用いた場合について説明する。
If the user P R is using the information display device in vanity and displays the UV information to the user P R amount ultraviolet anxious. At this time, the
(Second Embodiment)
With reference to FIG. 13, the structure of the information display apparatus concerning the 2nd Embodiment of this invention is demonstrated. In the information display apparatus according to the second embodiment of the present invention, instead of the
拡散層23は透明板22を介してハーフミラー21の裏側BSに重ね合わされている。プロジェクタ11は、複数のカメラ14a〜14cが撮影した映像を構成する光線をハーフミラー21の裏側BSから投射する。投射された光線が拡散層23において拡散されることにより映像が拡散層23に表示される。よって、ハーフミラー21の表側FSにおいてハーフミラー21が反射する光により作り出されるユーザPRの鏡像と、ハーフミラー21の裏側からプロジェクタ11により投射され且つ拡散層23により拡散される光線により作り出される映像とがハーフミラー21の表側FSへ向けて表示される。拡散層23、透明板22及びハーフミラー21は表示ユニット12を構成している。
The
透明板22はアクリルまたはガラスを材料として形成することができる。また、拡散層23は、シート状の拡散部材で形成し、これを透明板22に貼り付けてもよいし、透明板22の一部に研磨加工などを施して透明板22の裏側BSの主面に拡散機能を生成してもよい。プロジェクタ11は、コンピュータ13から映像ケーブル或いは無線通信により映像データを受信し、映像データを解析してカメラ14a〜14cが撮影した映像を構成する光線を投射する。
The
なお、図13は、ユーザPRが表示ユニット12の表示面に対して正対している場合を示している。
Incidentally, FIG. 13 shows a case where the user P R is directly opposite to the display surface of the
第2の実施の形態に係わる情報表示装置の他の構成及び動作例は第1の実施の形態に係わる情報表示装置と同じであり、図示及び説明を省略する。
(その他の実施の形態)
上記のように、本発明は、2つの実施の形態及び第1〜第5の表示例によって記載したが、この開示の一部をなす論述及び図面はこの発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
Other configurations and operation examples of the information display apparatus according to the second embodiment are the same as those of the information display apparatus according to the first embodiment, and illustration and description thereof are omitted.
(Other embodiments)
As described above, the present invention has been described by the two embodiments and the first to fifth display examples. However, it is understood that the description and drawings constituting a part of this disclosure limit the present invention. Should not. From this disclosure, various alternative embodiments, examples and operational techniques will be apparent to those skilled in the art.
図1において、カメラ14cは表示ユニット15の表側FSに配置されている場合を示したが、カメラ14cは表示ユニット15の裏側BSに配置されていてもよい。この場合、カメラ14cを、フラットパネルディスプレイ24の表示面と重ならない位置に配置し、ハーフミラー21を介してユーザを撮影すればよい。
Although FIG. 1 shows the case where the
図13に示した表示ユニット12は、ハーフミラー21と拡散層23との間に透明板22を配置した場合を示したが、ハーフミラー21と拡散層23を透明板22を介さずに直接重ね合わせても構わない。例えば、ハーフミラー21の裏側BSに拡散シートを直接貼り付けても構わない。これにより、表示ユニット12を薄くすることができる。また、図7に示す距離αと距離βの差を縮めることができる。
In the
また、ハーフミラー21、透明板22、拡散層23の積層順序は、ユーザPR側から、ハーフミラー21、拡散層23及び透明板22の順であっても、或いは、透明板22、ハーフミラー21及び拡散層23の順であっても構わない。
Further, the
第4の表示例において肌の拡大映像を表示する場合を示したが、肌の拡大映像から肌の色やつや、肌に含まれる水分量、肌年齢、或いは頭皮の状態などを診断する機能を付加してもよい。これにより、これらの診断結果をその他の映像(情報映像)として表示することができる。 In the fourth display example, the case where an enlarged image of the skin is displayed has been shown. However, the function of diagnosing the skin color and skin, the amount of moisture contained in the skin, the age of the skin, or the state of the scalp from the enlarged image of the skin is shown. It may be added. Thereby, these diagnosis results can be displayed as other images (information images).
このように、本発明はここでは記載していない様々な実施の形態等を包含するということを理解すべきである。したがって、本発明はこの開示から妥当な特許請求の範囲に係る発明特定事項によってのみ限定されるものである。 Thus, it should be understood that the present invention includes various embodiments and the like not described herein. Therefore, the present invention is limited only by the invention specifying matters according to the scope of claims reasonable from this disclosure.
本発明の実施の形態に係わる情報表示装置は、洗面台、化粧台、美容台(床屋の鏡など)に適用することができる。 The information display device according to the embodiment of the present invention can be applied to a washstand, a dressing table, and a beauty table (such as a mirror in a barber shop).
11…プロジェクタ
12、15…表示ユニット
13…コンピュータ
14a〜14e…カメラ
21…ハーフミラー
22…透明板
23…拡散層
24…フラットパネルディスプレイ(表示手段)
25…表示枠部
25a…切り欠き部
26…取付け金具
27…取付け台
28a、28b…スペーサ
31…処理演算部
32…データベース
33…入出力部
36…カメラ制御部
37…ユーザ位置検出部(ユーザ位置検出手段)
38…表示制御部
39…ユーザインターフェース部(操作手段)
40…鏡像表示位置検出部(鏡像表示位置検出手段)
41…映像データ部
42…ユーザ関連データ部
43…プログラムデータ部
44…視野判断部(視野判断手段)
45…行動検出部(行動検出手段)
46…撮影面積制御部
47…表示位置制御部(表示位置制御手段)
48…表示面積制御部
51…インターネット
52…情報端末
61…天気予報
62…紫外線情報
63…スケジュール
64…タイムキーパ
66、67…肌の拡大映像
71…照明装置
72…照明制御装置
BP…後頭部映像
BS…裏側
FM…顔面
FS…表側
LP…左側頭部映像
PM…鏡像
PR…ユーザ
RP…右側頭部映像
TP…頭頂部映像
DESCRIPTION OF SYMBOLS 11 ...
25 ...
38 ...
40: Mirror image display position detector (mirror image display position detector)
41 ...
45 ... Behavior detection unit (behavior detection means)
46: Shooting
48 ... display
Claims (8)
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
少なくともユーザの頭部位置を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、
前記鏡像表示位置検出手段は、ユーザの顔面部の映像に基づいて、ハーフミラー像におけるユーザの頭部の位置及び大きさを検出する
ことを特徴とする情報表示装置。 A camera for photographing the image of the face of the user surface portion,
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detecting means for detecting at least the user's head position;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling ,
The information display device, wherein the mirror image display position detection means detects the position and size of the user's head in the half mirror image based on the image of the user's face .
前記鏡像表示位置検出手段は、当該距離に基づいてユーザの頭部の面積を特定する
ことを特徴とする請求項1に記載の情報表示装置。 The user position detecting means includes a distance measuring means for obtaining a distance between the user and the half mirror,
The information display apparatus according to claim 1, wherein the mirror image display position detection unit specifies an area of a user's head based on the distance .
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
少なくともユーザの頭部位置を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、
前記表示位置制御手段は、前記カメラが撮影した映像をハーフミラー像と同じ大きさに表示面積を制御して表示する
ことを特徴とする情報表示装置。 A camera that captures at least one image of the user's top, back, face, left and right heads;
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detecting means for detecting at least the user's head position;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling,
The display position control means, information display you characterized in that the camera is displayed by controlling the display area of the image captured at the same size as the half mirror image.
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
前記カメラが撮影した映像から前記ハーフミラーに対するユーザの頭部の位置及び距離を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段と、
前記ユーザ位置検出手段が検出した前記位置及び距離から表示面上におけるユーザの視野範囲を推定する視野判断手段とを備え、
前記表示位置制御手段は、前記視野判断手段が推定したユーザの視野範囲に基づいて、前記ユーザの頭部の鏡像を見る前記ユーザの同一視野範囲内に前記カメラが撮影した映像を表示する
ことを特徴とする情報表示装置。 A camera that captures at least one image of the user's top, back, face, left and right heads;
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detection means for detecting the position and distance of the user's head relative to the half mirror from the video taken by the camera;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling,
Visual field judgment means for estimating the visual field range of the user on the display surface from the position and distance detected by the user position detection means,
The display position control means displays the video imaged by the camera in the same visual field range of the user who views the mirror image of the user's head based on the visual field range of the user estimated by the visual field judgment means. information display device shall be the feature.
前記カメラが撮影した映像を表示する表示手段と、
前記表示手段の表示面に重ね合わされたハーフミラーと、
少なくともユーザの頭部位置を検出するユーザ位置検出手段と、
ユーザの頭部位置からハーフミラー像におけるユーザの頭部の表示位置を検出する鏡像表示位置検出手段と、
前記鏡像表示位置検出手段が検出した頭部の表示位置に基づいて、前記カメラが撮影した映像とハーフミラー像における少なくともユーザの頭部とが重ならないように前記カメラが撮影した映像の表示位置を制御する表示位置制御手段とを備え、
前記表示位置制御手段は、前記ハーフミラー像におけるユーザの頭部を前記複数のカメラが撮影した複数の映像で囲んで表示する
ことを特徴とする情報表示装置。 A plurality of cameras that capture images of the user's top, back, face, left and right heads,
Display means for displaying video captured by the camera;
A half mirror superimposed on the display surface of the display means;
User position detecting means for detecting at least the user's head position;
Mirror image display position detecting means for detecting the display position of the user's head in the half mirror image from the user's head position;
Based on the display position of the head detected by the mirror image display position detection means, the display position of the image captured by the camera so that the image captured by the camera does not overlap at least the user's head in the half mirror image. Display position control means for controlling,
The display position control means, a plurality of information display you means displays enclosed in the video the user's head and photographed the plurality of cameras in the half-mirror image.
前記表示位置制御手段は、生活情報映像とハーフミラー像における少なくともユーザの頭部及び前記カメラが撮影した映像とが重ならないように前記生活情報映像の表示位置を制御する
ことを特徴とする請求項1から5のいずれか一項に記載の情報表示装置。 The display means displays a life information video,
The display position control means controls the display position of the life information video so that at least the user's head and the video taken by the camera in the life information video and the half mirror image do not overlap. The information display device according to any one of 1 to 5 .
前記表示手段は、前記生活情報映像として、検出されたユーザの行動に関連する映像を表示する
ことを特徴とする請求項7記載の情報表示装置。 It further comprises behavior detection means for detecting the user's behavior,
The information display apparatus according to claim 7 , wherein the display unit displays an image related to the detected user action as the life information image .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008331207A JP5249743B2 (en) | 2007-12-25 | 2008-12-25 | Information display device |
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007333087 | 2007-12-25 | ||
JP2007333087 | 2007-12-25 | ||
JP2008147488 | 2008-06-04 | ||
JP2008147488 | 2008-06-04 | ||
JP2008331207A JP5249743B2 (en) | 2007-12-25 | 2008-12-25 | Information display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010016793A JP2010016793A (en) | 2010-01-21 |
JP5249743B2 true JP5249743B2 (en) | 2013-07-31 |
Family
ID=41702435
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008331207A Active JP5249743B2 (en) | 2007-12-25 | 2008-12-25 | Information display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5249743B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109982616A (en) * | 2016-09-27 | 2019-07-05 | 皇家飞利浦有限公司 | For supporting at least one user to execute the movable device and method of personal nursing |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3062195A1 (en) * | 2015-02-27 | 2016-08-31 | Iconmobile Gmbh | Interactive mirror |
US10970025B1 (en) | 2019-08-26 | 2021-04-06 | William Brian Richardson | Smart electric mirrors |
FR3131961A1 (en) * | 2022-01-20 | 2023-07-21 | Vasile DILAN | Imaging system for presenting the front image and the back image of a subject |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5161968U (en) * | 1974-11-08 | 1976-05-15 | ||
JPH11112970A (en) * | 1997-10-08 | 1999-04-23 | Sony Corp | Television receiver having function for makeup |
JP3505575B2 (en) * | 2001-03-23 | 2004-03-08 | 独立行政法人産業技術総合研究所 | Digital mirror device |
JP4364464B2 (en) * | 2001-09-17 | 2009-11-18 | 株式会社リコー | Digital camera imaging device |
JP2004357103A (en) * | 2003-05-30 | 2004-12-16 | Pioneer Electronic Corp | Mirror device with display device |
JP4654905B2 (en) * | 2005-12-16 | 2011-03-23 | パナソニック電工株式会社 | Video presentation system |
-
2008
- 2008-12-25 JP JP2008331207A patent/JP5249743B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109982616A (en) * | 2016-09-27 | 2019-07-05 | 皇家飞利浦有限公司 | For supporting at least one user to execute the movable device and method of personal nursing |
Also Published As
Publication number | Publication date |
---|---|
JP2010016793A (en) | 2010-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10423837B2 (en) | Method and apparatus for a wearable computer | |
CN106471419B (en) | Management information is shown | |
JP6786792B2 (en) | Information processing device, display device, information processing method, and program | |
US11809623B2 (en) | Head-mounted display device and operating method of the same | |
JP4814080B2 (en) | Mirror assembly with integrated display device | |
US20060103627A1 (en) | Information displaying device | |
US20190227694A1 (en) | Device for providing augmented reality service, and method of operating the same | |
US9998654B2 (en) | Information processing device and method for controlling information processing device | |
JP5249743B2 (en) | Information display device | |
KR20180098071A (en) | Digital signage | |
US11450113B1 (en) | Method and apparatus for a wearable computer | |
JP5439281B2 (en) | User viewpoint space video presentation device, user viewpoint space video presentation method and program | |
TWI670646B (en) | Method of displaying information and displaying system thereof | |
JP5571895B2 (en) | Information display device | |
JP2022546053A (en) | Virtual mirror system and method | |
JP2017173455A (en) | Information processing device, information processing method, and program | |
JP2010237884A (en) | Device, method, and program for controlling display | |
US20170337707A1 (en) | Method and system for transforming between physical images and virtual images | |
WO2021020069A1 (en) | Display device, display method, and program | |
CN113661433A (en) | Head-mounted display device and operation method thereof | |
US11527004B2 (en) | Electronic device and operation method thereof | |
US20230112939A1 (en) | A system for providing guidance | |
EP3903668A1 (en) | A system for providing guidance | |
JP2016144071A (en) | Position control device, program, image display device, and image display method | |
KR20240030881A (en) | Method for outputting a virtual content and an electronic device supporting the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20111207 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20111207 |
|
A621 | Written request for application examination |
Effective date: 20111214 Free format text: JAPANESE INTERMEDIATE CODE: A621 |
|
RD05 | Notification of revocation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7425 Effective date: 20111215 |
|
A711 | Notification of change in applicant |
Effective date: 20120113 Free format text: JAPANESE INTERMEDIATE CODE: A712 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121225 |
|
A521 | Written amendment |
Effective date: 20130225 Free format text: JAPANESE INTERMEDIATE CODE: A523 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130319 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130412 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Year of fee payment: 3 Free format text: PAYMENT UNTIL: 20160419 |