JPWO2021038478A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2021038478A5
JPWO2021038478A5 JP2022513233A JP2022513233A JPWO2021038478A5 JP WO2021038478 A5 JPWO2021038478 A5 JP WO2021038478A5 JP 2022513233 A JP2022513233 A JP 2022513233A JP 2022513233 A JP2022513233 A JP 2022513233A JP WO2021038478 A5 JPWO2021038478 A5 JP WO2021038478A5
Authority
JP
Japan
Prior art keywords
virtual mirror
camera
subject
view
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022513233A
Other languages
Japanese (ja)
Other versions
JP2022546053A (en
Publication date
Application filed filed Critical
Priority claimed from PCT/IB2020/057996 external-priority patent/WO2021038478A1/en
Publication of JP2022546053A publication Critical patent/JP2022546053A/en
Publication of JPWO2021038478A5 publication Critical patent/JPWO2021038478A5/ja
Pending legal-status Critical Current

Links

Claims (20)

仮想ミラーシステムであって、 A virtual mirror system,
フレームと、 a frame;
前記フレームの第１部分に結合された第１のカメラであって、前記第１のカメラの第１の視野内に配置された被写体の少なくとも一部の１つ以上の第１の画像として再現可能な第１の画像データを生成するように構成された第１のカメラと、 A first camera coupled to a first portion of the frame reproducible as one or more first images of at least a portion of an object located within a first field of view of the first camera. a first camera configured to generate first image data of
前記フレームの第２部分に結合された第２のカメラであって、前記第２のカメラの第２の視野内に配置された前記被写体の少なくとも一部の１つ以上の第２の画像として再現可能な第２の画像データを生成するように構成され、前記第１の視野の一部が前記第２の視野の一部と重なって仮想ミラー領域を画定するように前記第１のカメラに対して配置された第２のカメラと、 A second camera coupled to a second portion of the frame and reproduced as one or more second images of at least a portion of the subject located within a second field of view of the second camera. to the first camera configured to generate possible second image data such that a portion of the first field of view overlaps a portion of the second field of view to define a virtual mirror area; a second camera positioned at the
表面に画像を表示するように構成されたプロジェクタであって、仮想ミラーのユーザ側に位置するプロジェクタと、 a projector configured to display an image on a surface, the projector located on the user's side of the virtual mirror;
前記表面上に光を照射するように構成されたディスプレイであって、前記仮想ミラーのディスプレイ側に位置するディスプレイと、 a display configured to illuminate the surface, the display positioned on the display side of the virtual mirror;
機械可読命令を格納するメモリと、 a memory that stores machine-readable instructions;
１つ以上のプロセッサを含む制御システムと、 a control system including one or more processors;
を備え、 with
前記１つ以上のプロセッサが、前記機械可読命令を実行して、 the one or more processors executing the machine-readable instructions to
前記プロジェクタに、前記第１の画像データおよび前記第２の画像データに基づいて前記被写体の仮想ミラー像を前記表面上に表示させ、前記仮想ミラー像が、前記被写体の前記少なくとも一部のミラー像として前記被写体には見え、かつ causing the projector to display a virtual mirror image of the subject on the surface based on the first image data and the second image data, wherein the virtual mirror image is a mirror image of the at least part of the subject; is visible to the subject as
前記ディスプレイに光を照射させ、その光が前記表面上で可視光となり、前記被写体の前記仮想ミラー像を拡張する、 illuminating the display with light that becomes visible on the surface and extends the virtual mirror image of the subject;
ことを特徴とする仮想ミラーシステム。 A virtual mirror system characterized by: 前記プロジェクタが、（ｉ）前記フレーム又は（ｉｉ）前記表面にほぼ垂直な天井に結合されている、 the projector is coupled to (i) the frame or (ii) a ceiling substantially perpendicular to the surface;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記表面が前記フレームに結合された壁又はミラーである、 said surface is a wall or mirror coupled to said frame,
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記被写体の前記仮想ミラー像が静止画像又は動画像である、 wherein the virtual mirror image of the subject is a still image or a moving image;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記仮想ミラー像が実質的にリアルタイムで表示される、 the virtual mirror image is displayed substantially in real time;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記第１のカメラが前記フレームの左垂直部分に結合され、前記第２のカメラが前記フレームの右垂直部分に結合される、 the first camera is coupled to the left vertical portion of the frame and the second camera is coupled to the right vertical portion of the frame;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記第２のカメラが前記第１のカメラから離間され、かつ、平行になるように、前記第２のカメラが前記フレームに結合される、 the second camera is coupled to the frame such that the second camera is spaced from and parallel to the first camera;
ことを特徴とする請求項６に記載の仮想ミラーシステム。 7. The virtual mirror system according to claim 6, characterized by: 前記プロジェクタが１つ以上のＭＥＭデバイスを含む、 wherein the projector includes one or more MEM devices;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記プロジェクタのレンズと前記表面との間の距離が、約６インチ～約２４インチである、 the distance between the projector lens and the surface is between about 6 inches and about 24 inches;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記フレームに結合された奥行センサ又は１つ以上の光源をさらに備える、 further comprising a depth sensor or one or more light sources coupled to said frame;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記第２の視野が、前記被写体の正面図、前記被写体の側面図、又は前記被写体の部分側面図である、 wherein the second field of view is a front view of the subject, a side view of the subject, or a partial side view of the subject;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記第１の視野が前記被写体の部分側面図であり、 wherein the first field of view is a partial side view of the subject;
前記第２の視野が前記被写体の正面図である、 wherein the second field of view is a front view of the subject;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記仮想ミラー像が、敵対的生成ネットワーク（ＧＡＮ）を使用して生成される、 the virtual mirror image is generated using a generative adversarial network (GAN);
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記第２の視野が前記第１の視野と異なる、 the second field of view is different from the first field of view;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 前記仮想ミラー像が、前記第１の視野および前記第２の視野とは異なる第３の視野を有する、 the virtual mirror image has a third field of view different from the first field of view and the second field of view;
ことを特徴とする請求項１に記載の仮想ミラーシステム。 The virtual mirror system according to claim 1, characterized by: 仮想ミラーシステムであって、 A virtual mirror system,
第１のカメラであって、被写体の第１の側に位置し、かつ、前記被写体が前記第１のカメラの第１の視野（ＦＯＶ）内に配置されたときに、前記被写体に関連付けられた第１の画像データを生成するように構成され、前記第１のＦＯＶの中心軸が第１の垂直平面に対して第１の角度をなし、かつ、第１の水平平面に対して第２の角度をなすように搭載される、第１のカメラと、 a first camera located on a first side of a subject and associated with the subject when the subject is positioned within a first field of view (FOV) of the first camera; configured to generate first image data, wherein a central axis of the first FOV is at a first angle with respect to a first vertical plane and at a second angle with respect to a first horizontal plane; a first camera mounted at an angle;
第２のカメラであって、前記被写体の第２の側に位置し、かつ、前記被写体が前記第２のカメラの第２の視野（ＦＯＶ）内に配置されたときに、前記被写体に関連付けられた第２の画像データを生成するように構成され、前記第２のＦＯＶの中心軸が第２の垂直平面に対して第３の角度をなし、かつ、第２の水平平面に対して第４の角度をなすように搭載され、前記第１のＦＯＶの一部が前記第２のＦＯＶの一部と重なるように前記第１のカメラに対して配置される、第２のカメラと、 a second camera positioned on a second side of the subject and associated with the subject when the subject is positioned within a second field of view (FOV) of the second camera; wherein a central axis of the second FOV is at a third angle with respect to a second vertical plane and at a fourth angle with respect to a second horizontal plane; a second camera mounted at an angle of and positioned relative to the first camera such that a portion of the first FOV overlaps a portion of the second FOV;
仮想ミラー面に電磁放射を放出するように構成されたプロジェクタであって、前記プロジェクタの中心軸が第３の垂直平面に対して第５の角度をなし、かつ、第３の水平平面に対して第６の角度をなすように搭載され、仮想ミラーのユーザ側に配置された、プロジェクタと、 A projector configured to emit electromagnetic radiation into a virtual mirror plane, wherein the central axis of the projector makes a fifth angle with respect to a third vertical plane and with respect to a third horizontal plane a projector mounted at a sixth angle and positioned on the user's side of the virtual mirror;
前記仮想ミラー面上に光を照射するように構成されたディスプレイであって、前記仮想ミラーのディスプレイ側に位置するディスプレイと、 a display configured to illuminate a surface of the virtual mirror, the display positioned on the display side of the virtual mirror;
機械可読命令を格納するメモリと、 a memory that stores machine-readable instructions;
１つ以上のプロセッサを含む制御システムと、 a control system including one or more processors;
を備え、 with
前記１つ以上のプロセッサが、前記機械可読命令を実行して、 the one or more processors executing the machine-readable instructions to
少なくとも前記第１の画像データと前記第２の画像データとに基づいて、前記被写体の少なくとも一部のリアルタイム動画フィードを生成し、 generating a real-time video feed of at least a portion of the subject based on at least the first image data and the second image data;
前記プロジェクタを使用して、前記被写体の前記一部の前記生成されたリアルタイム動画フィードの少なくとも一部を前記仮想ミラー面に表示し、 using the projector to display at least a portion of the generated real-time video feed of the portion of the subject on the virtual mirror surface;
前記ディスプレイに光を照射させ、その光が前記仮想ミラー面上で可視光となり、前記被写体の前記一部の前記リアルタイム動画フィードを拡張する、 illuminating the display with light that becomes visible on the virtual mirror plane, augmenting the real-time video feed of the portion of the subject;
ことを特徴とする仮想ミラーシステム。 A virtual mirror system characterized by: 前記第１の垂直平面と、前記第２の垂直平面と、前記第３の垂直平面とが平行である、 the first vertical plane, the second vertical plane, and the third vertical plane are parallel;
ことを特徴とする請求項１６に記載の仮想ミラーシステム。 17. The virtual mirror system according to claim 16, characterized by: 前記第１の角度が約０度～約４５度であり、 the first angle is about 0 degrees to about 45 degrees;
前記第２の角度が約０度であり、 the second angle is about 0 degrees;
前記第３の角度が約０度～約４５度であり、 the third angle is about 0 degrees to about 45 degrees;
前記第４の角度が約０度であり、 the fourth angle is about 0 degrees;
前記第５の角度が、約－１０度～約１０度であり、 the fifth angle is about -10 degrees to about 10 degrees;
前記第６の角度が、約０度～約６０度である、 the sixth angle is between about 0 degrees and about 60 degrees;
ことを特徴とする請求項１６に記載の仮想ミラーシステム。 17. The virtual mirror system according to claim 16, characterized by: 前記仮想ミラー面は、前記第１の垂直平面と、前記第２の垂直平面と、前記第３の垂直平面と、前記第１の水平平面と、前記第２の水平平面と、前記第３の水平平面とに概ね垂直である、 The virtual mirror plane includes the first vertical plane, the second vertical plane, the third vertical plane, the first horizontal plane, the second horizontal plane, and the third plane. is generally perpendicular to the horizontal plane,
ことを特徴とする請求項１６に記載の仮想ミラーシステム。 17. The virtual mirror system according to claim 16, characterized by: 仮想ミラーシステムであって、 A virtual mirror system,
フレームと、 a frame;
前記フレームの第１の垂直部分に結合された第１のカメラであって、前記第１のカメラの第１の視野内に配置された被写体の少なくとも一部の１つ以上の第１の画像として再現可能な第１の画像データを生成するように構成された第１のカメラと、 a first camera coupled to a first vertical portion of said frame, as one or more first images of at least a portion of an object located within a first field of view of said first camera; a first camera configured to generate reproducible first image data;
前記フレームの第２の垂直部分に結合された第２のカメラであって、前記第２のカメラの第２の視野内に配置された前記被写体の少なくとも一部の１つ以上の第２の画像として再現可能な第２の画像データを生成するように構成された第２のカメラと、 A second camera coupled to a second vertical portion of the frame for one or more second images of at least a portion of the subject positioned within a second field of view of the second camera. a second camera configured to generate second image data reproducible as
前記フレームに結合され、前記第１のカメラと前記第２のカメラとの間に配置されたミラーと、 a mirror coupled to the frame and positioned between the first camera and the second camera;
前記フレームに結合され、前記ミラーのユーザ側に配置されたプロジェクタと、 a projector coupled to the frame and positioned on the user side of the mirror;
表面に光を照射するように構成されたディスプレイであって、前記ミラーのディスプレイ側に位置するディスプレイと、 a display configured to illuminate a surface, the display positioned on the display side of the mirror;
機械可読命令を格納するメモリと、 a memory that stores machine-readable instructions;
１つ以上のプロセッサを含む制御システムと、 a control system including one or more processors;
を備え、 with
前記１つ以上のプロセッサが、前記機械可読命令を実行して、 the one or more processors executing the machine-readable instructions to
前記第１の画像データと前記第２の画像データとに基づいて、前記被写体の少なくとも一部のリアルタイム動画フィードを生成し、 generating a real-time video feed of at least a portion of the subject based on the first image data and the second image data;
前記プロジェクタに、前記被写体の前記一部の前記リアルタイム動画フィードを前記ミラーの少なくとも一部に継続的に表示させ、 causing the projector to continuously display the real-time video feed of the portion of the subject on at least a portion of the mirror;
前記ディスプレイに光を照射させ、その光が前記表面上で可視光となり、前記被写体の仮想ミラー像を拡張する、 illuminating the display with light that becomes visible on the surface and extends a virtual mirror image of the subject;
ことを特徴とする仮想ミラーシステム。 A virtual mirror system characterized by:
JP2022513233A 2019-08-27 2020-08-27 Virtual mirror system and method Pending JP2022546053A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962892367P 2019-08-27 2019-08-27
US62/892,367 2019-08-27
PCT/IB2020/057996 WO2021038478A1 (en) 2019-08-27 2020-08-27 Virtual mirror system and method

Publications (2)

Publication Number Publication Date
JP2022546053A JP2022546053A (en) 2022-11-02
JPWO2021038478A5 true JPWO2021038478A5 (en) 2023-08-24

Family

ID=72521665

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022513233A Pending JP2022546053A (en) 2019-08-27 2020-08-27 Virtual mirror system and method

Country Status (5)

Country Link
US (1) US11818511B2 (en)
EP (1) EP4022894A1 (en)
JP (1) JP2022546053A (en)
CN (1) CN114402587A (en)
WO (1) WO2021038478A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202021104352U1 (en) 2021-08-16 2022-11-17 Smartlook UG (haftungsbeschränkt) hairdresser workplace
IT202100021908A1 (en) 2021-08-16 2023-02-16 Smartlook Ug HAIRDRESSER'S WORKSTATION

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6179426B1 (en) * 1999-03-03 2001-01-30 3M Innovative Properties Company Integrated front projection system
US10109315B2 (en) * 2005-03-01 2018-10-23 Eyesmatch Ltd Devices, systems and methods for auto-delay video presentation
US20070285554A1 (en) * 2005-10-31 2007-12-13 Dor Givon Apparatus method and system for imaging
US20070040033A1 (en) 2005-11-18 2007-02-22 Outland Research Digital mirror system with advanced imaging features and hands-free control
US20130145272A1 (en) 2011-11-18 2013-06-06 The New York Times Company System and method for providing an interactive data-bearing mirror interface
US8994780B2 (en) * 2012-10-04 2015-03-31 Mcci Corporation Video conferencing enhanced with 3-D perspective control
US9325943B2 (en) * 2013-02-20 2016-04-26 Microsoft Technology Licensing, Llc Providing a tele-immersive experience using a mirror metaphor
JP2015005823A (en) * 2013-06-19 2015-01-08 パナソニック株式会社 Image processing apparatus and digital mirror system
EP2849442B1 (en) * 2013-09-16 2017-03-29 ameria GmbH Gesture-controlled rear-projection system
CN104575129A (en) * 2013-10-27 2015-04-29 西安天动数字科技有限公司 Dance teaching system
JP6349838B2 (en) 2014-01-21 2018-07-04 セイコーエプソン株式会社 POSITION DETECTION DEVICE, POSITION DETECTION SYSTEM, AND POSITION DETECTION DEVICE CONTROL METHOD
US9858719B2 (en) * 2015-03-30 2018-01-02 Amazon Technologies, Inc. Blended reality systems and methods
KR102471447B1 (en) 2016-02-03 2022-11-28 엘지전자 주식회사 Mirror type display device andmethod for controlling the same
FR3053509B1 (en) * 2016-06-30 2019-08-16 Fittingbox METHOD FOR OCCULATING AN OBJECT IN AN IMAGE OR A VIDEO AND ASSOCIATED AUGMENTED REALITY METHOD
US10052026B1 (en) * 2017-03-06 2018-08-21 Bao Tran Smart mirror

Similar Documents

Publication Publication Date Title
TWI681663B (en) Near-eye display with extended effective eyebox via eye tracking
US10068369B2 (en) Method and apparatus for selectively integrating sensory content
US6665985B1 (en) Virtual reality theater
JP2916142B1 (en) All-round spherical screen projector
US8256904B2 (en) Rear projected expressive head
JP2016521480A5 (en) Wearable display device
US8042948B2 (en) Apparatus that produces a three-dimensional image
US20210392275A1 (en) Camera array for a mediated-reality system
JP2003108305A (en) Presentation system
US11810254B2 (en) Displaying a scene to a subject while capturing the subject's acting performance using multiple sensors
US10248842B1 (en) Face tracking using structured light within a head-mounted display
US10384144B2 (en) Travel case for portable Pepper's Ghost Illusion setup
US9989775B2 (en) Dual-sided pepper's ghost illusion
US10321107B2 (en) Methods, systems, and computer readable media for improved illumination of spatial augmented reality objects
JP2022529417A (en) Image acquisition projection system, use of the system and image acquisition projection insertion method
JPWO2021038478A5 (en)
JP3224856B2 (en) 3D image device
KR20170100215A (en) Auto stereoscopic Display device with which transparent display is coupled
US20230308629A1 (en) Information Processing Device, Information Processing System, And Member
JP2017158037A (en) Projection device and projection system
US9645404B2 (en) Low-profile bounce chamber for Pepper's Ghost Illusion
JPWO2018173183A1 (en) Optical apparatus control apparatus, optical apparatus control method, and optical apparatus control program
JPWO2021154581A5 (en)
JP2004246574A (en) Presentation device
JP6403650B2 (en) Aerial image rendering device, control method thereof, and program