JP2015099184A5 - - Google Patents

Download PDF

Info

Publication number
JP2015099184A5
JP2015099184A5 JP2013237820A JP2013237820A JP2015099184A5 JP 2015099184 A5 JP2015099184 A5 JP 2015099184A5 JP 2013237820 A JP2013237820 A JP 2013237820A JP 2013237820 A JP2013237820 A JP 2013237820A JP 2015099184 A5 JP2015099184 A5 JP 2015099184A5
Authority
JP
Japan
Prior art keywords
display device
head
mounted display
information
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013237820A
Other languages
English (en)
Other versions
JP2015099184A (ja
JP6264855B2 (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from JP2013237820A external-priority patent/JP6264855B2/ja
Priority to JP2013237820A priority Critical patent/JP6264855B2/ja
Priority to EP14724164.0A priority patent/EP2956814A1/en
Priority to PCT/JP2014/000595 priority patent/WO2014125789A1/en
Priority to BR112015019674A priority patent/BR112015019674A2/pt
Priority to KR1020157024204A priority patent/KR101811817B1/ko
Priority to RU2015138973A priority patent/RU2621488C2/ru
Priority to US14/764,553 priority patent/US9916691B2/en
Priority to TW103104473A priority patent/TW201432312A/zh
Priority to CN201811214129.7A priority patent/CN109270688B/zh
Priority to CN201410048928.7A priority patent/CN103995352B/zh
Publication of JP2015099184A publication Critical patent/JP2015099184A/ja
Publication of JP2015099184A5 publication Critical patent/JP2015099184A5/ja
Publication of JP6264855B2 publication Critical patent/JP6264855B2/ja
Application granted granted Critical
Priority to US15/880,023 priority patent/US10169925B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (24)

  1. 使用者が虚像と外景を視認可能な頭部装着型表示装置であって、
    前記使用者に視認させる前記虚像を形成する画像表示部と、
    前記外景に含まれる物体に対して、前記物体の外観に現れない情報である不可視情報を重畳させるための重畳情報に基づく前記虚像を、前記画像表示部に形成させる重畳処理部と、
    を備える、頭部装着型表示装置。
  2. 請求項1記載の頭部装着型表示装置であって、
    前記重畳処理部は、
    所定の時間ごとに、前記外景に含まれる物体に応じた前記重畳情報に基づく前記虚像を、前記画像表示部に繰り返し形成させる、頭部装着型表示装置。
  3. 請求項1または請求項2記載の頭部装着型表示装置であって、さらに、
    前記不可視情報を記憶する記憶部と、
    前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の外景の画像を取得する画像取得部と、
    を備え、
    前記重畳処理部は、
    前記画像取得部によって取得された前記視界方向の画像を画像認識することで前記外景に含まれる前記物体の特徴を抽出し、
    抽出した前記特徴に基づいて前記記憶部に記憶されている前記物体の前記不可視情報を補正することで、前記重畳情報を生成する、頭部装着型表示装置。
  4. 請求項3に記載の頭部装着型表示装置であって、
    前記不可視情報は、前記物体の構造を表した画像である、頭部装着型表示装置。
  5. 請求項3または請求項4に記載の頭部装着型表示装置であって、
    前記特徴は、前記物体のエッジである、頭部装着型表示装置。
  6. 請求項3または請求項4に記載の頭部装着型表示装置であって、
    前記特徴は、前記物体に付されたマーカーである、頭部装着型表示装置。
  7. 請求項3から請求項6のいずれか一項に記載の頭部装着型表示装置であって、
    前記補正は、前記不可視情報を表す画像に対する、拡大と、縮小と、回転と、反転と、トリミングと、歪みの付与と、ノイズの除去とのうちの少なくともいずれかである、頭部装着型表示装置。
  8. 請求項3から請求項6のいずれか一項に記載の頭部装着型表示装置であって、
    前記補正は、前記不可視情報を表す画像を複数の領域に分割し、前記複数の領域のそれぞれに対する、拡大と、縮小と、トリミングと、歪みの付与と、ノイズの除去とのうちの少なくともいずれかである、頭部装着型表示装置。
  9. 請求項8に記載の頭部装着型表示装置であって、
    前記重畳処理部は、
    前記使用者と前記物体の各部との間の距離を、三角測量を用いてそれぞれ計測し、
    前記計測の結果に応じて前記分割を行う、頭部装着型表示装置。
  10. 請求項3から9のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、前記使用者の視野内における視覚能力の程度を表す情報受容特性に応じて、前記補正の精度を変える、頭部装着型表示装置。
  11. 請求項3から10のいずれか一項に記載の頭部装着型表示装置であって、さらに、
    前記使用者の視線を検出する視線検出部を備え、
    前記画像表示部は、前記使用者の右眼に対応した前記虚像と、前記使用者の左眼に対応した前記虚像と、をそれぞれ形成し、
    前記重畳処理部は、さらに、
    前記視線検出部によって検出された前記視線から、前記使用者と、前記使用者が注視している注視点との間の距離である注視点距離を求め、
    求めた前記注視点距離に応じた視差を付与した右眼用の前記重畳情報と左眼用の前記重畳情報とを生成する、頭部装着型表示装置。
  12. 請求項11に記載の頭部装着型表示装置であって、さらに、
    前記使用者と前記使用者が視認する前記虚像との間の複数の距離と、前記複数の距離にそれぞれ応じた視差と、が対応付けられた視差情報を備え、
    前記重畳処理部は、前記視差情報を用いて、前記注視点距離に応じた視差を付与する、頭部装着型表示装置。
  13. 請求項12に記載の頭部装着型表示装置であって、
    複数の前記視差情報を備え、
    前記重畳処理部は、前記使用者に応じて、前記複数の視差情報から一の前記視差情報を選択する、頭部装着型表示装置。
  14. 請求項3から請求項13のいずれか一項に記載の頭部装着型表示装置であって、さらに、
    前記使用者の前記物体に対する位置を検出する位置検出部を備え、
    前記記憶部には、一の前記物体に対する複数の前記不可視情報が記憶されており、
    前記重畳処理部は、
    前記記憶部に記憶されている前記複数の不可視情報から、前記位置検出部によって検出された前記位置に応じた一の不可視情報を選択し、選択した前記不可視情報を補正する、頭部装着型表示装置。
  15. 請求項3から請求項14のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、さらに、前記画像取得部によって取得された前記視界方向の画像から、前記外景に含まれる前記物体の少なくとも一部を抽出して拡大した拡大情報を生成し、
    前記画像表示部は、前記重畳情報と、前記拡大情報と、に基づく前記虚像を前記使用者に視認させる、頭部装着型表示装置。
  16. 請求項1から請求項15のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、前記使用者からの要求に応じて、前記虚像を非表示とする、頭部装着型表示装置。
  17. 請求項から請求項15のいずれか一項に記載の頭部装着型表示装置であって、さらに、
    現在の手順について、前記使用者が実施すべき内容に関する情報である手順情報を生成する手順管理部を備え、
    前記画像表示部は、前記重畳情報と、前記手順情報と、に基づく前記虚像を前記使用者に視認させる、頭部装着型表示装置。
  18. 請求項17記載の頭部装着型表示装置であって、
    前記手順情報には、第三者が前記手順を模範的に実施している場面の画像と、個別具体的な前記手順に際して使用者が実施すべき内容を表す画像と、の少なくともいずれか一方が含まれる、頭部装着型表示装置。
  19. 請求項1から請求項18のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、さらに、前記使用者の作業を補助するための付加的な情報である補助情報を生成し、
    前記画像表示部は、前記重畳情報と、前記補助情報と、に基づく前記虚像を前記使用者に視認させる、頭部装着型表示装置。
  20. 請求項3から請求項15のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、さらに、前記画像取得部によって取得された前記視界方向の画像に応じて、生成された前記重畳情報の視認性を向上させるための色変換処理を行う、頭部装着型表示装置。
  21. 請求項1から請求項20のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、前記使用者からの要求に応じて、前記虚像として表示されている前記重畳情報を、前記使用者の視界を妨げない位置へと退避させる、頭部装着型表示装置。
  22. 請求項3から請求項15のいずれか一項に記載の頭部装着型表示装置であって、
    前記重畳処理部は、前記画像取得部により取得された前記画像のうち、前記虚像の表示領域と前記画像取得部の取得領域とが重複する重複領域に対して前記重畳情報を生成する、頭部装着型表示装置。
  23. 請求項17または請求項18に記載の頭部装着型表示装置であって、
    前記手順管理部は、前記画像取得部により取得された前記画像のうち、前記虚像の表示領域と前記画像取得部の取得領域とが重複する重複領域に対して前記手順情報を生成する、頭部装着型表示装置。
  24. 使用者が虚像と外景を視認可能な頭部装着型表示装置の制御方法であって、
    (a)前記使用者に視認させる前記虚像を形成する工程と、
    (b)前記外景に含まれる物体に対して、前記物体の外観に現れない情報である不可視情報を重畳させるための重畳情報に基づく前記虚像を形成させる工程と、
    を備える、頭部装着型表示装置の制御方法。
JP2013237820A 2013-02-14 2013-11-18 頭部装着型表示装置および頭部装着型表示装置の制御方法 Active JP6264855B2 (ja)

Priority Applications (11)

Application Number Priority Date Filing Date Title
JP2013237820A JP6264855B2 (ja) 2013-11-18 2013-11-18 頭部装着型表示装置および頭部装着型表示装置の制御方法
US14/764,553 US9916691B2 (en) 2013-02-14 2014-02-04 Head mounted display and control method for head mounted display
PCT/JP2014/000595 WO2014125789A1 (en) 2013-02-14 2014-02-04 Head mounted display and control method for head mounted display
BR112015019674A BR112015019674A2 (pt) 2013-02-14 2014-02-04 display instalado na cabeça e método de controle para display instalado na cabeça
KR1020157024204A KR101811817B1 (ko) 2013-02-14 2014-02-04 두부 장착형 표시 장치 및 두부 장착형 표시 장치의 제어 방법
RU2015138973A RU2621488C2 (ru) 2013-02-14 2014-02-04 Укрепляемый на голове дисплей и способ управления для укрепляемого на голове дисплея
EP14724164.0A EP2956814A1 (en) 2013-02-14 2014-02-04 Head mounted display and control method for head mounted display
TW103104473A TW201432312A (zh) 2013-02-14 2014-02-11 頭部配戴型顯示裝置及頭部配戴型顯示裝置之控制方法
CN201811214129.7A CN109270688B (zh) 2013-02-14 2014-02-12 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法
CN201410048928.7A CN103995352B (zh) 2013-02-14 2014-02-12 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法
US15/880,023 US10169925B2 (en) 2013-02-14 2018-01-25 Head mounted display and control method for head mounted display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013237820A JP6264855B2 (ja) 2013-11-18 2013-11-18 頭部装着型表示装置および頭部装着型表示装置の制御方法

Publications (3)

Publication Number Publication Date
JP2015099184A JP2015099184A (ja) 2015-05-28
JP2015099184A5 true JP2015099184A5 (ja) 2016-11-10
JP6264855B2 JP6264855B2 (ja) 2018-01-24

Family

ID=53375852

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013237820A Active JP6264855B2 (ja) 2013-02-14 2013-11-18 頭部装着型表示装置および頭部装着型表示装置の制御方法

Country Status (1)

Country Link
JP (1) JP6264855B2 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102506369B1 (ko) * 2015-07-03 2023-03-06 현대두산인프라코어 주식회사 건설기계의 가이던스용 웨어러블 디바이스 및 이를 이용한 작업정보 표시 방법
JP2017055233A (ja) * 2015-09-09 2017-03-16 セイコーエプソン株式会社 表示装置、表示システム、及び、表示装置の制御方法
CA3016176A1 (en) * 2016-03-17 2017-09-21 Becton, Dickinson And Company Medical record system using a patient avatar
JP6828465B2 (ja) 2017-01-30 2021-02-10 セイコーエプソン株式会社 内視鏡操作支援システム
JP6773609B2 (ja) * 2017-06-23 2020-10-21 ウエストユニティス株式会社 遠隔支援システム、情報提示システム、表示システムおよび手術支援システム
JP7036572B2 (ja) * 2017-11-02 2022-03-15 マクセル株式会社 虚像表示装置およびそれを用いたヘッドマウントディスプレイ
JP2020014160A (ja) * 2018-07-19 2020-01-23 国立大学法人 筑波大学 透過型ヘッドマウントディスプレイ装置及びプログラム
JP2021009270A (ja) 2019-07-03 2021-01-28 セイコーエプソン株式会社 表示装置および表示方法
JP6655751B1 (ja) * 2019-07-25 2020-02-26 エヌ・ティ・ティ・コミュニケーションズ株式会社 映像表示制御装置、方法およびプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3625906B2 (ja) * 1995-08-23 2005-03-02 オリンパス株式会社 手術用顕微鏡装置
JPH10221637A (ja) * 1997-02-10 1998-08-21 Olympus Optical Co Ltd 頭部装着型画像表示装置
JP2001111991A (ja) * 1999-10-08 2001-04-20 Olympus Optical Co Ltd 顔面装着型映像表示装置
JP4961914B2 (ja) * 2006-09-08 2012-06-27 ソニー株式会社 撮像表示装置、撮像表示方法
JP4455609B2 (ja) * 2007-03-27 2010-04-21 株式会社東芝 画像表示装置および画像表示方法
JP4679661B1 (ja) * 2009-12-15 2011-04-27 株式会社東芝 情報提示装置、情報提示方法及びプログラム
US20120212484A1 (en) * 2010-02-28 2012-08-23 Osterhout Group, Inc. System and method for display content placement using distance and location information
JP4934228B2 (ja) * 2010-06-17 2012-05-16 新日鉄ソリューションズ株式会社 情報処理装置、情報処理方法及びプログラム
JP5011455B1 (ja) * 2011-06-30 2012-08-29 医療法人社団神▲崎▼循環器クリニック X線診断装置

Similar Documents

Publication Publication Date Title
JP2015099184A5 (ja)
RU2015138973A (ru) Укрепляемый на голове дисплей и способ управления для укрепляемого на голове дисплея
US9952657B2 (en) Display apparatus and display control method
MX2018004231A (es) Dispositivo de asistencia de despliegue y metodo de asistencia de despliegue.
JP2010092436A5 (ja)
JP2017059062A5 (ja)
IN2015KN00682A (ja)
EP2979736A3 (en) Image processing
JP2013101528A5 (ja)
JP2013105253A5 (ja)
JP2013206322A5 (ja)
EP4235367A3 (en) Image-generating device and method
JP2012123546A5 (ja)
JP2016515197A5 (ja)
JP2015032144A5 (ja)
WO2013153740A3 (en) Augmented reality system to selectively improve the visibility of the desired information
JP2016024273A5 (ja)
JP2011175477A5 (ja) 3次元計測装置、処理方法、プログラム及び記憶媒体
JP2015149633A5 (ja)
EP2775424A3 (en) Method for providing augmented reality, machine-readable storage medium, and portable terminal
JP2015046092A5 (ja)
JP2017502338A5 (ja)
JP2018050179A5 (ja)
JP2013232181A5 (ja)
JP2012204852A5 (ja)