JP2023132596A - 表示装置、表示方法およびプログラム - Google Patents

Abstract

【課題】仮想空間の画像の少なくとも一部に現実空間の画像を最適表示させる。【解決手段】仮想空間の画像を表示する表示部と、現実空間にある対象物を検出する検出部と、検出部が検出した対象物が表示部を透過して視認できる表示部の領域の透過状態を変更する透過制御部と、を備える。【選択図】図２

Description

本発明は、表示装置、表示方法およびプログラムに関する。

近年、仮想現実（ＶＲ：Virtual Reality）を実現したＶＲ空間を複数のユーザで共有することで、ＶＲ空間を利用した会議、ゲーム、ショッピングなどが増加している。ユーザは、頭部にヘッドマウント型の表示装置（ヘッドマウントディスプレイ：ＨＭＤ：Head Mounted Display）を装着し、ＶＲ空間を利用した会議などに参加する。このような表示装置としては、例えば、下記特許文献１に記載されたものがある。

特開２０２０－１０６５８７号公報

ユーザが仮想空間を利用した会議に参加した場合、仮想空間に設けられた表示スクリーンに各種の資料を表示する。ところが、表示装置の解像度が低いと、表示スクリーンに表示された資料の鮮明度が低くなり、ユーザは、表示スクリーンに表示された資料を読むことが困難となる。そのため、ユーザは、自分が使用しているパーソナルコンピュータのディスプレイを用いて資料を見たいという要望がある。

本発明は、上記に鑑みてなされたものであって、仮想空間の画像の少なくとも一部に現実空間の画像を最適表示させることを目的とする。

上述した課題を解決し、目的を達成するために、本発明に係る表示装置は、仮想空間の画像を表示する表示部と、現実空間にある対象物を検出する検出部と、前記検出部が検出した対象物が前記表示部を透過して視認できる前記表示部の領域の透過状態を変更する透過制御部と、を備える。

本発明に係る表示方法は、表示部に仮想空間の画像を表示するステップと、現実空間にある対象物を検出するステップと、検出した対象物が前記表示部を透過して視認できる前記表示部の領域の透過状態を変更するステップと、を含む。

本発明に係るプログラムは、表示部に仮想空間の画像を表示するステップと、現実空間にある対象物を検出するステップと、検出した対象物が前記表示部を透過して視認できる前記表示部の領域の透過状態を変更するステップと、を表示装置として動作するコンピュータに実行させる。

本発明によれば、仮想空間の画像の少なくとも一部に現実空間の画像を最適表示させることができるという効果を奏する。

図１は、本実施形態に係る表示装置の具体的な構成を表す概略図である。 図２は、本実施形態に係る表示装置の構成を表すブロック図である。 図３は、本実施形態に係る表示方法を表すフローチャートである。 図４は、仮想空間の画像を表す概略図である。 図５は、現実空間の画像を表す概略図である。 図６は、仮想空間の画像に現実空間の画像を重ねた画像の概略図である。

以下に添付図面を参照して、本発明に係る表示装置、表示方法およびプログラムの実施形態を詳細に説明する。なお、以下の実施形態により本発明が限定されるものではない。

＜表示装置の具体的構成＞
図１は、本実施形態に係る表示装置の具体的な構成を表す概略図である。本実施形態では、表示装置にヘッドマウント型の表示装置に適用して説明するが、この構成に限定されるものではない。

図１に示すように、表示装置１０は、表示部１１と、遮光部１２とを有する。

表示部１１は、外装２０に支持される。表示部１１は、表示パネル２１と、ハーフミラー２２と、コンバイナミラー２３とを有する。表示パネル２１は、外装２０の上部に水平をなして配置される。表示パネル２１は、平面形状をなし、例えば、液晶パネル、有機ＥＬパネル、プラズマパネルなど、各種の表示パネルが適用可能である。表示パネル２１は、下面に仮想空間画像Ａの画像を表示可能な表示面２１ａを有する。表示面２１ａは、下方、つまり、外装２０の内部に向けて表示光Ｌａを照射可能である。

ハーフミラー２２は、外装２０の内部で、表示パネル２１の下方に配置される。ハーフミラー２２は、表示パネル２１に対して所定の角度に傾斜して配置される。ハーフミラー２２は、上面側に反射コート２２ａが設けられ、下面側に反射防止コート２２ｂが設けられる。ハーフミラー２２は、上方からの光を反射し、前方からの光を透過する。つまり、ハーフミラー２２は、表示パネル２１から照射された表示光Ｌａをコンバイナミラー２３に向けて反射する。また、ハーフミラー２２は、コンバイナミラー２３で反射された反射光Ｌｂを後方に透過する。

コンバイナミラー２３は、外装２０の内部で、ハーフミラー２２の前方に配置される。コンバイナミラー２３は、外装２０の前部に鉛直をなして配置される。コンバイナミラー２３は、凹面形状をなす。コンバイナミラー２３は、内面側に反射コート２３ａが設けられる。コンバイナミラー２３は、表示パネル２１から照射されてハーフミラー２２で反射された表示光Ｌａを反射し、反射光Ｌｂとしてハーフミラー２２に向けて照射する。

表示部１１は、表示パネル２１から照射された表示光Ｌａをハーフミラー２２により前方に反射させ、表示光Ｌａをコンバイナミラー２３により後方に反射させ、反射光Ｌｂとしてハーフミラー２２を透過させて使用者の眼球に導光させる。そのため、使用者は、表示部１１により表示された仮想空間画像Ａが、表示装置１０の前方に位置するように視認する。

また、コンバイナミラー２３は、現実空間画像Ｂを構成する実像光Ｌｃを外部からハーフミラー２２側に透過して取り込む。現実空間画像Ｂは、後述する対象物を含む画像である。表示部１１は、現実空間画像Ｂを構成する実像光Ｌｃがコンバイナミラー２３およびハーフミラー２２を透過して使用者の左右の眼球に到達させる。そのため、使用者は、現実空間画像Ｂに存在する対象物の画像を直接視認する。

このとき、仮想空間画像Ａを生成する反射光Ｌｂ（表示光Ｌａ）と、現実空間画像Ｂを生成する実像光Ｌｃが使用者の眼球に到達する。そのため、使用者は、仮想空間画像Ａに現実空間画像Ｂが重なった合成画像を視認する。

遮光部１２は、遮光パネル２５を有する。遮光パネル２５は、外装２０の前部に鉛直方向に沿って支持される。遮光パネル２５は、コンバイナミラー２３の外側に所定間隔を空けて配置される。遮光パネル２５は、平面形状をなし、例えば、液晶パネル、有機ＥＬパネル、プラズマパネルなど、各種の表示パネルが適用可能である。遮光パネル２５は、マトリックス状に画素が設けられ、それぞれの画素は、透明から不透明に調整制御可能である。遮光パネル２５は、全ての領域、または、指定する一部の透過率調整制御可能である。

遮光パネル２５は、例えば、一方の面に透明な画素電極がアレイ状に配置され、他方の面に透明な対向電極が配置されて構成され、各電極に遮光制御信号に応じた電圧が印加される。遮光領域に対応する画素と、透過領域に対応する画素とで遮光制御信号の電圧が異なる。遮光制御信号に基づいて、遮光パネル２５の各画素が現実空間画像Ｂを生成する実像光Ｌｃを遮光または透過する。遮光パネル２５は、遮光制御信号に応じて透過率を０％～１００％の間で調整可能である。

遮光パネル２５の透過率が０％であるとき、遮光パネル２５により現実空間画像Ｂを生成する外部からの実像光Ｌｃが遮断され、使用者は、現実空間画像Ｂだけを視認する。一方、遮光パネル２５の透過率が１００％であるとき、遮光パネル２５により現実空間画像Ｂを生成する外部からの実像光Ｌｃが全て透過され、使用者は、仮想空間画像Ａに現実空間画像Ｂが重なった合成画像を視認する。また、遮光パネル２５の透過率が０％～１００％の間で調整されるとき、遮光パネル２５により現実空間画像Ｂを生成する外部からの実像光Ｌｃの透過率が調整され、使用者は、仮想空間画像Ａに所定の透過率に調整された現実空間画像Ｂが重なった合成画像を視認する。

［表示装置の処理構成］
図２は、本実施形態に係る表示装置の構成を表すブロック図である。

図２に示すように、表示装置１０は、仮想空間構成システム１００との間で各種の情報の送受信を行う。仮想空間構成システム１００は、ＶＲ空間の情報を生成する。仮想空間構成システム１００は、例えば、サーバなどである。また、仮想空間構成システム１００は、複数のユーザのパーソナルコンピュータで生成されたアバターの３次元モデルに基づいてＶＲ空間の情報を生成する。仮想空間構成システム１００は、生成したＶＲ空間の情報を表示装置１０へ出力する。

表示装置１０は、仮想空間構成システム１００から取得したＶＲ空間の情報をもとに、ユーザ自身から見たＶＲ空間の画像を表示する。

表示装置１０は、前述した表示部１１と、遮光部１２に加えて、仮想空間画像取得部３１と、画像処理部３２と、カメラ４１と、現実空間画像処理部４２と、機器検出部４３と、透過画像生成部４４と、遮光制御部４５と、画像判定部４６とを有する。また、表示装置１０は、ユーザ画像生成部５１と、信号合成部５２と、信号送信部５３とを有する。

ここで、画像処理部３２、現実空間画像処理部４２、機器検出部４３、透過画像生成部と、遮光制御部４５、画像判定部４６、ユーザ画像生成部５１、信号合成部５２は、例えば、ＣＰＵ（Central Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）の少なくとも一つによって構成される。

仮想空間画像取得部３１は、仮想空間構成システム１００に接続されると共に、画像処理部３２に接続される。仮想空間画像取得部３１は、例えば、通信モジュールであって、仮想空間構成システム１００および画像処理部３２とネットワーク（例えば、インターネットなど）を介して接続される。仮想空間画像取得部３１は、仮想空間構成システム１００からＶＲ空間の情報を取得する。仮想空間画像取得部３１は、仮想空間構成システム１００から取得したＶＲ空間の情報を画像処理部３２に出力する。

画像処理部３２は、ＶＲ空間の情報に基づいて表示画像データを生成し、表示画像データを表示信号として表示部１１に出力する。表示部１１は、画像処理部３２から入力された表示信号に基づいて仮想空間画像Ａを表示する。

カメラ４１は、スラム（ＳＬＡＭ：Ｓｉｍｕｌｔａｎｅｏｕｓ Ｌｏｃａｌｉｚａｔｉｏｎ ａｎｄ Ｍａｐｐｉｎｇ）を行うためのカメラである。カメラ４１は、ＲＧＢ画像を撮影することで取得、撮影画像データとして出力する。カメラ４１は、例えば、表示装置１０としてのＨＭＤに装着される。カメラ４１は、例えば、単眼カメラ（広角カメラ、魚眼カメラ、全天球カメラ）、複眼カメラ（ステレオカメラ、マルチカメラ）、ＲＧＢ－Ｄカメラ（深度カメラやＴｏＦカメラ）などが適用される。

カメラ４１は、現実空間画像処理部４２に接続される。現実空間画像処理部４２は、カメラ４１が撮影した撮影画像データを取得する。現実空間画像処理部４２は、撮影画像データを用いてビジュアルスラム処理を実行し、現実空間のマッピングおよび自己位置・ヘッドトラッキング推定を行う。

また、カメラ４１は、機器検出部４３に接続される。機器検出部４３は、カメラ４１が撮影した撮影画像データを取得する。機器検出部４３は、撮影画像データを用いて現実空間の画像に写っている各種機器を検出する。ここで、機器とは、パーソナルコンピュータのディスプレイ、キーボード、マウスなどのである。検出する機器は、予め設定されており、教示データが記憶される。機器検出部４３は、例えば、機械学習により教示テータを用いた機器を特定する。

現実空間画像処理部４２および機器検出部４３は、透過画像生成部４４に接続される。透過画像生成部４４は、現実空間画像処理部４２が処理した現実空間マッピング結果および自己位置・ヘッドトラッキング結果と、機器検出部４３が検出した機器の検出結果が入力される。透過画像生成部４４は、現実空間マッピング結果および自己位置・ヘッドトラッキング結果と、機器の検出結果に基づいて、透過画像データを生成する。透過画像データは、表示部１１の一部または全部を透過して表示させる画像データである。

透過画像生成部４４は、遮光制御部４５に接続される。遮光制御部４５は、透過画像生成部４４が生成した透過画像データに基づいて、遮光部１２の透過領域および透過率を設定する。遮光部１２の透過領域および透過率は、現実空間画像Ｂが表示部１１を透過して
使用者の左右の眼球に到達する面積および鮮明度である。透過領域および透過率は、予め設定されており、必要に応じて調整される。例えば、初期透過領域は、表示部１１の下部の左右方向の中間位置で、表示部全体の２０％の面積である。初期透過率は、７０％である。遮光制御部４５は、透過領域および透過率からなる透過画像データを透過信号として遮光部１２に出力する。遮光部１２は、遮光制御部４５から入力された遮光信号に基づいて所定の領域を透過する。

画像判定部４６は、画像処理部３２と透過画像生成部４４に接続される。画像判定部４６は、画像処理部３２が生成した表示画像データと、透過画像生成部４４が生成した透過画像データが入力される。画像判定部４６は、画像処理部３２が生成して表示部１１に表示される仮想空間画像Ａの変化度合い（例えば、変化量、変化率）が予め設定された第１しきい値よりも少ないか否かを判定する。また、画像判定部４６は、透過画像生成部４４が生成して表示部１１を透過する現実空間画像Ｂの変化度合い（例えば、変化量、変化率）が予め設定された第２しきい値よりも少ないか否かを判定する。ここで、仮想空間画像Ａの変化度合いおよび現実空間画像Ｂの変化度合いとは、時間の経過により切替る２個のフレームレート間の画素数の差である。この場合、２個のフレームレート間の画素数の変化量、または、画素数の変化率で表される。なお、２個のフレームレート間は、連続するものであってもよく、所定のフレームレート数だけ離間していてもよい。

また、第１しきい値および第２しきい値は、適宜設定される。第１しきい値は、例えば、ＶＲ空間で開催される会議にて、表示スクリーンの映像が切替ったときに変動する仮想空間画像Ａのフレームレート間の画素数の差などとする。また、第２しきい値は、例えば、現実空間にて、パーソナルコンピュータのディスプレイの映像が切替ったときに変動する現実空間画像Ｂのフレームレート間の画素数の差などとする。

画像判定部４６は、遮光制御部４５に接続される。画像判定部４６は、仮想空間画像Ａの変化度合いの判定結果および現実空間画像Ｂの変化度合い判定結果を遮光制御部４５に出力する。すなわち、画像判定部４６は、仮想空間画像Ａの変化度合いが第１しきい値よりも少ないと判定したとき、遮光部１２（表示部１１）の透過領域を広く、または、遮光部１２（表示部１１）の透過率を高くする調整信号を遮光制御部４５に出力する。なお、画像判定部４６は、仮想空間画像Ａの変化度合いが第１しきい値よりも少なく、且つ、現実空間画像Ｂの変化度合いが第２しきい値よりも多いと判定したとき、遮光部１２（表示部１１）の透過領域を広く、または、遮光部１２（表示部１１）の透過率を高くする調整信号を遮光制御部４５に出力する。

遮光制御部４５は、画像判定部４６の判定結果に基づいて遮光部１２の透過領域や遮光部１２の透過率を変更する。本実施形態では、遮光制御部４５により遮光部１２の透過領域および透過率を変更することで、表示部１１を透過して視認できる表示部１１の領域の透過状態を変更している。但し、この構成に限定されるものではない。例えば、表示部１１が遮光部１２を含むように構成し、遮光制御部４５が表示部１１の透過領域や透過率を変更するようにしてもよい。

なお、画像判定部４６は、仮想空間画像Ａの変化度合いが第１しきい値よりも多かったり、現実空間画像Ｂの変化度合いが第２しきい値よりも少なかったりしたとき、遮光部１２（表示部１１）の透過領域を狭く、または、遮光部１２（表示部１１）の透過率を低くする調整信号を遮光制御部４５に出力してもよい。

また、ユーザ画像生成部５１は、ユーザのアバターデータ（三次元データ）を生成する。ユーザ画像生成部５１は、信号合成部５２に接続される。信号合成部５２は、現実空間画像処理部４２が処理した現実空間マッピング結果および自己位置・ヘッドトラッキング結果と、ユーザ画像生成部５１が生成したユーザのアバターデータとを合成し、ＶＲ空間表示画像データを生成する。

信号合成部５２は、信号送信部５３に接続される。信号送信部５３は、信号合成部が生成したＶＲ空間表示画像データをストリーム信号として仮想空間構成システム１００に送信する。

仮想空間構成システム１００は、バーチャルコミュニケーション空間の所定の位置にＶＲ空間表示画像データに基づいた３次元画像、つまり、ユーザのアバター画像を表示する。そして、上述した仮想空間画像取得部３１は、仮想空間構成システム１００からのＶＲ空間の情報、つまり、ユーザの顔の向きから見える現実空間において見える仮想空間の画像信号をストリーム信号として取得する。

［表示方法］
図３は、本実施形態に係る表示方法を表すフローチャート、図４は、仮想空間の画像を表す概略図、図５は、現実空間の画像を表す概略図、図６は、仮想空間の画像に現実空間の画像を重ねた画像の概略図である。

図１から図３に示すように、ステップＳ１１にて、仮想空間画像取得部３１は、仮想空間構成システム１００からＶＲ空間の情報を取得し、画像処理部３２に出力する。ステップＳ１２にて、画像処理部３２は、ＶＲ空間の情報に基づいて表示画像データを生成し、表示部１１に出力する。ステップＳ１３にて、表示部１１は、画像処理部３２から入力された表示信号に基づいて仮想空間画像Ａを表示する。例えば、図４に示すように、仮想空間画像Ａは、仮想空間での会議の画像であり、スクリーンに対して複数のユーザのアバターを表示する画像である。

ステップＳ１４にて、カメラ４１は、ユーザが見ている領域の画像を取得し、撮影画像データを現実空間画像処理部４２および機器検出部４３に出力する。ステップＳ１５にて、現実空間画像処理部４２は、カメラ４１の撮影画像データを用いてビジュアルスラム処理を実行し、現実空間のマッピングおよび自己位置・ヘッドトラッキング推定を行い、透過画像生成部４４に出力する。一方、ステップＳ１６にて、機器検出部４３は、カメラ４１の撮影画像データを用いて各種機器（パーソナルコンピュータのディスプレイなど）を検出して特定し、透過画像生成部４４に出力する。

ステップＳ１７にて、透過画像生成部４４は、現実空間画像処理部４２が処理した処理画像と機器検出部４３が検出した機器に基づいて、透過画像データを生成し、遮光制御部４５に出力する。例えば、図５に示すように、現実空間画像Ｂは、ユーザの前の画像である。テーブルの上に載置されたパーソナルコンピュータのディスプレイ、キーボード、マウスなどを表示する画像である。ステップＳ１８にて、遮光制御部４５は、透過画像生成部４４が生成した透過画像データに基づいて、遮光部１２の透過領域および透過率を設定する。ステップＳ１９にて、遮光部１２は、所定の透過領域と所定の透過率が設定されることで、現実空間一部画像Ｂ１が遮光部１２を通して表示部１１に入力される。

遮光制御部４５が遮光部１２の透過領域を全域とした場合、ユーザは、表示部１１の全体にわたって表示される仮想空間画像Ａを見ることができると共に、表示部１１の全域を透過して表示される現実空間一部画像Ｂ１を見ることができる。すなわち、ユーザは、仮想空間画像Ａ（図４）の全領域を通して現実空間一部画像Ｂ１（図５）を見ることができる。また、遮光制御部４５が遮光部１２の透過領域を一部とした場合、ユーザは、表示部１１の全体にわたって表示される仮想空間画像Ａを見ることができると共に、表示部１１の一部を透過して表示される現実空間一部画像Ｂ１を見ることができる。すなわち、図６に示すように、ユーザは、仮想空間での会議の画像である仮想空間画像Ａの下部が一部切り取られ、切り取られた領域にパーソナルコンピュータのディスプレイとキーボードとマウスの画像である現実空間一部画像Ｂ１を見ることができる。

ステップＳ２０にて、画像判定部４６は、画像処理部３２が生成した表示画像データと、透過画像生成部４４が生成した透過画像データを取得する。ステップＳ２１にて、画像判定部４６は、仮想空間画像Ａの変化度合いが予め設定された第１しきい値よりも少ないか否かを判定する。すなわち、画像判定部４６は、仮想空間画像Ａのフレームレート間の画素数の差Ｐａが第１しきい値Ｐｓ１よりも少ないか否かを判定する。ここで、画像判定部４６は、仮想空間画像Ａのフレームレート間の画素数の差Ｐａが第１しきい値Ｐ１よりも少ないと判定（Ｙｅｓ）すると、ステップＳ２２に移行する。

ステップＳ２２にて、画像判定部４６は、透過画像生成部４４が生成して遮光部１２（表示部１１）を透過する現実空間画像Ｂの変化度合いが第２しきい値よりも多いか否かを判定する。すなわち、画像判定部４６は、現実空間画像Ｂのフレームレート間の画素数の差Ｐｂが第２しきい値Ｐ２よりも多いか否かを判定する。ここで、画像判定部４６は、現実空間画像Ｂのフレームレート間の画素数の差Ｐｂが第２しきい値Ｐ２よりも多いと判定（Ｙｅｓ）すると、ステップＳ２３にて、遮光部１２（表示部１１）の透過領域を広く、または、遮光部１２（表示部１１）の透過率を高くする調整信号を遮光制御部４５に出力する。

一方、ステップＳ２１にて、画像判定部４６は、仮想空間画像Ａのフレームレート間の画素数の差Ｐａが第１しきい値Ｐ１よりも少なくない判定（Ｎｏ）すると、そのままルーチンを抜ける。また、ステップＳ２２にて、画像判定部４６は、現実空間画像Ｂのフレームレート間の画素数の差Ｐｂが第２しきい値Ｐ２よりも多くないと判定（Ｎｏ）すると、そのままルーチンを抜ける。

ステップＳ２４にて、遮光制御部４５は、画像判定部４６の判定結果に基づいて遮光部１２（表示部１１）の透過領域や遮光部１２（表示部１１）の透過率を変更する。

なお、ステップＳ２１にて、画像判定部４６が仮想空間画像Ａのフレームレート間の画素数の差Ｐａが第１しきい値Ｐ１よりも少なくない判定（Ｎｏ）したとき、または、ステップＳ２２にて、画像判定部４６が現実空間画像Ｂのフレームレート間の画素数の差Ｐｂが第２しきい値Ｐ２よりも多くないと判定（Ｎｏ）したとき、遮光部１２（表示部１１）の透過領域を狭く、または、遮光部１２（表示部１１）の透過率を低くする調整信号を遮光制御部４５に出力してもよい。

［実施形態の作用効果］
本実施形態の表示装置は、仮想空間画像Ａを表示する表示部１１と、現実空間画像Ｂにある対象物を検出する機器検出部（検出部）４３と、機器検出部４３が検出した対象物が表示部１１を透過して視認できる表示部１１の透過領域の透過状態を変更する遮光制御部（透過制御部）４５とを備える。

そのため、表示部１１に仮想空間画像Ａを表示することができると共に、表示部１１の一部領域または全部領域を透過して現実空間画像Ｂにある対象物を表示することができ、仮想空間の画像の少なくとも一部に現実空間の画像を最適表示させることができる。

本実施形態の表示装置は、遮光制御部４５は、仮想空間画像Ａの変化度合いが予め設定された第１しきい値よりも少ないとき、遮光部１２（表示部１１）の透過領域を広く、または、遮光部１２（表示部１１）の透過率を高くする。そのため、仮想空間画像Ａの変化状況に応じて現実空間画像Ｂにある対象物を鮮明に表示することができる。

本実施形態の表示装置は、遮光制御部４５は、仮想空間画像Ａの変化度合いが第１しきい値よりも少なく、且つ、現実空間画像Ｂの変化度合いが予め設定された第２しきい値よりも多いとき、遮光部１２（表示部１１）の透過領域を広く、または、遮光部１２（表示部１１）の透過率を高くする。そのため、仮想空間画像Ａの変化状況および現実空間画像Ｂの変化状況に応じて現実空間画像Ｂにある対象物を鮮明に表示することができる。

これまで本発明に係る表示装置について説明したが、上述した実施形態以外にも種々の異なる形態にて実施されてよい。

図示した表示装置の各構成要素は、機能概念的なものであり、必ずしも物理的に図示の如く構成されていなくてもよい。すなわち、各装置の具体的形態は、図示のものに限られず、各装置の処理負担や使用状況などに応じて、その全部または一部を任意の単位で機能的または物理的に分散または統合してもよい。

表示装置の構成は、例えば、ソフトウェアとして、メモリにロードされたプログラムなどによって実現される。上記実施形態では、これらのハードウェアまたはソフトウェアの連携によって実現される機能ブロックとして説明した。すなわち、これらの機能ブロックについては、ハードウェアのみ、ソフトウェアのみ、または、それらの組み合わせによって種々の形で実現できる。

上記した構成要素には、当業者が容易に想定できるもの、実質的に同一のものを含む。さらに、上記した構成は適宜組み合わせが可能である。また、本発明の要旨を逸脱しない範囲において構成の種々の省略、置換または変更が可能である。

１０表示装置
１１ 表示部
１２ 遮光部
２１ 表示パネル
２２ ハーフミラー
２３ コンバイナミラー
２５ 遮光パネル
３１ 仮想空間画像取得部
３２ 画像処理部
４１ カメラ
４２ 現実空間画像処理部
４３ 機器検出部
４４ 透過画像生成部
４５ 遮光制御部（透過制御部）
４６ 画像判定部
５１ ユーザ画像生成部
５２ 信号合成部
５３ 信号送信部
Ａ 仮想空間画像
Ｂ 現実空間画像
Ｌａ 表示光
Ｌｂ 反射光
Ｌｃ 実像光

Claims (5)

1. 仮想空間の画像を表示する表示部と、
   現実空間にある対象物を検出する検出部と、
   前記検出部が検出した対象物が前記表示部を透過して視認できる前記表示部の領域の透過状態を変更する透過制御部と、
   を備える表示装置。
2. 前記透過制御部は、仮想空間の画像の変化度合いが予め設定された第１しきい値よりも少ないとき、前記領域を広く、または、前記表示部の透過率を高くする、
   請求項１に記載の表示装置。
3. 前記透過制御部は、仮想空間の画像の変化度合いが前記第１しきい値よりも少なく、且つ、現実空間の画像の変化度合いが予め設定された第２しきい値よりも多いとき、前記領域を広く、または、前記表示部の透過率を高くする、
   請求項１または請求項２に記載の表示装置。
4. 表示部に仮想空間の画像を表示するステップと、
   現実空間にある対象物を検出するステップと、
   検出した対象物が前記表示部を透過して視認できる前記表示部の領域の透過状態を変更するステップと、
   を含む表示方法。
5. 表示部に仮想空間の画像を表示するステップと、
   現実空間にある対象物を検出するステップと、
   検出した対象物が前記表示部を透過して視認できる前記表示部の領域の透過状態を変更するステップと、
   を表示装置として動作するコンピュータに実行させるプログラム。

Images