JP2019074917A - Display system, operation terminal, head mounted display, display control program, and control method - Google Patents
Display system, operation terminal, head mounted display, display control program, and control method Download PDFInfo
- Publication number
- JP2019074917A JP2019074917A JP2017200383A JP2017200383A JP2019074917A JP 2019074917 A JP2019074917 A JP 2019074917A JP 2017200383 A JP2017200383 A JP 2017200383A JP 2017200383 A JP2017200383 A JP 2017200383A JP 2019074917 A JP2019074917 A JP 2019074917A
- Authority
- JP
- Japan
- Prior art keywords
- display
- image
- unit
- displayed
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Digital Computer Display Output (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、表示システム、操作端末、ヘッドマウントディスプレイ、表示制御プログラム及び制御方法に関する。 The present invention relates to a display system, an operation terminal, a head mounted display, a display control program, and a control method.
近年、ユーザの身体に装着して使用する様々なウェアラブル端末が開発されている。ウェアラブル端末の種類の1つとして、Head Mounted Display(HMD)がある。 In recent years, various wearable terminals worn and used on the user's body have been developed. One type of wearable terminal is the Head Mounted Display (HMD).
HMDは、ユーザの頭部に装着する、例えば眼鏡型やゴーグル型の装置である。HMDがユーザの頭部に装着されることにより、HMDに備えられるディスプレイ部がユーザの眼前に位置し、ユーザはディスプレイ部に表示された映像を視認できる。 The HMD is, for example, a glasses-type or goggle-type device worn on the head of the user. By mounting the HMD on the head of the user, the display unit provided in the HMD is positioned in front of the user's eyes, and the user can view the image displayed on the display unit.
HMDには、HMDを操作する端末として、Hand Held Device(HHD)が接続されてもよい。 A Hand Held Device (HHD) may be connected to the HMD as a terminal for operating the HMD.
HMDを操作するためのユーザインタフェースには、例えば、音声入力や物理ボタン入力,タッチパッド入力がある。なお、タッチパッド入力は、一般的なノート型パーソナルコンピュータ等に搭載されるポインティングデバイスにより、画面上に表示されるポインタを操作する入力方式と同様の入力方式を示している。 Examples of user interfaces for operating the HMD include voice input, physical button input, and touch pad input. The touch pad input indicates an input method similar to an input method in which a pointer displayed on the screen is operated by a pointing device mounted on a general notebook personal computer or the like.
これらのユーザインタフェースは、HMDにおいて機能してもよいし、HMDに接続されたHHDにおいて機能してもよい。ユーザインタフェースがHMDにおいて機能する場合には、ユーザは、HMDに対して直接、HMDに対する入力操作を行なう。一方、ユーザインタフェースがHHDにおいて機能する場合には、ユーザは、HHDを介して、HMDに対する入力操作を行なう。 These user interfaces may function in the HMD or in the HHD connected to the HMD. When the user interface functions in the HMD, the user performs an input operation on the HMD directly to the HMD. On the other hand, when the user interface functions in the HHD, the user performs an input operation on the HMD via the HHD.
しかしながら、騒音のある場所では音声入力が困難だったり、公共の場所での音声入力に抵抗を持つユーザが存在したりするおそれがある。また、近年においては、スマートフォンやタブレット端末のタッチパネルの操作に慣れたユーザにとっては、物理ボタンやタッチパッドによる操作に煩わしさを感じるおそれがある。 However, in noisy places, voice input may be difficult, or there may be users who resist voice input in public places. Further, in recent years, for a user who is used to the operation of the touch panel of the smartphone or the tablet terminal, there is a possibility that the operation by the physical button or the touch pad may be bothersome.
1つの側面では、ヘッドマウントディスプレイの操作を容易にすることを目的とする。 One aspect aims at facilitating the operation of a head mounted display.
表示システムは、第1の映像を表示可能なヘッドマウントディスプレイと、第2の映像を表示可能な操作端末と、を有する表示システムであって、ユーザからの切り替え要求が発生したかを判定する判定部と、前記判定部によって前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にする第1制御部と、前記判定部によって前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する第2制御部と、を備える。 The display system is a display system having a head mounted display capable of displaying the first video and an operation terminal capable of displaying the second video, and the determination is made as to whether or not the switching request from the user has occurred. A first control unit configured to hide the first image when it is determined that the switching request has been generated by the determination unit, and the first image is displayed on the head mounted display; And a second control unit configured to display the second image when the determination unit determines that the switching request has occurred and the second image is not displayed on the operation terminal.
1つの側面では、ヘッドマウントディスプレイの操作を容易にすることができる。 In one aspect, operation of the head mounted display can be facilitated.
以下、図面を参照して一実施の形態を説明する。ただし、以下に示す実施形態はあくまでも例示に過ぎず、実施形態で明示しない種々の変形例や技術の適用を排除する意図はない。すなわち、本実施形態を、その趣旨を逸脱しない範囲で種々変形して実施することができる。 Hereinafter, one embodiment will be described with reference to the drawings. However, the embodiments described below are merely examples, and there is no intention to exclude the application of various modifications and techniques that are not specified in the embodiments. That is, the present embodiment can be variously modified and implemented without departing from the scope of the present invention.
また、各図は、図中に示す構成要素のみを備えるという趣旨ではなく、他の機能等を含むことができる。 In addition, each drawing is not intended to include only the components illustrated in the drawings, but may include other functions and the like.
以下、図中において、同一の各符号は同様の部分を示しているので、その説明は省略する。 Hereinafter, in the drawings, the same reference numerals indicate the same parts, so the description thereof will be omitted.
〔A〕実施形態の一例
〔A−1〕システム構成例
図1(a)は、実施形態の一例としての表示システム100の構成例を示す図である。
[A] Example of Embodiment [A-1] Example of System Configuration FIG. 1A is a view showing an example of the configuration of a
図1(a)に例示するように、表示システム100は、ヘッドマウントディスプレイ(HMD)1及びハンドヘルドデバイス(HHD)2を備える。なお、「HHD」は、「操作端末」と称されてもよい。
As illustrated in FIG. 1A, the
HMD1とHHD2とは、通信ケーブル3を介して、有線で互いに通信可能に接続されてよい。通信ケーブル3の通信規格は、例えば、High-Definition Multimedia Interface(HDMI(登録商標))やUniversal Serial Bus(USB)であってよい。また、HMD1とHHD2とは、無線で互いに通信可能に接続されてもよい。この場合の無線通信規格は、例えば、Wi-Fi DirectやBluetooth(登録商標)であってよい。
The HMD 1 and the
図1(a)に示す例では、HMD1は、メガネ型のデバイスであり、実際のメガネにおいてレンズが取り付けられる部分に相当する部分にディスプレイ11を備える。なお、HMD1は、ゴーグル型のデバイスであってもよい。
In the example illustrated in FIG. 1A, the
図1(a)に示すように、HHD2は、ディスプレイ21を備える。ディスプレイ21は、図2を用いて後述するように、Liquid Crystal Display(LCD)211及びタッチパネル212として機能する。
As shown in FIG. 1A, the
図1(b)は、実施形態の一例としての表示システム100の装着例を示す図である。
FIG. 1B is a view showing a mounting example of the
図1(b)に示すように、HMD1は、ユーザ4の頭部(別言すれば、「顔」)に搭載される。この際、HMD1のディスプレイ11(図1(a)を参照)は、ユーザ4の両眼を覆うようにして搭載される。これにより、ユーザ4は、ディスプレイ11に表示された映像を視認できる。
As shown in FIG. 1B, the
また、図1(b)に示すように、HHD2は、ユーザ4の手で把持されてよい。これにより、ユーザ4は、HMD1を手元のHHD2を用いて操作することができる。
Also, as shown in FIG. 1 (b), the
図2は、図1に示した表示システム100の機能構成を模式的に示す図である。
FIG. 2 is a diagram schematically showing a functional configuration of
HMD1は、例示的に、右目用LCD111,左目用LCD112,ボタン制御部12,複数(図示する例では、3つ)のボタン121及び通信制御部13を備える。
The HMD 1 illustratively includes a right-
右目用LCD111及び左目用LCD112は、図1(a)に示したディスプレイ11に相当する。右目用LCD111は、HMD1がユーザ4の頭部に装着される際に、ユーザ4の右目を覆う位置に装着される。また、左目用LCD112は、HMD1がユーザ4の頭部に装着される際に、ユーザ4の左目を覆う位置に装着される。なお、右目用LCD111及び左目用LCD112は、Organic Electro-Luminescence(有機EL)ディスプレイ等の他の種類の表示装置であってもよい。
The right-
右目用LCD111及び左目用LCD112は、透過性を有してよい。すなわち、右目用LCD111及び左目用LCD112に映像が表示されていない状態において、HMD1を装着したユーザ4は、右目用LCD111及び左目用LCD112越しに、HHD2等の周囲の物を視認できる。また、右目用LCD111及び左目用LCD112が透過性を有しない場合には、ユーザ4は、自身の顔とHMD1との隙間からHHD2等の周囲の物を視認してよい。
The
右目用LCD111及び左目用LCD112は、後述する通信制御部13から入力される信号に従って、映像を表示する。右目用LCD111及び左目用LCD112は、第1の映像を表示する第1表示部の一例として機能してよい。
The right-
ボタン制御部12はHMD1に備えられる複数のボタン121を制御する。例えば、ボタン制御部12は、いずれかのボタン121に対して入力があった場合に、当該入力があったことを示す信号を後述する通信制御部13に受け渡す。
The
複数のボタン121は、ユーザ4からの入力を受け付ける物理ボタンやタッチパッドである。複数のボタン121のうちの1つは、ユーザ4からの、HMD1のディスプレイ11(図1(a)を参照)とHHD2のディスプレイ21(図1(a)を参照)との表示の切り替え要求を受け付ける入力部の一例として機能してよい。
The plurality of
通信制御部13は、HMD1をHHD2と通信可能に接続し、通信ケーブル3の通信規格に準拠したインタフェースである。
The
図2に示す例において、通信制御部13は、ボタン制御部12からボタン121への入力があったことを示す信号を受け取り、通信ケーブル3を介して当該信号をHHD2へ送信する。また、通信制御部13は、右目用LCD111と左目用LCD112とのそれぞれに表示させる映像を含む情報をHHD2から通信ケーブル3を介して受信し、受信した情報を右目用LCD111と左目用LCD112とのそれぞれに入力する。
In the example shown in FIG. 2, the
HHD2は、例示的に、LCD211,タッチパネル212,ボタン制御部22,複数(図示する例では、3つ)のボタン221,通信制御部23及び演算部24を備える。
The
LCD211は、後述する演算部24から入力される信号に従って、映像を表示する。LCD211は、第2の映像を表示する第2表示部の一例として機能してよい。LCD211は、有機ELディスプレイ等の他の種類の表示装置であってよい。
The
タッチパネル212は、LCD211と一体化されており、ユーザ4からのタッチ入力を受け付ける。タッチパネル212は、受け付けたタッチ入力に係る信号を後述する演算部24へ入力する。タッチパネル212は、ユーザ4からの、HMD1のディスプレイ11(図1(a)を参照)とHHD2のディスプレイ21(図1(a)を参照)との表示の切り替え要求を受け付ける入力部の一例として機能してよい。タッチパネル212が入力部の一例として機能する場合には、ディスプレイ21が映像を非表示の期間中は、タッチパネル212の全領域で切り替え要求を受け付けてよい。また、タッチパネル212が入力部の一例として機能する場合には、ディスプレイ21が映像を表示している期間中は、タッチパネル212の特定の領域で切り替え要求を受け付けてよい。
The
ボタン制御部22は、HHD2に備えられる複数のボタン221を制御する。例えば、ボタン制御部22は、いずれかのボタン221に対して入力があった場合に、当該入力があったことを示す信号を後述する演算部24に受け渡す。
The
複数のボタン221は、ユーザ4からの入力を受け付ける物理ボタンやタッチパッドである。複数のボタン221のうちの1つは、ユーザ4からの、HMD1のディスプレイ11(図1(a)を参照)とHHD2のディスプレイ21(図1(a)を参照)との表示の切り替え要求を受け付ける入力部の一例として機能してよい。
The plurality of
通信制御部23は、HHD2をHMD1と通信可能に接続し、通信ケーブル3の通信規格に準拠したインタフェースである。
The
図2に示す例において、通信制御部23は、HMD1の右目用LCD111及び左目用LCD112に表示させる映像を含む情報を演算部24から受け取り、通信ケーブル3を介して受け取った情報をHMD1へ送信する。
In the example illustrated in FIG. 2, the
図3は、図2に示した演算部24の機能構成を模式的に示す図である。
FIG. 3 is a view schematically showing a functional configuration of the
演算部24は、例示的に、種々の制御や演算を行なう処理装置であり、図示しないメモリに格納されたOperating System(OS)やプログラムを実行することにより、種々の機能を実現する。すなわち、演算部24は、図3に示すように、判定部241,第1制御部242及び第2制御部243として機能してよい。
The
なお、これらの判定部241,第1制御部242及び第2制御部243としての機能を実現するためのプログラムは、例えばフレキシブルディスク、CD(CD−ROM、CD−R、CD−RW等)、DVD(DVD−ROM、DVD−RAM、DVD−R、DVD+R、DVD−RW、DVD+RW、HD DVD等)、ブルーレイディスク、磁気ディスク、光ディスク、光磁気ディスク等の、コンピュータ読取可能な記録媒体に記録された形態で提供されてよい。そして、コンピュータ(本実施形態では演算部24)は上述した記録媒体から図示しない読取装置を介してプログラムを読み取って内部記録装置または外部記録装置に転送し格納して用いてよい。また、プログラムを、例えば磁気ディスク,光ディスク,光磁気ディスク等の記憶装置(記録媒体)に記録しておき、記憶装置から通信経路を介してコンピュータに提供してもよい。
Note that programs for realizing the functions of the
判定部241,第1制御部242及び第2制御部243としての機能を実現する際には、内部記憶装置(本実施形態では不図示のメモリ)に格納されたプログラムがコンピュータ(本実施形態では演算部24)によって実行されてよい。また、記録媒体に記録されたプログラムをコンピュータが読み取って実行してもよい。
When the functions as the
演算部24は、表示システム100全体の動作を制御する。演算部24は、マルチプロセッサであってもよい。演算部24は、例えばCentral Processing Unit(CPU)やMicro Processing Unit(MPU),Digital Signal Processor(DSP),Application Specific Integrated Circuit(ASIC),Programmable Logic Device(PLD),Field Programmable Gate Array(FPGA)のいずれか一つであってもよい。また、演算部24は、CPU,MPU,DSP,ASIC,PLD,FPGAのうちの2種類以上の要素の組み合わせであってもよい。
判定部241は、HMD1のボタン121,HHD2のボタン221又はタッチパネル212を介して、ユーザ4からの切り替え要求が発生したかを判定する。切り替え要求は、HMD1のディスプレイ11(図1(a)を参照)とHHD2のディスプレイ21(図1(a)を参照)との間の表示を切り替えるための要求である。
The
第1制御部242は、HMD1のディスプレイ11(別言すれば、右目用LCD111及び左目用LCD112)の表示を制御する。具体的には、第1制御部242は、判定部241によって切り替え要求が発生したと判定され、HMD1のディスプレイ11において第1の映像が表示されている場合に、ディスプレイ11における第1の映像を非表示にする。また、第1制御部242は、判定部241によって切り替え要求が発生したと判定され、HMD1のディスプレイ11において第1の映像が非表示である場合に、ディスプレイ11において第1の映像を表示する。
The
第1制御部242は、HMD1の電源部(不図示)からディスプレイ11への給電及びクロック入力を停止することにより、ディスプレイ11において第1の映像を非表示にしてよい。また、第1制御部242は、HMD1の電源部(不図示)からディスプレイ11への給電及びクロック入力を再開することにより、ディスプレイ11において第1の映像を表示してよい。
The
第1の映像を非表示にする期間中にディスプレイ11への給電及びクロック入力を停止することにより、HMD1における電力消費量を低減できる。ただし、電力消費量の低減よりもユーザ4からの切り替え要求発生時における応答性を優先した場合には、ディスプレイ11への給電及びクロック入力を停止させなくてもよい。
By stopping the power supply to the
第2制御部243は、HHD2のディスプレイ21(別言すれば、LCD211)の表示を制御する。具体的には、第2制御部243は、判定部241によって切り替え要求が発生したと判定され、HHD2のディスプレイ21において第2の映像が表示されている場合に、ディスプレイ21における第2の映像を非表示にする。また、第1制御部242は、判定部241によって切り替え要求が発生したと判定され、HHD2のディスプレイ21において第2の映像が非表示である場合に、ディスプレイ21において第2の映像を表示する。
The
第2制御部243は、HHD2の電源部(不図示)からディスプレイ21への給電及びクロック入力を停止することにより、ディスプレイ21において第2の映像を非表示にしてよい。また、第2制御部243、HHD2の電源部(不図示)からディスプレイ21への給電及びクロック入力を再開することにより、ディスプレイ21において第2の映像を表示してよい。
The
第2の映像を非表示にする期間中にディスプレイ21への給電及びクロック入力を停止することにより、HHD2における電力消費量を低減できる。ただし、電力消費量の低減よりもユーザ4からの切り替え要求発生時における応答性を優先した場合には、ディスプレイ21への給電及びクロック入力を停止させなくてもよい。
By stopping the power supply and the clock input to the
第1制御部242及び第2制御部243は、HMD1における第1の映像と、HHD2における第2の映像とを、排他的に表示する。すなわち、第1制御部242は、第2制御部243によってHHD2のディスプレイ21に第2の映像が表示されている期間においては、HMD1のディスプレイ11において第1の映像を非表示にする。一方、第2制御部243は、第1制御部242によってHMD1のディスプレイ11に第1の映像が表示されている期間においては、HHD2のディスプレイ21において第2の映像を非表示にする。
The
〔A−2〕動作例
上述した実施形態の一例における表示システム100の動作例を、図4に示すフローチャート(ステップS1〜S6)に従って説明する。
[A-2] Operation Example An operation example of the
判定部241は、切り替え要求の入力のためのボタン121又は221が押されたかを判定する(ステップS1)。なお、切り替え要求の入力をタッチパネル212への入力とする場合には、判定部241は、タッチパネル212が押されたかを判定してもよい。
The
ボタン121及び221が押されていない場合には(ステップS1のNOルート参照)、判定部241は、ボタン121又は221が押されるまで、ステップS1の判定を繰り返す。
When the
一方、ボタン121又は221が押された場合には(ステップS1のYESルート参照)、判定部241は、HMD1側のディスプレイ11が表示中であるかを判定する(ステップS2)。
On the other hand, when the
HMD1側のディスプレイ11が表示中である場合には(ステップS2のYESルート参照)、第1制御部242は、HMD1側の右目用LCD111及び左目用LCD112の表示をOFFにする処理を実行する(ステップS3)。
When the
第2制御部243は、HHD2側のLCD211の表示をONにする処理を実行する(ステップS4)。そして、処理は終了する。
The
ステップS2において、HMD1側のディスプレイ11が表示中でない場合には(ステップS2のNOルート参照)、第2制御部243は、HHD2側のLCD211の表示をOFFにする処理を実行する(ステップS5)。
In step S2, when the
第1制御部242は、HMD1側の右目用LCD111及び左目用LCD112の表示をONにする処理を実行する(ステップS6)。そして、処理は終了する。
The
〔A−3〕効果
上述した実施形態の一例における表示システム100によれば、例えば、以下のような効果を奏することができる。
[A-3] Effects According to the
判定部241は、ユーザ4からの切り替え要求が発生したかを判定する。第1制御部242は、判定部241によって切り替え要求が発生したと判定され、HMD1において第1の映像が表示されている場合に、第1の映像を非表示にする。また、第2制御部243は、判定部241によって切り替え要求が発生したと判定され、HHD2において第2の映像が非表示である場合に、第2の映像を表示する。
The
これにより、HMD1の操作を容易にすることができる。具体的には、HMD1のディスプレイ11を非表示にすることにより、ユーザ4によるHHD2の操作のための視認性を向上できる。また、ユーザ4は、HHD2のタッチパネル212を利用して、HMD1の直感的な操作をすることができる。更に、騒音環境等の音声入力が困難な場所でも、HHD2を用いたHMD1の操作ができる。
Thereby, the operation of the
第1制御部242は、判定部241によって切り替え要求が発生したと判定され、HMD1において第1の映像が非表示である場合に、第1の映像を表示する。一方、第2制御部243は、判定部241によって切り替え要求が発生したと判定され、HHD2において第2の映像が表示されている場合に、第2の映像を非表示にする。
The
これにより、HMD1の操作を容易にすることができる。具体的には、HHD2を利用した操作が完了した場合に、HMD1のディスプレイ11の再表示を容易に行なうことができる。
Thereby, the operation of the
第1制御部242及び第2制御部243は、第1の映像と第2の映像とを排他的に表示する。
The
これにより、HHD2において第2の映像を表示している期間中はHMD1における第1の映像を非表示にでき、ユーザ4が右目用LCD111及び左目用LCD112越しに第2の映像を視認することができる。また、HMD1において第1の映像を表示している期間中はユーザ4が視認することができないHHD2における第2の映像を非表示にでき、HHD2における電力消費量を低減できる。
As a result, while the second video is being displayed on the
第1制御部242は、HMD1のディスプレイ11への給電を停止することにより、第1の映像を非表示にする。また、第2制御部243は、HHD2のディスプレイ21への給電を停止することにより、第2の映像を非表示にする。
The
これにより、映像が非表示中のHMD1又はHHD2における電力消費量をより低減できる。
This can further reduce the power consumption in the
HMD1のボタン121,HHD2のボタン221又はタッチパネル212は、ユーザ4からの入力を受け付ける。判定部241は、HMD1のボタン121,HHD2のボタン221又はタッチパネル212によって受け付けられた入力に基づき、切り替え要求が発生したかを判定する。
The
これにより、HMD1のディスプレイ11とHHD2のディスプレイ21との表示の切り替えを容易に行なうことができる。切り替え要求がボタン121又は221によって受け付けられる場合には、HMD1又はHHD2に表示されているコンテンツに依存せずユーザ4の任意のタイミングで、HMD1及びHHD2における映像の表示を切り替えることができる。また、切り替え要求がタッチパネル212によって受け付けられる場合には、HMD1からHHD2への表示の切り替えにおいて、ユーザ4がHMD1における映像によってHHD2を視認することができない。このような場合においても、ボタン121又は221よりも面積が広いタッチパネル212の任意の場所にユーザ4がタッチ入力を行なうことにより、HMD1及びHHD2における映像の表示を容易に切り替えることができる。
Thereby, the display of the
〔B〕変形例
上述した実施形態の一例においてはHHD2が演算部24を備え、HHD2の演算部24が表示システム100の全体を制御することとしたが、これに限定されるものではない。HHD2ではなく、HMD1が演算部を備えてもよい。
[B] Modification In the example of the embodiment described above, the
図5は、変形例としての表示システム100aの機能構成を模式的に示す図である。
FIG. 5 is a view schematically showing a functional configuration of a
図5に例示する表示システム100aは、図2に示した表示システム100とは異なり、HMD1a及びHHD2aを備える。なお、図2及び図5において、同一の符号は同様の部分を示しているため、その詳細な説明は省略する。
Unlike the
図5に示す例において、HHD2aは、LCD211,タッチパネル212,ボタン制御部22,複数(図示する例では、3つ)のボタン221及び通信制御部23を備える。すなわち、図2に示したHHD2と比較して、図5に示すHHD2aは、演算部24が備えられていない。
In the example illustrated in FIG. 5, the
図5に示す例において、LCD211は、通信制御部23から入力される信号に従って、映像を表示する。タッチパネル212は、受け付けたタッチ入力に係る信号を通信制御部23へ入力する。ボタン制御部22は、いずれかのボタン221に対して入力があった場合に、当該入力があったことを示す信号を通信制御部23に受け渡す。通信制御部23は、LCD211に表示させる映像を含む情報をHMD1aから受信し、受信した情報をLCD211に入力する。また、通信制御部23は、ボタン221又はタッチパネル212へ入力があったことを示す信号をHMD1aへ送信する。
In the example illustrated in FIG. 5, the
図5に示す例において、HMD1aは、右目用LCD111,左目用LCD112,ボタン制御部12,複数(図示する例では、3つ)のボタン121,通信制御部13及び演算部14を備える。すなわち、図2に示したHMD1と比較して、図5に示すHMD1aは、演算部14を備えている。
In the example illustrated in FIG. 5, the
図5に示す例において、右目用LCD111及び左目用LCD112は、演算部14から入力される信号に従って、映像を表示する。ボタン制御部12は、いずれかのボタン121に対して入力があった場合に、当該入力があったことを示す信号を演算部14に受け渡す。通信制御部13は、HHD2aのLCD211に表示させる映像を含む情報をHHD2aへ通信ケーブル3を介して送信する。また、通信制御部13は、HHD2aのボタン221又はタッチパネル212へ入力があったことを示す信号をHHD2aから受信し、受信した信号を演算部14へ受け渡す。
In the example shown in FIG. 5, the
HMD1aの演算部14は、図3に示したHHD2の演算部24と同様の機能を有する。すなわち、演算部14は、判定部241,第1制御部242及び第2制御部243として機能する。
The
上述した変形例における表示システム100aによれば、実施形態の一例において奏することができる上述した効果の他、例えば、HHD2aにおける処理負荷を低減できるという効果を奏することができる。
According to the
〔C〕その他
開示の技術は上述した実施形態に限定されるものではなく、本実施形態の趣旨を逸脱しない範囲で種々変形して実施することができる。本実施形態の各構成及び各処理は、必要に応じて取捨選択することができ、あるいは適宜組み合わせてもよい。
[C] Others The disclosed technology is not limited to the above-described embodiment, and various modifications can be made without departing from the spirit of the present embodiment. Each configuration and each process of the present embodiment can be selected as needed, or may be combined as appropriate.
例えば、図2に示したHHD2と図5に示したHMD1aとが接続されてもよい。これにより、HHD2及びHMD1aにおいて演算部24及び演算部14をそれぞれ備えることとなり、HHD2及びHMD1aにおける処理負荷を分散できる。
For example, the
〔D〕付記
以上の実施形態及び変形例に関し、さらに以下の付記を開示する。
[D] Additional Notes The following additional notes will be disclosed regarding the above-described embodiment and modifications.
(付記1)
第1の映像を表示可能なヘッドマウントディスプレイと、第2の映像を表示可能な操作端末と、を有する表示システムであって、
ユーザからの切り替え要求が発生したかを判定する判定部と、
前記判定部によって前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にする第1制御部と、
前記判定部によって前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する第2制御部と、
を備える、表示システム。
(Supplementary Note 1)
A display system having a head mounted display capable of displaying a first image and an operation terminal capable of displaying a second image, the display system comprising:
A determination unit that determines whether a switching request from a user has occurred;
A first control unit that determines that the first video is not displayed when the determination unit determines that the switching request has been generated and the first video is displayed on the head mounted display;
A second control unit that displays the second video when it is determined that the switching request has been generated by the determination unit and the second video is not displayed on the operation terminal;
And a display system.
(付記2)
前記第1制御部は、前記判定部によって前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が非表示である場合に、前記第1の映像を表示し、
前記第2制御部は、前記判定部によって前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が表示されている場合に、前記第2の映像を非表示にする、
付記1に記載の表示システム。
(Supplementary Note 2)
The first control unit is configured to display the first image when it is determined by the determination unit that the switching request has occurred and the first image is not displayed on the head mounted display.
When the determination unit determines that the switching request has been generated, and the second image is displayed on the operation terminal, the second control unit hides the second image.
The display system according to
(付記3)
前記第1制御部及び前記第2制御部は、前記第1の映像と前記第2の映像とを排他的に表示する、
付記1又は2に記載の表示システム。
(Supplementary Note 3)
The first control unit and the second control unit exclusively display the first image and the second image,
The display system according to
(付記4)
前記ヘッドマウントディスプレイは、前記第1の映像を表示可能な第1表示部を備え、
前記操作端末は、前記第2の映像を表示可能な第2表示部を備え、
前記第1制御部は、前記第1表示部への給電を停止することにより、前記第1の映像を非表示にし、
前記第2制御部は、前記第2表示部への給電を停止することにより、前記第2の映像を非表示にする、
付記2に記載の表示システム。
(Supplementary Note 4)
The head mounted display includes a first display unit capable of displaying the first image.
The operation terminal includes a second display unit capable of displaying the second image;
The first control unit hides the first image by stopping power supply to the first display unit,
The second control unit hides the second image by stopping power supply to the second display unit.
The display system according to
(付記5)
前記ユーザからの入力を受け付ける入力部を更に備え、
前記判定部は、前記入力部によって受け付けられた入力に基づき、前記切り替え要求が発生したかを判定する、
付記1〜4のいずれか1項に記載の表示システム。
(Supplementary Note 5)
The apparatus further comprises an input unit that receives an input from the user,
The determination unit determines whether the switching request has occurred based on the input received by the input unit.
The display system according to any one of
(付記6)
第1の映像を表示可能なヘッドマウントディスプレイに接続される操作端末であって、
第2の映像を表示可能な表示部と、
ユーザからの切り替え要求が発生し、前記表示部において前記第2の映像が非表示である場合に、前記第2の映像を前記第1の映像とは排他的に前記表示部において表示する制御部と、
を備える、操作端末。
(Supplementary Note 6)
An operation terminal connected to a head mounted display capable of displaying a first image,
A display unit capable of displaying a second image;
A control unit that causes the display unit to display the second image exclusively with the first image when the switching request from the user is generated and the second image is not displayed on the display unit. When,
, An operation terminal.
(付記7)
前記制御部は、前記切り替え要求が発生し、前記表示部において前記第2の映像が表示されている場合に、前記第2の映像を前記第1の映像とは排他的に前記表示部において非表示にする、
付記6に記載の操作端末。
(Appendix 7)
When the switching request is generated and the second image is displayed on the display unit, the control unit excludes the second image from the first image exclusively on the display unit. Display
The operation terminal according to
(付記8)
前記制御部は、前記表示部への給電を停止することにより、前記第2の映像を非表示にする、
付記6又は7に記載の操作端末。
(Supplementary Note 8)
The control unit hides the second image by stopping power supply to the display unit.
The operating terminal as described in
(付記9)
第2の映像を表示可能な操作端末に接続されるヘッドマウントディスプレイであって、
第1の映像を表示可能な表示部と、
ユーザからの切り替え要求が発生し、前記表示部において前記第1の映像が表示されている場合に、前記第1の映像を前記第2の映像とは排他的に前記表示部において非表示にする制御部と、
を備える、ヘッドマウントディスプレイ。
(Appendix 9)
A head mounted display connected to an operation terminal capable of displaying a second image, the head mounted display comprising:
A display unit capable of displaying a first image;
When the switching request from the user is generated and the first image is displayed on the display unit, the first image is made non-display on the display unit exclusively with the second image A control unit,
, A head mounted display.
(付記10)
前記制御部は、前記切り替え要求が発生し、前記表示部において前記第1の映像が非表示である場合に、前記第1の映像を前記第2の映像とは排他的に前記表示部において表示する、
付記9に記載のヘッドマウントディスプレイ。
(Supplementary Note 10)
The control unit causes the display unit to display the first image exclusively with the second image when the switching request is generated and the first image is not displayed on the display unit. Do,
The head mounted display according to appendix 9.
(付記11)
前記制御部は、前記表示部への給電を停止することにより、前記第1の映像を非表示にする、
付記9又は10に記載のヘッドマウントディスプレイ。
(Supplementary Note 11)
The control unit hides the first image by stopping power supply to the display unit.
The head mounted display according to appendix 9 or 10.
(付記12)
第1の映像を表示可能なヘッドマウントディスプレイと、第2の映像を表示可能な操作端末と、を有する表示システムに備えられるコンピュータに、
ユーザからの切り替え要求が発生したかを判定し、
前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にし、
前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する、
処理を実行させる、表示制御プログラム。
(Supplementary Note 12)
To a computer provided in a display system having a head mounted display capable of displaying a first video and an operation terminal capable of displaying a second video,
Determine if a switch request from the user has occurred,
When it is determined that the switching request has occurred and the first image is displayed on the head mounted display, the first image is not displayed,
When it is determined that the switching request has occurred and the second video is not displayed on the operation terminal, the second video is displayed.
Display control program that executes processing.
(付記13)
前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が非表示である場合に、前記第1の映像を表示し、
前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が表示されている場合に、前記第2の映像を非表示にする、
処理を前記コンピュータに実行させる、付記12に記載の表示制御プログラム。
(Supplementary Note 13)
When it is determined that the switching request has occurred and the first image is not displayed on the head mounted display, the first image is displayed;
When it is determined that the switching request has occurred and the second video is displayed on the operation terminal, the second video is not displayed.
The display control program according to
(付記14)
前記第1の映像と前記第2の映像とを排他的に表示する、
処理を前記コンピュータに実行させる、付記12又は13に記載の表示制御プログラム。
(Supplementary Note 14)
Exclusively displaying the first image and the second image,
The display control program according to
(付記15)
前記ヘッドマウントディスプレイは、前記第1の映像を表示可能な第1表示部を備え、
前記操作端末は、前記第2の映像を表示可能な第2表示部を備え、
前記第1表示部への給電を停止することにより、前記第1の映像を非表示にし、
前記第2表示部への給電を停止することにより、前記第2の映像を非表示にする、
処理を前記コンピュータに実行させる、付記13に記載の表示制御プログラム。
(Supplementary Note 15)
The head mounted display includes a first display unit capable of displaying the first image.
The operation terminal includes a second display unit capable of displaying the second image;
Turning off the power supply to the first display section hides the first image;
Non-displaying the second image by stopping power supply to the second display unit,
The display control program according to
(付記16)
前記表示システムは、前記ユーザからの入力を受け付ける入力部を更に備え、
前記入力部によって受け付けられた入力に基づき、前記切り替え要求が発生したかを判定する、
処理を前記コンピュータに実行させる、付記12〜15のいずれか1項に記載の表示制御プログラム。
(Supplementary Note 16)
The display system further includes an input unit that receives an input from the user,
It is determined whether the switching request has occurred based on the input accepted by the input unit.
The display control program according to any one of
(付記17)
第1の映像を表示可能なヘッドマウントディスプレイと、第2の映像を表示可能な操作端末と、を有する表示システムの制御方法であって、
ユーザからの切り替え要求が発生したかを判定し、
前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にし、
前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する、
制御方法。。
(Supplementary Note 17)
A control method of a display system having a head mounted display capable of displaying a first video and an operation terminal capable of displaying a second video, the control method comprising:
Determine if a switch request from the user has occurred,
When it is determined that the switching request has occurred and the first image is displayed on the head mounted display, the first image is not displayed,
When it is determined that the switching request has occurred and the second video is not displayed on the operation terminal, the second video is displayed.
Control method. .
(付記18)
前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が非表示である場合に、前記第1の映像を表示し、
前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が表示されている場合に、前記第2の映像を非表示にする、
付記17に記載の制御方法。
(Appendix 18)
When it is determined that the switching request has occurred and the first image is not displayed on the head mounted display, the first image is displayed;
When it is determined that the switching request has occurred and the second video is displayed on the operation terminal, the second video is not displayed.
The control method according to appendix 17.
(付記19)
前記第1の映像と前記第2の映像とを排他的に表示する、
付記17又は18に記載の制御方法。
(Appendix 19)
Exclusively displaying the first image and the second image,
The control method according to Appendix 17 or 18.
(付記20)
前記ヘッドマウントディスプレイは、前記第1の映像を表示可能な第1表示部を備え、
前記操作端末は、前記第2の映像を表示可能な第2表示部を備え、
前記第1表示部への給電を停止することにより、前記第1の映像を非表示にし、
前記第2表示部への給電を停止することにより、前記第2の映像を非表示にする、
付記18に記載の制御方法。
(Supplementary Note 20)
The head mounted display includes a first display unit capable of displaying the first image.
The operation terminal includes a second display unit capable of displaying the second image;
Turning off the power supply to the first display section hides the first image;
Non-displaying the second image by stopping power supply to the second display unit,
The control method according to appendix 18.
100 :表示システム
1 :HMD
11 :ディスプレイ
111 :右目用LCD
112 :左目用LCD
12 :ボタン制御部
121 :ボタン
13 :通信制御部
2 :HHD
21 :ディスプレイ
211 :LCD
212 :タッチパネル
22 :ボタン制御部
221 :ボタン
23 :通信制御部
24 :演算部
241 :判定部
242 :第1制御部
243 :第2制御部
3 :通信ケーブル
4 :ユーザ
100a :表示システム
1a :HMD
14 :演算部
2a :HHD
100: Display system 1: HMD
11: Display 111: LCD for right eye
112: LCD for left eye
12: button control unit 121: button 13: communication control unit 2: HHD
21: Display 211: LCD
212: touch panel 22: button control unit 221: button 23: communication control unit 24: calculation unit 241: determination unit 242: first control unit 243: second control unit 3: communication cable 4:
14:
Claims (11)
ユーザからの切り替え要求が発生したかを判定する判定部と、
前記判定部によって前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にする第1制御部と、
前記判定部によって前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する第2制御部と、
を備える、表示システム。 A display system having a head mounted display capable of displaying a first image and an operation terminal capable of displaying a second image, the display system comprising:
A determination unit that determines whether a switching request from a user has occurred;
A first control unit that determines that the first video is not displayed when the determination unit determines that the switching request has been generated and the first video is displayed on the head mounted display;
A second control unit that displays the second video when it is determined that the switching request has been generated by the determination unit and the second video is not displayed on the operation terminal;
And a display system.
前記第2制御部は、前記判定部によって前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が表示されている場合に、前記第2の映像を非表示にする、
請求項1に記載の表示システム。 The first control unit is configured to display the first image when it is determined by the determination unit that the switching request has occurred and the first image is not displayed on the head mounted display.
When the determination unit determines that the switching request has been generated, and the second image is displayed on the operation terminal, the second control unit hides the second image.
The display system according to claim 1.
請求項1又は2に記載の表示システム。 The first control unit and the second control unit exclusively display the first image and the second image,
A display system according to claim 1 or 2.
前記操作端末は、前記第2の映像を表示可能な第2表示部を備え、
前記第1制御部は、前記第1表示部への給電を停止することにより、前記第1の映像を非表示にし、
前記第2制御部は、前記第2表示部への給電を停止することにより、前記第2の映像を非表示にする、
請求項2に記載の表示システム。 The head mounted display includes a first display unit capable of displaying the first image.
The operation terminal includes a second display unit capable of displaying the second image;
The first control unit hides the first image by stopping power supply to the first display unit,
The second control unit hides the second image by stopping power supply to the second display unit.
The display system according to claim 2.
前記判定部は、前記入力部によって受け付けられた入力に基づき、前記切り替え要求が発生したかを判定する、
請求項1〜4のいずれか1項に記載の表示システム。 The apparatus further comprises an input unit that receives an input from the user,
The determination unit determines whether the switching request has occurred based on the input received by the input unit.
The display system according to any one of claims 1 to 4.
第2の映像を表示可能な表示部と、
ユーザからの切り替え要求が発生し、前記表示部において前記第2の映像が非表示である場合に、前記第2の映像を前記第1の映像とは排他的に前記表示部において表示する制御部と、
を備える、操作端末。 An operation terminal connected to a head mounted display capable of displaying a first image,
A display unit capable of displaying a second image;
A control unit that causes the display unit to display the second image exclusively with the first image when the switching request from the user is generated and the second image is not displayed on the display unit. When,
, An operation terminal.
請求項6に記載の操作端末。 When the switching request is generated and the second image is displayed on the display unit, the control unit excludes the second image from the first image exclusively on the display unit. Display
The operation terminal according to claim 6.
第1の映像を表示可能な表示部と、
ユーザからの切り替え要求が発生し、前記表示部において前記第1の映像が表示されている場合に、前記第1の映像を前記第2の映像とは排他的に前記表示部において非表示にする制御部と、
を備える、ヘッドマウントディスプレイ。 A head mounted display connected to an operation terminal capable of displaying a second image, the head mounted display comprising:
A display unit capable of displaying a first image;
When the switching request from the user is generated and the first image is displayed on the display unit, the first image is made non-display on the display unit exclusively with the second image A control unit,
, A head mounted display.
請求項8に記載のヘッドマウントディスプレイ。 The control unit causes the display unit to display the first image exclusively with the second image when the switching request is generated and the first image is not displayed on the display unit. Do,
The head mounted display according to claim 8.
ユーザからの切り替え要求が発生したかを判定し、
前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にし、
前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する、
処理を実行させる、表示制御プログラム。 To a computer provided in a display system having a head mounted display capable of displaying a first video and an operation terminal capable of displaying a second video,
Determine if a switch request from the user has occurred,
When it is determined that the switching request has occurred and the first image is displayed on the head mounted display, the first image is not displayed,
When it is determined that the switching request has occurred and the second video is not displayed on the operation terminal, the second video is displayed.
Display control program that executes processing.
ユーザからの切り替え要求が発生したかを判定し、
前記切り替え要求が発生したと判定され、前記ヘッドマウントディスプレイにおいて前記第1の映像が表示されている場合に、前記第1の映像を非表示にし、
前記切り替え要求が発生したと判定され、前記操作端末において前記第2の映像が非表示である場合に、前記第2の映像を表示する、
制御方法。 A control method of a display system having a head mounted display capable of displaying a first video and an operation terminal capable of displaying a second video, the control method comprising:
Determine if a switch request from the user has occurred,
When it is determined that the switching request has occurred and the first image is displayed on the head mounted display, the first image is not displayed,
When it is determined that the switching request has occurred and the second video is not displayed on the operation terminal, the second video is displayed.
Control method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017200383A JP2019074917A (en) | 2017-10-16 | 2017-10-16 | Display system, operation terminal, head mounted display, display control program, and control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017200383A JP2019074917A (en) | 2017-10-16 | 2017-10-16 | Display system, operation terminal, head mounted display, display control program, and control method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019074917A true JP2019074917A (en) | 2019-05-16 |
Family
ID=66544127
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017200383A Pending JP2019074917A (en) | 2017-10-16 | 2017-10-16 | Display system, operation terminal, head mounted display, display control program, and control method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2019074917A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7039672B1 (en) | 2020-10-29 | 2022-03-22 | ソフトバンク株式会社 | Controls, programs, and control methods |
WO2022123390A1 (en) * | 2020-12-11 | 2022-06-16 | 株式会社半導体エネルギー研究所 | Operation method for display system |
JP7140890B1 (en) | 2021-06-18 | 2022-09-21 | 株式会社ドワンゴ | Viewer terminal, viewer terminal control method, viewer terminal control program, and recording medium |
-
2017
- 2017-10-16 JP JP2017200383A patent/JP2019074917A/en active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7039672B1 (en) | 2020-10-29 | 2022-03-22 | ソフトバンク株式会社 | Controls, programs, and control methods |
JP2022072285A (en) * | 2020-10-29 | 2022-05-17 | ソフトバンク株式会社 | Control apparatus, program, and control method |
WO2022123390A1 (en) * | 2020-12-11 | 2022-06-16 | 株式会社半導体エネルギー研究所 | Operation method for display system |
JP7140890B1 (en) | 2021-06-18 | 2022-09-21 | 株式会社ドワンゴ | Viewer terminal, viewer terminal control method, viewer terminal control program, and recording medium |
JP2023000905A (en) * | 2021-06-18 | 2023-01-04 | 株式会社ドワンゴ | Viewer terminal, viewer terminal control method, viewer terminal control program, and recording medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11360634B1 (en) | Shared-content session user interfaces | |
US9223401B1 (en) | User interface | |
US9377762B2 (en) | Displaying notifications on a watchface | |
ES2858520T3 (en) | Multi-touch interactions on eye elements | |
US8823603B1 (en) | Head mounted display and method of controlling therefor | |
WO2015170520A1 (en) | Information processing system and information processing method | |
JP2014106445A (en) | Electronic apparatus, and display control method | |
JP2019074917A (en) | Display system, operation terminal, head mounted display, display control program, and control method | |
US20210103381A1 (en) | Displaying content without obscuring key details on a computer screen | |
JP5071387B2 (en) | Display device | |
KR102400383B1 (en) | Method for obtaining sensor data and Electronic device using the same | |
KR102284369B1 (en) | Wearable device and its control method | |
US11467708B2 (en) | Activation of a virtual object | |
TW201519078A (en) | Touch screen display devices and mistouch prevention methods thereof | |
Starner | Wearable computing | |
KR20220147146A (en) | Multi-device continuity for use with extended reality systems | |
EP3100240B1 (en) | Evaluation of augmented reality skins | |
CN108228061B (en) | Information display method based on double screens, mobile terminal and storage medium | |
US20190332189A1 (en) | Systems and methods for unifying two-dimensional and three-dimensional interfaces | |
KR102005406B1 (en) | Dispaly apparatus and controlling method thereof | |
CN115398377A (en) | Gaze-based control | |
KR20160069803A (en) | Mobile device and operation method of mobile device | |
JP7140810B2 (en) | Control device, program, system, and control method | |
US20120268575A1 (en) | Electronic apparatus and video display method | |
JP7171689B2 (en) | Management device, program, system, and management method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180405 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20180409 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20181031 |