JP2022177503A - 表示システム - Google Patents
表示システム Download PDFInfo
- Publication number
- JP2022177503A JP2022177503A JP2021083806A JP2021083806A JP2022177503A JP 2022177503 A JP2022177503 A JP 2022177503A JP 2021083806 A JP2021083806 A JP 2021083806A JP 2021083806 A JP2021083806 A JP 2021083806A JP 2022177503 A JP2022177503 A JP 2022177503A
- Authority
- JP
- Japan
- Prior art keywords
- screen
- display
- viewing
- displayed
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000007 visual effect Effects 0.000 claims abstract description 59
- 238000001514 detection method Methods 0.000 claims description 7
- 238000005259 measurement Methods 0.000 claims description 7
- 238000000034 method Methods 0.000 description 14
- 238000012544 monitoring process Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- B60K35/10—
-
- B60K35/65—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- B60K2360/1438—
-
- B60K2360/146—
Abstract
【課題】より快適にタッチパネルディスプレイを利用できる「表示システム」を提供する。【解決手段】タッチパネルディスプレイ1に表示する画面が、映画等の鑑賞用ビジュアルコンテンツを含んでいないときには、画面500を、ユーザ近くのユーザが自然に操作できる位置に表示する(a、b)。画面が手書入力受付ボックス501を含んでいるときには(b)、画面500の位置を、より上方の位置として、ユーザの手書き入力動作を容易化する。画面が鑑賞用ビジュアルコンテンツを含んでいるときには、画面500を、ユーザから少し離れた鑑賞用ビジュアルコンテンツの鑑賞に適した位置に表示する(c、d)。鑑賞に適した位置は、画面に含まれる鑑賞用ビジュアルコンテンツの表示サイズと解像度に応じて設定する。【選択図】図6
Description
本発明は、タッチパネルディスプレイを備えた表示システムに関するものである。
タッチパネルディスプレイを備えた表示システムに関する技術としては、自動車の座席に着座したユーザの姿勢を検出し、検出した姿勢に応じて、タッチパネルディスプレイをユーザの手が届く位置に移動する技術が知られている(たとえば、特許文献1)。
自動車に搭載されたタッチパネルディスプレイは、ユーザ操作の受け付け以外にも、映画などの観賞用ビジュアルコンテンツの表示などにも用いられることが多い。
そして、このような観賞用ビジュアルコンテンツを表示しているときに、タッチパネルディスプレイの位置をユーザの手が届く位置とすると、距離が近すぎて観賞用ビジュアルコンテンツを快適に鑑賞できないことがある。
そして、このような観賞用ビジュアルコンテンツを表示しているときに、タッチパネルディスプレイの位置をユーザの手が届く位置とすると、距離が近すぎて観賞用ビジュアルコンテンツを快適に鑑賞できないことがある。
そこで、本発明は、より快適にタッチパネルディスプレイを利用できる表示システムを提供することを課題とする。
前記課題達成のために、本発明は、ユーザに対して画面を表示する表示システムに、画面を表示し画面上への操作を受け付ける、画面を表示する位置が可変なタッチパネルディスプレイと、前記タッチパネルディスプレイへの画面の表示を制御する表示制御手段とを備えたものである。ここで、前記表示制御手段は、表示する画面が鑑賞用のビジュアルコンテンツを含む画面であるかどうかを所定の基準に従って判定し、表示する画面が鑑賞用のビジュアルコンテンツを含む画面でないときに、比較的に前記ユーザに近い位置である操作適合位置に前記画面を表示し、表示する画面が鑑賞用のビジュアルコンテンツを含む画面である場合に、比較的に前記ユーザから遠い位置である鑑賞適合位置に前記画面を表示する。
ここで、このような表示システムは、前記表示制御手段において、前記画面に含まれている鑑賞用のビジュアルコンテンツの解像度と表示サイズより求めた当該鑑賞用のビジュアルコンテンツの鑑賞に適した距離、前記ユーザから離れた位置を前記鑑賞適合位置として算定するように構成してもよい。
また、以上の表示システムに、前記鑑賞適合位置に前記画面を表示しているときに、前記画面上への操作を行おうとするユーザのジェスチャを検出するジェスチャ検出手段を設け、前記表示制御手段において、前記鑑賞適合位置に前記画面を表示しているときに、前記ジェスチャ検出手段が前記ジェスチャを検出した場合に、表示している前記画面の位置を、前記操作適合位置に移動してもよい。
また、以上の表示システムに、前記鑑賞適合位置に前記画面を表示しているときに、表示している画面中のユーザ操作受付用の表示オブジェクトを注視するユーザの視線を検出する視線検出手段をを設け、前記表示制御手段において、前記鑑賞適合位置に前記画面を表示しているときに、前記視線検出手段が前記視線を検出した場合に、表示している前記画面の位置を、前記操作適合位置に移動してもよい。
また、以上の表示システムに、前記ユーザの身体の幾何的計測を行う計測手段を設け、前記表示制御手段において、前記計測手段の幾何的計測結果から求めた前記ユーザが手による操作を容易に行える位置を、前記操作適合位置として算定してもよい。
また、以上の表示システムは、前記表示制御手段において、表示する画面が手書き入力を受け付けるものである場合に、前記操作適合位置として、表示する画面が手書き入力を受け付けないものである場合よりも、よりユーザの顔に近くなる位置を算定するように構成してもよい。
また、以上の表示システムは、前記表示制御手段において、前記操作適合位置に画面を表示するときに、前記画面を表示する位置がユーザから遠くなるほど大きくなるサイズで前記画面を表示するように構成してもよい。
また、以上の表示システムにおいて、前記鑑賞用のビジュアルコンテンツを含む画面は、動画コンテンツを含む画面としてもよい。
また、以上の表示システムを、自動車に搭載された表示システムとし、前記タッチパネルディスプレイを、前記画面を表示する位置を前記自動車の前後方向に可変なタッチパネルディスプレイとしてもよい。
また、以上の表示システムを、自動車に搭載された表示システムとし、前記タッチパネルディスプレイを、前記画面を表示する位置を前記自動車の前後方向に可変なタッチパネルディスプレイとしてもよい。
以上のような表示システムによれば、鑑賞用のビジュアルコンテンツを含まない画面は、比較的に前記ユーザに近い位置に表示されるので、ユーザの画面上への操作が容易となる。一方で、鑑賞用のビジュアルコンテンツを含む画面は、比較的に前記ユーザから遠い位置に表示されるので、ユーザは画面が近すぎることによるストレスなく、快適に鑑賞用のビジュアルコンテンツを鑑賞することができる。
以上のように、本発明によれば、より快適にタッチパネルディスプレイを利用できる表示システムを提供することができる。
以下、本発明の実施形態について、自動車に搭載される車載システムへの適用を例にとり説明する。
図1に車載システムの構成を示す。
図示するように車載システムは、タッチパネルディスプレイ1、スピーカ2、車内カメラ3、入出力制御部4、画面配置設定部5、車内監視システム6、複数のソース装置7を備えている。
図1に車載システムの構成を示す。
図示するように車載システムは、タッチパネルディスプレイ1、スピーカ2、車内カメラ3、入出力制御部4、画面配置設定部5、車内監視システム6、複数のソース装置7を備えている。
ソース装置7は、AVプレイヤや放送受信装置やカーナビゲーションや、その他の装置であり、各ソース装置7は、入出力制御部4を介してタッチパネルディスプレイ1を、表示出力とユーザ操作の受け付けに用いながら各々動作する。
また、タッチパネルディスプレイ1は、ディスプレイ11と、ディスプレイ11の表示画面上へのユーザのタッチを検出するタッチパネル12を備えている。
ここで、本実施形態では、タッチパネルディスプレイ1が、図2a、bに示すように、自動車の右後席の右側の車室側面に配置された、表示領域の水平方向(自動車の前後方向)に長いタッチパネルディスプレイ1である場合を例にとり説明を行う。
ここで、本実施形態では、タッチパネルディスプレイ1が、図2a、bに示すように、自動車の右後席の右側の車室側面に配置された、表示領域の水平方向(自動車の前後方向)に長いタッチパネルディスプレイ1である場合を例にとり説明を行う。
車内カメラ3は、たとえば、図2a、bに示すように車室天井に配置され、右後席に着座したユーザのようすを撮影する。車内カメラ3は赤外線カメラであってよく、また、3次元位置計測が可能なステレオカメラであることが望ましい。
図1に戻り、車内監視システム6は、車内カメラ3で撮影した映像から車内の各種状況を監視する。また、車内監視システム6は、右後席に着座したユーザの身体の幾何的計測を行う。この幾何的計測では、図3に示すように、ユーザの目の位置P1、ユーザの肩の位置P2、ユーザの腰の位置P3、ユーザの肘の位置P4、ユーザの手の位置P5を計測する。但し、腰の位置は、ユーザの体格に関わらずに座面に対しておおよそ同じ位置となるので、その同じとなる位置を予め腰の位置P3として設定し用いるようにしてもよい。
また、車内監視システム6は、計測した各位置から、肩から肘までの長さと、肘から手までの長さと、肩から腰に向かう方向を算定する。
図1に戻り、画面配置設定部5は、入出力制御部4から画面配置設定要求を受けると、タッチパネルディスプレイ1に画面を表示する位置と表示画面のサイズとを、画面配置として入出力制御部4に設定する。この画面配置の設定の動作については後に詳述する。
図1に戻り、画面配置設定部5は、入出力制御部4から画面配置設定要求を受けると、タッチパネルディスプレイ1に画面を表示する位置と表示画面のサイズとを、画面配置として入出力制御部4に設定する。この画面配置の設定の動作については後に詳述する。
入出力制御部4は、各ソース装置7の出力画面のタッチパネルディスプレイ1への表示や、各ソース装置7の出力音声のスピーカ2への出力や、各ソース装置7のタッチパネルディスプレイ1を用いたユーザ操作の受け付けを制御する。
ここで、入出力制御部4は、タッチパネルディスプレイ1に表示する画面をユーザ操作等に応答して切り替える際に、画面配置設定要求を発行し、画面配置設定部5から画面配置の設定を受ける。そして、画面配置設定部5から設定された画面配置に従ったタッチパネルディスプレイ1上の位置に、画面配置に従ったサイズで、切替後の画面を表示する。
以下、画面配置設定部5が行う、入出力制御部4への画面配置の設定の動作について説明する。
図4に、画面配置設定部5が行う画面配置設定処理の手順を示す。
図示するように、画面配置設定処理において画面配置設定部5は、入出力制御部4から画面配置設定要求を受け取ったならば(ステップ402)、入出力制御部4に画面情報要求を発行することにより画面情報を取得する(ステップ404)。
図4に、画面配置設定部5が行う画面配置設定処理の手順を示す。
図示するように、画面配置設定処理において画面配置設定部5は、入出力制御部4から画面配置設定要求を受け取ったならば(ステップ402)、入出力制御部4に画面情報要求を発行することにより画面情報を取得する(ステップ404)。
ここで、入出力制御部4は、タッチパネルディスプレイ1に表示する画面を切り替える際に画面情報要求を発行し、画面配置設定部5から画面情報要求を受け取ったならば、切替先の画面の情報を画面情報として入出力制御部4に提供する。画面情報は、画面のサイズ、画面に含まれるコンテンツの情報を含み、コンテンツの情報には、各コンテンツの種別や各種属性を含める。コンテンツの種別としては、動画、静止画、スライドショー、仮想操作子、テキスト、手書入力受付ボックスなどがある。また、コンテンツが動画や静止画やスライドショーである場合には、コンテンツの表示サイズや解像度をコンテンツの属性に含める。なお、入出力制御部4は、切替先の画面を出力するソース機器から、その画面の画面情報を知得する。ただし、切替先の画面の構造を解析して画面情報を知得するようにしてもよいし、各ソース機器が出力する画面の種類毎に予め画面情報を設定しておくようにしてもよい。
次に、画面情報を取得したならば(ステップ404)、切替先の画面に観賞用ビジュアルコンテンツコンテンツが含まれるかどうかを、画像情報に含まれるコンテンツ情報から判定する(ステップ406)。観賞用ビジュアルコンテンツとは、鑑賞を目的とする視覚的コンテンツであり、ステップ406では、コンテンツ情報が、画面に動画が含まれていることを示している場合に、画面に観賞用ビジュアルコンテンツが含まれると判定する。ただし、表示サイズもしくが画面に占める割合が所定値より大きな動画が含まれている場合のみ、画面に観賞用ビジュアルコンテンツが含まれると判定するようにしてもよい。
また、表示システムがスライドショーの表示も行うものである場合には、動画が含まれている場合に加え、スライドショーが含まれている場合に、画面に観賞用ビジュアルコンテンツが含まれると判定してもよい。ただし、この場合も、表示サイズもしくが画面に占める割合が所定値より大きなスライドショーが含まれている場合のみ、画面に観賞用ビジュアルコンテンツが含まれると判定してもよい。
また、表示システムが、写真などの観賞用の静止画の表示も行うものである場合には、表示サイズが所定サイズより大きく解像度が所定値より高い静止画が含まれている場合にも、画面に観賞用ビジュアルコンテンツが含まれると判定してもよい。
または、各ソース機器が出力する画面の種類と、画面が観賞用ビジュアルコンテンツの提示用の画面であるかどうかの対応を登録しておき、当該対応が、切替先の画面の種類が観賞用ビジュアルコンテンツの提示用の画面であることを示しているときに、画面に観賞用ビジュアルコンテンツが含まれると判定するようにしてもよい。
そして、切替先の画面に観賞用ビジュアルコンテンツが含まれない場合には(ステップ406)、操作適合配置算定処理行う(ステップ408)。
図5に、この操作適合配置算定処理の手順を示す。
図示するように操作適合配置算定処理では、まず、車内監視システム6が計測した肩の位置から、肩から腰に向かう方向に、肩から肘までの長さ分、進んだ位置を標準肘位置として算定する(ステップ502)。この標準肘位置は、ユーザが二の腕を身体に沿わせる標準的な姿勢をとっているときの肘の位置に相当する。ただし、車内監視システム6が計測した肘位置を、そのまま標準肘位置として算定してもよい。また、右後席がアームレスト付きの座席であり、アームレストに肘を乗せた姿勢や標準的な姿勢である場合には、車内監視システム6が計測したアームレスト上の肘位置を、そのまま標準肘位置として算定する。
図5に、この操作適合配置算定処理の手順を示す。
図示するように操作適合配置算定処理では、まず、車内監視システム6が計測した肩の位置から、肩から腰に向かう方向に、肩から肘までの長さ分、進んだ位置を標準肘位置として算定する(ステップ502)。この標準肘位置は、ユーザが二の腕を身体に沿わせる標準的な姿勢をとっているときの肘の位置に相当する。ただし、車内監視システム6が計測した肘位置を、そのまま標準肘位置として算定してもよい。また、右後席がアームレスト付きの座席であり、アームレストに肘を乗せた姿勢や標準的な姿勢である場合には、車内監視システム6が計測したアームレスト上の肘位置を、そのまま標準肘位置として算定する。
そして、標準肘位置の上下方向の位置から10cm上の上下方向の位置を基準上下位置として設定する(ステップ504)。この基準上下位置は、おおよそ、ユーザが二の腕を身体に沿わせる標準的な姿勢から、肘を少し上に上げたときの肘の上下方向の位置となる。
また、標準肘位置の前後方向の位置から前方に向かう方向に、肘から手までの長さ分、進んだ位置から、後方に10cm戻った前後方向の位置を基準前後位置として設定する(ステップ506)。この基準前後位置は、おおよそ、ユーザが二の腕を身体に沿わせる標準的な姿勢から、肘を少し上に上げ、前方斜めに自然に手を伸ばしたときの手の前後方向の位置となる。
そして、次に、取得した画面情報に基づいて、切替先の画面に手書入力受付ボックスが含まれているかどうかを判定する(ステップ508)。ここで、手書入力受付ボックスとは、ユーザの手書き入力を受け付ける画面上のエリアである。
そして、手書入力受付ボックスが含まれていない場合には(ステップ508)、基準前後位置を前後方向の位置とし基準上下位置を上下方向の位置とする前後上下方向の位置に相当するタッチパネルディスプレイ1の表示領域中の位置を画面位置に設定する(ステップ510)。そして、ステップ512に進む。
一方、手書入力受付ボックスが含まれている場合には(ステップ508)、車内監視システム6が計測している目の上下方向の位置が、タッチパネルディスプレイ1の上下方向の中央の位置より上であるかどうかを調べ(ステップ516)、上でなければ、基準前後位置を前後方向の位置とし基準上下位置を上下方向の位置とする前後上下方向の位置に相当するタッチパネルディスプレイ1の表示領域中の位置を画面位置に設定し(ステップ510)、ステップ512に進む。
一方、目の上下方向の位置が、タッチパネルディスプレイ1の上下方向の中央の位置より上でなければ、(ステップ516)、基準前後位置を前後方向の位置とし基準上下位置の10cm上の位置を上下方向の位置とする前後上下方向の位置に相当するタッチパネルディスプレイ1の表示領域中の位置を画面位置に設定する(ステップ518)。ただし、基準上下位置の10cm上の位置が、目の上下方向の位置より上の位置となるときには、基準前後位置を前後方向の位置とし目の上下方向の位置を上下方向の位置とする前後上下方向の位置に相当するタッチパネルディスプレイ1の表示領域中の位置を画面位置に設定する
そして、ステップ512に進む。
そして、ステップ512に進む。
ここで、このように、画面に手書入力受付ボックスが含まれている場合に、含まれていない場合よりも、画面位置を10cm上の位置とするのは、手書き位置をより顔に近づけて、ユーザの手書き動作を容易化するためである。
さて、このようにして、画面位置を設定し(ステップ510、518)、ステップ512に進んだならば、車内監視システム6が計測した目の位置と設定した画面位置との距離に応じて、タッチパネルディスプレイ1の表示領域に収まる範囲内で、距離が大きいほど大きくなるように画面サイズを設定する。
そして、設定した画面位置と画面サイズを操作適合配置として設定し(ステップ514)画面配置設定処理に戻る。
図4に戻り、操作適合配置算定処理を行ったならば(ステップ408)、操作適合配置を画面配置として入出力制御部4に設定し(ステップ410)、ステップ402からの処理に戻る。
図4に戻り、操作適合配置算定処理を行ったならば(ステップ408)、操作適合配置を画面配置として入出力制御部4に設定し(ステップ410)、ステップ402からの処理に戻る。
一方、切替先の画面に観賞用ビジュアルコンテンツが含まれている場合には(ステップ406)、車内監視システム6が計測した目の位置と、画面に含まれている観賞用ビジュアルコンテンツの表示サイズや解像度の属性に応じて、観賞用ビジュアルコンテンツの鑑賞に適合したタッチパネルディスプレイ1の表示領域中の位置を画面位置として設定する(ステップ412)。観賞用ビジュアルコンテンツの鑑賞に適合した位置とは、たとえば、目と画面との距離が、観賞用ビジュアルコンテンツの縦のサイズのn倍となる位置とする。n倍のnは、解像度に応じて、観賞用ビジュアルコンテンツの解像度が低いほど大きくなるように設定する。
そして、設定した画面位置とオリジナル画面サイズを画面配置として入出力制御部4に設定する(ステップ414)。オリジナル画面サイズとは、画面本来のサイズであり、表示される観賞用ビジュアルコンテンツの解像度や表示サイズが変化しないサイズである。
そして、画面配置を設定したならば(ステップ414)、入出力制御部4からの画面配置設定要求の受信と(ステップ416)、操作ジェスチャの発生と(ステップ418)とを監視する。
ここで、操作ジェスチャとは、右後席のユーザが、タッチパネルディスプレイ1に表示されている画面を操作しようとするジェスチャであり、ステップ418では、たとえば、車内監視システム6が計測している手の位置の、表示されている画面方向への所定距離以上の移動が発生したときに、操作ジェスチャが発生したと判定する。
そして、画面配置設定要求を受信したならば(ステップ416)、ステップ404からの処理に戻る。
一方、操作ジェスチャが発生した場合には(ステップ418)、図5に示した操作適合配置算定処理を行って操作適合配置を算定し(ステップ420)、設定した操作適合配置を画面配置として入出力制御部4に設定し(ステップ422)、ステップ402からの処理に戻る。
一方、操作ジェスチャが発生した場合には(ステップ418)、図5に示した操作適合配置算定処理を行って操作適合配置を算定し(ステップ420)、設定した操作適合配置を画面配置として入出力制御部4に設定し(ステップ422)、ステップ402からの処理に戻る。
ここで、ステップ422で操作適合配置を画面配置として設定すると、入出力制御部4は、設定された画面配置に従って、表示している画面の位置やサイズを変更する。そして、この結果、ユーザが画面を操作する動作に応答して、表示されている画面が、よりユーザに近い、ユーザが操作を容易に行える位置に移動する。
以上、画面配置設定部5が行う画面配置設定処理について説明した。
ここで、車内監視システム6において、車内カメラ3で撮影した映像から右後席に着座したユーザの視線を検出するようにし、画面配置設定処理のステップ418を、操作ジェスチャに代えて、または、操作ジェスチャと共に、表示している画面中のユーザ操作受付用の表示オブジェクトを注視するユーザの視線の発生を監視する処理としてもよい。
ここで、車内監視システム6において、車内カメラ3で撮影した映像から右後席に着座したユーザの視線を検出するようにし、画面配置設定処理のステップ418を、操作ジェスチャに代えて、または、操作ジェスチャと共に、表示している画面中のユーザ操作受付用の表示オブジェクトを注視するユーザの視線の発生を監視する処理としてもよい。
ユーザ操作受付用の表示オブジェクトとは、画面の構成する要素である表示オブジェクトの内の、ボタンやキー等の仮想操作子や手書入力受付ボックス等の、ユーザ操作を受け付ける表示オブジェクトである。
なお、ステップ418において操作ジェスチャに代えてユーザ操作受付用の表示オブジェクトを注視するユーザの視線の発生を監視する場合には、ステップ418において当該視線の発生が検出された場合にステップ420に進み、当該視線の発生が検出されなかった場合にステップ416に戻る。また、ステップ418において操作ジェスチャと共に、ユーザ操作受付用の表示オブジェクトを注視するユーザの視線の発生を監視する場合には、ステップ418において操作ジェスチャと当該視線の発生のいずれかが検出された場合にステップ420に進み、双方が検出されなかった場合にステップ416に戻る。
以上、画面配置設定部5が行う、入出力制御部4への画面配置の設定の動作について説明した。
このような画面配置設定部5の動作によれば、画面が鑑賞用ビジュアルコンテンツを含んでいないときには、図6a、bに示すように、画面500は、ユーザ近くのユーザが自然な動作で操作できる位置に表示される。
このような画面配置設定部5の動作によれば、画面が鑑賞用ビジュアルコンテンツを含んでいないときには、図6a、bに示すように、画面500は、ユーザ近くのユーザが自然な動作で操作できる位置に表示される。
ここで、図6aは、画面が手書入力受付ボックスを含んでいないときの画面の配置を示し、図6bは、画面が手書入力受付ボックス501を含んでいるときの画面の配置を示している。図示するように、画面が手書入力受付ボックス501を含んでいるときには、画面の位置は少し顔に近づいた位置となり、ユーザの手書き入力が容易化される。
次に、画面が鑑賞用ビジュアルコンテンツを含んでいるときには、図6c、dに示すように、画面500は、ユーザから少し離れたユーザの鑑賞用ビジュアルコンテンツの鑑賞に適した位置に表示される。
ここで、図6c、dは、画面に同じ表示サイズの鑑賞用ビジュアルコンテンツが画面中の同じ位置に含まれていた場合について示しており、図6cは、鑑賞用ビジュアルコンテンツの解像度が高いときの画面の配置を示し、図6dは、鑑賞用ビジュアルコンテンツの解像度が低いときの画面の配置を示している。図示するように、画面に含まれる鑑賞用ビジュアルコンテンツの解像度に応じて、ユーザから画面までの距離が、その解像度の鑑賞用ビジュアルコンテンツの鑑賞に適した距離となるように、解像度に応じた異なる位置に画面は配置される。なお、上述のように、鑑賞用ビジュアルコンテンツを含む画面の配置は、鑑賞用ビジュアルコンテンツの解像度に加え表示サイズにも依存して設定される。
以上、本発明の実施形態について説明した。
このように本実施形態によれば、鑑賞用ビジュアルコンテンツを含まない画面は、比較的にユーザに近い位置に表示されるので、ユーザの画面上への操作が容易となる。一方で、鑑賞用のビジュアルコンテンツを含む画面は、比較的に前記ユーザから遠い位置に表示されるので、ユーザは、画面が近すぎることによるストレスなく、快適に鑑賞用ビジュアルコンテンツを鑑賞することができる。
このように本実施形態によれば、鑑賞用ビジュアルコンテンツを含まない画面は、比較的にユーザに近い位置に表示されるので、ユーザの画面上への操作が容易となる。一方で、鑑賞用のビジュアルコンテンツを含む画面は、比較的に前記ユーザから遠い位置に表示されるので、ユーザは、画面が近すぎることによるストレスなく、快適に鑑賞用ビジュアルコンテンツを鑑賞することができる。
ところで、以上の実施形態は、1つのタッチパネルディスプレイ1を自動車の右後席の右側の車室側面にのみ設けた場合について示したが、タッチパネルディスプレイ1の個数や配置は種々の態様とすることができる。
たとえば、タッチパネルディスプレイ1を、左後席の左側の車室側面に設けてもよいし、タッチパネルディスプレイ1を右後席の右側の車室側面と左後席の左側の車室側面のそれぞれに設けるようにしてもよい。
または、たとえば、図7a1、a2に示すように、自動車の右後席と左後席の間に、表示領域の垂直方向(自動車の前後方向)に長いタッチパネルディスプレイ1を設けてもよい。
この場合も、画面が鑑賞用ビジュアルコンテンツを含んでいないときには、図7b1、b2に示すように、画面500を、ユーザ近くのユーザが自然に操作できる位置に配置されるよう、タッチパネルディスプレイ1に表示する。また、図7b2に示すように、画面が手書入力受付ボックス501を含んでいるときには、図7b1に示す画面が手書入力受付ボックス501を含んでいないときよりも、タッチパネルディスプレイ1を利用しているユーザ側に左右方向について少し寄せて表示し、ユーザの手書き入力を容易化する。
また、画面が鑑賞用ビジュアルコンテンツを含んでいるときには、図7b3、b4に示すように、画面500を、図7b1、b2に示した鑑賞用ビジュアルコンテンツを含んでいない場合よりもユーザから離れた、ユーザの鑑賞用ビジュアルコンテンツの鑑賞に適した位置に表示する。また、画面に含まれる鑑賞用ビジュアルコンテンツの解像度や表示サイズに応じて、ユーザから画面までの距離が、その解像度と表示サイズの鑑賞用ビジュアルコンテンツの鑑賞に適した距離となるように、解像度や表示サイズに応じて異なる位置に画面を表示する。
また、以上の実施形態では、タッチパネルディスプレイ1の表示領域内の画面の表示位置を異ならせることにより画面の配置を異ならせたが、これは、タッチパネルディスプレイ1自体を移動することにより、画面の配置を異ならせるようにしてもよい。
1…タッチパネルディスプレイ、2…スピーカ、3…車内カメラ、4…入出力制御部、5…画面配置設定部、6…車内監視システム、7…ソース装置、11…ディスプレイ、12…タッチパネル。
Claims (9)
- ユーザに対して画面を表示する表示システムであって、
画面を表示し画面上への操作を受け付ける、画面を表示する位置が可変なタッチパネルディスプレイと、
前記タッチパネルディスプレイへの画面の表示を制御する表示制御手段とを備え、
前記表示制御手段は、表示する画面が鑑賞用のビジュアルコンテンツを含む画面であるかどうかを所定の基準に従って判定し、表示する画面が鑑賞用のビジュアルコンテンツを含む画面でないときに、比較的に前記ユーザに近い位置である操作適合位置に前記画面を表示し、表示する画面が鑑賞用のビジュアルコンテンツを含む画面である場合に、比較的に前記ユーザから遠い位置である鑑賞適合位置に前記画面を表示することを特徴とする表示システム。 - 請求項1記載の表示システムであって、
前記表示制御手段は、前記画面に含まれている鑑賞用のビジュアルコンテンツの解像度と表示サイズより求めた当該鑑賞用のビジュアルコンテンツの鑑賞に適した距離、前記ユーザから離れた位置を前記鑑賞適合位置として算定することを特徴とする表示システム。 - 請求項1または2記載の表示システムであって、
前記鑑賞適合位置に前記画面を表示しているときに、前記画面上への操作を行おうとするユーザのジェスチャを検出するジェスチャ検出手段を有し、
前記表示制御手段は、前記鑑賞適合位置に前記画面を表示しているときに、前記ジェスチャ検出手段が前記ジェスチャを検出した場合に、表示している前記画面の位置を、前記操作適合位置に移動することを特徴とする表示システム。 - 請求項1、2または3記載の表示システムであって、
前記鑑賞適合位置に前記画面を表示しているときに、表示している画面中のユーザ操作受付用の表示オブジェクトを注視するユーザの視線を検出する視線検出手段を有し、
前記表示制御手段は、前記鑑賞適合位置に前記画面を表示しているときに、前記視線検出手段が前記視線を検出した場合に、表示している前記画面の位置を、前記操作適合位置に移動することを特徴とする表示システム。 - 請求項1、2、3または4記載の表示システムであって、
前記ユーザの身体の幾何的計測を行う計測手段を有し、
前記表示制御手段は、前記計測手段の幾何的計測結果から求めた前記ユーザが手による操作を容易に行える位置を、前記操作適合位置として算定することを特徴とする表示システム。 - 請求項1、2、3、4または5記載の表示システムであって、
前記表示制御手段は、表示する画面が手書き入力を受け付けるものである場合に、前記操作適合位置として、表示する画面が手書き入力を受け付けないものである場合よりも、よりユーザの顔に近くなる位置を算定することを特徴とする表示システム。 - 請求項5または6記載の表示システムであって、
前記表示制御手段は、前記操作適合位置に画面を表示するときに、前記画面を表示する位置がユーザから遠くなるほど大きくなるサイズで前記画面を表示することを特徴とする表示システム。 - 請求項1、2、3、4、5、6または7記載の表示システムであって、
前記鑑賞用のビジュアルコンテンツを含む画面は、動画コンテンツを含む画面であることを特徴とする表示システム。 - 請求項1、2、3、4、5、6、7または8記載の表示システムであって、
当該表示システムは自動車に搭載された表示システムであり、
前記タッチパネルディスプレイは、前記画面を表示する位置を前記自動車の前後方向に可変であることを特徴とする表示システム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021083806A JP2022177503A (ja) | 2021-05-18 | 2021-05-18 | 表示システム |
EP22172261.4A EP4091854A1 (en) | 2021-05-18 | 2022-05-09 | Display system |
US17/740,892 US11630628B2 (en) | 2021-05-18 | 2022-05-10 | Display system |
CN202210534521.XA CN115373539A (zh) | 2021-05-18 | 2022-05-17 | 显示系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021083806A JP2022177503A (ja) | 2021-05-18 | 2021-05-18 | 表示システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022177503A true JP2022177503A (ja) | 2022-12-01 |
Family
ID=81595781
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021083806A Pending JP2022177503A (ja) | 2021-05-18 | 2021-05-18 | 表示システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11630628B2 (ja) |
EP (1) | EP4091854A1 (ja) |
JP (1) | JP2022177503A (ja) |
CN (1) | CN115373539A (ja) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008197934A (ja) * | 2007-02-14 | 2008-08-28 | Calsonic Kansei Corp | 操作者判別方法 |
KR101542973B1 (ko) * | 2013-12-30 | 2015-08-07 | 현대자동차 주식회사 | 자동차의 디스플레이 제어장치 및 제어방법 |
DE102014016222A1 (de) * | 2014-10-31 | 2016-05-04 | Audi Ag | Verfahren und System zum Betreiben einer berührungssensitiven Anzeigeeinrichtung eines Kraftwagens |
KR101687543B1 (ko) * | 2015-04-27 | 2016-12-19 | 엘지전자 주식회사 | 디스플레이 장치 및 그 제어방법 |
DE102016121107A1 (de) * | 2016-11-04 | 2018-05-09 | Volkswagen Ag | Anordnung einer grafischen Benutzerschnittstelle in einem Fahrzeug und Verfahren zum Bereitstellen einer grafischen Benutzerschnittstelle in einem Fahrzeug |
JP2018184024A (ja) | 2017-04-24 | 2018-11-22 | 日産自動車株式会社 | ディスプレイ可動方法及びディスプレイ可動装置 |
-
2021
- 2021-05-18 JP JP2021083806A patent/JP2022177503A/ja active Pending
-
2022
- 2022-05-09 EP EP22172261.4A patent/EP4091854A1/en active Pending
- 2022-05-10 US US17/740,892 patent/US11630628B2/en active Active
- 2022-05-17 CN CN202210534521.XA patent/CN115373539A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4091854A1 (en) | 2022-11-23 |
US11630628B2 (en) | 2023-04-18 |
CN115373539A (zh) | 2022-11-22 |
US20220374184A1 (en) | 2022-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110626237B (zh) | 具有手臂检测的自动调节中央控制台 | |
US11410634B2 (en) | Information processing apparatus, information processing method, display system, and mobile object | |
EP1837748B1 (en) | Display apparatus | |
US9552058B2 (en) | Vehicle-mounted equipment operating device | |
JP2007045169A (ja) | 車両用情報処理装置 | |
CN104301507A (zh) | 移动终端及其控制方法 | |
JP6244822B2 (ja) | 車載用表示システム | |
KR20110117966A (ko) | 차량용 멀티미디어 제어를 위한 사용자 인터페이스 장치 및 방법 | |
JP2006522397A (ja) | マルチビュー・ディスプレイ | |
US10059267B2 (en) | Rearview mirror angle setting system, method, and program | |
WO2015072100A1 (ja) | 視線方向検知装置 | |
US20100156782A1 (en) | Hand Control Image For Replication | |
JP2005280396A (ja) | 操作指示装置 | |
JP2022177503A (ja) | 表示システム | |
US20080106515A1 (en) | Operation apparatus | |
CN116424173A (zh) | 专用车辆 | |
JP2014219682A (ja) | 表示制御システム及びプログラム | |
JP4368233B2 (ja) | 空間入力システム | |
JP6580373B2 (ja) | ヘッドマウントディスプレイを制御するプログラム、システム、及び方法。 | |
JP6236211B2 (ja) | 輸送機器用表示装置 | |
JP5686029B2 (ja) | 表示制御システム及びプログラム | |
US20230311652A1 (en) | Guided driver positioning systems and methods | |
WO2020137196A1 (ja) | 画像表示装置、画像表示システムおよび画像表示方法 | |
JP2002078566A (ja) | 姿勢制御システム | |
JP2006030615A (ja) | 車載モニタ表示装置,車両用文字情報提供装置及びそれらから成る車両用文字情報表示システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240116 |