JP2017062813A - 映像表示装置及びプロジェクタ - Google Patents
映像表示装置及びプロジェクタ Download PDFInfo
- Publication number
- JP2017062813A JP2017062813A JP2016213934A JP2016213934A JP2017062813A JP 2017062813 A JP2017062813 A JP 2017062813A JP 2016213934 A JP2016213934 A JP 2016213934A JP 2016213934 A JP2016213934 A JP 2016213934A JP 2017062813 A JP2017062813 A JP 2017062813A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- user
- shadow
- finger
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 118
- 238000013459 approach Methods 0.000 claims abstract description 60
- 238000005286 illumination Methods 0.000 claims abstract description 40
- 230000008859 change Effects 0.000 claims description 8
- 230000001678 irradiating effect Effects 0.000 claims 1
- 238000000605 extraction Methods 0.000 abstract description 8
- 239000000284 extract Substances 0.000 abstract description 7
- 238000000034 method Methods 0.000 description 24
- 238000012545 processing Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 6
- 238000002372 labelling Methods 0.000 description 5
- 238000012937 correction Methods 0.000 description 4
- 230000001154 acute effect Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 210000001015 abdomen Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【解決手段】影領域抽出部104は、カメラ100より得られる撮像画像の輝度を閾値と比較し、第1、第2の照明101,102で生じるユーザの指30に対する第1、第2の影401,402を抽出する。接近度検出部106は、第1、第2の影内の2つの特徴点601,602間の距離dから指の操作面22への接近度を検出し、接触点検出部107は、2つの特徴点の位置から指の操作面への接触点Pを検出する。方向検出部109は、第1、第2の影の輪郭線501,502の方向から指の指し示す方向700を検出する。さらに表示制御部121は、検出結果データ150に基づき、操作対象装置2に対する表示制御データ151を生成する。
【選択図】図1
Description
特許文献1には、照明手段により照らされた状態で操作者を撮像手段に撮像させる手段と、前記撮像手段により得られる操作者の画像データをもとに、前記操作者の特定部位の領域を検出する手段と、前記検出された操作者の特定部位の領域から影の部分を抽出する手段と、前記抽出された影の部分の中から、エッジが直線を成す線分を複数検出し、検出された線分同士が鋭角に交わる点を検出し、この交点を前記操作者の特定部位の領域内における指差し位置として検出する手段と、を具備する操作検出装置が記載されている。
上記の例では、特徴点601,602を、それぞれの影401,402の先端位置に設定しているが、この方法によれば特徴点の設定が容易であり、また、接触点Pの位置もその近傍に存在するので容易に決定できる。
S1001では、影領域抽出部104は、カメラ100で撮像した画像から背景を減算して差分画像を求め、輝度が閾値Lth以下の部分を影領域として抽出する。その際、抽出した影に対して互いに連結していない影の領域をそれぞれ別の影として区別する、いわゆるラベリング処理を行う。
S1003では、検出した2つの特徴点601,602間の距離dを測定する。
なお、操作状態においては以上の処理フローを繰り返して実行し、操作状態の変化に追従した操作検出を行うものとする。
S1011では、影領域抽出部104は、カメラ100で撮像した画像から背景を減算して差分画像を求め、輝度が閾値Lth以下の部分を影領域として抽出する。これは前記S1001と同様である。
なお、操作状態においては以上の処理フローを繰り返して実行し、操作状態の変化に追従した操作検出を行うものとする。
また、図12(a)の接近度と接触点の検出処理と(b)の指さし方向検出処理は、並行して行うことができる。
(a)は、指さし方向700に応じてポインタ800の表示位置を補正する場合である。ポインタ800を表示する際、接触点検出部107において検出した接触点Pと全く同じ位置に表示すると、ポインタ800が指30に隠れてユーザ3から見えにくくなる。そこで、方向検出部109で検出した指さし方向700に沿ってポインタ800を指先前方に所定量だけずらして表示する。これによりポインタ800はユーザ3から見やすくなる。
メモリ203は、半導体などで構成され、中央処理部201の演算や制御に必要な情報や、投写映像として表示する映像情報などを記憶する。
100:カメラ、
101,102:照明、
104:影領域抽出部、
105:特徴点検出部、
106:接近度検出部、
107:接触点検出部、
108:輪郭検出部、
109:方向検出部、
120:制御部、
121:表示制御部、
130:出力部、
150:検出結果データ、
151:表示制御データ、
2:操作対象装置(プロジェクタ)、
2a:短投写型プロジェクタ、
2b:ヘッドマウント型プロジェクタ、
20:小型プロジェクタ本体、
21:壁面、
22:操作面、
23:投写映像、
23a:投写光、
201:中央処理部、
202:操作解析部、
203:メモリ、
204:映像制御部、
210:映像投写部、
3:ユーザ、
30,31,32:指、
401,402,403,404,405:影、
501,502:輪郭線、
601,602:特徴点、
700,701,702,703:指さし方向、
800:ポインタ、
P:接触点。
Claims (6)
- 映像表示面に対するユーザの操作を検出可能な映像表示装置において、
前記映像表示面と少なくとも一部が重畳する操作面に異なる位置から照明光を照射する第1の照明および第2の照明と、
前記照明光が照射された前記操作面を前記ユーザの操作部とともに撮像するカメラと、
該カメラより得られる撮像画像にもとづいて、前記第1の照明により生じる前記ユーザの操作部の第1の影と、前記第2の照明により生じる前記ユーザの操作部の第2の影とを抽出し、抽出された前記第1の影の形状および前記第2の影の形状から、前記ユーザの操作部の前記操作面に対する接近度を含むユーザ操作状態を検出する操作状態検出部と、
映像表示部と、
前記操作状態検出部の検出結果にもとづいて前記映像表示部を制御する制御部と、を備え、
前記制御部は、前記操作状態検出部が検出した前記接近度に応じて、前記映像表示部によるポインタの表示状態を変更する制御を行うことを特徴とする映像表示装置。 - 請求項1に記載の映像表示装置であって、
前記操作状態検出部が検出した前記接近度に応じたポインタの表示の制御状態には、少なくとも、
前記ユーザの操作部が前記操作面から離れた空中にあって前記操作面と接触していない状態において、前記映像表示部がポインタを表示しない第1の制御状態と、
前記ユーザの操作部が前記操作面から離れた空中にあって前記第1の制御状態よりも前記操作面に接近している状態において、前記映像表示部がポインタを表示する第2の制御状態と、
があることを特徴とする映像表示装置。 - 請求項1に記載の映像表示装置であって、
前記映像表示部がポインタを表示しない前記第1の制御状態には、前記接近度に応じて、前記ユーザの操作部による空中操作が可能な空中操作モードと、前記ユーザの操作部による操作をオフにする操作オフモードがあることを特徴とする映像表示装置。 - 映像投射面に対するユーザの操作を検出可能なプロジェクタにおいて、
表示映像を投射する映像投射部と、
前記表示映像が投射される前記映像投射面と少なくとも一部が重畳する操作面に異なる位置から照明光を照射する第1の照明および第2の照明と、
前記照明光が照射された前記操作面を前記ユーザの操作部とともに撮像するカメラと、
該カメラより得られる撮像画像にもとづいて、前記第1の照明により生じる前記ユーザの操作部の第1の影と、前記第2の照明により生じる前記ユーザの操作部の第2の影とを抽出し、抽出された前記第1の影の形状および前記第2の影の形状から、前記ユーザの操作部の前記操作面に対する接近度を含むユーザ操作状態を検出可能な操作状態検出部と、
前記操作状態検出部の検出結果にもとづいて前記映像投射部を制御する制御部と、を備え、
前記制御部は、前記操作状態検出部が検出した前記接近度に応じて、前記表示映像のポインタの表示状態を変更する制御を行うことを特徴とするプロジェクタ。 - 請求項4に記載のプロジェクタであって、
前記操作状態検出部が検出した前記接近度に応じたポインタの表示の制御状態には、少なくとも、
前記ユーザの操作部が前記操作面から離れた空中にあって前記操作面と接触していない状態において、前記表示映像にポインタを表示しない第1の制御状態と、
前記ユーザの操作部が前記操作面から離れた空中にあって前記第1の制御状態よりも前記操作面に接近している状態において、前記表示映像にポインタを表示する第2の制御状態と、
があることを特徴とするプロジェクタ。 - 請求項4に記載のプロジェクタであって、
前記表示映像にポインタを表示しない前記第1の制御状態には、前記接近度に応じて、前記ユーザの操作部による空中操作が可能な空中操作モードと、前記ユーザの操作部による操作をオフにする操作オフモードがあることを特徴とするプロジェクタ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016213934A JP6307576B2 (ja) | 2016-11-01 | 2016-11-01 | 映像表示装置及びプロジェクタ |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016213934A JP6307576B2 (ja) | 2016-11-01 | 2016-11-01 | 映像表示装置及びプロジェクタ |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013048306A Division JP6037901B2 (ja) | 2013-03-11 | 2013-03-11 | 操作検出装置、操作検出方法及び表示制御データ生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017062813A true JP2017062813A (ja) | 2017-03-30 |
JP6307576B2 JP6307576B2 (ja) | 2018-04-04 |
Family
ID=58428877
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016213934A Active JP6307576B2 (ja) | 2016-11-01 | 2016-11-01 | 映像表示装置及びプロジェクタ |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6307576B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6328304B1 (ja) * | 2017-07-25 | 2018-05-23 | 株式会社ネットアプリ | 入出力システム |
US11379083B2 (en) | 2019-09-27 | 2022-07-05 | Seiko Epson Corporation | Position detection device, projector, and position detection method |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005519368A (ja) * | 2002-02-28 | 2005-06-30 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Guiのためのディスプレイを提供する方法 |
JP2008505381A (ja) * | 2004-06-29 | 2008-02-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 表示装置の汚れを防ぐ方法及び装置 |
JP2008505380A (ja) * | 2004-06-29 | 2008-02-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | グラフィカルユーザインタフェースの多階層表示 |
JP2009250772A (ja) * | 2008-04-04 | 2009-10-29 | Sony Corp | 位置検出システム、位置検出方法、プログラム、物体判断システム、および物体判断方法 |
JP2010244422A (ja) * | 2009-04-08 | 2010-10-28 | Toshiba Tec Corp | 情報表示装置 |
JP2011175623A (ja) * | 2010-01-29 | 2011-09-08 | Shimane Prefecture | 画像認識装置および操作判定方法並びにプログラム |
JP2012003690A (ja) * | 2010-06-21 | 2012-01-05 | Toyota Infotechnology Center Co Ltd | ユーザインタフェース装置 |
JP2012068854A (ja) * | 2010-09-22 | 2012-04-05 | Shimane Prefecture | 操作入力装置および操作判定方法並びにプログラム |
US20120249422A1 (en) * | 2011-03-31 | 2012-10-04 | Smart Technologies Ulc | Interactive input system and method |
WO2012157272A1 (ja) * | 2011-05-16 | 2012-11-22 | パナソニック株式会社 | 表示装置、表示制御方法及び表示制御プログラム、並びに、入力装置、入力支援方法及びプログラム |
US20130055143A1 (en) * | 2011-08-31 | 2013-02-28 | Smart Technologies Ulc | Method for manipulating a graphical user interface and interactive input system employing the same |
-
2016
- 2016-11-01 JP JP2016213934A patent/JP6307576B2/ja active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005519368A (ja) * | 2002-02-28 | 2005-06-30 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Guiのためのディスプレイを提供する方法 |
JP2008505381A (ja) * | 2004-06-29 | 2008-02-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 表示装置の汚れを防ぐ方法及び装置 |
JP2008505380A (ja) * | 2004-06-29 | 2008-02-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | グラフィカルユーザインタフェースの多階層表示 |
JP2009250772A (ja) * | 2008-04-04 | 2009-10-29 | Sony Corp | 位置検出システム、位置検出方法、プログラム、物体判断システム、および物体判断方法 |
JP2010244422A (ja) * | 2009-04-08 | 2010-10-28 | Toshiba Tec Corp | 情報表示装置 |
JP2011175623A (ja) * | 2010-01-29 | 2011-09-08 | Shimane Prefecture | 画像認識装置および操作判定方法並びにプログラム |
JP2012003690A (ja) * | 2010-06-21 | 2012-01-05 | Toyota Infotechnology Center Co Ltd | ユーザインタフェース装置 |
JP2012068854A (ja) * | 2010-09-22 | 2012-04-05 | Shimane Prefecture | 操作入力装置および操作判定方法並びにプログラム |
US20120249422A1 (en) * | 2011-03-31 | 2012-10-04 | Smart Technologies Ulc | Interactive input system and method |
WO2012157272A1 (ja) * | 2011-05-16 | 2012-11-22 | パナソニック株式会社 | 表示装置、表示制御方法及び表示制御プログラム、並びに、入力装置、入力支援方法及びプログラム |
US20130055143A1 (en) * | 2011-08-31 | 2013-02-28 | Smart Technologies Ulc | Method for manipulating a graphical user interface and interactive input system employing the same |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6328304B1 (ja) * | 2017-07-25 | 2018-05-23 | 株式会社ネットアプリ | 入出力システム |
JP2019028510A (ja) * | 2017-07-25 | 2019-02-21 | 株式会社ネットアプリ | 入出力システム |
US11379083B2 (en) | 2019-09-27 | 2022-07-05 | Seiko Epson Corporation | Position detection device, projector, and position detection method |
Also Published As
Publication number | Publication date |
---|---|
JP6307576B2 (ja) | 2018-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6037901B2 (ja) | 操作検出装置、操作検出方法及び表示制御データ生成方法 | |
JP6037900B2 (ja) | 操作検出装置及び操作検出方法 | |
US10191594B2 (en) | Projection-type video display device | |
US10915186B2 (en) | Projection video display apparatus and video display method | |
WO2012124730A1 (ja) | 検出装置、入力装置、プロジェクタ、及び電子機器 | |
US6512507B1 (en) | Pointing position detection device, presentation system, and method, and computer-readable medium | |
WO2016021022A1 (ja) | 投写型映像表示装置及びその制御方法 | |
US20130127705A1 (en) | Apparatus for touching projection of 3d images on infrared screen using single-infrared camera | |
US9690430B2 (en) | Touch detection apparatus, touch detection method and recording medium | |
JP6307576B2 (ja) | 映像表示装置及びプロジェクタ | |
US11093085B2 (en) | Position detection method, position detection device, and interactive projector | |
TW201423526A (zh) | 光學觸控系統、觸控偵測方法、校正方法及電腦程式產品 | |
JP6199472B2 (ja) | プロジェクタ及びヘッドマウント型表示装置 | |
JP2021056588A (ja) | 位置検出装置、プロジェクター、及び位置検出方法 | |
CN108351684B (zh) | 操作检测装置、操作检测方法以及影像显示系统 | |
US20240069647A1 (en) | Detecting method, detecting device, and recording medium | |
KR20190027081A (ko) | 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체 | |
US20240070889A1 (en) | Detecting method, detecting device, and recording medium | |
US20230419735A1 (en) | Information processing device, information processing method, and storage medium | |
WO2018211659A1 (ja) | 操作検出装置、及びそれを備えた映像表示装置、映像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170801 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170731 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170927 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20171113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180306 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180312 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6307576 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |