JP2017021861A - プロジェクタ及びヘッドマウント型表示装置 - Google Patents
プロジェクタ及びヘッドマウント型表示装置 Download PDFInfo
- Publication number
- JP2017021861A JP2017021861A JP2016213933A JP2016213933A JP2017021861A JP 2017021861 A JP2017021861 A JP 2017021861A JP 2016213933 A JP2016213933 A JP 2016213933A JP 2016213933 A JP2016213933 A JP 2016213933A JP 2017021861 A JP2017021861 A JP 2017021861A
- Authority
- JP
- Japan
- Prior art keywords
- shadow
- illumination
- user
- unit
- contour
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
- Position Input By Displaying (AREA)
Abstract
【解決手段】操作検出装置1は、ユーザ3の操作する操作面22に異なる位置から照明光を照射する第1、第2の照明101,102と、操作面をユーザの操作部(指)30とともに撮像するカメラ100と、カメラの撮像画像からユーザの操作部30に対する第1、第2の影401,402を抽出する影領域抽出部104と、抽出された第1、第2の影のそれぞれの輪郭線501,502を検出する輪郭検出部105と、各輪郭線間の距離dからユーザの操作部の操作面への接触点Pを検出する接触点検出部106と、を備える。
【選択図】図1
Description
特許文献1には、照明手段により照らされた状態で操作者を撮像手段に撮像させる手段と、前記撮像手段により得られる操作者の画像データをもとに、前記操作者の特定部位の領域を検出する手段と、前記検出された操作者の特定部位の領域から影の部分を抽出する手段と、前記抽出された影の部分の中から、エッジが直線を成す線分を複数検出し、検出された線分同士が鋭角に交わる点を検出し、この交点を前記操作者の特定部位の領域内における指差し位置として検出する手段と、を具備する操作検出装置が記載されている。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、本発明の操作検出装置は、操作面に異なる位置から照明光を照射する第1、第2の照明と、照明光が照射された操作面をユーザの操作部とともに撮像するカメラと、カメラより得られる撮像画像からユーザの操作部に対する第1、第2の影を抽出する影領域抽出部と、抽出された第1、第2の影のそれぞれの輪郭線を検出する輪郭検出部と、各輪郭線間の距離からユーザの操作部の操作面への接触点を検出する接触点検出部と、を備える。前記影領域抽出部は、撮像画像の輝度を所定の閾値と比較し、第1、第2の照明で投影されるユーザの操作部に対する第1、第2の影を区別して抽出し、前記輪郭検出部は、第1、第2の影の輪郭線の中で対応する略直線状の線分を輪郭線として抽出し、前記接触点検出部は、抽出した2つの輪郭線間の距離が所定の閾値以下となったときにユーザの操作部が操作面へ接触したと判定することを特徴とする。
S1000で、操作検出装置1は指の接触点を検出する処理を開始する。制御部120の指示により2つの照明101,102から照明光を照射し、カメラ100で操作面を撮像する。
S1100で、操作検出装置1は指の接触点を検出する処理を開始する。
S1200で、操作検出装置1は複数の照明103を点灯させ、指の接触点を検出する処理を開始する。
メモリ203は、半導体などで構成され、中央処理部201の演算や制御に必要な情報や、投写映像として表示する映像情報などを記憶する。
100:カメラ、
101,102,103:照明、
104:影領域抽出部、
105:輪郭検出部、
106:接触点検出部、
110:スイッチ、
120:制御部、
130:出力部、
150:検出結果データ、
2:操作対象装置(プロジェクタ)、
2a:短投写型プロジェクタ、
2b:ヘッドマウント型プロジェクタ、
20:小型プロジェクタ本体、
21:壁面、
22:操作面、
23:投写映像、
23a:投写光、
201:中央処理部、
202:操作解析部、
203:メモリ、
204:映像制御部、
205:映像投写部、
3:ユーザ、
30,31〜35:指、
401,402,403〜408:影、
409’:影濃度最大部、
410:接触領域、
501,502:輪郭線。
Claims (8)
- 操作面に対するユーザの操作を検出する操作検出装置を有するプロジェクタにおいて、
可視光映像を投射する映像投射部と、
前記操作面に異なる位置から赤外線照明光を照射する第1の照明および第2の照明と、
前記赤外線照明光が照射された前記操作面を前記ユーザの操作部とともに赤外線により撮像するカメラと、
前記カメラより得られる撮像画像から、前記第1の照明と前記ユーザの操作部により生じる第1の影と、前記第2の照明と前記ユーザの操作部により生じる第2の影と、を抽出する影領域抽出部と、
前記抽出された第1の影と第2の影のそれぞれの輪郭線を検出する輪郭検出部と、
前記検出された2つの輪郭線間の距離から前記ユーザの操作部の前記操作面への接触点を検出する接触点検出部と、を備え、
前記影領域抽出部は、前記撮像画像の輝度を所定の閾値と比較し、前記第1の影と前記第2の影とを区別して抽出し、
前記輪郭検出部は、前記第1の影の輪郭線と前記第2の影の輪郭線の中で対応する線分を前記2つの輪郭線として抽出し、
前記接触点検出部は、前記抽出した2つの輪郭線間の距離が所定の閾値以下となったときに前記ユーザの操作部が前記操作面へ接触したと判定することを特徴とするプロジェクタ。 - 請求項1に記載のプロジェクタであって、
前記第1の照明と前記第2の照明とを時間的に交互に照射させ、前記カメラはそれぞれの照射タイミングに合わせて前記操作面を撮像するものであって、
前記影領域抽出部は、時間的に分離して撮像した撮像画像から、前記第1の照明で投影される第1の影と、前記第2の照明で投影される第2の影とを、別々に抽出することを特徴とするプロジェクタ。 - 請求項2に記載のプロジェクタであって、
前記第1の照明および前記第2の照明は、前記カメラに対して同じ側に設置されたことを特徴とするプロジェクタ。 - 請求項1から3のいずれか一項に記載のプロジェクタであって、
前記輪郭検出部は、前記第1の影の前記ユーザの操作部から見て外側の輪郭線と、前記第2の影の前記ユーザの操作部から見て外側の輪郭線とを、前記2つの輪郭線として抽出することを特徴とするプロジェクタ。 - 操作面に対するユーザの操作を検出する操作検出装置を有するヘッドマウント型表示装置において、
映像表示面に可視光映像を表示する映像表示部と、
前記操作面に異なる位置から赤外線照明光を照射する第1の照明および第2の照明と、
前記赤外線照明光が照射された前記操作面を前記ユーザの操作部とともに赤外線により撮像するカメラと、
前記カメラより得られる撮像画像から、前記第1の照明と前記ユーザの操作部により生じる第1の影と、前記第2の照明と前記ユーザの操作部により生じる第2の影と、を抽出する影領域抽出部と、
前記抽出された第1の影と第2の影のそれぞれの輪郭線を検出する輪郭検出部と、
前記検出された2つの輪郭線間の距離から前記ユーザの操作部の前記操作面への接触点を検出する接触点検出部と、を備え、
前記影領域抽出部は、前記撮像画像の輝度を所定の閾値と比較し、前記第1の影と前記第2の影とを区別して抽出し、
前記輪郭検出部は、前記第1の影の輪郭線と前記第2の影の輪郭線の中で対応する線分を前記2つの輪郭線として抽出し、
前記接触点検出部は、前記抽出した2つの輪郭線間の距離が所定の閾値以下となったときに前記ユーザの操作部が前記操作面へ接触したと判定することを特徴とするヘッドマウント型表示装置。 - 請求項5に記載のヘッドマウント型表示装置であって、
前記第1の照明と前記第2の照明とを時間的に交互に照射させ、前記カメラはそれぞれの照射タイミングに合わせて前記操作面を撮像するものであって、
前記影領域抽出部は、時間的に分離して撮像した撮像画像から、前記第1の照明で投影される第1の影と、前記第2の照明で投影される第2の影とを、別々に抽出することを特徴とするヘッドマウント型表示装置。 - 請求項6に記載のヘッドマウント型表示装置であって、
前記第1の照明および前記第2の照明は、前記カメラに対して同じ側に設置されたことを特徴とするヘッドマウント型表示装置。 - 請求項5から7のいずれか一項に記載のヘッドマウント型表示装置であって、
前記輪郭検出部は、前記第1の影の前記ユーザの操作部から見て外側の輪郭線と、前記第2の影の前記ユーザの操作部から見て外側の輪郭線とを、前記2つの輪郭線として抽出することを特徴とするヘッドマウント型表示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016213933A JP6199472B2 (ja) | 2016-11-01 | 2016-11-01 | プロジェクタ及びヘッドマウント型表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016213933A JP6199472B2 (ja) | 2016-11-01 | 2016-11-01 | プロジェクタ及びヘッドマウント型表示装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013048305A Division JP6037900B2 (ja) | 2013-03-11 | 2013-03-11 | 操作検出装置及び操作検出方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017021861A true JP2017021861A (ja) | 2017-01-26 |
JP6199472B2 JP6199472B2 (ja) | 2017-09-20 |
Family
ID=57888212
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016213933A Active JP6199472B2 (ja) | 2016-11-01 | 2016-11-01 | プロジェクタ及びヘッドマウント型表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6199472B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020129536A1 (ja) * | 2018-12-20 | 2020-06-25 | ソニー株式会社 | 画像処理装置、および検出機能付き表示装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002213947A (ja) * | 2001-01-17 | 2002-07-31 | Fuji Xerox Co Ltd | ターゲット位置を測定するシステム及びその方法 |
JP2004094653A (ja) * | 2002-08-30 | 2004-03-25 | Nara Institute Of Science & Technology | 情報入力システム |
JP2004523031A (ja) * | 2001-01-08 | 2004-07-29 | ヴィーケービー インコーポレイテッド | データ入力装置 |
US20080013826A1 (en) * | 2006-07-13 | 2008-01-17 | Northrop Grumman Corporation | Gesture recognition interface system |
JP2008059283A (ja) * | 2006-08-31 | 2008-03-13 | Nippon Telegr & Teleph Corp <Ntt> | 操作検出装置とそのプログラム |
JP2009250772A (ja) * | 2008-04-04 | 2009-10-29 | Sony Corp | 位置検出システム、位置検出方法、プログラム、物体判断システム、および物体判断方法 |
JP2011180712A (ja) * | 2010-02-26 | 2011-09-15 | Sanyo Electric Co Ltd | 投写型映像表示装置 |
JP2012068690A (ja) * | 2010-09-21 | 2012-04-05 | Univ Of Tsukuba | 手指ジェスチャ検出装置 |
-
2016
- 2016-11-01 JP JP2016213933A patent/JP6199472B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004523031A (ja) * | 2001-01-08 | 2004-07-29 | ヴィーケービー インコーポレイテッド | データ入力装置 |
JP2002213947A (ja) * | 2001-01-17 | 2002-07-31 | Fuji Xerox Co Ltd | ターゲット位置を測定するシステム及びその方法 |
JP2004094653A (ja) * | 2002-08-30 | 2004-03-25 | Nara Institute Of Science & Technology | 情報入力システム |
US20080013826A1 (en) * | 2006-07-13 | 2008-01-17 | Northrop Grumman Corporation | Gesture recognition interface system |
JP2008059283A (ja) * | 2006-08-31 | 2008-03-13 | Nippon Telegr & Teleph Corp <Ntt> | 操作検出装置とそのプログラム |
JP2009250772A (ja) * | 2008-04-04 | 2009-10-29 | Sony Corp | 位置検出システム、位置検出方法、プログラム、物体判断システム、および物体判断方法 |
JP2011180712A (ja) * | 2010-02-26 | 2011-09-15 | Sanyo Electric Co Ltd | 投写型映像表示装置 |
JP2012068690A (ja) * | 2010-09-21 | 2012-04-05 | Univ Of Tsukuba | 手指ジェスチャ検出装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020129536A1 (ja) * | 2018-12-20 | 2020-06-25 | ソニー株式会社 | 画像処理装置、および検出機能付き表示装置 |
US11429229B2 (en) | 2018-12-20 | 2022-08-30 | Sony Group Corporation | Image processing apparatus and display apparatus with detection function |
Also Published As
Publication number | Publication date |
---|---|
JP6199472B2 (ja) | 2017-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6037900B2 (ja) | 操作検出装置及び操作検出方法 | |
JP6037901B2 (ja) | 操作検出装置、操作検出方法及び表示制御データ生成方法 | |
US10191594B2 (en) | Projection-type video display device | |
US10915186B2 (en) | Projection video display apparatus and video display method | |
WO2012124730A1 (ja) | 検出装置、入力装置、プロジェクタ、及び電子機器 | |
US20130127705A1 (en) | Apparatus for touching projection of 3d images on infrared screen using single-infrared camera | |
WO2016021022A1 (ja) | 投写型映像表示装置及びその制御方法 | |
US20170315674A1 (en) | Information processing apparatus, control method for the information processing apparatus, and storage medium | |
TWI531954B (zh) | 觸控及手勢控制系統與觸控及手勢控制方法 | |
KR100936666B1 (ko) | 적외선 스크린 방식의 투영 영상 터치 장치 | |
JP6307576B2 (ja) | 映像表示装置及びプロジェクタ | |
JP6199472B2 (ja) | プロジェクタ及びヘッドマウント型表示装置 | |
US9489077B2 (en) | Optical touch panel system, optical sensing module, and operation method thereof | |
KR101002072B1 (ko) | 펄스 구동 방식의 투영 영상 터치 장치 | |
KR20090037535A (ko) | 터치스크린의 입력 처리 방법 | |
KR20190027081A (ko) | 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체 | |
US20240069647A1 (en) | Detecting method, detecting device, and recording medium | |
US20150153904A1 (en) | Processing method of object image for optical touch system | |
WO2018211659A1 (ja) | 操作検出装置、及びそれを備えた映像表示装置、映像表示方法 | |
TW201523395A (zh) | 光學觸控系統、光學感測模組及其運作方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161101 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170726 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170801 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170823 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6199472 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |