JPWO2017081805A1 - 操作検出装置、操作検出方法、及び映像表示システム - Google Patents
操作検出装置、操作検出方法、及び映像表示システム Download PDFInfo
- Publication number
- JPWO2017081805A1 JPWO2017081805A1 JP2017549949A JP2017549949A JPWO2017081805A1 JP WO2017081805 A1 JPWO2017081805 A1 JP WO2017081805A1 JP 2017549949 A JP2017549949 A JP 2017549949A JP 2017549949 A JP2017549949 A JP 2017549949A JP WO2017081805 A1 JPWO2017081805 A1 JP WO2017081805A1
- Authority
- JP
- Japan
- Prior art keywords
- operation detection
- detection process
- signal processing
- image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 190
- 238000012545 processing Methods 0.000 claims abstract description 134
- 238000000034 method Methods 0.000 claims abstract description 67
- 238000005286 illumination Methods 0.000 claims abstract description 35
- 238000003384 imaging method Methods 0.000 claims description 24
- 238000000605 extraction Methods 0.000 description 34
- 238000010586 diagram Methods 0.000 description 20
- 230000007423 decrease Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 241000255777 Lepidoptera Species 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
- G06F3/0386—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03542—Light pens for emitting or receiving light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
- Image Processing (AREA)
Abstract
Description
図7〜図9は、照明102あるいは照明103を点灯した際に、指300と壁面201との接触有無による影の形状の違いの一例を示す図である。
101:イメージセンサ(撮像部)、
102,103:照明、
104:スイッチ、
105:フレーム検出部、
106:影領域抽出部、
107:輪郭検出部、
108:指先接触点検出部、
109:制御部、
110:出力部、
111:画像信号処理部1、
112:画像信号処理部2、
113:画像信号処理部3、
114:ペン先抽出部、
115:ペン先接触点検出部、
116:操作モード制御部、
120:電子ペン(第1操作オブジェクト)、
121:発光素子、
130:モジュール、
140:検出結果データ、
150:プロジェクタ、
151:映像入力部、
152:投射映像処理部、
153:映像投射部、
200:ユーザ、
201:壁面、
202:撮像範囲、
300:指(第2操作オブジェクト)、
301,302:影、
510,610:接触点。
Claims (10)
- 第1の操作オブジェクトの発光検出または反射光検出に基づく第1の操作検出処理と、照明光の照射による第2の操作オブジェクトの影検出に基づく第2の操作検出処理を行う操作検出装置であって、
前記第1の操作オブジェクトと前記第2の操作オブジェクトの画像を撮像する撮像部と、
前記撮像部で撮像した撮像画像のコントラスト調整または前記撮像部で撮像する際のコントラスト調整を行う画像信号処理部と、
前記コントラスト調整を施した撮像画像を用いて、前記第1の操作検出処理と前記第2の操作検出処理を実行する操作検出部と、を備え、
前記画像信号処理部の施すコントラスト調整状態は、前記第1の操作検出処理に用いる撮像画像の場合と、前記第2の操作検出処理に用いる撮像画像の場合とで異なることを特徴とする操作検出装置。 - 請求項1に記載の操作検出装置であって、
複数の操作検出モードを切り替え可能な制御部を備え、
前記操作検出モードとして、前記第1の操作検出処理を実行し前記第2の操作検出処理を実行しない第1の操作モードと、前記第2の操作検出処理を実行し前記第1の操作検出処理を実行しない第2の操作モードと、前記第1の操作検出処理と前記第2の操作検出処理の両方を実行する第3の操作モードと、を有し、
前記制御部は前記画像信号処理部に対し、前記第1の操作モード、前記第2の操作モード、前記第3の操作モードに応じて、互いに異なる3通りのコントラスト調整状態を設定すること特徴とする操作検出装置。 - 請求項1に記載の操作検出装置であって、
前記画像信号処理部として、前記第1の操作検出処理と前記第2の操作検出処理のために、互いに異なるコントラスト調整を行う少なくとも2つの信号処理部を有することを特徴とする操作検出装置。 - 請求項1に記載の操作検出装置であって、
前記画像信号処理部の行うコントラスト調整は、前記撮像部で撮像した撮像画像のゲイン調整であることを特徴とする操作検出装置。 - 請求項1に記載の操作検出装置であって、
前記画像信号処理部の行うコントラスト調整は、前記撮像部で撮像した撮像画像のガンマ調整であることを特徴とする操作検出装置。 - 請求項1に記載の操作検出装置であって、
前記画像信号処理部の行うコントラスト調整は、前記撮像部で撮像する際の露光時間調整を含むことを特徴とする操作検出装置。 - 請求項1に記載の操作検出装置により検出したユーザの操作に基づきプロジェクタが投射する映像を制御する映像表示システムであって、
前記プロジェクタは、
投射する映像信号の処理を行う投射映像処理部と、
前記映像信号を投射映像光に変換して投射面に投射する映像投射部と、を備え、
前記操作検出装置は前記プロジェクタへ、前記操作検出部による検出結果データを送信し、
前記投射映像処理部は、受信した前記検出結果データに基づき、前記映像投射部から投射する映像の切り替えや表示形式の変更を行うことを特徴とする映像表示システム。 - 請求項7に記載の映像表示システムであって、
前記操作検出装置は、複数の操作検出モードを切り替え可能な制御部を備え、
前記操作検出モードとして、前記第1の操作検出処理を実行し前記第2の操作検出処理を実行しない第1の操作モードと、前記第2の操作検出処理を実行し前記第1の操作検出処理を実行しない第2の操作モードと、前記第1の操作検出処理と前記第2の操作検出処理の両方を実行する第3の操作モードと、を有し、
前記制御部は前記画像信号処理部に対し、前記第1の操作モード、前記第2の操作モード、前記第3の操作モードに応じて、互いに異なる3通りのコントラスト調整状態を設定すること特徴とする映像表示システム。 - 第1の操作オブジェクトの発光検出または反射光検出に基づく第1の操作検出処理と、照明光の照射による第2の操作オブジェクトの影検出に基づく第2の操作検出処理を行う操作検出方法であって、
前記第1の操作オブジェクトと前記第2の操作オブジェクトの画像を撮像する撮像ステップと、
前記撮像ステップで撮像した撮像画像のコントラスト調整または前記撮像ステップで撮像する際のコントラスト調整を行う信号処理ステップと、
前記コントラスト調整を施した撮像映像を用いて、前記第1の操作検出処理と前記第2の操作検出処理を実行する操作検出ステップと、を備え、
前記信号処理ステップにおけるコントラスト調整状態は、前記第1の操作検出処理に用いる撮像画像の場合と、前記第2の操作検出処理に用いる撮像画像の場合とで異なることを特徴とする操作検出方法。 - 請求項9に記載の操作検出方法であって、
操作検出モードとして、前記第1の操作検出処理を実行し前記第2の操作検出処理を実行しない第1の操作モードと、前記第2の操作検出処理を実行し前記第1の操作検出処理を実行しない第2の操作モードと、前記第1の操作検出処理と前記第2の操作検出処理の両方を実行する第3の操作モードと、を有し、
前記信号処理ステップでは、前記第1の操作モード、前記第2の操作モード、前記第3の操作モードに応じて、互いに異なる3通りのコントラスト調整状態を設定すること特徴とする操作検出方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/081922 WO2017081805A1 (ja) | 2015-11-13 | 2015-11-13 | 操作検出装置、操作検出方法、及び映像表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017081805A1 true JPWO2017081805A1 (ja) | 2018-08-02 |
JP6538871B2 JP6538871B2 (ja) | 2019-07-03 |
Family
ID=58694861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017549949A Active JP6538871B2 (ja) | 2015-11-13 | 2015-11-13 | 操作検出装置、操作検出方法、及び映像表示システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US10942607B2 (ja) |
JP (1) | JP6538871B2 (ja) |
CN (1) | CN108351684B (ja) |
WO (1) | WO2017081805A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112422934A (zh) * | 2019-08-23 | 2021-02-26 | 中强光电股份有限公司 | 投影装置及其亮度调整方法 |
JP7135144B1 (ja) * | 2021-03-18 | 2022-09-12 | 東芝エレベータ株式会社 | エレベータの利用者検知システム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001052230A1 (en) * | 2000-01-10 | 2001-07-19 | Ic Tech, Inc. | Method and system for interacting with a display |
WO2008083205A2 (en) | 2006-12-29 | 2008-07-10 | Gesturetek, Inc. | Manipulation of virtual objects using enhanced interactive system |
JP2010112990A (ja) | 2008-11-04 | 2010-05-20 | Nikon Corp | プロジェクタ |
JP4690473B2 (ja) * | 2009-03-06 | 2011-06-01 | シャープ株式会社 | 画像解析装置、画像解析方法、撮像装置、画像解析プログラムおよび記録媒体 |
JP2010257089A (ja) | 2009-04-22 | 2010-11-11 | Xiroku:Kk | 光学式位置検出装置 |
JP2012068690A (ja) | 2010-09-21 | 2012-04-05 | Univ Of Tsukuba | 手指ジェスチャ検出装置 |
JP6011157B2 (ja) * | 2011-09-05 | 2016-10-19 | 株式会社リコー | 投影システム、投影装置、センサ装置、発電制御方法及び発電制御プログラム |
JP5849560B2 (ja) | 2011-09-20 | 2016-01-27 | セイコーエプソン株式会社 | 表示装置、プロジェクター、及び、表示方法 |
JP2013141105A (ja) | 2011-12-29 | 2013-07-18 | Nikon Corp | 画像処理装置および電子カメラ、並びに画像処理プログラム |
CA2862470C (en) * | 2012-01-11 | 2018-10-23 | Smart Technologies Ulc | Calibration of an interactive light curtain |
TWI501021B (zh) * | 2012-11-26 | 2015-09-21 | Everest Display Inc | 互動式投影系統及其光標的座標校正方法 |
US10216381B2 (en) * | 2012-12-25 | 2019-02-26 | Nokia Technologies Oy | Image capture |
JP6037901B2 (ja) * | 2013-03-11 | 2016-12-07 | 日立マクセル株式会社 | 操作検出装置、操作検出方法及び表示制御データ生成方法 |
CN104423578B (zh) * | 2013-08-25 | 2019-08-06 | 杭州凌感科技有限公司 | 交互式输入系统和方法 |
JP6105075B2 (ja) | 2013-10-08 | 2017-03-29 | 日立マクセル株式会社 | 投射型映像表示装置、操作検出装置及び投射型映像表示方法 |
WO2016031224A1 (ja) * | 2014-08-25 | 2016-03-03 | シャープ株式会社 | 画像表示装置 |
-
2015
- 2015-11-13 US US15/775,357 patent/US10942607B2/en active Active
- 2015-11-13 WO PCT/JP2015/081922 patent/WO2017081805A1/ja active Application Filing
- 2015-11-13 JP JP2017549949A patent/JP6538871B2/ja active Active
- 2015-11-13 CN CN201580084516.1A patent/CN108351684B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
US10942607B2 (en) | 2021-03-09 |
CN108351684B (zh) | 2020-11-10 |
CN108351684A (zh) | 2018-07-31 |
WO2017081805A1 (ja) | 2017-05-18 |
US20200174620A1 (en) | 2020-06-04 |
JP6538871B2 (ja) | 2019-07-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107077258B (zh) | 投射型影像显示装置以及影像显示方法 | |
JP6037901B2 (ja) | 操作検出装置、操作検出方法及び表示制御データ生成方法 | |
WO2012124730A1 (ja) | 検出装置、入力装置、プロジェクタ、及び電子機器 | |
JP6398248B2 (ja) | 位置検出システム、及び、位置検出システムの制御方法 | |
JP6417690B2 (ja) | プロジェクター、表示装置、及び、プロジェクターの制御方法 | |
JP6623812B2 (ja) | 位置検出装置、及び、そのコントラスト調整方法 | |
US10547792B2 (en) | Control device, control method, and program for controlling light intensities | |
JP5956941B2 (ja) | 光学コード読取システム及び光学コードの読取制御方法 | |
US20200241697A1 (en) | Position detecting method, position detecting device, and interactive projector | |
JP2015159529A (ja) | 位置検出装置、及び位置検出方法 | |
KR101989998B1 (ko) | 가상의 터치 스크린이 구현되는 컴퓨터 입력 시스템 | |
US20150138071A1 (en) | Projector and method of controlling projector | |
TW201633077A (zh) | 用來偵測雜訊的影像處理方法及其導航裝置 | |
JP2018121213A (ja) | 画像処理装置、画像投影装置、および画像処理方法 | |
WO2017081805A1 (ja) | 操作検出装置、操作検出方法、及び映像表示システム | |
JP2020160808A (ja) | 位置検出方法、位置検出装置、及び、インタラクティブプロジェクター | |
JP6596501B2 (ja) | 映像表示装置およびこれに用いる操作検出方法 | |
JP6307576B2 (ja) | 映像表示装置及びプロジェクタ | |
JP2012053603A (ja) | 情報表示システム | |
JP2015220607A (ja) | 情報処理装置、情報処理方法およびプログラム | |
US20200302610A1 (en) | Medical image processing device, medical observation device, method of processing image, and computer readable recording medium | |
JP2001273484A (ja) | 指示位置検出システム、プレゼンテーションシステムおよび情報記憶媒体 | |
US11997435B2 (en) | Display method and display system | |
WO2018211659A1 (ja) | 操作検出装置、及びそれを備えた映像表示装置、映像表示方法 | |
JP6340860B2 (ja) | 位置検出装置、プロジェクター、位置検出システム、及び、位置検出装置の制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180314 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190514 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190606 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6538871 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |