JP7226461B2 - 位置検出方法、表示装置及び位置検出システム - Google Patents
位置検出方法、表示装置及び位置検出システム Download PDFInfo
- Publication number
- JP7226461B2 JP7226461B2 JP2021013060A JP2021013060A JP7226461B2 JP 7226461 B2 JP7226461 B2 JP 7226461B2 JP 2021013060 A JP2021013060 A JP 2021013060A JP 2021013060 A JP2021013060 A JP 2021013060A JP 7226461 B2 JP7226461 B2 JP 7226461B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- captured
- captured image
- areas
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3141—Constructional details thereof
- H04N9/3147—Multi-projection systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0693—Calibration of display systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
- G09G2360/145—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Projection Apparatus (AREA)
Description
例えば、特許文献1に開示のプロジェクターは、ドットパターンを有する第2投写画像を投写面に投写し、投写された第2投写画像を撮像した第2撮像画像からドットパターンを検出する。そして、プロジェクターは、検出したドットの位置に基づき、投写画像と撮像画像とを対応づけるキャリブレーションデータを生成する。
位置検出システム1Aは、表示装置に相当する複数台のプロジェクター100と、画像供給装置300とを備える。
本実施形態の位置検出システム1Aは、プロジェクター100A、100B、100C及び100Dの4台を備えるが、位置検出システム1Aが備えるプロジェクター100の台数は4台に限定されるものではない。以下の説明において、プロジェクター100A、100B、100C及び100Dを区別して表記する必要がない場合には、プロジェクター100と表記する。
画像供給装置300には、例えば、ノート型PC(Personal Computer)、デスクトップ型PCやタブレット端末、スマートフォン、PDA(Personal Digital Assistant)等を用いることができる。
タイリング投写では、隣接するプロジェクター100同士は、表示する画像の縁が重なるように画像光を投写する。これは、表示される画像の境界が目立たないようにするためである。例えば、プロジェクター100Aにより表示される画像と、その右側に位置するプロジェクター100Bにより表示される画像とは、互いの縁が重なって重畳領域11を形成する。同様に、プロジェクター100Bにより表示される画像と、その右側に位置するプロジェクター100Cにより表示される画像とは、互いの縁が重なって重畳領域12を形成する。同様に、プロジェクター100Cにより表示される画像と、その右側に位置するプロジェクター100Dにより表示される画像とは、互いの縁が重なって重畳領域13を形成する。
プロジェクター100A、100B、100C及び100Dは、ほぼ同一の構成を備える。このため、プロジェクター100Aの構成を代表して説明し、他のプロジェクター100B、100C及び100Dの構成についての説明は省略する。また、以下の説明において、各プロジェクター100の構成を区別するため、プロジェクター100Aの構成には「A」の符号を付し、プロジェクター100Bの構成には「B」の符号を付して説明する。同様に、プロジェクター100Cの構成には「C」の符号を付し、プロジェクター100Dの構成には「D」の符号を付して説明する。例えば、プロジェクター100Aの制御部を制御部170Aと表記し、プロジェクター100Bの制御部を制御部170Bと表記する。
撮像部120Aの撮像範囲は、プロジェクター100Aが画像光を投写する投写領域10Aと、この投写領域10Aに隣接する投写領域である。例えば、プロジェクター100Bの撮像部120Bの撮像範囲は、投写領域10Bと、その隣接する投写領域10A及び10Cの一部もしくは全部を撮像可能な範囲である。
ここで、図3を参照しながら画像投写部160Aの構成について説明する。
画像投写部160Aは、光源161Aから射出された光を変調して画像光を生成し、生成した画像光を光学ユニット165Aにより拡大投写する。画像投写部160Aは、光源161A、光変調装置としての3つの液晶パネル163A(r),163A(g)及び163A(b)、光学ユニット165A、パネル駆動部167Aを備える。以下、プロジェクター100Aが備える液晶パネル163A(r),163A(g)及び163A(b)を総称する場合、液晶パネル163Aと表記する。
記憶部171Aは、プロセッサー180Aに実行させる制御プログラム173Aや、撮像部120Aにより撮像された撮像画像を記憶する。また、記憶部171Aは、後述する空間コード生成部181Aが生成するパターン情報テーブル175Aを記憶する。
空間コードは、位置検出システム1Aを構成する複数のプロジェクター100と、パターン画像230に含まれる複数の特徴領域250とを識別する識別情報である。パターン画像は、キャリブレーションデータの生成のために投写面5に投写される画像である。特徴領域250については後述する。特徴領域250は、領域に相当する。
空間コード生成部181Aは、第1通し番号、第2通し番号、識別番号、特徴領域250のY座標及びX座標等を1レコードとしてパターン情報テーブル175Aに記録し、空間コードを生成する。
空間コード生成部181Aは、まず、Y座標値が最小の行を選択し、選択した行の特徴領域250に、X座標値が小さい順に第2通し番号を割り振る。次に、空間コード生成部181Aは、Y座標値が次に大きな行を選択し、選択した行の特徴領域250に、X座標値が小さい順に第2通し番号を割り振る。これらの動作を繰り返し、パターン画像230に形成するすべての特徴領域250に第2通し番号を設定する。
例えば、第1の通し番号が「01」であり、第2通し番号が「007」である場合、番号は「01007」となる。次に、空間コード生成部181Aは、生成した番号を7進数に変換して識別番号を生成する。例えば、10進数の通し番号が「01007」の場合、7進数は「01010」となる。
また、識別番号が5桁の数字であるため、識別番号は5つの色コードに変換される。
識別番号の5桁目の数字に対応する色コードを第1色コードといい、識別番号の4桁目の数字に対応する色コードを第2色コードといい、識別番号の3桁目の数字に対応する色コードを第3色コードという。また、識別番号の2桁目の数字に対応する色コードを第4色コードといい、識別番号の1桁目の数字に対応する色コードを第5色コードという。
第1色コード、第2色コード、第3色コード及び第4色コードの少なくとも1つは、第1部分情報に相当する。また、第2色コード、第3色コード、第4色コード及び第5色コードの少なくとも1つは、第2部分情報に相当する。
各コードが示す3桁の数字は、赤色、緑色及び青色の色成分がそれぞれ対応づけられる。すなわち、色コードの数値が「0」である場合、対応する色成分が含まれないことを示し、コードの数値が「1」である場合、対応する色成分が含まれることを意味する。
色コード「001」は赤成分が含まれることを示し、色コード「001」の示す色は赤となる。
色コード「010」は緑成分が含まれることを示し、色コード「010」の示す色は緑となる。
色コード「100」は青成分が含まれることを示し、色コード「100」の示す色は青となる。
色コード「011」は赤成分及び緑成分が含まれることを示し、色コード「011」の示す色は黄色となる。
色コード「101」は赤成分及び青成分が含まれることを示し、色コード「101」の示す色はマゼンタとなる。
色コード「110」は緑成分及び青成分が含まれることを示し、色コード「110」の示す色はシアンとなる。
色コード「111」は赤成分、緑成分及び青成分が含まれることを示し、色コード「111」の示す色はホワイトとなる。
色コード「000」は赤成分も緑成分も青成分も含まれないことを示し、色コード「000」の示す色は黒となる。
これにより、投写面5の投写領域10Aには、特徴領域250の各々に、第1色コード、第2色コード、第3色コード、第4色コード及び第5色コードに対応した色が形成されたパターン画像が順次表示される。
特徴領域250の各々に、第2色コードに対応した色が形成されたパターン画像230を、パターン画像230bと表記する。
特徴領域250の各々に、第3色コードに対応した色が形成されたパターン画像230を、パターン画像230cと表記する。
特徴領域250の各々に、第4色コードに対応した色が形成されたパターン画像230を、パターン画像230dと表記する。
特徴領域250の各々に、第5色コードに対応した色が形成されたパターン画像230を、パターン画像230eと表記する。
また、パターン画像230bは、第1パターン画像にも対応する。また、パターン画像230bが第1パターン画像に対応する場合、パターン画像230cは、第2パターン画像に対応する。以下、パターン画像230c、パターン画像230d及びパターン画像230eについても同様である。
以下、パターン画像230aを撮像した撮像画像を第1撮像画像といい、パターン画像230bを撮像した撮像画像を第2撮像画像といい、パターン画像230cを撮像した撮像画像を第3撮像画像という。また、パターン画像230dを撮像した撮像画像を第4撮像画像といい、パターン画像230eを撮像した撮像画像を第5撮像画像という。
色判定部187Aは、第1~第5撮像画像に撮像された各特徴領域250の色を判定する色判定処理を実行する。
キャリブレーションデータ生成部189Aは、第1撮像画像~第5撮像画像の同一位置の特徴領域250の色を色コードに変換し、変換した色コードを、第1撮像画像~第5撮像画像の順に並べて空間コードを復元する。
キャリブレーションデータ生成部189Aは、空間コードが検出された第1撮像画像~第5撮像画像の撮像座標と、パターン情報テーブル175Aに登録されたパネル座標とを対応づけるキャリブレーションデータを生成する。キャリブレーションデータにより、撮像部120Aにより生成される撮像画像上での位置が、液晶パネル163上の位置に変換される。
キャリブレーション制御部191Aは、プロジェクター100B、100C及び100Dに、パターン画像の表示や、投写面5の撮像等を指示する。
図5に示すフローチャートを参照しながらプロジェクター100Aの動作について説明する。本実施形態の位置検出システム1Aでは、投写領域10が隣接しないプロジェクター100Aと、プロジェクター100Cとが投写面5に同時にパターン画像230等の画像を投写し、キャリブレーションデータを生成する。その後、プロジェクター100B及びプロジェクター100Dが、プロジェクター100Aの制御により投写面5に同時にパターン画像230等の画像を投写し、キャリブレーションデータを生成する。これにより、キャリブレーションデータの生成に要する時間を短縮している。
以下の説明では、プロジェクター100Aと、プロジェクター100Cとが投写面5に同時に画像を投写し、キャリブレーションデータを生成する場合についてだけ説明し、プロジェクター100B及びプロジェクター100Dの動作についての説明は省略する。
制御部170Aは、指示信号をプロジェクター100B、100C及び100Dに出力すると、投写領域10Aの全面に黒色画像を表示させる黒色画像データを画像処理部150Aに生成させる。画像処理部150Aは、黒色画像データをフレームメモリー155Aに生成し、生成した黒色画像データを画像情報として画像投写部160Aに出力する。画像投写部160Aは、入力された画像情報に基づく画像光を生成し、生成した画像光を投写面5に拡大投写させる。これにより投写面5の全面に黒色画像が表示される(ステップS6)。図6は、投写面5に黒色画像210A,210Cが表示された状態を示す図である。なお、図6には、投写面5のうち、投写領域10A、10B及び10Cだけが表示された状態を示す。これは、プロジェクター100B及びプロジェクター100Dの動作についての説明は省略するためである。図6には、投写領域10Aに黒色画像210Aが表示され、投写領域10Bに黒色画像210Bが表示され、投写領域10Cに黒色画像210Cが表示された投写面5を示す。
次に、制御部170Aは、投写領域10Aの全面に赤色画像を表示させる赤色画像データを画像処理部150Aに生成させる。画像処理部150Aは、赤色画像データをフレームメモリー155Aに生成し、生成した赤色画像データを画像情報として画像投写部160Aに出力する。これにより投写領域10A及び10Cの全面に赤色画像が表示される(ステップS10)。図7は、投写面5の投写領域10Aに赤色画像220Aが表示され、投写領域10Cに赤色画像220Cが表示された状態を示す。
制御部170Aは、すべての原色の撮像画像を生成していない場合(ステップS12/NO)、ステップS9に戻り、緑色及び青色についてもステップS9~S12と同様に繰り返す。緑色画像を撮像した撮像画像を、以下では第2原色撮像画像といい、青色画像を撮像した撮像画像を、以下では第3原色撮像画像という。
制御部170Aは、まず、予め設定された測定パターンの画像データの生成を画像処理部150Aに指示する。画像処理部150Aは、測定パターンの画像データをフレームメモリー155Aに生成し、生成した測定パターンの画像データを画像情報として画像投写部160Aに出力する。これにより投写領域10Aの全面に測定パターンの画像が表示される(ステップS23)。
まず、制御部170Aは、ステップS9で生成した第1原色撮像画像、第2原色撮像画像及び第3原色撮像画像の各画素の画素値から、ステップS5で生成した黒撮像画像の対応する画素の画素値を減算する。これは、第1原色撮像画像、第2原色撮像画像及び第3原色撮像画像から環境光等を含む背景の影響を除くための処理である。
例えば、以下の説明では、第1原色撮像画像から取得した基準位置の赤色の画素値を87とし、第2原色撮像画像から取得した基準位置の緑色の画素値を144とし、第3原色撮像画像から取得した基準位置の青色の画素値を71と仮定する。
例えば、以下の説明では、取得した特徴領域250の赤色の画素値を79とし、取得した特徴領域250の緑色の画素値を137とし、取得した特徴領域250の青色の画素値を69と仮定する。
例えば、赤色のしきい値Rtは、79/87×0.5=0.45となり、緑色のしきい値Gtは、137/144×0.5=0.48となり、青のしきい値Btは、69/71×0.5=0.49となる。制御部170Aは、これらのしきい値を、特徴領域250ごとに算出する。
まず、制御部170Aは、黒撮像画像の画素値を減算して背景の影響を除去した第1原色撮像画像、第2原色撮像画像及び第3原色撮像画像の各々から、基準位置の画素の赤色、緑色及び青色の画素値を取得する。
第1原色撮像画像から取得した基準位置の赤色、緑色及び青色の画素値を(Rr,Gr,Br)と表記する。
第2原色撮像画像から取得した基準位置の赤色、緑色及び青色の画素値を(Rg,Gg,Bg)と表記する。
第3原色撮像画像から取得した基準位置の赤色、緑色及び青色の画素値を(Rb,Gb,Bb)と表記する。
プロジェクター100Aにより表示された画像の赤色、緑色及び青色の画素値を0~1に正規化して考えると、制御部170Aは、(Rr,Gr,Br)、(Rg,Gg,Bg)及び(Rb,Gb,Bb)を並べた行列Mをまず作る。行列Mを以下に示す。
また、第1パターン撮像画像の赤色、緑色及び青色の画素値がそれぞれ(57,148,90)であると仮定する。この場合、制御部170Aは、上述の式(1)に値を代入して、第1パターン撮像画像の赤色、緑色及び青色の画素値を、プロジェクター100Aにより表示された画像の赤色、緑色及び青色の画素値に変換する。変換式を以下の式(2)に示す。
赤色の画素値は、0.23であり、しきい値Rt=0.45よりも値が小さい。
緑色の画素値は、0.89であり、しきい値Gt=0.48よりも値が大きい。
青色の画素値は、0.96であり、しきい値Bt=0.49よりも値が大きい。
このため、制御部170Aは、対象の特徴領域250の第1色コードが(0,1,1)であると判定する。制御部170Aは、第2パターン撮像画像~第5撮像画像についても、同様に、各特徴領域250の色コードを判定する。制御部170Aは、判定した第1色コード、第2色コード、第3色コード、第4色コード及び第5色コードの値を順に並べて空間コードを復元し、パターン情報テーブル175Aを参照して、空間コードに対応する座標を取得する。これにより、撮像座標を、パネル座標に変換するキャリブレーションデータが生成される。
図9に示す位置検出システム1Bは、撮像装置500A、500B、500C及び500Dと、制御装置700とを設けた構成である。
また、制御装置700は、上述した実施形態のプロジェクター100Aとして機能し、プロジェクター100A、100B、100C及び100Dの動作を制御する。制御装置700は、キャリブレーションデータの作成時に、プロジェクター100A、100B、100C及び100Dを制御して、投写領域10A、10B、10C及び10Dに原色の単色画像や、パターン画像230を表示させる。また、制御装置700は、撮像装置500A、500B、500C及び500Dを制御して投写領域10を撮像させる。
撮像装置500Bの撮像範囲は、投写領域10Bと、隣接する投写領域10A及び投写領域10Cとを含む範囲である。撮像装置500Bは、制御装置700から入力される指示信号により撮像範囲を撮像して撮像画像を生成する。撮像装置500Bは、生成した撮像画像を制御装置700に出力する。
撮像装置500Cの撮像範囲は、投写領域10Cと、隣接する投写領域10B及び投写領域10Dとを含む範囲である。撮像装置500Cは、制御装置700から入力される指示信号により撮像範囲を撮像して撮像画像を生成する。撮像装置500Cは、生成した撮像画像を制御装置700に出力する。
撮像装置500Dの撮像範囲は、投写領域10Dと、隣接する投写領域10Cとを含む範囲である。撮像装置500Dは、制御装置700から入力される指示信号により撮像範囲を撮像して撮像画像を生成する。撮像装置500Dは、生成した撮像画像を制御装置700に出力する。
このようにプロジェクター100が撮像部120を備えておらず、外部接続された撮像装置500により投写面5を撮像する構成であっても、上述した位置検出システム1Aと同様の効果を得ることができる。
第1表示処理は、複数の特徴領域250を有し、複数の特徴領域250の各々には、各特徴領域250に設定された空間コードを分割した第1色コードに対応づけられた色が形成された第1パターン画像を投写面5に表示させる処理である。
第1撮像処理は、第1パターン画像が投写された投写面5を撮像した第1パターン撮像画像を取得する処理である。
第2表示処理は、複数の特徴領域250を有し、複数の特徴領域250の各々には、各特徴領域250に設定された空間コードの第1色コード以外の情報である第2色コードに対応づけられた色が形成された第2パターン画像を投写面5に表示させる処理である。
第2撮像処理は、第2パターン画像が投写された投写面5を撮像した第2パターン撮像画像を取得する処理である。
色判定処理は、第1パターン撮像画像に撮像された複数の特徴領域250の色と、第2パターン撮像画像に撮像された複数の特徴領域250の色とをそれぞれ判定する処理である。
空間コード検出処理は、複数の特徴領域250の色の判定結果に基づき、第1パターン撮像画像と第2パターン撮像画像との対応する特徴領域250に設定された第1部分情報及び第2部分情報を取得し、取得した第1部分情報及び第2部分情報に基づいて複数の特徴領域250の各々に設定された空間コードを検出する処理である。
データ生成処理は、検出した空間コードに基づき、投写面5に表示させた画像の位置と、投写面5を含む範囲を撮像した撮像画像の位置とを対応づけるキャリブレーションデータを生成する処理である。
複数の特徴領域250に設定される複数の空間コードには、並び順が規定されており、複数の空間コードは、予め設定された順序に従って複数の特徴領域250にそれぞれ設定される。このため、空間コードの一部を検出できない場合であっても、検出できなかった空間コードを補間することができる。従って、空間コードのすべてを検出できない場合であっても、投写面5に表示させた画像の位置と、投写面5を含む範囲を撮像した撮像画像の位置とを対応づけるキャリブレーションデータを生成することができる。
このしきい値算出処理では、まず、複数の特徴領域250に設定される色の原色画像を投写面5にそれぞれ表示させる。次に、原色画像が表示された投写面5を撮像した複数の原色撮像画像を取得する。そして、原色撮像画像の予め設定された基準点の画素値と、原色撮像画像に撮像された複数の特徴領域250の各々における画素値との比率に基づき、第1パターン撮像画像及び第2パターン撮像画像の各特徴領域250に形成された原色を判定するしきい値を、複数の特徴領域250ごとに算出する。
プロジェクター100Aは、算出したしきい値を用いて、第1パターン撮像画像及び第2パターン撮像画像の各特徴領域250に形成された色を判定する。
従って、第1パターン撮像画像及び第2パターン撮像画像の各特徴領域250に形成された色を精度よく判定することができる。
従って、複数のプロジェクター100が投写面5に表示させた画像を識別することができる。
空間コード含まれる各数字には、赤色、緑色及び青色の原色の組み合わせにより表現される色が対応づけられる。
従って、赤色、緑色及び青色の原色の組み合わせにより空間コードに対応した色を表示させることができる。
例えば、上述した実施形態では、特徴領域250に設定される識別情報が、連続する番号の空間コードである場合を例に説明したが、識別情報は、予め並び順が規定された文字や記号等であってもよい。予め並び順が規定された文字や記号を、予め設定された順序に従って複数の特徴領域250に設定してもよい。
Claims (6)
- 複数の領域を有し、前記複数の領域の各々には、各領域に設定された識別情報を分割した第1部分情報に対応づけられた色が形成された第1パターン画像を表示面に表示させ、
前記第1パターン画像が投写された前記表示面を撮像した第1撮像画像を取得し、
前記複数の領域を有し、前記複数の領域の各々には、各領域に設定された前記識別情報の前記第1部分情報以外の情報である第2部分情報に対応づけられた色が形成された第2パターン画像を表示面に表示させ、
前記第2パターン画像が投写された前記表示面を撮像した第2撮像画像を取得し、
前記第1撮像画像に撮像された前記複数の領域の色と、前記第2撮像画像に撮像された前記複数の領域の色とをそれぞれ判定し、
前記複数の領域の色の判定結果に基づき、前記第1撮像画像と前記第2撮像画像との対応する領域に設定された前記第1部分情報及び前記第2部分情報を取得し、取得した前記第1部分情報及び前記第2部分情報に基づいて前記複数の領域の各々に設定された前記識別情報を検出し、
検出した前記識別情報に基づき、前記表示面に表示させた画像の位置と、前記表示面を含む範囲を撮像した撮像画像の位置とを対応づけ、
前記複数の領域に設定された複数の前記識別情報には、並び順が規定され、予め設定された順序に従って前記複数の領域に設定される、位置検出方法。 - 前記複数の領域に設定される色の原色画像を前記表示面にそれぞれ表示させ、
前記原色画像が表示された前記表示面を撮像した複数の第3撮像画像を取得し、
前記第3撮像画像の予め設定された基準点の画素値と、前記第3撮像画像に撮像された前記複数の領域の各々における画素値との比率に基づき、前記第1撮像画像及び前記第2撮像画像の各領域に形成された原色を判定するしきい値を、前記複数の領域ごとに算出し、
算出したしきい値を用いて、前記第1撮像画像及び前記第2撮像画像の各領域に形成された色を判定する、ことを特徴とする請求項1記載の位置検出方法。 - 前記識別情報には、前記第1パターン画像及び前記第2パターン画像を前記表示面に表示させる表示装置に設定された識別情報が含まれる、請求項1又は2記載の位置検出方法。
- 前記識別情報は、前記第1パターン画像及び前記第2パターン画像を前記表示面に表示させる表示装置に設定された第1通し番号と、前記第1パターン画像及び前記第2パターン画像における前記複数の領域の座標に対応づけられた第2通し番号とにより構成される番号を7進数に変換した識別番号であり、
前記識別番号に含まれる各数字には、赤色、緑色及び青色の原色の組み合わせにより表現される色が対応づけられる、請求項1又は2記載の位置検出方法。 - 表示面に画像を表示させる表示部と、
前記表示部を制御して、前記表示面の表示を制御する制御部と、
前記表示面の少なくとも一部を撮像する撮像部と、を備え、
前記制御部は、
複数の領域を有し、前記複数の領域の各々には、各領域に設定された識別情報を分割した第1部分情報に対応づけられた色が形成された第1パターン画像を前記表示部により前記表示面に表示させ、
前記第1パターン画像が投写された前記表示面を前記撮像部により撮像させ、前記撮像部が撮像した第1撮像画像を取得し、
前記複数の領域を有し、前記複数の領域の各々には、各領域に設定された前記識別情報の前記第1部分情報以外の情報である第2部分情報に対応づけられた色が形成された第2パターン画像を前記表示部により前記表示面に表示させ、
前記第2パターン画像が投写された前記表示面を前記撮像部により撮像させ、前記撮像部が撮像した第2撮像画像を取得し、
前記第1撮像画像に撮像された前記複数の領域の色と、前記第2撮像画像に撮像された前記複数の領域の色とをそれぞれ判定し、
前記複数の領域の色の判定結果に基づき、前記第1撮像画像と前記第2撮像画像との対応する領域に設定された前記第1部分情報及び前記第2部分情報を取得し、取得した前記第1部分情報及び前記第2部分情報に基づいて前記複数の領域の各々に設定された前記識別情報を検出し、
検出した前記識別情報に基づき、前記表示面に表示させた画像の位置と、前記表示面を含む範囲を撮像した撮像画像の位置とを対応づけ、
前記複数の領域に設定された複数の前記識別情報には、並び順が規定され、予め設定された順序に従って前記複数の領域に設定される、表示装置。 - 表示面に画像を表示させる表示装置と、
前記表示面の少なくとも一部を撮像する撮像装置と、
前記表示装置及び前記撮像装置を制御する制御装置と、を備え、
前記制御装置は、
複数の領域を有し、前記複数の領域の各々には、各領域に設定された識別情報を分割した第1部分情報に対応づけられた色が形成された第1パターン画像を前記表示装置により前記表示面に表示させ、
前記第1パターン画像が投写された前記表示面を前記撮像装置により撮像させ、前記撮像装置が撮像した第1撮像画像を取得し、
前記複数の領域を有し、前記複数の領域の各々には、各領域に設定された前記識別情報の前記第1部分情報以外の情報である第2部分情報に対応づけられた色が形成された第2パターン画像を前記表示装置により前記表示面に表示させ、
前記第2パターン画像が投写された前記表示面を前記撮像装置により撮像させ、前記撮像装置が撮像した第2撮像画像を取得し、
前記第1撮像画像に撮像された前記複数の領域の色と、前記第2撮像画像に撮像された前記複数の領域の色とをそれぞれ判定し、
前記複数の領域の色の判定結果に基づき、前記第1撮像画像と前記第2撮像画像との対応する領域に設定された前記第1部分情報及び前記第2部分情報を取得し、取得した前記第1部分情報及び前記第2部分情報に基づいて前記複数の領域の各々に設定された前記識別情報を検出し、
検出した前記識別情報に基づき、前記表示面に表示させた画像の位置と、前記表示面を含む範囲を撮像した撮像画像の位置とを対応づけ、
前記複数の領域に設定された複数の前記識別情報には、並び順が規定され、予め設定された順序に従って前記複数の領域に設定される、位置検出システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021013060A JP7226461B2 (ja) | 2021-01-29 | 2021-01-29 | 位置検出方法、表示装置及び位置検出システム |
CN202210099694.3A CN114827560B (zh) | 2021-01-29 | 2022-01-27 | 位置检测方法、显示装置以及位置检测系统 |
US17/587,873 US11862055B2 (en) | 2021-01-29 | 2022-01-28 | Position detection method, display device, and position detection system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021013060A JP7226461B2 (ja) | 2021-01-29 | 2021-01-29 | 位置検出方法、表示装置及び位置検出システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022116739A JP2022116739A (ja) | 2022-08-10 |
JP7226461B2 true JP7226461B2 (ja) | 2023-02-21 |
Family
ID=82527132
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021013060A Active JP7226461B2 (ja) | 2021-01-29 | 2021-01-29 | 位置検出方法、表示装置及び位置検出システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11862055B2 (ja) |
JP (1) | JP7226461B2 (ja) |
CN (1) | CN114827560B (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012022246A (ja) | 2010-07-16 | 2012-02-02 | Sanyo Electric Co Ltd | 投写型映像表示装置 |
JP2017017698A (ja) | 2015-06-26 | 2017-01-19 | 国立大学法人 鹿児島大学 | 投影システム、投影方法、パターン生成方法及びプログラム |
US20200059673A1 (en) | 2017-02-24 | 2020-02-20 | Ymagis | Signal encoding and decoding for high contrast theatrical display |
JP2021010162A (ja) | 2019-06-28 | 2021-01-28 | 中強光電股▲ふん▼有限公司 | 投影システム及びその投影方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6999117B2 (en) * | 2000-05-16 | 2006-02-14 | Fuji Photo Film Co., Ltd. | Image pickup device and method for automatically inputting predefined information and processing images thereof |
JP5778967B2 (ja) * | 2011-04-08 | 2015-09-16 | 任天堂株式会社 | 情報処理プログラム、情報処理方法、情報処理装置および情報処理システム |
JP5756322B2 (ja) * | 2011-04-08 | 2015-07-29 | 任天堂株式会社 | 情報処理プログラム、情報処理方法、情報処理装置および情報処理システム |
JP6701669B2 (ja) * | 2015-10-29 | 2020-05-27 | セイコーエプソン株式会社 | 画像投射システム、プロジェクター、及び、画像投射システムの制御方法 |
JP6702171B2 (ja) * | 2016-12-22 | 2020-05-27 | カシオ計算機株式会社 | 投影制御装置、投影制御方法及びプログラム |
JP6809292B2 (ja) | 2017-03-01 | 2021-01-06 | セイコーエプソン株式会社 | プロジェクターおよびプロジェクターの制御方法 |
JP2019114888A (ja) * | 2017-12-22 | 2019-07-11 | キヤノン株式会社 | 投影装置、投影方法、投影システム |
CN111416968B (zh) * | 2019-01-08 | 2022-01-11 | 精工爱普生株式会社 | 投影仪、显示系统、图像校正方法 |
JP7190701B2 (ja) * | 2019-03-27 | 2022-12-16 | パナソニックIpマネジメント株式会社 | 投写画像調整システム及び方法 |
JP7363380B2 (ja) * | 2019-10-31 | 2023-10-18 | セイコーエプソン株式会社 | 表示システムの制御方法および制御装置 |
WO2021111733A1 (ja) * | 2019-12-05 | 2021-06-10 | ソニーグループ株式会社 | 画像処理装置及び画像処理方法、並びに画像投影システム |
-
2021
- 2021-01-29 JP JP2021013060A patent/JP7226461B2/ja active Active
-
2022
- 2022-01-27 CN CN202210099694.3A patent/CN114827560B/zh active Active
- 2022-01-28 US US17/587,873 patent/US11862055B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012022246A (ja) | 2010-07-16 | 2012-02-02 | Sanyo Electric Co Ltd | 投写型映像表示装置 |
JP2017017698A (ja) | 2015-06-26 | 2017-01-19 | 国立大学法人 鹿児島大学 | 投影システム、投影方法、パターン生成方法及びプログラム |
US20200059673A1 (en) | 2017-02-24 | 2020-02-20 | Ymagis | Signal encoding and decoding for high contrast theatrical display |
JP2021010162A (ja) | 2019-06-28 | 2021-01-28 | 中強光電股▲ふん▼有限公司 | 投影システム及びその投影方法 |
Also Published As
Publication number | Publication date |
---|---|
US20220246071A1 (en) | 2022-08-04 |
CN114827560B (zh) | 2023-05-09 |
US11862055B2 (en) | 2024-01-02 |
JP2022116739A (ja) | 2022-08-10 |
CN114827560A (zh) | 2022-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4777675B2 (ja) | 画像処理装置、画像表示装置、画像処理方法、その方法をコンピュータに実行させるプログラム、および記録媒体 | |
JP5251202B2 (ja) | プロジェクタの投射画像の歪補正方法、及びプロジェクタ | |
JP2019078786A (ja) | 画像投射システム、プロジェクター、及び画像投射システムの制御方法 | |
JP2019028146A (ja) | 表示装置及び表示装置の制御方法 | |
US10171781B2 (en) | Projection apparatus, method for controlling the same, and projection system | |
JP6707871B2 (ja) | 画質補正方法、及び、画像投射システム | |
US20060092096A1 (en) | Display apparatus and display method | |
JP2020036141A (ja) | 表示システム、制御装置、表示システムの制御方法、およびプログラム | |
JP7226461B2 (ja) | 位置検出方法、表示装置及び位置検出システム | |
JP6665545B2 (ja) | 画像投射システム、プロジェクター、及び、画像補正方法 | |
US11832031B2 (en) | Projection system controlling method, and projector | |
JP5915001B2 (ja) | プロジェクター、およびプロジェクターの制御方法 | |
JP7322910B2 (ja) | 情報処理装置及び情報処理システム | |
US20140035966A1 (en) | Display apparatus and method of controlling the same | |
US11388341B2 (en) | Image processing apparatus, image processing method, and storage medium | |
JP6064699B2 (ja) | 画像処理装置、プロジェクター及び画像処理方法 | |
US20230188689A1 (en) | Projection method and projector | |
JP7276120B2 (ja) | 表示装置の制御方法、及び表示装置 | |
JP2018081222A (ja) | 投影装置、投影方法、及び投影システム | |
JP2023111194A (ja) | 検出方法及び検出システム | |
JP2010220150A (ja) | プロジェクタ、画像投影制御プログラム及び画像投影方法 | |
JP6237141B2 (ja) | 階調補正装置およびプログラム | |
JP2023125177A (ja) | 投写画像の調整方法、投写システム及び制御装置 | |
JP2023096575A (ja) | 投写方法及びプロジェクター | |
JP2022077773A (ja) | 投射制御装置、画像投射システム、投射制御装置の作動方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211224 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211224 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230123 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7226461 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |