JPWO2017104447A1 - 画像処理装置および方法、データ、並びに記録媒体 - Google Patents
画像処理装置および方法、データ、並びに記録媒体 Download PDFInfo
- Publication number
- JPWO2017104447A1 JPWO2017104447A1 JP2017555979A JP2017555979A JPWO2017104447A1 JP WO2017104447 A1 JPWO2017104447 A1 JP WO2017104447A1 JP 2017555979 A JP2017555979 A JP 2017555979A JP 2017555979 A JP2017555979 A JP 2017555979A JP WO2017104447 A1 JPWO2017104447 A1 JP WO2017104447A1
- Authority
- JP
- Japan
- Prior art keywords
- pattern
- image
- unit
- projected
- structured light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 183
- 238000000034 method Methods 0.000 title abstract description 115
- 238000003384 imaging method Methods 0.000 claims abstract description 280
- 238000001514 detection method Methods 0.000 claims abstract description 138
- 238000009826 distribution Methods 0.000 claims abstract description 46
- 230000003287 optical effect Effects 0.000 claims description 75
- 230000008859 change Effects 0.000 claims description 31
- 238000011161 development Methods 0.000 claims description 30
- 238000003672 processing method Methods 0.000 claims description 16
- 239000000284 extract Substances 0.000 claims description 3
- 230000001131 transforming effect Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 description 68
- 238000004891 communication Methods 0.000 description 54
- 230000006870 function Effects 0.000 description 47
- 238000012937 correction Methods 0.000 description 41
- 238000005516 engineering process Methods 0.000 description 38
- 238000003860 storage Methods 0.000 description 26
- 230000036544 posture Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 17
- 230000005484 gravity Effects 0.000 description 16
- 239000013598 vector Substances 0.000 description 16
- 230000009467 reduction Effects 0.000 description 13
- 230000000694 effects Effects 0.000 description 8
- 238000009434 installation Methods 0.000 description 7
- 238000004519 manufacturing process Methods 0.000 description 7
- 239000003086 colorant Substances 0.000 description 5
- 230000010354 integration Effects 0.000 description 5
- 230000002093 peripheral effect Effects 0.000 description 5
- 239000004065 semiconductor Substances 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000004148 unit process Methods 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/18—Image warping, e.g. rearranging pixels individually
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2513—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/254—Projection of a pattern, viewing through a pattern, e.g. moiré
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Projection Apparatus (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
1.第1の実施の形態(構造化光パタン)
2.第2の実施の形態(構造化光パタン生成装置)
3.第3の実施の形態(投影撮像システム)
4.第4の実施の形態(投影撮像システム・投影撮像装置)
<対応点検出と幾何補正>
プロジェクタの投影面(スクリーンや壁等)に対する姿勢(位置や向き等)や投影面の形状等によって、例えば図1のAのように、投影された画像(投影画像とも称する)が歪み、見づらくなってしまう場合がある。このような場合、プロジェクタが投影する画像に対して歪みの補正等の幾何補正を施すことにより、図1のBの例のように、投影画像の歪みを低減し、見やすくすることができる。
このような幾何補正の為の対応点検出は、映像の投影を開始する前に行うことが考えられるが、初期設置後、映像を投影している最中に温度や振動などの外乱の影響等により、この対応点がずれてしまうおそれがあった。対応点がずれると、幾何補正が不適切なものとなり、投影画像に歪みや位置ずれが生じてしまうおそれがあった。
ISL方式は、所定のパタンの画像である構造化光パタンをポジ・ネガ反転させて投影画に埋め込み、人間に知覚されないように投影する技術である。
図10に示される構造化光パタン100は、本技術を適用した構造化光パタンの一実施の形態の例を示す。構造化光パタン100は、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点(つまり、投影部と撮像部との画素対応関係)を検出するためのものであり、図10に示されるように、周辺と輝度値が異なる楕円形状の輝度分布のパタン101を複数有する。つまり、構造化光パタン100には複数のパタン101が配置(形成)されている。構造化光パタン100のパタン101を検出することで対応点の検出を行うことができる。
ところで、プロジェクタ(投影部)とカメラ(撮影部)の設置の自由度(位置や姿勢の自由度)が高いほど、システム構築が容易になり、多様な構成のシステムの実現も容易になる。例えば、図14に示されるように、プロジェクタ111が構造化光パタン100を投影し、カメラ112がその投影画像を撮像して、撮像画像113を得るものとする。このようなシステムにおいてプロジェクタ111とカメラ112の設置の自由度が高いと、カメラ112が投影された構造化光パタン100の全体を撮像することができず、撮像画像113には構造化光パタン100の一部のみしか含まれないケースが生じる可能性がある。
<構造化光パタン生成装置>
次に、以上のような構造化光パタン100の生成について説明する。構造化光パタン100は、その一部若しくは全部が、任意の装置において生成されるようにしてもよい。図21は、本技術を適用した画像処理装置の一実施の形態である構造化光パタン生成装置の主な構成例を示すブロック図である。
図22は、構造化光パタン生成装置200がプログラム等を実行することにより実現する機能の例を示す機能ブロック図である。図22に示されるように、プログラムを実行することにより構造化光パタン生成装置200は、構造化光パタン生成部240の機能を有する。
構造化光パタン生成部240は、所定のタイミングにおいて、若しくは、ユーザやプログラムの指示や要求等に基づいて、構造化光パタン生成処理を実行し、第1の実施の形態において説明したような技術的特徴を有する構造化光パタン100を生成する。図23のフローチャートを参照して、構造化光パタン生成処理の流れの例を説明する。
<投影撮像システム>
次に、以上のような構造化光パタン100を用いた対応点の検出について説明する。図25は、本技術を適用した投影撮像システムの一実施の形態の主な構成例を示すブロック図である。図25において、投影撮像システム300は、画像を投影したり、投影画像を撮像したり、本技術を適用した方法で、ISL方式による対応点検出を行ったりすることができるシステムである。
図26は、本技術を適用した画像処理装置の一実施の形態である制御装置301の主な構成例を示すブロック図である。
図27は、制御装置301がプログラム等を実行することにより実現する機能の例を示す機能ブロック図である。図27に示されるように、プログラムを実行することにより制御装置301は、投影撮像処理部351、対応点検出部352、姿勢推定部353、幾何補正部354、投影制御部355、および撮像制御部356の機能を有する。
対応点検出部352は、図28において機能ブロックとして示される機能を有する。つまり、対応点検出部352は、制御部361、ノイズ低減部362、差分画像生成部363、2値化部364、領域分割部365、重心検出部366、変数識別部367、対応点検出単位処理部368、順列符号展開部369、データベース検索部370、回転・変数スワップ符号列処理部371、および位置特定部372の機能を有する。
図29は、投影撮像装置302の主な構成例を示すブロック図である。図29に示されるように、投影撮像装置302は、制御部401、投影部311、撮像部312、入力部411、出力部412、記憶部413、通信部414、およびドライブ415を有する。
図30は、投影部311の主な構成例を示すブロック図である。図30に示されるように、投影部311は、ビデオプロセッサ431、レーザドライバ432、レーザ出力部433−1、レーザ出力部433−2、レーザ出力部433−3、ミラー434−1、ミラー434−2、ミラー434−3、MEMSドライバ435、および、MEMSミラー436を有する。
次に、このような構成の投影撮像システム300において実行される処理について説明する。上述したように、投影撮像システム300においては、制御装置301が、各投影撮像装置302を制御し、ISL方式のオンラインセンシングにより、コンテンツ等の画像を投影しながら、各投影部311と各撮像部312の間の対応点検出を行い、その対応点に基づいて、各投影部および各撮像部312の姿勢推定や投影面形成等を行い、投影する画像の幾何補正を行う。
次に、図33のフローチャートを参照して、図32のステップS301において実行される投影撮像処理の流れについて説明する。
次に、図34および図35のフローチャートを参照して、図32のステップS302において実行される対応点検出処理の流れについて説明する。
<投影撮像システム、投影撮像装置の他の構成例>
なお、本技術を適用した投影撮像システムの構成例は、上述した例に限定されない。例えば図38のAに示される投影撮像システム500のように、制御装置301並びに各投影撮像装置302がネットワーク501を介して互いに接続されるようにしてもよい。
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、ネットワークや記録媒体からインストールされる。
本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
(1) 投影部により投影されたガウス関数の輝度分布を有するパタンが複数配置された所定の構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する対応点検出部
を備える画像処理装置。
(2) 投影部により投影されたガウス関数の輝度分布を有するパタンが複数配置された所定の構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する
画像処理方法。
(3) 投影部により投影された、複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された前記構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する対応点検出部
を備える画像処理装置。
(4) 前記対応点検出部は、
前記パタン撮像画像に含まれる前記パタンを変数化して順列展開して符号列を求め、
前記パタン撮像画像に含まれる前記パタンに対応する前記符号列に一致する符号列に対応する前記部分領域を前記構造化光パタンにおいて検索して、前記対応点を検出する
(3)に記載の画像処理装置。
(5) 前記対応点検出部は、
前記パタン撮像画像に含まれる前記パタンに対応する前記符号列に一致する符号列を前記構造化光パタンの各部分領域に対応する符号列群の中から検索し、
符号列が一致した前記部分領域の前記構造化光パタンにおける位置に基づいて、前記対応点を検出する
(4)に記載の画像処理装置。
(6) 前記構造化光パタンの各部分領域に対応する符号列群は、互いに異なるグループに属する符号列のみにより構成され、
前記対応点検出部は、前記パタン撮像画像に含まれる前記パタンに対応する前記符号列と同一のグループに属する全ての符号列について、前記構造化光パタンの各部分領域に対応する符号列群の中から一致する符号列を検索することができるように構成される
(5)に記載の画像処理装置。
(7) 前記グループは、所定のパタン群の各パタンを変数化して順列展開した符号列、および、前記パタン群を所定の角度回転して各パタンを変数化して順列展開した符号列を含む
(6)に記載の画像処理装置。
(8) 前記対応点検出部は、前記投影部が投影した任意の画像と前記構造化光パタンとの重畳画像を前記撮像部が撮像したパタン撮像画像から前記パタンを抽出する
(3)乃至(7)のいずれかに記載の画像処理装置。
(9) 前記対応点検出部は、前記投影部が投影した任意の画像と前記構造化光パタンのポジ画像との重畳画像を前記撮像部が撮像した第1のパタン撮像画像と、前記投影部が投影した任意の画像と前記構造化光パタンのネガ画像との重畳画像を前記撮像部が撮像した第2のパタン撮像画像とを用いて、前記パタンを抽出する
(8)に記載の画像処理装置。
(10) 前記パタンは、ガウス関数の輝度分布を有する
(3)乃至(9)のいずれかに記載の画像処理装置。
(11) 前記構造化光パタンは、輝度変化方向が互いに逆向きの2種類の輝度分布と、慣性主軸が互いに異なる2方向とを組み合わせた4種類のパタンにより構成される
(3)乃至(10)のいずれかに記載の画像処理装置。
(12) 投影部により投影された、複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された前記構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する
画像処理方法。
(13) ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンを生成する生成部
を備える画像処理装置。
(14) ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンを生成する
画像処理方法。
(15) 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンを生成する生成部
を備える画像処理装置。
(16) 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンを生成する
画像処理方法。
(17) ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンのデータ。
(18) ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンのデータが記録された記録媒体。
(19) 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンのデータ。
(20) 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンのデータが記録された記録媒体。
Claims (20)
- 投影部により投影されたガウス関数の輝度分布を有するパタンが複数配置された所定の構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する対応点検出部
を備える画像処理装置。 - 投影部により投影されたガウス関数の輝度分布を有するパタンが複数配置された所定の構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する
画像処理方法。 - 投影部により投影された、複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された前記構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する対応点検出部
を備える画像処理装置。 - 前記対応点検出部は、
前記パタン撮像画像に含まれる前記パタンを変数化して順列展開して符号列を求め、
前記パタン撮像画像に含まれる前記パタンに対応する前記符号列に一致する符号列に対応する前記部分領域を前記構造化光パタンにおいて検索して、前記対応点を検出する
請求項3に記載の画像処理装置。 - 前記対応点検出部は、
前記パタン撮像画像に含まれる前記パタンに対応する前記符号列に一致する符号列を前記構造化光パタンの各部分領域に対応する符号列群の中から検索し、
符号列が一致した前記部分領域の前記構造化光パタンにおける位置に基づいて、前記対応点を検出する
請求項4に記載の画像処理装置。 - 前記構造化光パタンの各部分領域に対応する符号列群は、互いに異なるグループに属する符号列のみにより構成され、
前記対応点検出部は、前記パタン撮像画像に含まれる前記パタンに対応する前記符号列と同一のグループに属する全ての符号列について、前記構造化光パタンの各部分領域に対応する符号列群の中から一致する符号列を検索することができるように構成される
請求項5に記載の画像処理装置。 - 前記グループは、所定のパタン群の各パタンを変数化して順列展開した符号列、および、前記パタン群を所定の角度回転して各パタンを変数化して順列展開した符号列を含む
請求項6に記載の画像処理装置。 - 前記対応点検出部は、前記投影部が投影した任意の画像と前記構造化光パタンとの重畳画像を前記撮像部が撮像したパタン撮像画像から前記パタンを抽出する
請求項3に記載の画像処理装置。 - 前記対応点検出部は、前記投影部が投影した任意の画像と前記構造化光パタンのポジ画像との重畳画像を前記撮像部が撮像した第1のパタン撮像画像と、前記投影部が投影した任意の画像と前記構造化光パタンのネガ画像との重畳画像を前記撮像部が撮像した第2のパタン撮像画像とを用いて、前記パタンを抽出する
請求項8に記載の画像処理装置。 - 前記パタンは、ガウス関数の輝度分布を有する
請求項3に記載の画像処理装置。 - 前記構造化光パタンは、輝度変化方向が互いに逆向きの2種類の輝度分布と、慣性主軸が互いに異なる2方向とを組み合わせた4種類のパタンにより構成される
請求項3に記載の画像処理装置。 - 投影部により投影された、複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された前記構造化光パタンを撮像部が撮像したパタン撮像画像を用いて、前記投影部により投影された投影画像と前記撮像部により撮像された撮像画像との間の対応点を検出する
画像処理方法。 - ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンを生成する生成部
を備える画像処理装置。 - ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンを生成する
画像処理方法。 - 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンを生成する生成部
を備える画像処理装置。 - 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンを生成する
画像処理方法。 - ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンのデータ。
- ガウス関数の輝度分布を有するパタンが複数配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための構造化光パタンのデータが記録された記録媒体。
- 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンのデータ。
- 複数種類のパタンが複数配置された構造化光パタンであって、前記構造化光パタンの所定の大きさの部分領域内のパタン群を変数化して順列展開した符号列に基づいて、前記構造化光パタンにおける前記部分領域の位置が一意に定まるように前記パタンが配置された、投影部により投影された投影画像と撮像部により撮像された撮像画像との間の対応点を検出するための前記構造化光パタンのデータが記録された記録媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015247437 | 2015-12-18 | ||
JP2015247437 | 2015-12-18 | ||
PCT/JP2016/085925 WO2017104447A1 (ja) | 2015-12-18 | 2016-12-02 | 画像処理装置および方法、データ、並びに記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017104447A1 true JPWO2017104447A1 (ja) | 2018-10-04 |
JP6816725B2 JP6816725B2 (ja) | 2021-01-20 |
Family
ID=59056363
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017555979A Active JP6816725B2 (ja) | 2015-12-18 | 2016-12-02 | 画像処理装置および方法、データ、並びに記録媒体 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10852127B2 (ja) |
EP (2) | EP3392608A4 (ja) |
JP (1) | JP6816725B2 (ja) |
KR (1) | KR20180094878A (ja) |
CN (1) | CN108369091B (ja) |
WO (1) | WO2017104447A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019047311A (ja) * | 2017-09-01 | 2019-03-22 | セイコーエプソン株式会社 | 画像投写システム及びその制御方法 |
WO2019054204A1 (ja) * | 2017-09-14 | 2019-03-21 | ソニー株式会社 | 画像処理装置および方法 |
WO2019203002A1 (ja) | 2018-04-17 | 2019-10-24 | ソニー株式会社 | 情報処理装置および方法 |
JP7285470B2 (ja) * | 2018-05-17 | 2023-06-02 | パナソニックIpマネジメント株式会社 | 投影システム、投影装置及び投影方法 |
WO2020008628A1 (ja) * | 2018-07-06 | 2020-01-09 | 楽天株式会社 | 画像処理システム、画像処理方法、及びプログラム |
US11785188B2 (en) | 2019-05-20 | 2023-10-10 | Sony Group Corporation | Image processing apparatus and image processing method |
US20220417483A1 (en) * | 2019-12-05 | 2022-12-29 | Sony Group Corporation | Image processing device, image processing method, and image projection system |
WO2021157196A1 (ja) * | 2020-02-04 | 2021-08-12 | ソニーグループ株式会社 | 情報処理装置及び情報処理方法、並びにコンピュータプログラム |
CN111553874B (zh) * | 2020-02-28 | 2022-12-06 | 东华大学 | 一种反光核燃料棒表面线结构光中心提取方法 |
CN111292316B (zh) * | 2020-03-11 | 2023-09-01 | 成都极米科技股份有限公司 | 测试方法、装置、电子设备及存储介质 |
JP7351525B2 (ja) * | 2020-07-08 | 2023-09-27 | tonari株式会社 | システム |
CN112822468B (zh) * | 2020-12-31 | 2023-02-17 | 成都极米科技股份有限公司 | 一种投影控制方法、装置、投影设备及激光控制器 |
CN115052136B (zh) * | 2022-05-10 | 2023-10-13 | 合肥的卢深视科技有限公司 | 结构光投影方法、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009216650A (ja) * | 2008-03-12 | 2009-09-24 | Aisin Seiki Co Ltd | 三次元形状測定装置 |
US20100309301A1 (en) * | 2007-12-04 | 2010-12-09 | Sirona Dental Systems Gmbh | Recording method for obtaining an image of an object and recording device |
JP2014071850A (ja) * | 2012-10-02 | 2014-04-21 | Osaka Prefecture Univ | 画像処理装置、端末装置、画像処理方法、およびプログラム |
JP2015111101A (ja) * | 2013-11-05 | 2015-06-18 | キヤノン株式会社 | 情報処理装置および方法 |
JP2015222250A (ja) * | 2014-04-30 | 2015-12-10 | シナノケンシ株式会社 | 計測装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06223184A (ja) * | 1993-01-27 | 1994-08-12 | Matsushita Electric Ind Co Ltd | 画像パターン傾き検出方法 |
JP2000292135A (ja) * | 1999-04-07 | 2000-10-20 | Minolta Co Ltd | 3次元情報入力カメラ |
GB2372656A (en) * | 2001-02-23 | 2002-08-28 | Ind Control Systems Ltd | Optical position determination |
US6527395B1 (en) * | 2001-12-10 | 2003-03-04 | Mitsubishi Electric Research Laboratories, Inc. | Method for calibrating a projector with a camera |
US7146036B2 (en) * | 2003-02-03 | 2006-12-05 | Hewlett-Packard Development Company, L.P. | Multiframe correspondence estimation |
US8217997B2 (en) * | 2010-03-16 | 2012-07-10 | Interphase Corporation | Interactive display system |
CN104247178B (zh) * | 2012-03-01 | 2018-01-02 | Iee国际电子工程股份公司 | 空间编码结构化光生成器 |
US9438871B2 (en) * | 2012-12-26 | 2016-09-06 | Citizen Holdings Co., Ltd. | Laser projection apparatus with bundled fibers |
KR102085228B1 (ko) * | 2014-03-27 | 2020-03-05 | 한국전자통신연구원 | 깊이 센서의 깊이 보정을 위한 이미지 처리방법 및 그 장치 |
CN106464825B (zh) * | 2014-07-01 | 2020-11-10 | 索尼公司 | 图像处理设备和方法 |
CN104506838B (zh) * | 2014-12-23 | 2016-06-29 | 宁波盈芯信息科技有限公司 | 一种符号阵列面结构光的深度感知方法、装置及系统 |
-
2016
- 2016-12-02 EP EP16875430.7A patent/EP3392608A4/en not_active Withdrawn
- 2016-12-02 EP EP20172114.9A patent/EP3722746A1/en not_active Withdrawn
- 2016-12-02 JP JP2017555979A patent/JP6816725B2/ja active Active
- 2016-12-02 KR KR1020187015928A patent/KR20180094878A/ko not_active Application Discontinuation
- 2016-12-02 CN CN201680072382.6A patent/CN108369091B/zh not_active Expired - Fee Related
- 2016-12-02 US US15/779,937 patent/US10852127B2/en active Active
- 2016-12-02 WO PCT/JP2016/085925 patent/WO2017104447A1/ja active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100309301A1 (en) * | 2007-12-04 | 2010-12-09 | Sirona Dental Systems Gmbh | Recording method for obtaining an image of an object and recording device |
JP2009216650A (ja) * | 2008-03-12 | 2009-09-24 | Aisin Seiki Co Ltd | 三次元形状測定装置 |
JP2014071850A (ja) * | 2012-10-02 | 2014-04-21 | Osaka Prefecture Univ | 画像処理装置、端末装置、画像処理方法、およびプログラム |
JP2015111101A (ja) * | 2013-11-05 | 2015-06-18 | キヤノン株式会社 | 情報処理装置および方法 |
JP2015222250A (ja) * | 2014-04-30 | 2015-12-10 | シナノケンシ株式会社 | 計測装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2017104447A1 (ja) | 2017-06-22 |
KR20180094878A (ko) | 2018-08-24 |
EP3392608A4 (en) | 2019-11-13 |
CN108369091A (zh) | 2018-08-03 |
EP3722746A1 (en) | 2020-10-14 |
JP6816725B2 (ja) | 2021-01-20 |
CN108369091B (zh) | 2021-04-30 |
US20180364032A1 (en) | 2018-12-20 |
US10852127B2 (en) | 2020-12-01 |
EP3392608A1 (en) | 2018-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2017104447A1 (ja) | 画像処理装置および方法、データ、並びに記録媒体 | |
CN106464825B (zh) | 图像处理设备和方法 | |
US11330243B2 (en) | System and method for 3D scanning | |
JP7067554B2 (ja) | 画像処理装置および方法 | |
TWI253006B (en) | Image processing system, projector, information storage medium, and image processing method | |
WO2014064870A1 (ja) | 画像処理装置および画像処理方法 | |
CN107431779B (zh) | 信息处理设备和方法 | |
JP6677098B2 (ja) | 全天球動画の撮影システム、及びプログラム | |
US20170329208A1 (en) | Information processing apparatus and method | |
WO2019082797A1 (ja) | 再構成方法および再構成装置 | |
US10404912B2 (en) | Image capturing apparatus, image processing apparatus, image capturing system, image processing method, and storage medium | |
JP7010209B2 (ja) | 画像処理装置および方法 | |
JPWO2017154628A1 (ja) | 画像処理装置および方法 | |
JPWO2019050038A1 (ja) | 画像生成方法および画像生成装置 | |
KR20190072549A (ko) | 모바일 디바이스들을 위한 강화된 심도 맵 이미지들 | |
JP2013025649A (ja) | 画像処理装置及び画像処理方法、プログラム | |
WO2020235067A1 (ja) | 3次元計測システム及び3次元計測方法 | |
JP2008113176A (ja) | 映像表示システムの調整システム | |
JP2010199713A (ja) | オブジェクト検出装置及びオブジェクト検出方法 | |
JP2010171774A (ja) | 携帯型画像投影装置、画像投影方法及び画像投影プログラム | |
US20230300315A1 (en) | Information processing apparatus, information processing method, program, and display apparatus | |
JP2014150561A (ja) | 携帯型画像投影装置、画像投影方法及び画像投影プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191025 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200901 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201026 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201207 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6816725 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |