JP6554638B2 - 物体によって反射された光の特徴に基づく体積内の物体の識別 - Google Patents
物体によって反射された光の特徴に基づく体積内の物体の識別 Download PDFInfo
- Publication number
- JP6554638B2 JP6554638B2 JP2017545336A JP2017545336A JP6554638B2 JP 6554638 B2 JP6554638 B2 JP 6554638B2 JP 2017545336 A JP2017545336 A JP 2017545336A JP 2017545336 A JP2017545336 A JP 2017545336A JP 6554638 B2 JP6554638 B2 JP 6554638B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- volume
- reflected
- objects
- light pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/143—Sensing or illuminating at different wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
Description
シーンまたは風景などの体積内の物体を抽出するために体積の3次元深さマッピングが種々のシステム(例えば、骨格モデリング、ジェスチャ認識システム、VR(仮想現実)、拡張現実または遠隔制御検知アプリケーション)で使用される。例えば、深さマッピングは、体積からユーザの手やユーザの顔を抽出するために使用される。3次元深さマッピングからのデータによって、体積内の背景の風景から、ユーザの手、ユーザの顔、または他の物体をセグメント化することが可能となる。従来の方法は、体積からの物体のセグメント化を可能にするために体積全体の3次元深さマップを計算する。しかしながら、体積全体の3次元深さマップを生成するには多くの計算資源を必要とし、しばしば指定の処理ユニットが使用される。また、背景の風景から特定の物体(例えば、指)を抽出することを可能にする高分解能の3次元深さマップの抽出が周囲光条件によって制限を受ける場合があり、シーンからの特定の物体の効果的な抽出が所定の精度の制約に制限される。
体積内に投影された光は、体積内の種々の物体で様々に反射される。物体の表面およびその物体を構成する1つ以上の材料は、その物体が光をどのように反射するかに影響を及ぼす。物体の種々の特性が、その物体による光の反射に影響を及ぼす。物体が光をどのように反射するかに影響を与える物体の特性の例は、テクスチャ、材料の種類、不透明度、粗さ、拡散性、および鏡面性を含む。
ここで、
R=反射率、
k=吸光係数、
s=散乱係数、
c=吸光種の濃度、
A=吸光度、
である。
[ジェスチャおよび姿勢の検出]
図2は、空中におけるユーザの手210の動きなどのジェスチャを使用して装置と相互作用するユーザ200の概念図である。図2の例では、ユーザの手210の動きにより、ユーザ200はスクリーン260上に表示された仮想キーボード240をタイプすることが可能となる。ジェスチャを検出するために、検出装置250は、光パターンを手210に照射して、手210からの光パターンの反射を検出する。反射光パターンに基づく三角測量により、検出装置250は手210を含む体積の深さマップを生成することが可能となる。
種々の条件に基づく様々な物体での光の反射率の違いは、物体によって反射された光のシグネチャに基づいて物体を識別する複雑さを増加させる。例えば、皮膚によって反射される光は皮膚の老化に伴って変化するため、古い皮膚と若い皮膚との間で光の反射率が異なる。したがって、いくつかの実施形態では、体積内の物体によって反射された光の1つ以上の特徴をその体積内の追加の物体の1つ以上の特徴と比較することによって体積内での物体を識別する。このような比較により、物体による光の反射を特徴付ける事前情報がなくても、物体で反射された光に関する情報を提供することができる。
偏光イメージングは、物体(例えば、皮膚)からの光の散乱によって引き起こされる非偏光の現れである。偏光システムおよび方法は、医療分野(例えば、皮膚癌検出)において広く使用されている。物体による非偏光の反射は物体の表面で反射された後方散乱光を含み、物体の表面層は物体を照明する光の直線偏光を保持し、物体のより深い層での後方散乱光は非偏光とされる。出力偏光子を入力偏光子に対して平行にまたは垂直に向けることで、後方散乱信号の深さを選択することが可能となる。
C=(A−B)/(A+B)
ここで、
Aは、+45偏光配向の画像、
Bは、−45偏光配向の画像、
である。
上述した実施形態の説明は、例示を目的として提示されるものであり、包括的であることまたは開示された正確な形態に特許権を限定することを意図するものではない。当業者であれば、上記の開示内容をもとに、多くの変更および変形が可能である。
Claims (21)
- 方法であって、
体積内に投影するために光源から光ビームを供給すること、
前記光ビームに光パターンを適用するための1つ以上の所定の特性で前記光ビームを符号化すること、
前記光パターンで符号化された光ビームを前記体積内に投影すること、
前記体積内の1つまたは複数の物体で反射された前記光パターンの光を検出器で検出すること、
前記体積内の前記1つまたは複数の物体で反射された前記光パターンの検出光を解析すること、
前記体積内の1つの物体によって反射された前記光パターンの検出光のコヒーレンス特性と、前記体積内の前記1つまたは複数の物体のうちの他の物体によって反射された前記光パターンの検出光のコヒーレンス特性との差を決定することによって前記1つの物体によって反射された前記光パターンの検出光のコヒーレンス特性に従って前記体積内の前記1つの物体を前記体積内の前記1つまたは複数の物体からセグメント化すること、
前記光源を調整して、前記1つの物体によって反射された前記光パターンの検出光のコヒーレンス特性と同じコヒーレンス特性により前記体積内の前記1つまたは複数の物体のうちの前記他の物体を識別すること、
を備える方法。 - 前記光パターンが複数のストライプを含む、請求項1に記載の方法。
- 前記1つの物体により反射された前記光パターンの検出光に基づいて前記1つの物体の深さ情報を生成することをさらに備える請求項1に記載の方法。
- 前記1つの物体を関心物体として識別することをさらに備える請求項1に記載の方法。
- 前記光パターンは、前記光ビームのプロファイルのコリメーション角、前記光ビームのプロファイルの強度、前記光ビームのプロファイルの均一性、前記光源のコヒーレンス、およびそれらの組み合わせからなる群から選択された光学特性を含む、請求項1に記載の方法。
- 前記体積内の1つの物体は、前記1つの物体によって反射された前記光パターンの検出光の幅に基づいてセグメント化される、請求項1に記載の方法。
- 前記体積内の1つの物体は、前記1つの物体によって反射された前記光パターンの検出光の強度プロファイルの変化に基づいてセグメント化される、請求項1に記載の方法。
- 前記検出光の強度プロファイルの変化は、前記1つの物体によって反射された前記光パターンの光の局所的な均一プロファイルの変化を含む、請求項7に記載の方法。
- 前記検出光の強度プロファイルの変化は、前記1つの物体によって反射された前記光パターンの光のスペックルの局所的な均一プロファイルの変化を含む、請求項7に記載の方法。
- 前記検出光の強度プロファイルの変化は、前記1つの物体によって反射された前記光パターンの光の散光または迷光プロファイルの変化を含む、請求項7に記載の方法。
- 前記体積内の前記1つまたは複数の物体で反射された前記光パターンの光を検出器で検出することは、前記体積内の前記1つまたは複数の物体で反射された前記光パターンを偏光構造と追加の偏光構造に従って偏光して、前記体積内の前記1つまたは複数の物体で反射された光の複数の画像を生成することを含み、
前記体積内の1つの物体を前記体積内の前記1つまたは複数の物体からセグメント化することは、
前記体積内の前記1つまたは複数の物体で反射され前記偏光構造を有する光の画像を、前記体積内の前記1つまたは複数の物体で反射され前記追加の偏光構造を有する光の画像から除去すること、
前記除去した画像から前記1つの物体を抽出すること、
を含む、請求項1に記載の方法。 - 前記1つの物体によって反射された前記光パターンの光の特徴を、前記体積内の追加の物体によって反射された前記光パターンの光の特徴と比較すること、
前記比較の結果に基づいて前記体積内の前記1つまたは複数の物体から前記追加の物体をセグメント化すること、
をさらに備える請求項1に記載の方法。 - 前記1つの物体はユーザの顔であり、前記追加の物体は前記ユーザの手である、請求項12に記載の方法。
- 装置であって、
光ビームを生成するように構成された光源と、
1つの物体の物理的構造に応じて変化する所定の光学構造を前記光ビームに適用するように構成された少なくとも1つの光学素子と、
前記1つの物体を含む体積内の1つまたは複数の物体で反射された前記光ビームの複数の画像を取得するように構成された検出器と、
前記1つの物体を含む前記体積内の前記1つまたは複数の物体のうちの他の物体で反射された前記光ビームの前記所定の光学構造のコヒーレンス特性に対する、前記1つの物体で反射された前記光ビームの前記所定の光学構造のコヒーレンス特性の少なくとも1つの差に基づいて、前記複数の画像における前記1つまたは複数の物体から前記1つの物体を抽出するとともに、前記光源を調整して、前記1つの物体で反射された前記光ビームの前記所定の光学構造のコヒーレンス特性と同じコヒーレンス特性により前記体積内の前記1つまたは複数の物体のうちの前記他の物体を識別するように構成されたプロセッサと、
を備える装置。 - 前記光ビームに適用される前記所定の光学構造が光パターンを含む、請求項14に記載の装置。
- 前記光ビームの前記所定の光学構造のコヒーレンス特性における差が、前記1つの物体を含む体積内の前記1つまたは複数の物体のうちの前記他の物体で反射された前記所定の光学構造の幅に対する、前記1つの物体で反射された前記所定の光学構造の幅の変化を含む、請求項14に記載の装置。
- 前記光ビームの前記所定の光学構造のコヒーレンス特性における差が、前記1つの物体を含む体積内の前記1つまたは複数の物体のうちの前記他の物体で反射された前記所定の光学構造のガウシアン断面強度プロファイルに対する、前記1つの物体で反射された前記所定の光学構造のガウシアン断面強度プロファイルの変化を含む、請求項14に記載の装置。
- 前記光ビームの前記所定の光学構造のコヒーレンス特性における差が、前記1つの物体を含む体積内の前記1つまたは複数の物体のうちの前記他の物体で反射された前記所定の光学構造の局所的な均一プロファイルに対する、前記1つの物体で反射された前記所定の光学構造の局所的な均一プロファイルの変化を含む、請求項14に記載の装置。
- 前記光ビームの前記所定の光学構造のコヒーレンス特性における差が、前記1つの物体を含む体積内の前記1つまたは複数の物体のうちの前記他の物体で反射された前記所定の光学構造のスペックルプロファイルに対する、前記1つの物体で反射された前記所定の光学構造のスペックルプロファイルの変化を含む、請求項14に記載の装置。
- 前記検出器の視野内に位置する偏光子をさらに備え、前記偏光子は、少なくとも2つの所定の偏光構造に従って、前記体積内の前記1つまたは複数の物体で反射された前記光ビームの光を偏光するように構成されている、請求項15に記載の装置。
- 前記プロセッサは、偏光構造を有する前記1つの物体の画像を、異なる偏光構造を有する前記1つの物体の追加の画像から除去することによって、前記複数の画像から前記1つの物体を抽出するようにさらに構成されている、請求項20に記載の装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201562120440P | 2015-02-25 | 2015-02-25 | |
US62/120,440 | 2015-02-25 | ||
PCT/US2016/019377 WO2016138145A1 (en) | 2015-02-25 | 2016-02-24 | Identifying an object in a volume based on characteristics of light reflected by the object |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018508074A JP2018508074A (ja) | 2018-03-22 |
JP2018508074A5 JP2018508074A5 (ja) | 2018-11-22 |
JP6554638B2 true JP6554638B2 (ja) | 2019-08-07 |
Family
ID=56789817
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017545336A Active JP6554638B2 (ja) | 2015-02-25 | 2016-02-24 | 物体によって反射された光の特徴に基づく体積内の物体の識別 |
Country Status (11)
Country | Link |
---|---|
US (1) | US10049460B2 (ja) |
EP (1) | EP3123288A4 (ja) |
JP (1) | JP6554638B2 (ja) |
KR (2) | KR20170124559A (ja) |
CN (1) | CN107548502B (ja) |
AU (1) | AU2016222716B2 (ja) |
BR (1) | BR112017018121A2 (ja) |
CA (1) | CA2977374C (ja) |
IL (1) | IL254022B (ja) |
MX (1) | MX364878B (ja) |
WO (1) | WO2016138145A1 (ja) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2480955B1 (en) * | 2009-09-22 | 2018-05-16 | Facebook Inc. | Remote control of computer devices |
JP6782239B2 (ja) * | 2015-01-06 | 2020-11-11 | フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニーFacebook Technologies, Llc | パターン光を用いた深さマップを提供するための方法およびシステム |
JP6801666B2 (ja) * | 2015-09-30 | 2020-12-16 | ソニー株式会社 | 画像処理装置と画像処理方法および車両制御システム |
KR20180012057A (ko) * | 2016-07-26 | 2018-02-05 | 삼성전자주식회사 | 투시형 디스플레이 장치 |
KR20180056174A (ko) * | 2016-11-18 | 2018-05-28 | 삼성전자주식회사 | 콘텐츠 처리 방법 및 이를 지원하는 전자 장치 |
US10430647B2 (en) * | 2017-01-13 | 2019-10-01 | Microsoft Licensing Technology, LLC | Tailored illumination profile for articulated hand tracking |
US10586379B2 (en) | 2017-03-08 | 2020-03-10 | Ebay Inc. | Integration of 3D models |
US10620316B2 (en) * | 2017-05-05 | 2020-04-14 | Qualcomm Incorporated | Systems and methods for generating a structured light depth map with a non-uniform codeword pattern |
KR102287586B1 (ko) * | 2017-05-31 | 2021-08-10 | (주)아모레퍼시픽 | 화장료의 두께 측정 장치 및 방법 |
WO2019012535A1 (en) * | 2017-07-12 | 2019-01-17 | Guardian Optical Technologies Ltd. | SYSTEMS AND METHODS FOR ACQUIRING INFORMATION FROM AN ENVIRONMENT |
CN107515844B (zh) * | 2017-07-31 | 2021-03-16 | Oppo广东移动通信有限公司 | 字体设置方法、装置及移动设备 |
JP6970376B2 (ja) * | 2017-12-01 | 2021-11-24 | オムロン株式会社 | 画像処理システム、及び画像処理方法 |
US10527885B2 (en) * | 2018-04-03 | 2020-01-07 | Facebook Technologies, Llc | Display device with optical reflecting layer for reduction of screen door effect |
CN108846853A (zh) * | 2018-04-26 | 2018-11-20 | 武汉幻视智能科技有限公司 | 一种基于目标跟踪和姿态检测的教学行为分析方法及装置 |
US11040452B2 (en) * | 2018-05-29 | 2021-06-22 | Abb Schweiz Ag | Depth sensing robotic hand-eye camera using structured light |
US11727656B2 (en) | 2018-06-12 | 2023-08-15 | Ebay Inc. | Reconstruction of 3D model with immersive experience |
KR20200018207A (ko) * | 2018-08-10 | 2020-02-19 | 일렉트로닉 아트 아이엔씨. | 반사들을 렌더링하는 시스템들 및 방법들 |
US10896516B1 (en) * | 2018-10-02 | 2021-01-19 | Facebook Technologies, Llc | Low-power depth sensing using dynamic illumination |
CN111198445B (zh) * | 2018-11-16 | 2021-10-01 | 华为技术有限公司 | 一种分光偏振成像的设备和方法 |
US11004253B2 (en) * | 2019-02-21 | 2021-05-11 | Electronic Arts Inc. | Systems and methods for texture-space ray tracing of transparent and translucent objects |
CN109828315A (zh) | 2019-03-14 | 2019-05-31 | 华域视觉科技(上海)有限公司 | 基于红外线的路面监控系统及方法、汽车 |
WO2021021085A1 (en) * | 2019-07-26 | 2021-02-04 | Hewlett-Packard Development Company, L.P. | Modification of projected structured light based on identified points within captured image |
CN111275809B (zh) * | 2020-01-14 | 2023-09-12 | 新疆初点信息科技有限公司 | 一种瓷砖的空间展示方法及系统 |
WO2021170791A1 (en) | 2020-02-28 | 2021-09-02 | Trinamix Gmbh | Gesture recognition |
WO2021224972A1 (ja) * | 2020-05-07 | 2021-11-11 | 株式会社ソニー・インタラクティブエンタテインメント | 中継サーバおよび配信画像生成方法 |
EP3944107A1 (en) * | 2020-07-22 | 2022-01-26 | Nokia Technologies Oy | Apparatus, method and computer program for authenticating images |
CN114527483B (zh) * | 2022-01-06 | 2022-09-13 | 北京福通互联科技集团有限公司 | 一种主动式探测光电图像采集系统 |
WO2023139254A1 (en) * | 2022-01-24 | 2023-07-27 | Trinamix Gmbh | Enhanced material detection by stereo beam profile analysis |
CN117197143B (zh) * | 2023-11-08 | 2024-02-02 | 深圳市聪讯智能科技有限公司 | 基于图像特征的环境亮度智能检测方法 |
Family Cites Families (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3531014B2 (ja) | 1994-06-22 | 2004-05-24 | 株式会社トプコン | レーザ照準装置 |
JP2000267800A (ja) | 1999-01-12 | 2000-09-29 | Takenaka Komuten Co Ltd | 動作認識装置 |
US6765608B1 (en) * | 1999-03-09 | 2004-07-20 | Minolta Co., Ltd. | Image processing apparatus and system executing predetermined image processing on image data shot by camera, and image recording medium recorded with image processing program |
JP3714063B2 (ja) * | 1999-10-19 | 2005-11-09 | 富士ゼロックス株式会社 | 3次元形状計測装置 |
US7242388B2 (en) | 2001-01-08 | 2007-07-10 | Vkb Inc. | Data input device |
US7176440B2 (en) | 2001-01-19 | 2007-02-13 | Honeywell International Inc. | Method and apparatus for detecting objects using structured light patterns |
US6947575B2 (en) | 2001-05-24 | 2005-09-20 | Trw Inc. | Apparatus and method for determining vehicle occupant characteristic utilizing imaging with provided light |
US8300042B2 (en) | 2001-06-05 | 2012-10-30 | Microsoft Corporation | Interactive video display system using strobed light |
US7440590B1 (en) | 2002-05-21 | 2008-10-21 | University Of Kentucky Research Foundation | System and technique for retrieving depth information about a surface by projecting a composite image of modulated light patterns |
WO2003105289A2 (en) * | 2002-06-07 | 2003-12-18 | University Of North Carolina At Chapel Hill | Methods and systems for laser based real-time structured light depth extraction |
US7227893B1 (en) * | 2002-08-22 | 2007-06-05 | Xlabs Holdings, Llc | Application-specific object-based segmentation and recognition system |
US8224064B1 (en) * | 2003-05-21 | 2012-07-17 | University Of Kentucky Research Foundation, Inc. | System and method for 3D imaging using structured light illumination |
US20080312866A1 (en) * | 2003-09-11 | 2008-12-18 | Katsunori Shimomura | Three-dimensional measuring equipment |
US7834850B2 (en) | 2005-11-29 | 2010-11-16 | Navisense | Method and system for object control |
EP1980935A1 (en) | 2006-02-03 | 2008-10-15 | Matsushita Electric Industrial Co., Ltd. | Information processing device |
JP5201999B2 (ja) | 2006-02-03 | 2013-06-05 | パナソニック株式会社 | 入力装置、及びその方法 |
JP2007286737A (ja) * | 2006-04-13 | 2007-11-01 | Canon Inc | 真偽判定装置、画像形成装置、真偽判定方法、及び画像形成方法 |
EP2041640B1 (en) | 2006-07-16 | 2012-01-25 | I. Cherradi | Free fingers typing technology |
US8144121B2 (en) | 2006-10-11 | 2012-03-27 | Victor Company Of Japan, Limited | Method and apparatus for controlling electronic appliance |
WO2008087652A2 (en) * | 2007-01-21 | 2008-07-24 | Prime Sense Ltd. | Depth mapping using multi-beam illumination |
EP2120007A4 (en) * | 2007-02-13 | 2010-12-01 | Panasonic Corp | IMAGE PROCESSING SYSTEM, METHOD AND APPARATUS AND IMAGE FORMAT |
US20080256494A1 (en) | 2007-04-16 | 2008-10-16 | Greenfield Mfg Co Inc | Touchless hand gesture device controller |
US7907781B2 (en) | 2007-06-21 | 2011-03-15 | Mitsubishi Electric Research Laboraties, Inc. | System and method for determining geometries of scenes |
US8726194B2 (en) | 2007-07-27 | 2014-05-13 | Qualcomm Incorporated | Item selection using enhanced control |
US20090189858A1 (en) | 2008-01-30 | 2009-07-30 | Jeff Lev | Gesture Identification Using A Structured Light Pattern |
US8319832B2 (en) | 2008-01-31 | 2012-11-27 | Denso Corporation | Input apparatus and imaging apparatus |
JP4384240B2 (ja) * | 2008-05-28 | 2009-12-16 | 株式会社東芝 | 画像処理装置、画像処理方法、画像処理プログラム |
KR20100084718A (ko) * | 2009-01-19 | 2010-07-28 | 삼성전자주식회사 | 3차원 이미지를 생성하는 휴대 단말기 |
TWI409502B (zh) | 2009-01-23 | 2013-09-21 | Univ Nat Taipei Technology | 相位資訊擷取方法及其三維形貌量測系統 |
US20100268069A1 (en) * | 2009-04-16 | 2010-10-21 | Rongguang Liang | Dental surface imaging using polarized fringe projection |
US8654234B2 (en) | 2009-07-26 | 2014-02-18 | Massachusetts Institute Of Technology | Bi-directional screen |
US8264536B2 (en) * | 2009-08-25 | 2012-09-11 | Microsoft Corporation | Depth-sensitive imaging via polarization-state mapping |
EP2480955B1 (en) | 2009-09-22 | 2018-05-16 | Facebook Inc. | Remote control of computer devices |
US20110080471A1 (en) | 2009-10-06 | 2011-04-07 | Iowa State University Research Foundation, Inc. | Hybrid method for 3D shape measurement |
EP2517175A4 (en) * | 2009-12-25 | 2018-01-10 | Ricoh Company, Ltd. | Object identifying apparatus, moving body control apparatus, and information providing apparatus |
US8982182B2 (en) | 2010-03-01 | 2015-03-17 | Apple Inc. | Non-uniform spatial resource allocation for depth mapping |
EP2378394A3 (en) | 2010-04-15 | 2015-03-25 | Electronics and Telecommunications Research Institute | User interface device and method for recognizing user interaction using same |
US8964189B2 (en) * | 2010-08-19 | 2015-02-24 | Canon Kabushiki Kaisha | Three-dimensional measurement apparatus, method for three-dimensional measurement, and computer program |
JP5867807B2 (ja) * | 2010-12-08 | 2016-02-24 | 株式会社リコー | 車両識別装置 |
KR20120071551A (ko) | 2010-12-23 | 2012-07-03 | 한국전자통신연구원 | 구조 영상을 이용한 사용자 인터랙션 장치 및 방법 |
KR101423536B1 (ko) | 2011-06-14 | 2014-08-01 | 한국전자통신연구원 | 인쇄매체 기반 혼합현실 구현 장치 및 방법 |
WO2013088442A1 (en) | 2011-12-15 | 2013-06-20 | Pebbles Ltd. | Controllable optical sensing |
CN102564589B (zh) * | 2011-12-20 | 2013-07-24 | 华中科技大学 | 一种多波段动目标光谱特征探测识别方法和装置 |
JP5854815B2 (ja) * | 2011-12-20 | 2016-02-09 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、およびプログラム |
KR20130099317A (ko) | 2012-02-29 | 2013-09-06 | 한국전자통신연구원 | 인터랙티브 증강현실 구현 시스템 및 증강현실 구현 방법 |
JP2014137762A (ja) * | 2013-01-18 | 2014-07-28 | Sanyo Electric Co Ltd | 物体検出装置 |
EP3017423A1 (en) * | 2013-07-02 | 2016-05-11 | Roche Diagnostics GmbH | Estimation of food volume and carbs |
US10019843B2 (en) * | 2013-08-08 | 2018-07-10 | Facebook, Inc. | Controlling a near eye display |
EP2869263A1 (en) * | 2013-10-29 | 2015-05-06 | Thomson Licensing | Method and apparatus for generating depth map of a scene |
EP3072032B1 (en) * | 2013-11-21 | 2020-01-01 | Hewlett-Packard Development Company, L.P. | Projection screen for specularly reflecting infrared light |
JP6510213B2 (ja) * | 2014-02-18 | 2019-05-08 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 投影システム、半導体集積回路、および画像補正方法 |
US9749513B2 (en) | 2014-04-29 | 2017-08-29 | Facebook, Inc. | System and method for generating a light pattern for object illumination |
JP6417702B2 (ja) | 2014-05-01 | 2018-11-07 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
US9552074B2 (en) | 2014-05-21 | 2017-01-24 | Facebook, Inc. | Method and system for generating user feedback of a gesture capturing device |
-
2016
- 2016-02-24 KR KR1020177025939A patent/KR20170124559A/ko active Application Filing
- 2016-02-24 WO PCT/US2016/019377 patent/WO2016138145A1/en active Application Filing
- 2016-02-24 CN CN201680023997.XA patent/CN107548502B/zh active Active
- 2016-02-24 CA CA2977374A patent/CA2977374C/en not_active Expired - Fee Related
- 2016-02-24 MX MX2017011017A patent/MX364878B/es active IP Right Grant
- 2016-02-24 EP EP16756288.3A patent/EP3123288A4/en not_active Withdrawn
- 2016-02-24 AU AU2016222716A patent/AU2016222716B2/en not_active Ceased
- 2016-02-24 BR BR112017018121A patent/BR112017018121A2/pt not_active Application Discontinuation
- 2016-02-24 KR KR1020197019241A patent/KR102129376B1/ko active IP Right Grant
- 2016-02-24 JP JP2017545336A patent/JP6554638B2/ja active Active
- 2016-02-24 US US15/052,638 patent/US10049460B2/en active Active
-
2017
- 2017-08-16 IL IL254022A patent/IL254022B/en not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
KR20170124559A (ko) | 2017-11-10 |
IL254022B (en) | 2020-01-30 |
BR112017018121A2 (pt) | 2018-04-10 |
AU2016222716A1 (en) | 2017-09-07 |
MX364878B (es) | 2019-05-09 |
CA2977374C (en) | 2019-04-16 |
EP3123288A4 (en) | 2017-11-22 |
JP2018508074A (ja) | 2018-03-22 |
IL254022A0 (en) | 2017-10-31 |
WO2016138145A1 (en) | 2016-09-01 |
US10049460B2 (en) | 2018-08-14 |
CN107548502B (zh) | 2021-02-09 |
AU2016222716B2 (en) | 2018-11-29 |
MX2017011017A (es) | 2017-10-20 |
CA2977374A1 (en) | 2016-09-01 |
US20160253821A1 (en) | 2016-09-01 |
EP3123288A1 (en) | 2017-02-01 |
CN107548502A (zh) | 2018-01-05 |
KR102129376B1 (ko) | 2020-07-02 |
KR20190083002A (ko) | 2019-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6554638B2 (ja) | 物体によって反射された光の特徴に基づく体積内の物体の識別 | |
JP6377863B2 (ja) | 反射マップ表現による奥行きマップ表現の増補 | |
US9392262B2 (en) | System and method for 3D reconstruction using multiple multi-channel cameras | |
CN107532885B (zh) | 光图案中的强度变化用于体积中的物体的深度绘制 | |
US10599933B2 (en) | Biometric image capturing apparatus and biometric image capturing method | |
US7310431B2 (en) | Optical methods for remotely measuring objects | |
WO2011070927A1 (ja) | 点群データ処理装置、点群データ処理方法、および点群データ処理プログラム | |
EP3241151A1 (en) | An image face processing method and apparatus | |
KR20170092533A (ko) | 얼굴 포즈 교정 방법 및 장치 | |
JP2014067193A (ja) | 画像処理装置および画像処理方法 | |
Mecca et al. | Realistic photometric stereo using partial differential irradiance equation ratios | |
Peng et al. | Improved 3D lighting environment estimation for image forgery detection | |
CN106803284B (zh) | 构建脸部的三维图像的方法及装置 | |
US20140119619A1 (en) | System, method and computer software product for searching for a latent fingerprint while simultaneously constructing a three-dimensional topographic map of the searched space | |
Hu et al. | Face orientation estimation for driver monitoring with a single depth camera | |
US10692232B2 (en) | Shape reconstruction of specular and/or diffuse objects using multiple layers of movable sheets | |
Xie et al. | A novel photometric method for real-time 3D reconstruction of fingerprint | |
US20230013892A1 (en) | Detection device and detection method | |
Mbatha | Model-based 3D hand tracking using the lighting information as a visual cue. | |
Mei et al. | Compact low-power 3d imaging of simple planar scenes using parametric signal processing | |
Ahn et al. | A Three-Dimensional Fingertip Interface |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181005 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181005 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20181005 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190109 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190122 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190403 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190514 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20190604 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6554638 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D02 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |