JP2022105594A - 処理装置、検出装置、システム及びプログラム - Google Patents
処理装置、検出装置、システム及びプログラム Download PDFInfo
- Publication number
- JP2022105594A JP2022105594A JP2022079660A JP2022079660A JP2022105594A JP 2022105594 A JP2022105594 A JP 2022105594A JP 2022079660 A JP2022079660 A JP 2022079660A JP 2022079660 A JP2022079660 A JP 2022079660A JP 2022105594 A JP2022105594 A JP 2022105594A
- Authority
- JP
- Japan
- Prior art keywords
- shape
- information
- detection
- shape information
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 104
- 238000001514 detection method Methods 0.000 title claims description 278
- 238000000034 method Methods 0.000 description 37
- 238000009877 rendering Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 16
- 210000003128 head Anatomy 0.000 description 15
- 230000003287 optical effect Effects 0.000 description 10
- 238000005286 illumination Methods 0.000 description 4
- 230000001678 irradiating effect Effects 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000007123 defense Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- YYJNOYZRYGDPNH-MFKUBSTISA-N fenpyroximate Chemical compound C=1C=C(C(=O)OC(C)(C)C)C=CC=1CO/N=C/C=1C(C)=NN(C)C=1OC1=CC=CC=C1 YYJNOYZRYGDPNH-MFKUBSTISA-N 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000002366 time-of-flight method Methods 0.000 description 2
- 108010077333 CAP1-6D Proteins 0.000 description 1
- 101000897856 Homo sapiens Adenylyl cyclase-associated protein 2 Proteins 0.000 description 1
- 101000836079 Homo sapiens Serpin B8 Proteins 0.000 description 1
- 101000798702 Homo sapiens Transmembrane protease serine 4 Proteins 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 102100029500 Prostasin Human genes 0.000 description 1
- 102100032471 Transmembrane protease serine 4 Human genes 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000023077 detection of light stimulus Effects 0.000 description 1
- 239000011888 foil Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 108010031970 prostasin Proteins 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/245—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using a plurality of fixed, simultaneously operating transducers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/143—Sensing or illuminating at different wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
- Length Measuring Devices With Unspecified Measuring Means (AREA)
Abstract
Description
まず、第1実施形態について説明する。図1は、第1実施形態に係る検出装置1を示す図である。検出装置1(検出システム)は、第1検出部2と、処理装置3とを備える。第1検出部2は、光Laを対象物に照射して対象物OBから出射した光Lbを検出することによって、所定の点Vpから対象物OBの表面上の各点までのデプスを検出する。処理装置3(処理部)は、第1検出部2の検出結果に基づいて、対象物OBの形状を表す形状情報を生成する。
次に、第2実施形態について説明する。本実施形態において、上述の実施形態と同様の構成については、同じ符号を付してその説明を省略あるいは簡略化する。図6は、第2実施形態に係る検出装置1を示す図である。本実施形態に係る検出装置1は、例えば、対象物OBを検出して付加形状情報DFを取得する。付加形状情報DFを取得する際の検出の検出条件は、第1形状FM1を表す情報を取得する際の第1検出部2の検出条件と異なる。検出装置1は、第1検出部2による検出結果において確度が相対的に低い部分に関して確度が高くなるように、第1検出部2と異なる検出条件で検出を実行する。
次に、第3実施形態について説明する。本実施形態において、上述の実施形態と同様の構成については、同じ符号を付してその説明を省略あるいは簡略化する。図7は、第3実施形態に係る検出装置を示す図である。本実施形態に係る検出装置1は、例えば、対象物OBを検出して付加形状情報DFを取得する。本実施形態において、第2検出部21は、第2実施形態と異なる検出条件(検出方法)で対象物OBを検出する。本実施形態における第2検出部21は、対象物OBのうち装着物EQに接触して、装着物EQの形状を検出する。
次に、第4実施形態について説明する。本実施形態において、上述の実施形態と同様の構成については、同じ符号を付してその説明を省略あるいは簡略化する。図8は、実施形態に係る装着物を示す図である。装着物EQは、例えば、図1に示したように人体HM(この場合、頭部)に装着され、人体HMと装着物EQとを含む対象物OBを検出する際に利用される。図8の装着物EQは、例えば、フェンシング用マスクである。なお、装着物EQは、所定の点Vpへ向かう光を検出することによってデプスを検出する第1検出部2に対して配置される物体(例、図1の人体HM)に装着される。
次に、第5実施形態について説明する。本実施形態において、上述の実施形態と同様の構成については、同じ符号を付してその説明を省略あるいは簡略化する。図9は、第5実施形態に係る検出装置を示す図である。本実施形態において、処理装置3は、例えば、人体HM1の視点の情報を推定する。図9において、対象物OBは、人体HM1および人体HM2を含み、人体HM1の視点の情報は、例えば、人体HM1の視点から見た人体HM2の画像の推定に利用される。以下、本実施形態に係る処理装置3の処理について説明する。検出装置1の各部については、適宜、図9を参照する。
次に、第6実施形態について説明する。本実施形態において、上述の実施形態と同様の構成については、同じ符号を付してその説明を省略あるいは簡略化する。図12は、第6実施形態に係る検出装置を示す図である。図12において、対象物OBは、人体HM1および人体HM2を含む。以下の説明において、適宜、人体HM1を第1の選手HM1と称し、人体HM2を第2の選手HM2と称する。検出装置1は、例えば、第1の選手HM1の視点情報と、第2の選手HM2の視点情報との一方又は双方を生成する。上記の視点情報は、第1の選手HM1又は第2の選手HM2における、視点の位置、視線の向き、及び視野の少なくとも1つの情報を含む。検出装置1は、例えば、生成した視点情報(第1の選手HM1の視点情報、第2の選手HM2の視点情報)に基づいて、第1の選手HM1から第2の選手HM2を見た画像を推定した第1推定画像と、第2の選手人体HM2から第1の選手HM1を見た画像を推定した第2推定画像との一方または双方を生成する。
Claims (10)
- 物体までの第1距離情報に基づいて、前記物体の第1形状を示す第1形状情報を生成する第1形状情報生成部と、
前記第1形状に基づいて、前記第1形状における部分を特定する部分特定部と、
前記第1距離情報と異なる情報に基づいて生成された第2形状と、前記第1形状と、を含む形状を表す第2形状情報を生成する第2形状情報生成部と、を備え、
前記第2形状は、前記部分特定部が特定した前記部分に対して予め決められた位置に配置される、処理装置。 - 前記第2形状情報は、前記第1距離情報を取得した条件とは異なる条件にて取得された前記物体までの第2距離情報に基づく形状である、請求項1に記載の処理装置。
- 前記第2形状情報は、コンピュータ上で生成された形状である、請求項1に記載の処理装置。
- 前記第2形状情報は、前記物体の形状を接触して検出した結果に基づく形状である、請求項1に記載の処理装置。
- 前記第1形状情報に基づいて、前記第2形状情報における前記第1形状に対する前記第2形状の向きを決定する、請求項1に記載の処理装置。
- 前記物体までの距離情報を検出する検出部と、
請求項1に記載の処理装置と、を備える、検出装置。 - 前記物体の表面よりも、前記検出部により距離情報を検出し易い表面を有する装着物を備える、請求項6に記載の検出装置。
- 請求項1に記載の処理装置と、
前記第2形状情報に基づいて、少なくとも前記第1形状および前記第2形状の何れか一方の形状を示す画像を表示する表示部と、を備える、システム。 - 前記表示部は、前記第1形状を表示することなく、前記部分特定部が特定した前記部分に対して予め決められた位置に配置される前記第2形状のみを表示する、請求項8に記載のシステム。
- コンピュータに、
物体までの第1距離情報に基づいて、前記物体の第1形状を示す第1形状情報を生成させ、
前記第1形状に基づいて、前記第1形状における部分を特定させ、
前記第1距離情報と異なる情報に基づいて生成された第2形状と、前記第1形状と、を含む形状を表す第2形状情報を生成させ、
前記第2形状は、前記特定した前記部分に対して予め決められた位置に配置される、プログラム。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017231128 | 2017-11-30 | ||
JP2017231128 | 2017-11-30 | ||
JP2019557132A JP7078056B2 (ja) | 2017-11-30 | 2018-11-14 | 検出装置、処理装置、装着物、検出方法、及び検出プログラム |
PCT/JP2018/042102 WO2019107150A1 (ja) | 2017-11-30 | 2018-11-14 | 検出装置、処理装置、装着物、検出方法、及び検出プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019557132A Division JP7078056B2 (ja) | 2017-11-30 | 2018-11-14 | 検出装置、処理装置、装着物、検出方法、及び検出プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022105594A true JP2022105594A (ja) | 2022-07-14 |
JP7363962B2 JP7363962B2 (ja) | 2023-10-18 |
Family
ID=66665598
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019557132A Active JP7078056B2 (ja) | 2017-11-30 | 2018-11-14 | 検出装置、処理装置、装着物、検出方法、及び検出プログラム |
JP2022079660A Active JP7363962B2 (ja) | 2017-11-30 | 2022-05-13 | 処理装置、検出装置、システム及びプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019557132A Active JP7078056B2 (ja) | 2017-11-30 | 2018-11-14 | 検出装置、処理装置、装着物、検出方法、及び検出プログラム |
Country Status (3)
Country | Link |
---|---|
US (2) | US11593956B2 (ja) |
JP (2) | JP7078056B2 (ja) |
WO (1) | WO2019107150A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11944887B2 (en) * | 2018-03-08 | 2024-04-02 | Sony Corporation | Information processing device and information processing method |
JP7392302B2 (ja) * | 2019-06-25 | 2023-12-06 | 株式会社リコー | 画像処理装置、画像形成装置および画像処理方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000321050A (ja) * | 1999-05-14 | 2000-11-24 | Minolta Co Ltd | 3次元データ取得装置および3次元データ取得方法 |
JP2001293007A (ja) * | 2000-04-12 | 2001-10-23 | Olympus Optical Co Ltd | 手術ナビゲーション装置 |
JP2007207251A (ja) * | 2006-02-03 | 2007-08-16 | Metaio Gmbh | 現実の対象物の画像と重ね合わされるように設計されたデータモデルを決定するための方法及びシステム |
JP2010534316A (ja) * | 2007-07-10 | 2010-11-04 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 対象物の動きを捕捉するシステム及び方法 |
JP2013504938A (ja) * | 2009-09-11 | 2013-02-07 | ディズニー エンタープライズ,インコーポレイテッド | 3dビデオへの仮想インサート |
WO2017042102A1 (en) * | 2015-09-07 | 2017-03-16 | Jaguar Land Rover Limited | Torque transfer apparatus |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5424556A (en) * | 1993-11-30 | 1995-06-13 | Honeywell Inc. | Gradient reflector location sensing system |
JP4016526B2 (ja) * | 1998-09-08 | 2007-12-05 | 富士ゼロックス株式会社 | 3次元物体識別装置 |
JP4045394B2 (ja) * | 1999-07-02 | 2008-02-13 | 富士ゼロックス株式会社 | ホログラム記録方法、ホログラム再生方法およびフィルタリング方法 |
TW200528756A (en) * | 2004-01-27 | 2005-09-01 | Adv Lcd Tech Dev Ct Co Ltd | Light application apparatus, crystallization apparatus and optical modulation element assembly |
US8594370B2 (en) * | 2004-07-26 | 2013-11-26 | Automotive Systems Laboratory, Inc. | Vulnerable road user protection system |
JP2010134546A (ja) | 2008-12-02 | 2010-06-17 | Nippon Telegr & Teleph Corp <Ntt> | 視体積交差法による3次元形状復元装置、3次元形状復元方法および3次元形状復元プログラム |
JP5567908B2 (ja) * | 2009-06-24 | 2014-08-06 | キヤノン株式会社 | 3次元計測装置、その計測方法及びプログラム |
JP5170154B2 (ja) * | 2010-04-26 | 2013-03-27 | オムロン株式会社 | 形状計測装置およびキャリブレーション方法 |
US8994659B2 (en) * | 2011-09-20 | 2015-03-31 | Sony Computer Entertainment Inc. | Methods for shape detection correlated with position detection and systems for processing the same |
US9524028B2 (en) * | 2013-03-08 | 2016-12-20 | Fastvdo Llc | Visual language for human computer interfaces |
JP2014238731A (ja) * | 2013-06-07 | 2014-12-18 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理装置、画像処理システム、および画像処理方法 |
JP6704123B2 (ja) * | 2014-08-04 | 2020-06-03 | パナソニックIpマネジメント株式会社 | 荷物の積載指示方法および積載指示システム |
US9613406B2 (en) * | 2015-03-31 | 2017-04-04 | Nokia Technologies Oy | Method and apparatus for providing specular surface reconstruction |
KR101968439B1 (ko) * | 2015-04-22 | 2019-04-11 | 신닛테츠스미킨 카부시키카이샤 | 형상 측정 장치 및 형상 측정 방법 |
JP6662449B2 (ja) * | 2016-03-09 | 2020-03-11 | 株式会社ニコン | 検出装置、検出システム、検出方法、及び検出プログラム |
US10311624B2 (en) * | 2017-06-23 | 2019-06-04 | Disney Enterprises, Inc. | Single shot capture to animated vr avatar |
-
2018
- 2018-11-14 JP JP2019557132A patent/JP7078056B2/ja active Active
- 2018-11-14 WO PCT/JP2018/042102 patent/WO2019107150A1/ja active Application Filing
-
2020
- 2020-06-01 US US16/889,668 patent/US11593956B2/en active Active
-
2022
- 2022-05-13 JP JP2022079660A patent/JP7363962B2/ja active Active
-
2023
- 2023-02-02 US US18/104,991 patent/US11885611B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000321050A (ja) * | 1999-05-14 | 2000-11-24 | Minolta Co Ltd | 3次元データ取得装置および3次元データ取得方法 |
JP2001293007A (ja) * | 2000-04-12 | 2001-10-23 | Olympus Optical Co Ltd | 手術ナビゲーション装置 |
JP2007207251A (ja) * | 2006-02-03 | 2007-08-16 | Metaio Gmbh | 現実の対象物の画像と重ね合わされるように設計されたデータモデルを決定するための方法及びシステム |
JP2010534316A (ja) * | 2007-07-10 | 2010-11-04 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 対象物の動きを捕捉するシステム及び方法 |
JP2013504938A (ja) * | 2009-09-11 | 2013-02-07 | ディズニー エンタープライズ,インコーポレイテッド | 3dビデオへの仮想インサート |
WO2017042102A1 (en) * | 2015-09-07 | 2017-03-16 | Jaguar Land Rover Limited | Torque transfer apparatus |
Also Published As
Publication number | Publication date |
---|---|
JP7078056B2 (ja) | 2022-05-31 |
WO2019107150A1 (ja) | 2019-06-06 |
JPWO2019107150A1 (ja) | 2020-12-03 |
JP7363962B2 (ja) | 2023-10-18 |
US20200294256A1 (en) | 2020-09-17 |
US11885611B2 (en) | 2024-01-30 |
US20230194246A1 (en) | 2023-06-22 |
US11593956B2 (en) | 2023-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6690041B2 (ja) | 三次元物体上の注視点決定方法及び装置 | |
WO2013069360A1 (ja) | 情報処理装置、表示制御方法、およびプログラム | |
US9898651B2 (en) | Upper-body skeleton extraction from depth maps | |
JP5818857B2 (ja) | 情報処理装置およびその制御方法 | |
JP7363962B2 (ja) | 処理装置、検出装置、システム及びプログラム | |
CN104813340B (zh) | 从2d图像序列导出准确身体尺寸测量的系统和方法 | |
JP5773944B2 (ja) | 情報処理装置および情報処理方法 | |
US20110292036A1 (en) | Depth sensor with application interface | |
KR101556992B1 (ko) | 얼굴 성형 시뮬레이션을 이용한 3차원 스캔 시스템 | |
JP2014106543A (ja) | 画像処理装置、画像処理方法及びプログラム | |
KR101892735B1 (ko) | 직관적인 상호작용 장치 및 방법 | |
JP2013101529A (ja) | 情報処理装置、表示制御方法、およびプログラム | |
D’Apuzzo et al. | Recent advances in 3D full body scanning with applications to fashion and apparel | |
CN106471523B (zh) | 使用红外成像的颜色标识 | |
JP2009169622A (ja) | 画像処理装置、画像処理方法 | |
JP2016071645A (ja) | オブジェクト3次元モデル復元方法、装置およびプログラム | |
WO2020026677A1 (ja) | 検出装置、処理装置、検出方法、及び処理プログラム | |
JP7209495B2 (ja) | 画像処理装置、画像処理方法 | |
Wang et al. | Im2fit: Fast 3d model fitting and anthropometrics using single consumer depth camera and synthetic data | |
WO2018173205A1 (ja) | 情報処理システム、その制御方法、及びプログラム | |
KR101803064B1 (ko) | 3차원 모델 복원 장치 및 방법 | |
JP7447956B2 (ja) | 処理装置、姿勢解析システム、及びプログラム | |
JP7234595B2 (ja) | 検出装置、処理装置、検出方法、及び処理プログラム | |
JP2011149952A (ja) | モデル入力装置およびモデル生成システム | |
JP2022037506A (ja) | 検出装置、処理装置、検出方法、及び処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230524 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230918 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7363962 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |