JP6206560B2 - システム - Google Patents
システム Download PDFInfo
- Publication number
- JP6206560B2 JP6206560B2 JP2016144657A JP2016144657A JP6206560B2 JP 6206560 B2 JP6206560 B2 JP 6206560B2 JP 2016144657 A JP2016144657 A JP 2016144657A JP 2016144657 A JP2016144657 A JP 2016144657A JP 6206560 B2 JP6206560 B2 JP 6206560B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- unit
- polarized light
- imaging
- additional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Program-controlled manipulators
- B25J9/16—Program controls
- B25J9/1656—Program controls characterised by programming, planning systems for manipulators
- B25J9/1664—Program controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Program-controlled manipulators
- B25J9/16—Program controls
- B25J9/1694—Program controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
- B25J9/1697—Vision controlled systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2545—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with one projection direction and several detection directions, e.g. stereo
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
- G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
- G01S7/4815—Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B19/00—Condensers, e.g. light collectors or similar non-imaging optics
- G02B19/0004—Condensers, e.g. light collectors or similar non-imaging optics characterised by the optical means employed
- G02B19/0009—Condensers, e.g. light collectors or similar non-imaging optics characterised by the optical means employed having refractive surfaces only
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B19/00—Condensers, e.g. light collectors or similar non-imaging optics
- G02B19/0004—Condensers, e.g. light collectors or similar non-imaging optics characterised by the optical means employed
- G02B19/0028—Condensers, e.g. light collectors or similar non-imaging optics characterised by the optical means employed refractive and reflective surfaces, e.g. non-imaging catadioptric systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B19/00—Condensers, e.g. light collectors or similar non-imaging optics
- G02B19/0033—Condensers, e.g. light collectors or similar non-imaging optics characterised by the use
- G02B19/0085—Condensers, e.g. light collectors or similar non-imaging optics characterised by the use for use with both a detector and a source
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/02—Diffusing elements; Afocal elements
- G02B5/0273—Diffusing elements; Afocal elements characterized by the use
- G02B5/0278—Diffusing elements; Afocal elements characterized by the use used in transmission
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/48—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
- G03B17/54—Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/14—Details
- G03B21/20—Lamp housings
- G03B21/2006—Lamp housings characterised by the light source
- G03B21/2013—Plural light sources
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/14—Details
- G03B21/20—Lamp housings
- G03B21/2006—Lamp housings characterised by the light source
- G03B21/2033—LED or laser light sources
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/14—Details
- G03B21/20—Lamp housings
- G03B21/2073—Polarisers in the lamp house
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/14—Details
- G03B21/20—Lamp housings
- G03B21/208—Homogenising, shaping of the illumination light
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
- G03B7/02—Control effected by setting a graduated member on the camera in accordance with indication or reading afforded by a light meter, which may be either separate from or built into camera body
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/30—Polarising elements
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B35/00—Stereoscopic photography
- G03B35/08—Stereoscopic photography by simultaneous recording
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S901/00—Robots
- Y10S901/02—Arm motion controller
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S901/00—Robots
- Y10S901/46—Sensing device
- Y10S901/47—Optical
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Electromagnetism (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Computer Networks & Wireless Communication (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Projection Apparatus (AREA)
- Manipulator (AREA)
- Non-Portable Lighting Devices Or Systems Thereof (AREA)
Description
図1は、第1実施形態に係るハンドリングシステム10を示す図である。ハンドリングシステム10は、対象物11(ワーク)をハンドリングし、対象物11を次工程の装置へと搬送したり、対象物11を用いて製品を組み立てたりする。
つぎに、第2実施形態に係るパターン照射装置50について説明する。第2実施形態に係るパターン照射装置50は、第1実施形態に係るパターン照射装置20に代えて、ハンドリングシステム10に適用される。なお、第3実施形態以降も同様である。
つぎに、第3実施形態に係るパターン照射装置60について説明する。第3実施形態に係るパターン照射装置60は、第2実施形態に係るパターン照射装置50と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第4実施形態に係るパターン照射装置70について説明する。第4実施形態に係るパターン照射装置70は、第3実施形態に係るパターン照射装置60と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第5実施形態に係るパターン照射装置80について説明する。第5実施形態に係るパターン照射装置80は、第4実施形態に係るパターン照射装置70と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第6実施形態に係るパターン照射装置90について説明する。第6実施形態に係るパターン照射装置90は、第4実施形態に係るパターン照射装置70と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第7実施形態に係るパターン照射装置110について説明する。第7実施形態に係るパターン照射装置110は、第4実施形態に係るパターン照射装置70と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第8実施形態に係るパターン照射装置120について説明する。第8実施形態に係るパターン照射装置120は、第4実施形態に係るパターン照射装置70と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第9実施形態に係る三次元測定装置21について説明する。第9実施形態に係るハンドリングシステム10は、三次元測定装置21以外の装置については、第1から第8実施形態の何れの構成であってもよい。
つぎに、第10実施形態に係る三次元測定装置21について説明する。第10実施形態に係る三次元測定装置21は、第9実施形態に係る三次元測定装置21と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第11実施形態に係る三次元測定装置21について説明する。第11実施形態に係る三次元測定装置21は、第10実施形態に係る三次元測定装置21と略同一の機能および構成を有する。略同一の機能および構成を有する部材については、同一の符号を付けて、相違点を除き詳細な説明を省略する。
11 対象物
12 トレイ
13 ロボット
20,50,60,70,80,90 110,120 パターン照射装置
21 三次元測定装置
22 認識装置
23 ロボットコントローラ
24 選択透過部
30 投影面
31 発光部
32 集光部
33 透過拡散板
34 ライトトンネル
35 画像形成部
36 照射光学系
41 レーザダイオード
42 コリメータレンズ
43 反射側面
44 光路
45 入力口
46 出力口
51 反射拡散板
52 透過拡散面
53 反射面
61 テーパライトトンネル
62 反射側面
63 光路
64 入力口
65 出力口
71 プリズム
72 第1のミラー群
73 レンズ
74 ミラー
75 単板ミラー
81 第2のミラー群
82 シリンドリカルレンズ
83 ミラー
91 第3のミラー群
93 ミラー
111 偏光フィルタ
112 着脱機構
121 追加発光部
122 追加集光部
123 追加反射拡散板
124 追加テーパライトトンネル
125 追加画像形成部
126 合成光学系
130 制御部
151 第1撮像部
152 第2撮像部
153 距離画像生成部
161 第1偏光フィルタ
162 第2偏光フィルタ
165 第1調整機構
166 第2調整機構
171 駆動部
172 調整部
181 撮像制御部
182 記憶部
183 合成部
Claims (27)
- 照明装置と、前記照明装置により光が照射された対象物を撮像する撮像装置と、を備えるシステムであって、
前記照明装置は、
第1の偏光を出射する発光部と、
前記発光部から出射された光を集光する集光部と、
前記集光部により集光された光を透過し拡散させる透過拡散部と、
前記透過拡散部により拡散された光を入射して、入射前よりも照度分布を均一化して出射する均一化光学系と、
を有し、
前記透過拡散部の拡散角の特性は、半値全幅が5°以上10°以下であり、
前記均一化光学系は、入力口より出力口の方が大きく、内側に光を反射する反射側面が光軸に対して傾けて形成された光路を有し、当該光路中を前記透過拡散部により拡散された光が前記入力口から入射して前記出力口から出射するように構成されており、
当該システムは、前記対象物から前記撮像装置の撮像素子までの光路に、所定の遮断率で前記第1の偏光を遮断する選択透過部を備えるシステム。 - 前記選択透過部は、前記第1の偏光を遮断し、前記第1の偏光以外の偏光を透過する偏光フィルタである
請求項1に記載のシステム。 - 前記発光部は、互いに同一方向の、前記第1の偏光を出射する複数の光源を有する
請求項1または2に記載のシステム。 - 前記集光部は、前記発光部から出射された光を前記透過拡散部に集光するレンズである
請求項1から3の何れか1項に記載のシステム。 - 前記透過拡散部は、透過拡散板である
請求項1から4の何れか1項に記載のシステム。 - 前記発光部は、複数の前記光源のそれぞれに対応して設けられた複数のコリメータレンズをさらに有し、
それぞれの前記コリメータレンズは、対応する前記光源から出射された光を平行光束とする
請求項3に記載のシステム。 - 前記集光部は、
前記発光部から出射された複数の光束のそれぞれを反射するミラー群と、
前記ミラー群により反射された複数の光束を集光するレンズと、
を有し、
前記ミラー群は、前記発光部から同一方向に出射された複数本の光束により形成される光束幅を狭くするように、前記発光部から出射された複数の光のそれぞれを反射して前記集光部へと導く
請求項6に記載のシステム。 - 前記集光部は、
前記発光部から同一方向に出射された複数本の光束のそれぞれを反射して前記透過拡散部へと導くとともに、反射角によって前記複数本の光束を光軸に直交する第1方向に集光するミラー群と、
前記ミラー群と前記透過拡散部との間に設けられ、前記複数本の光束を前記第1方向と直交する第2方向に集光するレンズと、
を有する請求項6に記載のシステム。 - 前記集光部は、前記発光部から同一方向に出射された複数本の光束のそれぞれを反射して前記透過拡散部へと導くとともに、反射角によって前記透過拡散部に集光するミラー群である
請求項6に記載のシステム。 - 前記第1の偏光とは異なる第2の偏光を出射する追加発光部と、
前記追加発光部から出射された光を集光する追加集光部と、
前記追加集光部により集光された光を透過し拡散させる追加透過拡散部と、
前記追加透過拡散部により拡散された光を入射して、入射前よりも照度分布を均一化して出射する追加均一化光学系と、
前記均一化光学系から出射された前記第1の偏光と、前記追加均一化光学系から出射された前記第2の偏光とを合成する合成光学系と、
をさらに備える請求項1から9の何れか1項に記載のシステム。 - 前記撮像装置は、前記照明装置により光が照射された前記対象物までの距離を測定する三次元測定装置である
請求項1から10の何れか1項に記載のシステム。 - 対象物に所定のパターンの画像を照射するパターン照射装置と、前記パターン照射装置により光が照射された対象物を撮像する撮像装置と、を備えるシステムであって、
前記パターン照射装置は、
第1の偏光を出射する発光部と、
前記発光部から出射された光を集光する集光部と、
前記集光部により集光された光を透過し拡散させる透過拡散部と、
前記透過拡散部により拡散された光を入射して、入射前よりも照度分布を均一化して出射する均一化光学系と、
前記均一化光学系から出射された光を所定の画像パターンに応じて透過する画像形成部と、
前記画像形成部を透過した光を前記対象物に照射する照射光学系と、
を有し、
前記透過拡散部の拡散角の特性は、半値全幅が5°以上10°以下であり、
前記均一化光学系は、入力口より出力口の方が大きく、内側に光を反射する反射側面が光軸に対して傾けて形成された光路を有し、当該光路中を前記透過拡散部により拡散された光が前記入力口から入射して前記出力口から出射するように構成されており、
当該システムは、前記対象物から前記撮像装置の撮像素子までの光路に、前記第1の偏光を遮断し、前記第1の偏光以外の偏光を透過する選択透過部を備えるシステム。 - 前記画像形成部は、フォトマスクである
請求項12に記載のシステム。 - 前記撮像装置は、前記パターン照射装置により光が照射された前記対象物までの距離を測定する三次元測定装置である
請求項12または13に記載のシステム。 - 前記パターン照射装置は、
前記第1の偏光とは異なる第2の偏光を出射する追加発光部と、
前記追加発光部から出射された光を集光する追加集光部と、
前記追加集光部により集光された光を透過し拡散させる追加透過拡散部と、
前記追加透過拡散部により拡散された光を入射して、入射前よりも照度分布を均一化して出射する追加均一化光学系と、
前記均一化光学系から出射された前記第1の偏光と、前記追加均一化光学系から出射された前記第2の偏光とを合成する合成光学系と、
をさらに備え、
前記照射光学系は、前記合成光学系から出射された光を前記対象物に照射する
請求項14に記載のシステム。 - 前記パターン照射装置は、
前記発光部から前記第1の偏光を発光させるか、または、前記追加発光部から前記第2の偏光を発光させるかを切り替える制御部
をさらに備え、
前記選択透過部は、前記第1の偏光を遮断し、前記第1の偏光以外の偏光を透過する第1の偏光フィルタと、前記第2の偏光を遮断し、前記第2の偏光以外の偏光を透過する第2の偏光フィルタとを有し、前記パターン照射装置から出射される偏光に応じて前記第1の偏光フィルタまたは前記第2の偏光フィルタを用いるかを切り替え、
前記撮像装置は、前記対象物から反射して前記選択透過部を透過した光を撮像して前記対象物までの距離を測定する
請求項15に記載のシステム。 - 前記制御部は、前記第1の偏光を発光させるか、前記追加発光部から前記第2の偏光を発光させるか、または、前記発光部および前記追加発光部の両者から光を発光させるかを切り替え、
前記選択透過部は、前記パターン照射装置が前記発光部および前記追加発光部の両者から光を発光させた場合、全ての偏光を透過する
請求項16に記載のシステム。 - 前記対象物をハンドリングするロボットと、
前記撮像装置により測定された前記対象物までの距離に基づき、前記対象物の位置および姿勢を認識する認識装置と、
前記認識装置により認識された前記対象物の位置および姿勢に基づき前記ロボットの動作を制御して、前記ロボットに前記対象物をハンドリングさせるロボットコントローラと、
をさらに備える請求項14から17の何れか1項に記載のシステム。 - 前記撮像装置は、
前記対象物を撮像する第1撮像部と、
前記対象物を前記第1撮像部とは異なる位置から撮像する第2撮像部と、
を有し、
前記選択透過部は、
前記対象物から前記第1撮像部の撮像素子までの間に設けられ、前記第1の偏光を所定の遮断率で遮断する第1偏光フィルタと、
前記対象物から前記第2撮像部の撮像素子までの間に設けられ、前記第1の偏光を所定の遮断率で遮断する第2偏光フィルタと、
を有する
請求項14から18の何れか1項に記載のシステム。 - 前記第1偏光フィルタおよび前記第2偏光フィルタのそれぞれは、遮断率が調整可能である
請求項19に記載のシステム。 - 前記選択透過部は、
前記第1偏光フィルタにおける前記第1の偏光の遮断率および前記第2偏光フィルタにおける前記第1の偏光の遮断率のそれぞれを、与えられた設定値に応じて変更する駆動部をさらに有する
請求項20に記載のシステム。 - 前記第1撮像部が前記対象物を撮像した第1画像の輝度と、前記第2撮像部が前記対象物を撮像した第2画像の輝度との差分が小さくなるような前記設定値を前記駆動部に与えて、前記第1偏光フィルタにおける前記第1の偏光の遮断率および前記第2偏光フィルタにおける前記第1の偏光の遮断率を調整する調整部をさらに備える
請求項21に記載のシステム。 - 前記第1偏光フィルタにおける前記第1の偏光の遮断率と、前記第2偏光フィルタにおける前記第1の偏光の遮断率との組み合わせを変えて、前記第1撮像部および前記第2撮像部に複数回の撮像処理をさせる撮像制御部をさらに備え、
前記撮像装置は、
複数回の前記撮像処理のそれぞれにおいて、前記第1撮像部が前記対象物を撮像した第1画像と前記第2撮像部が前記対象物を撮像した第2画像とに基づき、前記対象物までの距離を表す距離画像を生成する距離画像生成部と、
生成した複数の前記距離画像を合成する合成部と、
を有する
請求項21に記載のシステム。 - 前記第1偏光フィルタにおける前記第1の偏光の遮断率と、前記第2偏光フィルタにおける前記第1の偏光の遮断率との組み合わせを変えて、前記第1撮像部および前記第2撮像部に複数回の撮像処理をさせる撮像制御部をさらに備え、
前記撮像装置は、
複数回の前記撮像処理のそれぞれについての前記第1撮像部が前記対象物を撮像した第1画像を合成して合成第1画像を生成し、複数回の前記撮像処理のそれぞれについての前記第2撮像部が前記対象物を撮像した第2画像を合成して合成第2画像を生成する合成部と、
前記合成第1画像と前記合成第2画像とに基づき、前記対象物までの距離を表す距離画像を生成する距離画像生成部と、
を有する
請求項21に記載のシステム。 - 前記撮像制御部は、前記第1の偏光の方向、前記第1偏光フィルタにおける前記第1の偏光の遮断率と、前記第2偏光フィルタにおける前記第1の偏光の遮断率との組み合わせを変えて、前記第1撮像部および前記第2撮像部に複数回の前記撮像処理をさせる
請求項23に記載のシステム。 - 対象物に所定のパターンの画像を照射するパターン照射装置と、前記パターン照射装置により光が照射された前記対象物を撮像して前記対象物までの距離を測定する三次元測定装置と、を備えるシステムであって、
前記パターン照射装置は、
第1の偏光を出射する発光部と、
前記発光部から出射された光を集光する集光部と、
前記集光部により集光された光を透過し拡散させる透過拡散部と、
前記透過拡散部により拡散された光を入射して、入射前よりも照度分布を均一化して出射する均一化光学系と、
前記均一化光学系から出射された光を所定の画像パターンに応じて透過する画像形成部と、
前記第1の偏光とは異なる第2の偏光を出射する追加発光部と、
前記追加発光部から出射された光を集光する追加集光部と、
前記追加集光部により集光された光を透過し拡散させる追加透過拡散部と、
前記追加透過拡散部により拡散された光を入射して、入射前よりも照度分布を均一化して出射する追加均一化光学系と、
前記均一化光学系から出射された前記第1の偏光と、前記追加均一化光学系から出射された前記第2の偏光とを合成する合成光学系と、
前記合成光学系から出射された光を前記対象物に照射する照射光学系と、
前記発光部から前記第1の偏光を発光させるか、または、前記追加発光部から前記第2の偏光を発光させるかを切り替える制御部と、
を有し、
当該システムは、前記対象物から前記三次元測定装置の撮像素子までの光路に、選択透過部を備え、
前記選択透過部は、前記第1の偏光を遮断し、前記第1の偏光以外の偏光を透過する第1の偏光フィルタと、前記第2の偏光を遮断し、前記第2の偏光以外の偏光を透過する第2の偏光フィルタとを有し、前記パターン照射装置から出射される偏光に応じて前記第1の偏光フィルタまたは前記第2の偏光フィルタを用いるかを切り替え、
前記三次元測定装置は、前記対象物から反射して前記選択透過部を透過した光を撮像して前記対象物までの距離を測定する
システム。 - 前記制御部は、前記第1の偏光を発光させるか、前記追加発光部から前記第2の偏光を発光させるか、または、前記発光部および前記追加発光部の両者から光を発光させるかを切り替え、
前記選択透過部は、前記パターン照射装置が前記発光部および前記追加発光部の両者から光を発光させた場合、全ての偏光を透過する
請求項26に記載のシステム。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP16850658.2A EP3356092A4 (en) | 2015-09-28 | 2016-09-26 | System |
| US15/763,251 US10737391B2 (en) | 2015-09-28 | 2016-09-26 | System for capturing an image |
| CA3000114A CA3000114A1 (en) | 2015-09-28 | 2016-09-26 | System |
| PCT/JP2016/004346 WO2017056479A1 (en) | 2015-09-28 | 2016-09-26 | System |
| CN201680055750.6A CN108136600B (zh) | 2015-09-28 | 2016-09-26 | 系统 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015190378 | 2015-09-28 | ||
| JP2015190378 | 2015-09-28 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017067758A JP2017067758A (ja) | 2017-04-06 |
| JP6206560B2 true JP6206560B2 (ja) | 2017-10-04 |
Family
ID=58494552
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016144657A Expired - Fee Related JP6206560B2 (ja) | 2015-09-28 | 2016-07-22 | システム |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US10737391B2 (ja) |
| EP (1) | EP3356092A4 (ja) |
| JP (1) | JP6206560B2 (ja) |
| CN (1) | CN108136600B (ja) |
| CA (1) | CA3000114A1 (ja) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10309588B2 (en) * | 2016-08-11 | 2019-06-04 | Abl Ip Holding Llc | Luminaires with transition zones for glare control |
| JP2018059757A (ja) * | 2016-10-04 | 2018-04-12 | オムロンオートモーティブエレクトロニクス株式会社 | 投光光学系、物体検出装置 |
| JP7003462B2 (ja) * | 2017-07-11 | 2022-01-20 | セイコーエプソン株式会社 | ロボットの制御装置、ロボットシステム、並びに、カメラの校正方法 |
| CN109458954B (zh) * | 2018-12-12 | 2020-08-11 | 电子科技大学 | 一种余弦条纹场投射模块 |
| CN111230857A (zh) * | 2019-03-05 | 2020-06-05 | 南昌工程学院 | 基于机器视觉和深度学习的目标定位与抓取 |
| JP7268421B2 (ja) | 2019-03-18 | 2023-05-08 | 株式会社リコー | 光源光学系、光源装置及び画像投射装置 |
| CN111722465A (zh) | 2019-03-20 | 2020-09-29 | 株式会社理光 | 光源装置、图像投影装置和光源光学系统 |
| US20210011162A1 (en) * | 2019-07-11 | 2021-01-14 | Argo AI, LLC | Polarization Filtering in LiDAR System |
| US12066752B2 (en) | 2019-11-01 | 2024-08-20 | Ricoh Company, Ltd. | Light-source device, image projection apparatus, and light-source optical system |
| JP2021117276A (ja) * | 2020-01-23 | 2021-08-10 | セイコーエプソン株式会社 | 投写光学系、およびプロジェクター |
| US12492892B2 (en) * | 2021-02-24 | 2025-12-09 | Denso Wave Incorporated | Three-dimensional measurement system |
| US11953816B2 (en) | 2021-08-06 | 2024-04-09 | Ricoh Company, Ltd. | Wavelength conversion plate, light source device, and image projection apparatus |
Family Cites Families (71)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5625738A (en) * | 1994-06-28 | 1997-04-29 | Corning Incorporated | Apparatus for uniformly illuminating a light valve |
| JP2002005843A (ja) * | 2000-06-19 | 2002-01-09 | Nsd Corp | 刻印文字の検査方法及び検査装置 |
| JP3818028B2 (ja) * | 2000-07-10 | 2006-09-06 | 富士ゼロックス株式会社 | 3次元画像撮像装置および3次元画像撮像方法 |
| US6866404B2 (en) | 2001-04-23 | 2005-03-15 | Ricoh Company, Ltd. | Illumination apparatus and a liquid crystal projector using the illumination apparatus |
| JP4077216B2 (ja) * | 2001-12-28 | 2008-04-16 | 株式会社リコー | 色分離素子及び作像光学エンジン及び投影装置 |
| JP2003229700A (ja) * | 2002-01-31 | 2003-08-15 | Fuji Mach Mfg Co Ltd | 吸着管部の吸着端面とそれに保持された電子回路部品との撮像方法 |
| JP2005062312A (ja) * | 2003-08-08 | 2005-03-10 | Olympus Corp | 投影スクリーン及び投影型表示装置 |
| JP2005214787A (ja) * | 2004-01-29 | 2005-08-11 | Olympus Corp | 3次元形状測定装置 |
| JP4731938B2 (ja) | 2004-05-13 | 2011-07-27 | 株式会社リコー | 画像表示装置・投射光学系 |
| KR100848617B1 (ko) | 2004-11-02 | 2008-07-28 | 가부시키가이샤 리코 | 화상 표시 장치 |
| KR100654766B1 (ko) * | 2004-11-20 | 2006-12-08 | 삼성전자주식회사 | 영상투사장치의 조명광학계 |
| JP4622925B2 (ja) | 2006-04-07 | 2011-02-02 | セイコーエプソン株式会社 | 照明装置及びプロジェクタ |
| US7997737B2 (en) * | 2006-04-12 | 2011-08-16 | Panasonic Corporation | Projection display device, and speckle reduction element |
| JP5006069B2 (ja) | 2006-05-01 | 2012-08-22 | 株式会社リコー | 投射光学系及び画像表示装置 |
| JP2008096983A (ja) | 2006-09-15 | 2008-04-24 | Ricoh Co Ltd | 投射光学系及び画像投射装置 |
| JP5374848B2 (ja) | 2006-09-15 | 2013-12-25 | 株式会社リコー | 投射光学系 |
| JP5030732B2 (ja) | 2006-12-04 | 2012-09-19 | 株式会社リコー | 投射光学系及び画像投射装置 |
| JP5332138B2 (ja) | 2007-06-01 | 2013-11-06 | 株式会社リコー | 表示システム |
| US8128238B2 (en) | 2007-09-07 | 2012-03-06 | Ricoh Company, Ltd. | Projection optical system and image displaying apparatus |
| DE102007055771A1 (de) | 2007-12-12 | 2009-06-18 | Hilti Aktiengesellschaft | Laserdistanzmesser |
| JP5422897B2 (ja) | 2008-02-27 | 2014-02-19 | 株式会社リコー | 投射光学系及び画像表示装置 |
| JP5359607B2 (ja) | 2008-09-02 | 2013-12-04 | 株式会社リコー | 変倍光学系、プロジェクタ |
| JP2010060912A (ja) | 2008-09-04 | 2010-03-18 | Mitsubishi Electric Corp | 画像表示装置 |
| US20100268069A1 (en) | 2009-04-16 | 2010-10-21 | Rongguang Liang | Dental surface imaging using polarized fringe projection |
| JP5429543B2 (ja) * | 2009-09-15 | 2014-02-26 | カシオ計算機株式会社 | 光源ユニット及びプロジェクタ |
| JP2011130138A (ja) * | 2009-12-17 | 2011-06-30 | Sony Corp | 撮像装置および、その光学系 |
| JP5567844B2 (ja) * | 2010-01-29 | 2014-08-06 | 日立コンシューマエレクトロニクス株式会社 | 投写型映像表示装置 |
| JP2012027113A (ja) | 2010-07-21 | 2012-02-09 | Ricoh Co Ltd | 投射光学系及び画像投射装置 |
| JP5724245B2 (ja) | 2010-08-19 | 2015-05-27 | 株式会社リコー | 光源装置、照明装置及び投影表示装置 |
| US8783873B2 (en) * | 2010-09-30 | 2014-07-22 | Palomar Display Products, Inc. | Image system |
| JP5561087B2 (ja) | 2010-10-14 | 2014-07-30 | 株式会社リコー | 画像投射装置 |
| JP5895226B2 (ja) | 2010-11-30 | 2016-03-30 | パナソニックIpマネジメント株式会社 | 光源装置および投写型表示装置 |
| JP2012177671A (ja) * | 2011-02-27 | 2012-09-13 | Plex International Design Co Ltd | 微細非周期パターン投影装置および方法とそれを用いた三次元計測装置 |
| JP5907404B2 (ja) | 2011-03-15 | 2016-04-26 | 株式会社リコー | 画像投影装置 |
| JP5987368B2 (ja) | 2011-07-05 | 2016-09-07 | 株式会社リコー | 照明装置および投射装置 |
| JP5987382B2 (ja) | 2011-07-22 | 2016-09-07 | 株式会社リコー | 照明装置、ならびに、投射装置および投射装置の制御方法 |
| JP5874263B2 (ja) | 2011-09-15 | 2016-03-02 | 株式会社リコー | 投射光学系及び画像投射装置 |
| JP2013101045A (ja) * | 2011-11-08 | 2013-05-23 | Fanuc Ltd | 物品の3次元位置姿勢の認識装置及び認識方法 |
| JP5757428B2 (ja) * | 2012-04-16 | 2015-07-29 | 大日本印刷株式会社 | 投射装置 |
| EP2664958B1 (en) | 2012-05-18 | 2015-10-28 | Ricoh Company, Ltd. | Light source apparatus and image projection apparatus |
| JP2013257162A (ja) * | 2012-06-11 | 2013-12-26 | Ricoh Co Ltd | 測距装置 |
| TWI460394B (zh) | 2012-07-20 | 2014-11-11 | Test Research Inc | 三維影像量測裝置 |
| JP6311219B2 (ja) | 2012-07-26 | 2018-04-18 | 株式会社リコー | 照明光形成装置、照明光源装置および画像表示装置 |
| JP6007861B2 (ja) | 2012-08-06 | 2016-10-12 | 株式会社リコー | 光偏向器及び画像投射装置 |
| JP6160274B2 (ja) | 2012-08-16 | 2017-07-12 | 株式会社リコー | 画像投射装置 |
| JP6171345B2 (ja) | 2012-09-10 | 2017-08-02 | 株式会社リコー | 照明光源装置及びこの照明光源装置を備えた投射装置及び投射装置の制御方法 |
| JP6056293B2 (ja) | 2012-09-12 | 2017-01-11 | 株式会社リコー | 照明光源装置及びこの照明光源装置を備えた投射装置及び投射装置の制御方法 |
| JP6102132B2 (ja) | 2012-09-12 | 2017-03-29 | 株式会社リコー | 照明光源装置及びこの照明光源装置を備えた投射装置及び投射装置の制御方法 |
| JP6268745B2 (ja) | 2012-09-18 | 2018-01-31 | 株式会社リコー | 照明装置、投射装置および照明方法 |
| JP5637274B2 (ja) | 2012-12-26 | 2014-12-10 | 株式会社リコー | 光源装置及びこれを用いたプロジェクタ |
| JP6179792B2 (ja) | 2013-02-26 | 2017-08-16 | 株式会社リコー | 光源装置及びこれを備えた画像投射装置 |
| JP6168387B2 (ja) | 2013-02-26 | 2017-07-26 | 株式会社リコー | 光源装置及びこれを備えた画像投射装置 |
| JP6186752B2 (ja) * | 2013-03-01 | 2017-08-30 | カシオ計算機株式会社 | 光源装置及び投影装置 |
| JP2014199412A (ja) | 2013-03-14 | 2014-10-23 | 株式会社リコー | 照明光源装置、およびそれを備える投射装置 |
| JP6236811B2 (ja) | 2013-03-14 | 2017-11-29 | 株式会社リコー | 光源ユニット並びに照明装置及び画像投射装置 |
| JP6349784B2 (ja) | 2013-03-14 | 2018-07-04 | 株式会社リコー | 光源ユニット並びに照明装置及び画像投射装置 |
| CN105158913B (zh) * | 2013-05-13 | 2019-06-21 | 深圳光峰科技股份有限公司 | 激光光源、波长转换光源、合光光源及投影系统 |
| JP6205835B2 (ja) | 2013-05-14 | 2017-10-04 | 株式会社リコー | 照明装置、この照明装置を備えた投射装置、および、照明方法 |
| CN105264437A (zh) * | 2013-06-04 | 2016-01-20 | Nec显示器解决方案株式会社 | 照明光学系统和投影仪 |
| JP6268798B2 (ja) * | 2013-08-05 | 2018-01-31 | セイコーエプソン株式会社 | 照明装置及びプロジェクター |
| JP6233687B2 (ja) | 2013-08-12 | 2017-11-22 | 株式会社リコー | 光源装置及びこれを備えた画像投射装置 |
| JP6271953B2 (ja) * | 2013-11-05 | 2018-01-31 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| JP6273127B2 (ja) | 2013-11-14 | 2018-01-31 | キヤノン株式会社 | 計測装置、および物品の製造方法 |
| JP2015145975A (ja) * | 2014-02-03 | 2015-08-13 | キヤノン株式会社 | 光源装置およびこれを用いた投射型表示装置 |
| KR101524605B1 (ko) * | 2014-02-26 | 2015-06-03 | 주식회사 덴티움 | 구강내 치아에 대한 3차원 측정 장치 |
| JP6459185B2 (ja) * | 2014-02-27 | 2019-01-30 | 株式会社リコー | 光源装置、および、投射装置 |
| JP5897624B2 (ja) * | 2014-03-12 | 2016-03-30 | ファナック株式会社 | ワークの取出工程をシミュレーションするロボットシミュレーション装置 |
| JP6547270B2 (ja) | 2014-10-10 | 2019-07-24 | 株式会社リコー | 光源装置及びこの光源装置を有する画像投影装置 |
| US9863759B2 (en) | 2014-10-17 | 2018-01-09 | Ricoh Company, Ltd. | Illumination apparatus, pattern irradiation device, and system |
| JP2016081898A (ja) | 2014-10-17 | 2016-05-16 | 株式会社リコー | 照明装置、パターン照射装置およびシステム |
| US20160195718A1 (en) * | 2015-01-06 | 2016-07-07 | Avegant Corporation | System, method, and apparatus for displaying an image using multiple diffusers |
-
2016
- 2016-07-22 JP JP2016144657A patent/JP6206560B2/ja not_active Expired - Fee Related
- 2016-09-26 EP EP16850658.2A patent/EP3356092A4/en not_active Withdrawn
- 2016-09-26 CN CN201680055750.6A patent/CN108136600B/zh active Active
- 2016-09-26 CA CA3000114A patent/CA3000114A1/en not_active Abandoned
- 2016-09-26 US US15/763,251 patent/US10737391B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN108136600A (zh) | 2018-06-08 |
| CA3000114A1 (en) | 2017-04-06 |
| CN108136600B (zh) | 2021-03-23 |
| EP3356092A4 (en) | 2018-09-19 |
| JP2017067758A (ja) | 2017-04-06 |
| US10737391B2 (en) | 2020-08-11 |
| EP3356092A1 (en) | 2018-08-08 |
| US20180272538A1 (en) | 2018-09-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6206560B2 (ja) | システム | |
| EP3009886B1 (en) | Handling system | |
| EP1398659B1 (en) | Illumination apparatus and image projection apparatus using the illumination apparatus | |
| CN103069436B (zh) | 照明系统 | |
| JP6024841B1 (ja) | 照明装置、パターン照射装置およびシステム | |
| US9900565B2 (en) | Projector capable of adjusting a light exit angle | |
| JP5944156B2 (ja) | 照明光学系と結像光学系とが統合された光学系、及びそれを含む3次元映像獲得装置 | |
| JP2016049261A (ja) | 照明撮像装置および視線検出装置 | |
| JP6859962B2 (ja) | 画像検査装置および照明装置 | |
| JP2016081898A (ja) | 照明装置、パターン照射装置およびシステム | |
| JP2017037189A (ja) | パターン照射装置、システム、操作方法、及びプログラム | |
| KR101447857B1 (ko) | 렌즈 모듈 이물 검사 시스템 | |
| JP7747103B2 (ja) | 光制御装置 | |
| WO2017056479A1 (en) | System | |
| JP7692265B2 (ja) | 同軸照明装置 | |
| US20260016369A1 (en) | Optical apparatus, optical inspection apparatus, optical inspection system, and optical inspection method | |
| JP2014102382A (ja) | 照明光学系および画像投射装置 | |
| JP2026000694A (ja) | 光学装置、光学検査システム、および、光学検査方法 | |
| JP4232648B2 (ja) | 反射光測定装置 | |
| JP2025021370A (ja) | 光学装置、光学検査装置、光学検査方法、及び、光学検査プログラム | |
| CN118688099A (zh) | 光学检查方法、存储有光学检查程序的存储介质以及光学检查装置 | |
| JP2025043962A (ja) | 光学装置、光学検査システム、および、物体の撮像方法 | |
| JPS59208515A (ja) | 焦点検出装置 | |
| JP2020009678A (ja) | 照明方法、撮像方法、照明装置及び撮像装置 | |
| CS272139B1 (cs) | Daktyloskopický komparátor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170314 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170509 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170808 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170821 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6206560 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |