JP2019101603A - 製造補助装置 - Google Patents
製造補助装置 Download PDFInfo
- Publication number
- JP2019101603A JP2019101603A JP2017229970A JP2017229970A JP2019101603A JP 2019101603 A JP2019101603 A JP 2019101603A JP 2017229970 A JP2017229970 A JP 2017229970A JP 2017229970 A JP2017229970 A JP 2017229970A JP 2019101603 A JP2019101603 A JP 2019101603A
- Authority
- JP
- Japan
- Prior art keywords
- work
- projection
- display
- work process
- projector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004519 manufacturing process Methods 0.000 title claims abstract description 27
- 238000000034 method Methods 0.000 claims abstract description 134
- 230000008569 process Effects 0.000 claims abstract description 132
- 238000003384 imaging method Methods 0.000 claims abstract description 27
- 238000003860 storage Methods 0.000 claims description 11
- 238000012986 modification Methods 0.000 description 19
- 230000004048 modification Effects 0.000 description 19
- 238000003780 insertion Methods 0.000 description 7
- 230000037431 insertion Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000007704 transition Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 238000005553 drilling Methods 0.000 description 4
- 238000007689 inspection Methods 0.000 description 4
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 238000004080 punching Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/048—Monitoring; Safety
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
- G05B19/41805—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by assembly
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/31—From computer integrated manufacturing till monitoring
- G05B2219/31027—Computer assisted manual assembly CAA, display operation, tool, result
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/31—From computer integrated manufacturing till monitoring
- G05B2219/31048—Project on workpiece, image of finished workpiece, info or a spot
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30164—Workpiece; Machine component
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- Manufacturing & Machinery (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Factory Administration (AREA)
- Automatic Assembly (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Controls And Circuits For Display Device (AREA)
- Projection Apparatus (AREA)
Abstract
Description
撮像装置110は、ワークWを撮像して撮像画像データを生成する。生成された撮像画像データは、投影制御装置130に送信される。
完了判定部164は、撮像装置110から送信された撮像画像データに基づいて、次の作業工程に遷移するか否かを判定している。次の作業工程に遷移するのは、上記のように、作業工程における作業が完了した場合、および、次工程切換ボタンが操作された場合である。次の作業工程に遷移する場合、S204に処理を移し、次の作業工程に遷移しない場合、S206に処理を移す。
投影データ生成部162は、次の作業工程の投影情報を読み出し、投影する投影画像の画像データを生成する。表示制御部166は、プロジェクタ120を制御し、投影データ生成部162によって生成された画像データをワークWに投影させる。
完了判定部164は、撮像装置110から送信された撮像画像データに基づいて、前の作業工程に遷移するか否かを判定している。前の作業工程に遷移するのは、上記のように、前工程切換ボタンが操作された場合である。前の作業工程に遷移する場合、S208に処理を移し、前の作業工程に遷移しない場合、当該表示内容の切り換え処理を終了する。
投影データ生成部162は、前の作業工程の投影情報を読み出し、投影する投影画像の画像データを生成する。表示制御部166は、プロジェクタ120を制御し、投影データ生成部162によって生成された画像データをワークWに投影させる。
110 撮像装置
120 プロジェクタ
150 記憶部
164 完了判定部
166 表示制御部
Aa、Ab、Ac 作業領域
Pa、Pb、Pc、Pd、Pe、Pf、Pg、Ph 投影画像
W ワーク
Claims (10)
- ワークの作業工程に関する作業情報を表示する表示装置と、
前記ワークを撮像する撮像装置と、
前記撮像装置から出力された画像データに基づいて、前記作業工程の完了を判定する完了判定部と、
前記作業工程が完了したと判定されると、次の作業工程に関する作業情報を前記表示装置に表示させる表示制御部と、
を備える製造補助装置。 - 前記表示装置は、前記ワークに前記作業情報を投影させるプロジェクタである請求項1に記載の製造補助装置。
- 前記表示装置は、前記作業情報として、前記作業工程が完了したときの前記ワークに関する投影画像を前記ワークに投影する請求項2に記載の製造補助装置。
- 前記表示装置は、前記作業工程における作業内容の種別に応じて、前記投影画像の表示態様を異ならせる請求項3に記載の製造補助装置。
- 前記表示装置は、前記作業工程における作業内容の種別ごとに、順次、前記投影画像の投影を開始させる請求項3または4に記載の製造補助装置。
- 前記表示装置は、表示内容を前記次の作業工程に関する作業情報に切り換える次工程切換ボタンを投影させる請求項2から5のいずれか1項に記載の製造補助装置。
- 前記表示装置は、表示内容を前の前記作業工程に関する作業情報に切り換える前工程切換ボタンを投影させる請求項2から6のいずれか1項に記載の製造補助装置。
- 前記完了判定部は、前記ワークにおける作業領域の前記撮像画像データに基づいて、前記作業工程におけるエラーを検出する請求項1から7のいずれか1項に記載の製造補助装置。
- 前記完了判定部は、前記ワークにおける作業領域外の前記撮像画像データに基づいて、前記作業工程におけるエラーを検出する請求項1から8のいずれか1項に記載の製造補助装置。
- 前記作業工程が完了したと判定されたときの時刻情報を記憶する記憶部を備える請求項1から9のいずれか1項に記載の製造補助装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017229970A JP6709206B2 (ja) | 2017-11-30 | 2017-11-30 | 製造補助装置 |
CN201811208571.9A CN109862333B (zh) | 2017-11-30 | 2018-10-17 | 制造辅助装置 |
US16/174,562 US10732915B2 (en) | 2017-11-30 | 2018-10-30 | Manufacturing assistance apparatus |
EP18204238.2A EP3493003B1 (en) | 2017-11-30 | 2018-11-05 | Manufacturing assistance apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017229970A JP6709206B2 (ja) | 2017-11-30 | 2017-11-30 | 製造補助装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019101603A true JP2019101603A (ja) | 2019-06-24 |
JP6709206B2 JP6709206B2 (ja) | 2020-06-10 |
Family
ID=64362317
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017229970A Active JP6709206B2 (ja) | 2017-11-30 | 2017-11-30 | 製造補助装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10732915B2 (ja) |
EP (1) | EP3493003B1 (ja) |
JP (1) | JP6709206B2 (ja) |
CN (1) | CN109862333B (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2021039425A1 (ja) * | 2019-08-28 | 2021-03-04 | ||
JP7470578B2 (ja) | 2020-06-19 | 2024-04-18 | 株式会社Subaru | 作業支援システム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3961327B1 (en) | 2020-08-27 | 2023-11-01 | Omron Europe B.V. | Assembly assistance device and method |
USD984910S1 (en) * | 2021-02-24 | 2023-05-02 | Autel Intelligent Technology Corp., Ltd. | Calibration apparatus |
US11762367B2 (en) | 2021-05-07 | 2023-09-19 | Rockwell Collins, Inc. | Benchtop visual prototyping and assembly system |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013257861A (ja) * | 2012-05-18 | 2013-12-26 | Ricoh Co Ltd | 画像処理装置、画像処理プログラム、画像処理方法 |
WO2016132731A1 (ja) * | 2015-02-16 | 2016-08-25 | 日本電気株式会社 | 作業支援装置、作業支援システム、作業支援方法及び作業支援プログラムを記憶する記録媒体 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5931458B2 (ja) | 1977-09-02 | 1984-08-02 | エヌオーケー株式会社 | 摺動材料 |
DE3176016D1 (en) * | 1980-12-30 | 1987-04-23 | Ibm | System for remotely displaying and sensing information using shadow parallax |
US5957559A (en) * | 1997-04-29 | 1999-09-28 | Virtek Vision Corporation | Laser scanned menu |
DE19810045C1 (de) * | 1998-03-09 | 1999-09-02 | Siemens Ag | Verfahren und Vorrichtung zur Verarbeitung von anwenderspezifisch in verschiedenen Datenspeichern hinterlegten Daten einer technischen Anlage |
IL126866A (en) * | 1998-11-02 | 2003-02-12 | Orbotech Ltd | Apparatus and method for fabricating flat workpieces |
DE10260305A1 (de) * | 2002-12-20 | 2004-07-15 | Siemens Ag | HMI Einrichtung mit einem optischem Touch Screen |
US7433796B2 (en) * | 2004-11-16 | 2008-10-07 | The Boeing Company | Methods, systems, and formats for data, such as data used in laser projection of fasteners used in manufacturing |
US8010218B2 (en) * | 2008-09-30 | 2011-08-30 | Rockwell Automation Technologies, Inc. | Industrial automation interfaces integrated with enterprise manufacturing intelligence (EMI) systems |
WO2012109593A1 (en) * | 2011-02-11 | 2012-08-16 | OPS Solutions, LLC | Light guided assembly system and method |
JP5931458B2 (ja) * | 2012-01-17 | 2016-06-08 | 三菱航空機株式会社 | 耐雷ファスナ、耐雷ファスナの装着方法 |
DE102013114707A1 (de) * | 2013-12-20 | 2015-06-25 | EXTEND3D GmbH | Verfahren zur Durchführung und Kontrolle eines Bearbeitungsschritts an einem Werkstück |
WO2015185211A2 (en) * | 2014-06-05 | 2015-12-10 | Ingo Stork Genannt Wersborg | Heat treatment monitoring system |
-
2017
- 2017-11-30 JP JP2017229970A patent/JP6709206B2/ja active Active
-
2018
- 2018-10-17 CN CN201811208571.9A patent/CN109862333B/zh active Active
- 2018-10-30 US US16/174,562 patent/US10732915B2/en active Active
- 2018-11-05 EP EP18204238.2A patent/EP3493003B1/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013257861A (ja) * | 2012-05-18 | 2013-12-26 | Ricoh Co Ltd | 画像処理装置、画像処理プログラム、画像処理方法 |
WO2016132731A1 (ja) * | 2015-02-16 | 2016-08-25 | 日本電気株式会社 | 作業支援装置、作業支援システム、作業支援方法及び作業支援プログラムを記憶する記録媒体 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2021039425A1 (ja) * | 2019-08-28 | 2021-03-04 | ||
WO2021039425A1 (ja) * | 2019-08-28 | 2021-03-04 | パナソニックIpマネジメント株式会社 | 投影システム及び投影方法 |
JP7262022B2 (ja) | 2019-08-28 | 2023-04-21 | パナソニックIpマネジメント株式会社 | 投影システム及び投影方法 |
US11812203B2 (en) | 2019-08-28 | 2023-11-07 | Panasonic Intellectual Property Management Co., Ltd. | Projection system and projection method |
JP7470578B2 (ja) | 2020-06-19 | 2024-04-18 | 株式会社Subaru | 作業支援システム |
Also Published As
Publication number | Publication date |
---|---|
JP6709206B2 (ja) | 2020-06-10 |
CN109862333B (zh) | 2022-04-15 |
US20190163428A1 (en) | 2019-05-30 |
US10732915B2 (en) | 2020-08-04 |
CN109862333A (zh) | 2019-06-07 |
EP3493003A1 (en) | 2019-06-05 |
EP3493003B1 (en) | 2022-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2019101603A (ja) | 製造補助装置 | |
JP4724211B2 (ja) | 締め付け作業支援装置 | |
CN110653496B (zh) | 激光打标设备的控制方法、激光打标设备及存储介质 | |
US20140172151A1 (en) | Numerical control device | |
JP2010079834A (ja) | 座標検出装置の取り付け位置判断装置及び電子ボードシステム | |
US20180232139A1 (en) | Window control method, information processing apparatus, and control method and control program of information processing apparatus | |
JP5468981B2 (ja) | 画像測定機、プログラム、及び画像測定機のティーチング方法 | |
WO2016084151A1 (ja) | 作業支援システム、作業支援装置及び作業支援方法 | |
JP2019076980A (ja) | 識別プレート、トルクレンチ及びトルクレンチセット | |
JP6427332B2 (ja) | 画像測定機 | |
CN109963130B (zh) | 图像投影装置 | |
JP2009122972A (ja) | 形状検査装置および形状検査プログラム | |
JP2011171388A (ja) | プリント基板用コネクタ圧入装置、及び電子部品の製造方法 | |
JP5500485B2 (ja) | 三次元計測方法、三次元計測装置及び三次元計測プログラム | |
JP3214130U (ja) | 長さ測定装置 | |
CN108984411A (zh) | 一种用于显示产品生产测试的方法 | |
JP2006078314A (ja) | 波形表示装置 | |
JP2005309938A (ja) | スケジュール生成装置 | |
JP2022127012A (ja) | 3次元図面展開システム、3次元図面出力方法、コンピュータプログラム | |
JP6718429B2 (ja) | 画像投影装置 | |
US20240193806A1 (en) | Information processing system, information processing method, and information processing program | |
JP2005274370A (ja) | 波形判定装置および表示画面への波形判定情報の表示方法 | |
JP2005267404A (ja) | ワーク加工システム及びワーク加工方法 | |
WO2012046835A1 (ja) | カッティングプログラム、カッティングシステム及びカッティング方法 | |
EP2937546A1 (en) | Engine output display controller and method for displaying engine output mode thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181102 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191024 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191029 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191223 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200428 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200522 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6709206 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |