CN111680647A - 一种用于危化品检验的护目镜及其检验方法 - Google Patents
一种用于危化品检验的护目镜及其检验方法 Download PDFInfo
- Publication number
- CN111680647A CN111680647A CN202010533058.8A CN202010533058A CN111680647A CN 111680647 A CN111680647 A CN 111680647A CN 202010533058 A CN202010533058 A CN 202010533058A CN 111680647 A CN111680647 A CN 111680647A
- Authority
- CN
- China
- Prior art keywords
- module
- information
- image
- dimensional code
- characters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000000126 substance Substances 0.000 title claims abstract description 225
- 239000000383 hazardous chemical Substances 0.000 title claims abstract description 150
- 238000001514 detection method Methods 0.000 title claims abstract description 18
- 238000012545 processing Methods 0.000 claims abstract description 49
- 238000000034 method Methods 0.000 claims abstract description 37
- 238000004458 analytical method Methods 0.000 claims description 39
- 238000007689 inspection Methods 0.000 claims description 39
- 238000004519 manufacturing process Methods 0.000 claims description 36
- 238000012937 correction Methods 0.000 claims description 34
- 238000006243 chemical reaction Methods 0.000 claims description 31
- 238000013145 classification model Methods 0.000 claims description 26
- 238000012549 training Methods 0.000 claims description 19
- 230000003321 amplification Effects 0.000 claims description 18
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 18
- 238000000605 extraction Methods 0.000 claims description 3
- 230000002349 favourable effect Effects 0.000 abstract description 2
- 238000013527 convolutional neural network Methods 0.000 description 40
- 230000008569 process Effects 0.000 description 13
- 230000004397 blinking Effects 0.000 description 6
- 239000011521 glass Substances 0.000 description 6
- 239000000203 mixture Substances 0.000 description 6
- 238000005070 sampling Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000006866 deterioration Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000004806 packaging method and process Methods 0.000 description 4
- 239000013598 vector Substances 0.000 description 4
- 208000022372 Reading disease Diseases 0.000 description 3
- 206010013932 dyslexia Diseases 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- -1 acquires the shape Substances 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000011017 operating method Methods 0.000 description 2
- 238000012856 packing Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
- A61F9/00—Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
- A61F9/02—Goggles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/263—Language identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
- G06K17/0025—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement consisting of a wireless interrogation device in combination with a device for optically marking the record carrier
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
- G06K7/1417—2D bar codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/1439—Methods for optical code recognition including a method step for retrieval of the optical code
- G06K7/1443—Methods for optical code recognition including a method step for retrieval of the optical code locating of the code in an image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/63—Scene text, e.g. street names
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/06—Recognition of objects for industrial automation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Life Sciences & Earth Sciences (AREA)
- Databases & Information Systems (AREA)
- Electromagnetism (AREA)
- Toxicology (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Acoustics & Sound (AREA)
- Ophthalmology & Optometry (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Vascular Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种用于危化品检验的护目镜及其检验方法,包括镜框、镜片和镜腿,其特征在于,在镜框的顶部设置有图像采集模块,在镜框的侧面设置有处理模块;所述处理模块包括放大模块、版本校正模块、二维码解析模块及图像识别模块。放大模块用于对标签文字进行放大,版本校正模块用于校正文字的语言版本,二维码解析模块用于解析危化品外包装上的二维码标签,图像识别模块用于基于危化品图像对危化品信息进行识别。本发明在护目镜端设置对危险品的处理,能够对危化品标签文字进行放大、版本校正,避免文字过小或版本不对不利于读取的问题。此外,本发明能够通过二维码标签及图像识别两种方式获取危险品的相关信息,避免安全事故的发生。
Description
技术领域
本发明涉及危化品检验技术领域,具体涉及一种用于危化品检验的护目镜及其检验方法。
背景技术
随着世界化学工业的发展,近20年来的危化品运输量大幅增长。危化品庞大的水上运输量,增加了重大污染事故的风险。危化品水上泄露事故包括水上运输事故、港口仓库意外事故以及工厂排污,具有突发性和偶然性,造成了应急处理的艰巨性,尤其是近岸海域的泄露事故对公共安全具有严重的威胁。危险货物虽然在合理使用下给我们生活带来很大的便利,但其本身危险特性,给我们人身健康、财产安全、环境保护带来巨大的潜在威胁。
现有技术中针对危化品的特点提出了对危化品的流通环节进行自动跟踪,通常是在危化品的外包装上印刷条形码、二维码等,检验人员在获取到相应的危化品后,通过专门的扫描设备进行相应的信息扫描,以获取危化品的信息。但是整个操作过程繁琐,需要额外获取扫描设备。且现有的危化品信息获取过程中,只能通过扫描二维码等方式进行获取,并不能根据危化品的外观特征获取危化品信息。
此外,危化品的外包装上通常会印刷相应的标签文字,检验人员肉眼获取包装上的文字,但是危化品上的标签文字通常很小,检验人员不能对标签文字进行有效的识别。针对该问题,现有技术提出了在护目镜上设置放大镜的方式对文字进行放大,但是额外设置放大镜需要对护目镜的镜片结构进行改造,不能有效适应于现有的护目镜。且通过放大镜放大的文字效果单一固定,放大效果差。
因此,如何针对危化品的特点,实现对危化品信息的便捷获取与检验,是本领域亟待解决的问题。
发明内容
本发明的目的是针对现有技术的缺陷,提供了一种用于危化品检验的护目镜及其检验方法。本发明在护目镜端设置对危险品的处理,能够对危化品标签文字进行放大、版本校正,避免文字过小或版本不对不利于读取的问题。此外,本发明能够通过二维码标签及图像识别两种方式获取危险品的相关信息,避免安全事故的发生。
为了实现以上目的,本发明采用以下技术方案:
一种用于危化品检验的护目镜,包括镜框、镜片和镜腿,在镜框的顶部设置有图像采集模块,在镜框的侧面设置有处理模块;所述处理模块包括放大模块、版本校正模块、二维码解析模块及图像识别模块;
所述放大模块包括:
图像接收模块,用于接收图像采集模块采集的图像;
文字提取模块,用于提取所述采集的图像中的文字;
文字放大模块,用于对提取的文字进行放大;
所述版本校正模块包括:
语言识别模块,用于识别文字的语言类别;
语言转换模块,用于将文字由识别的语言类别转换成目标语言文字;
所述二维码解析模块包括:
图像接收模块,用于接收图像采集模块采集的图像;
二值化模块,用于对接收的二维码图像进行二值化处理,得到二维码黑白图像;
黑白图像识别模块,用于识别所述二维码黑白图像中的内容;
所述图像识别模块包括:
训练模块,用于训练生成3D-CNN分类模型;
图像接收模块,用于接收图像采集模块采集的图像;
分类模块,用于基于所述3D-CNN分类模型识别危化品的类别;
索引模块,用于将识别的危化品的类别通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果。
进一步地,所述护目镜还包括定位模块,用于发出激光照射在外包装上,接收用户的角度调节指令,直到激光的照射位置与二维码位置相匹配,当激光的照射位置与二维码位置相匹配时,调用二维码解析模块。
进一步地,所述护目镜还包括显示模块、声音采集模块、语音转换模块及扬声器模块;所述显示模块用于显示放大模块、版本校正模块、二维码解析模块及图像识别模块的处理结果;所述语音转换模块用于将显示放大模块、版本校正模块、二维码解析模块及图像识别模块的处理结果转换成语音信息,所述扬声器模块用于播放所述语音转换模块转换后的语音信息;所述声音采集模块用于用户指令,以基于相应的指令调用显示放大模块、或版本校正模块、或二维码解析模块或图像识别模块。
进一步地,所述护目镜与客户端关联,所述客户端包括管理人员所拥有的客户端,及当前用户所拥有的客户端,用于接收护目镜获取的危化品信息。
进一步地,当二维码标签中获取的信息与服务器返回的信息不一致、或图像识别的信息与服务器返回的信息不一致时,通过显示模块高亮显示不一致的危化品信息或通过扬声器模块播放不一致的危化品信息。
进一步地,所述二维码解析模块包括:
索引模块,用于将二维码解析信息通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果;
危化品信息包括所在单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息、警示标志信息和安全操作规程信息,还包括生产信息、销售信息和运输信息,其中,生产信息包括生产单位、生产时间、生产单位地址和生产单位责任人,销售信息包括销售单位、销售单位地点、销售单位责任人和销售时间,运输信息包括运输单位、出发地址、终点地址、运输线路和运输状态。
本发明还提出一种基于上述护目镜进行危化品检测的方法,包括步骤S1、对标签文字进行放大;S2、对标签文字进行语言版本校正;S3、对外包装上的二维码信息进行解析;S4、基于危化品图像识别危化品信息;
所述步骤S1具体为:
S11、接收图像采集模块采集的图像;
S12、提取所述采集的图像中的文字;
S13、对提取的文字进行放大;
所述步骤S2具体为:
所述步骤S2具体为:
S21、识别文字的语言类别;
S22、将文字由识别的语言类别转换成目标语言文字;
所述步骤S3具体为:
S31、接收图像采集模块采集的图像;
S32、对接收的二维码图像进行二值化处理,得到二维码黑白图像;
S33、识别所述二维码黑白图像中的内容;
所述步骤S4具体为:
S41、训练生成3D-CNN分类模型;
S42、接收图像采集模块采集的图像;
S43、基于所述3D-CNN分类模型识别危化品的类别;
S44、将识别的危化品的类别通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果。
进一步地,所述步骤S31之前还包括:
S30、发出激光照射在外包装上,接收用户的角度调节指令,直到激光的照射位置与二维码位置相匹配。
进一步地,所述步骤S11之前还包括:
S10、采集用户的控制指令,判断所述控制指令是否为放大文字的指令,若是,执行步骤S11;
所述S13之后还包括S14和/或S15和/或S16、S17,其中,
S14、对放大后的文字进行显示;
S15、将放大后的文字发送到与护目镜关联的客户端;
S16、将获取的文字信息转换成语音信息;
S17、播放转换后的语音信息。
进一步地,步骤S33之后还包括:
S34、将识别的内容通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果;
危化品信息包括所在单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息、警示标志信息和安全操作规程信息,还包括生产信息、销售信息和运输信息,其中,生产信息包括生产单位、生产时间、生产单位地址和生产单位责任人,销售信息包括销售单位、销售单位地点、销售单位责任人和销售时间,运输信息包括运输单位、出发地址、终点地址、运输线路和运输状态;
S35、判断二维码标签中获取的信息与服务器返回的信息是否一致,若不一致,高亮显示不一致的危化品信息;
步骤S44之后还包括:
S45、判断图像识别的信息与服务器返回的信息是否一致,若不一致,高亮显示不一致的危化品信息。
与现有技术相比,本发明具有如下优点:
1、护目镜是危化品检验过程中的必备用品,本发明针对危化品的特征,在护目镜端设置图像采集模块、放大模块、版本校正模块、二维码解析模块及图像识别模块,以利用护目镜去危化品进行信息检验,不需要设置额外的处理设备,方便用户携带,使用户随时都能根据需要获取危化品的信息,及时获取相应的信息,避免危化品检验中的安全事故;
2、本发明通过放大模块对标签的文字进行放大,使用户能更清楚获取危化品包装上的文字信息,避免文字过小使用户不能有效获取危化品的信息,遗漏相关检验信息的问题;不需要借助额外的放大镜等部件,避免对护目镜镜片的改进,同时能对放大的倍数进行调整,放大效果好;
3、本发明通过版本校正模块对文字的版本进行校正,避免用户不能识别相应的文字造成信息遗漏的问题;根据用户的需求设置目标语言的类别,满足不同的用户群体需求;
4、本发明能够通过二维码标签及图像识别两种方式获取危险品的相关信息,避免安全事故的发生,全面获取危险品的信息;与现有的危险品数据库信息进行有效的结合,智能化识别危化品,快速获取、鉴别危化品信息;
5、本发明对识别出的信息与数据库返回的信息、或者二维码标签与图像识别信息进行比对,提示用户不一致的信息,使用户能针对危化品信息进行及时的处理;
6、本发明中通过定位模块进行不同角度的旋转,以全面覆盖危化品的外包装侧,通过不同角度的旋转照射在危化品的不同位置,以准确定位二维码扫描的区域,避免不断调整图像采集模块的扫描角度、扫描距离等,提高二维码的解析效率;
7、本发明所述的护目镜还能与客户端关联,客户端可以为管理人员所拥有的客户端,也可以为当前检验用户所拥有的客户端,使得远端的管理人员也能实时地了解当前检验的危化品信息,以及时地对当前的危化品检验进行指导;同时,检验用户在完成对危化品的检验后,能够对当前危化品的信息进行汇总、整理与分析,完善危化品的检验过程;
8、本发明护目镜端还设置语音转换模块、扬声器模块,将文字信息转换成语音信息进行播放,方便有阅读障碍的用户获取危化品信息,同时通过扬声器播放相应的信息,使用户能在检验的同时获取检验结果,及时获取相应的信息,避免危化品检验中的安全事故。
附图说明
图1是实施例一提供的一种用于危化品检验的护目镜系统结构图;
图2是实施例二提供的一种对标签文字进行放大的方法流程图;
图3是实施例二提供的一种对外包装上的二维码信息进行解析的方法流程图;
图4是实施例二提供的基于危化品图像识别危化品信息的方法流程图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
下面结合附图和具体实施例对本发明作进一步说明,但不作为本发明的限定。
实施例一
如图1所示,本实施例提出了一种用于危化品检验的护目镜,包括镜框、镜片和镜腿,在镜框的顶部设置有图像采集模块,在镜框的侧面设置有处理模块。
本发明中利用护目镜进行危化品的检验,为了克服检验过程中危险化学品标签中的字太小、语言版本不对等问题,本发明对采集的标签文字进行处理,使用户通过佩戴护目镜能够直接识别相应的标签文字信息。具体地,处理模块包括:
图像接收模块,用于接收图像采集模块采集的图像;
本发明图像接收模块接收的图像为通过镜框顶部设置的图像采集模块采集的图像,当用户佩戴护目镜检验危化品时,如果发现标签中的文字太小,可以发送相应的控制指令,以对标签中的文字进行放大。
具体地,护目镜还可以包括声音采集模块,通过声音采集模块采集用户的控制指令,根据控制指令的内容进行响应的处理。例如,当用户需要对标签信息进行放大时,可以发出“放大文字”的指令,声音采集模块采集用户的控制指令,将指令发送到处理模块进行处理。处理模块对用户发出的指令进行判断,当确定用户需要进行标签放大时,启动图像采集模块采集图像,进行标签文字放大处理。
此外,用户还可以通过眨眼、张嘴等操作来触发“放大文字”的指令,如设置连续眨眼三次就进行文字放大的处理,本发明不对具体的指令触发方式进行限定。
文字提取模块,用于提取所述采集的图像中的文字;
由于采集的图像包括了文字信息及背景信息,因此,为了避免背景信息的干扰,本发明对采集的图像进行预处理后,识别图像中的文字,分离文字和背景,将文字矢量化并调节对比度,以有效提取采集的图像中的文字。文字的识别可以基于训练文字库对构建文字的识别模型进行训练,生成最终的文字识别模型,对图像中的文字进行识别。
文字放大模块,用于对提取的文字进行放大。
本发明对提取的文字进行放大,使文字便于用户查看。文字放大的具体倍数与文字的原始大小有关,原始的文字越小,相应的文字放大倍数越大。本发明可以根据用户需求需要设置需要放到到的文字规格,将提取的每个文字放大到相应的规格大小。
相应地,护目镜还包括显示模块,以对放大后的文字进行显示。显示模块设置于一侧眼睛的上方,以便用户实时查看放大后的文字信息,了解危化品的成分、名称等信息。此外,为了对危化品信息进行有效的管理,本发明中的护目镜还能与客户端关联,客户端可以为管理人员所拥有的客户端,也可以为当前检验用户所拥有的客户端。
在获取到危化品信息后,将信息发送到管理人员相关联的移动终端,使得远端的管理人员也能实时地了解当前检验的危化品信息,以及时地对当前的危化品检验进行指导。此外,也可以选择将危化品信息发送到当前检验用户相关联的客户端,使检验用户在完成对危化品的检验后,能够对当前危化品的信息进行汇总、整理与分析,完善危化品的检验过程。
此外,为了方便有阅读障碍的用户获取危化品信息,本发明所述的护目镜还包括语音转换模块、扬声器模块,具体地,首先通过语言转换模块将获取的文字信息转换成语音信息,再通过扬声器模块播放转换后的语音信息。值得注意的是,语音转换模块中的文字可以为标签中的原始文字,也可以为经过文字放大模块放大后的文字。当用户需要语言播放当前文字信息时,发出“语音播放”等触发指令,调用相应的语音转换模块,对文字进行语言转换。
当用户查看标签文字时,可能存在语言版本不对的问题。例如,当危化品上的文字为英语,但是检验人员不懂英语,此时,用户不能对标签内容进行有效的读取。因此,本发明所述的处理模块还包括版本校正模块,具体包括:
语言识别模块,用于识别文字的语言类别;
具体地,当用户不能识别危化品上的文字时,启动版本校正模块转换成目标文字。用户可以通过发出“语言转换”等命令,启动版本校正模板,对危化品上的文字进行语言转换。进行语言版本校正时,需要首先识别当前文字的语言类别,如当前文字为英文、德文或法文等。具体地,首先对当前的文字进行采集,提取文字的特征,再根据文字的特征与各语言类别的特征进行对比,确定当前文字的语言类别。
语言转换模块,用于将文字由识别的语言类别转换成目标语言文字。
当成功识别当前文字的语言类别后,就能根据用户需要将文字由当前的语言类别转换成目标语言文字。具体地,首先根据文字当前的语言类别调用相应类别语言的文字数据库,将当前文字与数据库进行对比,识别当前的文字内容。同时,调用目标语言对应的文字数据库,查找数据库中当前文字的内容,将其转换成目标语言文字,完成语言版本的校正。
本发明中,默认的语言版本为中文,当用户没有设置转化后的语言版本,在接收到语言转化相关命令时,默认将其转化成中文,并在显示模块上进行显示。如果用户设置了目标语言,如英语时,将获取的文字转化成英语进行显示。用户可以预先在护目镜中设置自己熟悉的目标语言,当启动语言转换时,自动将当前的语言版本转换成目标语言。此外,用户还可以在启动语言转换功能后设置目标语言,如通过指令“转换成英语”来设置目标语言的类别。
值得注意的是,版本校正模块中的文字可以为标签中的原始文字,也可以为经过文字放大模块放大后的文字。当标签文字满足用户阅读需求时,不需要对文字进行放大,因此直接对原始的文字进行版本校正。当用户对放大后的文字进行阅读时,若发现文字的语言版本不对,可以对放大后的文字进行矫正。
因此,当用户阅读文字发现文字版本不对时,可以发出“版本校正”的指令,声音采集模块采集用户的控制指令,将指令发送到处理模块进行处理。处理模块对用户发出的指令进行判断,当确定用户需要进行版本校正时,对文字的语言版本进行转化。此外,用户也可以通过眨眼、张嘴等操作来触发“版本校正”的指令,如设置连续眨眼四次就进行文字版本校正的处理,本发明不对具体的指令触发方式进行限定。与标签文字识别一样,当完成文字版本的校正后,可以通过显示模块显示校正后的文字,也可以通过扬声器模块播放校正文字,还可以将转换后的文字发送到相关联的移动终端,在此不再赘述。
此外,本发明为每一个待检测的危化品生成唯一的二维码,制作二维码标签,粘贴在待检测危化品的外包装上。危化品信息可以包括所在单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息、警示标志信息和安全操作规程信息。进一步地,该危化品信息还可以包括生产信息、销售信息和运输信息,其中,生产信息包括生产单位、生产时间、生产单位地址和生产单位责任人,销售信息包括销售单位、销售单位地点、销售单位责任人和销售时间,运输信息包括运输单位、出发地址、终点地址、运输线路和运输状态。本发明构建危化品数据库,在服务器端存储危化品的相关信息。
因此,本发明所述的护目镜还包括二维码解析模块。当用户需要获取危化品外包装上二维码的信息时,触发图像采集模块采集二维码图像,采集的二维码图像发送到二维码解析模块,二维码解析模块与远端服务器进行通信,以获取二维码标签中的内容。二维码解析模块具体包括:
二值化模块,用于对接收的二维码图像进行二值化处理,得到二维码黑白图像;
对于二维码的解析,首先需要将二维码图像转化成黑白图像,因此本发明选择二值化算法,对二维码图像进行转化,具体的二值化算法本发明不做限定,可以灰度平局值值法、百分比阈值等。
黑白图像识别模块,用于识别所述二维码黑白图像中的内容。
图像转化成黑白图像后,就能进一步对图像中的内容进行识别,获取危化品外包装上的二维码信息。
通过图像采集模块采集二维码图像时,可能存在不能对准二维码进行扫描的问题,也就是说,二值化后得到的二维码黑白图像可能难以识别,需要用户不断调整图像采集模块的扫描角度、扫描距离等,不断的角度、距离的调整使二维码解析模块不断地进行二维码的解析,解析效率低。因此,本发明的处理模块还包括定位模块,定位模块可以进行不同角度的旋转,以全面覆盖危化品的外包装侧。具体地,定位模块为激光照射装置,通过不同角度的旋转照射在危化品的不同位置。
用户进行二维码标签信息采集时,可以发出“扫描二维码”的指令,声音采集模块采集用户的控制指令,将指令发送到处理模块进行处理。处理模块对用户发出的指令进行判断,当确定用户需要进行二维码扫描时,启动定位模块发出激光照射在外包装上,用户根据激光照射的位置对定位模块的角度进行调整。用户可以通过指令的方式控制定位模块的调整角度,如“向左转动10度”等。当激光的照射位置与二维码位置相匹配时,停止定位模块的角度调整。位置匹配可以为激光的照射位置处于二维码位置内、激光的照射位置包含二维码位置或激光的照射位置与二维码位置相交等,本发明不作限定。
用户可以根据需要进行定位模块的调整,当完全二维码扫描定位后,同步联动调整图像采集模块的角度,与激光照射位置相匹配,以精确采集二维码标签信息。具体地,本发明中,定位模块设置于图像采集模块的边缘,图像采集模块活动连接于镜框的顶部,通过转动装置实现图像采集模块的转动。
此外,二维码标签中可以仅包括单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息等基础信息,当通过二维码解析模块解析获取二维码标签信息后,将标签信息通过无线信号收发装置发送到远端的服务器,服务器根据解析的信息在数据库中进行索引查找,获取危化品的销售信息、运输信息、形状等信息。二维码标签解析信息及在数据库中查找的信息都可以通过显示模块进行显示。本发明所述的护目镜还可以通过扬声器模块,播放二维码解析信息等,使用户及时获取相应的危化品信息,避免不了解危化品信息造成的安全事故。此外,还可以将获取的危化品信息发送到相关联的移动终端,在此不再赘述。值得注意是,本发明所述的二维码还可以为条形码、RFID标签等,而相应的二维码解析模块则为条形码解析模块、RFID标签识别模块等。
用户通过二维码标签获取到危化品的颜色、形状等信息后,可以与当前看到的危化品进行比较,判断危化品是否出现变质等问题,以进行及时的处理。例如,当获取的危化品信息指示危化品为白色,但当前看到的危化品为红色时,提示危化品可能存在变质、信息错误等问题。
此外,还可以将二维码标签中获取的信息与数据库中返回的信息进行比较,判断两者的数据是否一致,若不一致,高亮显示不一致的危化品信息,提醒检验用户注意。例如,从二维码标签中获取的危化品类别与从数据库中索引得到的危化品类别不相同时,在显示模块高亮显示返回的危化品类别部分。此外,还可以通过语音播放“危化品类别信息不一致”等内容,使检验用户及时了解错误的危化品信息。
当危化品的包装为透明包装时,本发明除了通过二维码标签获取危化品信息外,还可以通过图像识别获取当前的危化品信息。具体地,本发明通过图像采集模块采集当前危化品的图像,在采集的危化品图像中提取危化品区域,利用深度学习模型3D-CNN提取危化品区域的特征,并基于提取的特征对危化品进行分类。3D-CNN分类模型的具体生成如下:
构建3D-CNN卷积神经网络;通过危化品样本数据对3D-CNN卷积神经网络进行训练,得到3D-CNN分类模型;基于所述3D-CNN分类模型,提取危化品区域的特征,输出危化品的类别。
3D-CNN基本结构组件为3D卷积层、硬连线hardwired层、下采样层、全连接层和输出层。其中hardwired层通过对危化品区域进行处理产生多个通道信息,然后对多个通道进行处理。3D卷积层是三维的卷积核,该组件负责提取多种特征。下采样层组件负责对特征图进行降维,全连接层组件负责将二维特征组合成一维特征并用于最后输出层的分类输出。3D-CNN中,通常包括一个硬连线hardwired层、一个全连接层和一个输出层。3D卷积层、下采样层的数量可以根据实际情况进行选择,在此不作限定。下采样层通常设置在卷积层之后,全连接层位于最后一个卷积层和输出层之间。使用全连接层将卷积核生成的每个特征与第二下采样层中的所有特征全连接,生成危化品区域的特征向量。最终生成的特征向量输入输出层进行分类。输出层包括Softmax分类器,对输入的危化品进行分类输出。
构建好3D-CNN后,基于训练数据对3D-CNN进行训练,得到3D-CNN分类模型。本发明加载标注了类别信息的危化品区域数据,通过3D-CNN分类模型的损失函数对3D-CNN分类模型进行优化,训练生成3D-CNN分类模型。训练生成后,危化品进行特征学习,输出危化品的类别。
因此,本发明的护目镜还包括图像识别模块,用于识别危化品的类别。通过构建的3D-CNN分类模型识别危化品的类别后,将获取的危化品类别发送到远程服务器,服务器通过危化品的类别在数据库中进行索引,获取当前危化品的形状、成分信息、警示标志信息和安全操作规程信息等,将检索的信息返回给护目镜,以通过显示模块进行显示或扬声器模块进行播放,使用户更全面了解当前危化品的信息,避免操作不当引起的安全问题等。
此外,与二维码标签识别一样,当还可以将图像识别的内容与数据库中返回的信息进行比较,判断两者的数据是否一致,若不一致,高亮显示或语音播放不一致的危化品信息,提醒检验用户注意。本发明还可以同时结合图像识别与二维码标签识别,当两者的识别结果不一致时,进行不一致的危化品信息提示。例如,当通过二维码标签识别出的危化品颜色为白色,而图像识别出的危化品颜色为红色时,则提示危化品的颜色信息不一致。
实施例二
本实施例提出了一种基于实施例一所述的护目镜进行危化品检测的方法,护目镜包括镜框、镜片和镜腿,在镜框的顶部设置有图像采集模块,在镜框的侧面设置有处理模块。
本发明中利用护目镜进行危化品的检验,为了克服检验过程中危险化学品标签中的字太小、语言版本不对等问题,本发明对采集的标签进行处理,使用户通过佩戴护目镜能够直接识别相应的标签信息。具体地,如图2所示,对标签文字的放大包括:
S11、接收图像采集模块采集的图像;
本发明图像接收模块接收的图像为通过镜框顶部设置的图像采集模块采集的图像,当用户佩戴护目镜检验危化品时,如果发现标签中的文字太小,可以发送相应的控制指令,以对标签中的文字进行放大。
具体地,护目镜还可以包括声音采集模块,通过声音采集模块采集用户的控制指令,根据控制指令的内容进行响应的处理。例如,当用户需要对标签信息进行放大时,可以发出“放大文字”的指令,声音采集模块采集用户的控制指令,将指令发送到处理模块进行处理。处理模块对用户发出的指令进行判断,当确定用户需要进行标签放大时,启动图像采集模块采集图像,进行标签文字放大处理。
此外,用户还可以通过眨眼、张嘴等操作来触发“放大文字”的指令,如设置连续眨眼三次就进行文字放大的处理,本发明不对具体的指令触发方式进行限定。因此,本发明在步骤S11之前,还包括:
S10、采集用户的控制指令,判断所述控制指令是否为放大文字的指令,若是,执行步骤S11。
S12、提取所述采集的图像中的文字;
由于采集的图像包括了文字信息及背景信息,因此,为了避免背景信息的干扰,本发明对采集的图像进行预处理后,识别图像中的文字,分离文字和背景,将文字矢量化并调节对比度,以有效提取采集的图像中的文字。文字的识别可以基于训练文字库对构建文字的识别模型进行训练,生成最终的文字识别模型,对图像中的文字进行识别。
S13、对提取的文字进行放大。
本发明对提取的文字进行放大,使文字便于用户查看。文字放大的具体倍数与文字的原始大小有关,原始的文字越小,相应的文字放大倍数越大。本发明可以根据用户需求需要设置需要放到到的文字规格,将提取的每个文字放大到相应的规格大小。
相应地,护目镜还包括显示模块,以对放大后的文字进行显示。显示模块设置于一侧眼睛的上方,以便用户实时查看放大后的文字信息,了解危化品的成分、名称等信息。因此,本发明在步骤S13之后还可以包括:
S14、对放大后的文字进行显示。
此外,为了对危化品信息进行有效的管理,本发明中的护目镜还能与客户端关联,客户端可以为管理人员所拥有的客户端,也可以为当前检验用户所拥有的客户端。因此,本发明在步骤S13之后还可以包括:
S15、将放大后的文字发送到与护目镜关联的客户端。
在获取到危化品信息后,将信息发送到管理人员相关联的移动终端,使得远端的管理人员也能实时地了解当前检验的危化品信息,以及时地对当前的危化品检验进行指导。此外,也可以选择将危化品信息发送到当前检验用户相关联的客户端,使检验用户在完成对危化品的检验后,能够对当前危化品的信息进行汇总、整理与分析,完善危化品的检验过程。
此外,为了方便有阅读障碍的用户获取危化品信息,本发明所述的护目镜还包括语音转换模块、扬声器模块,具体地,首先通过语言转换模块将获取的文字信息转换成语音信息,再通过扬声器模块播放转换后的语音信息。值得注意的是,语音转换模块中的文字可以为标签中的原始文字,也可以为经过文字放大模块放大后的文字。当用户需要语言播放当前文字信息时,发出“语音播放”等触发指令,调用相应的语音转换模块,对文字进行语言转换。因此,本发明在步骤S13之后还可以包括:
S16、将获取的文字信息转换成语音信息;
S17、播放转换后的语音信息。
当用户查看标签文字时,可能存在语言版本不对的问题。例如,当危化品上的文字为英语,但是检验人员不懂英语,此时,用户不能对标签内容进行有效的读取。因此,本发明所述的处理模块还包括对语言版本的校正,具体为:
S21、识别文字的语言类别;
具体地,当用户不能识别危化品上的文字时,启动版本校正模块转换成目标文字。用户可以通过发出“语言转换”等命令,启动版本校正模板,对危化品上的文字进行语言转换。进行语言版本校正时,需要首先识别当前文字的语言类别,如当前文字为英文、德文或法文等。具体地,首先对当前的文字进行采集,提取文字的特征,再根据文字的特征与各语言类别的特征进行对比,确定当前文字的语言类别。
S22、将文字由识别的语言类别转换成目标语言文字。
当成功识别当前文字的语言类别后,就能根据用户需要将文字由当前的语言类别转换成目标语言文字。具体地,首先根据文字当前的语言类别调用相应类别语言的文字数据库,将当前文字与数据库进行对比,识别当前的文字内容。同时,调用目标语言对应的文字数据库,查找数据库中当前文字的内容,将其转换成目标语言文字,完成语言版本的校正。
本发明中,默认的语言版本为中文,当用户没有设置转化后的语言版本,在接收到语言转化相关命令时,默认将其转化成中文,并在显示模块上进行显示。如果用户设置了目标语言,如英语时,将获取的文字转化成英语进行显示。用户可以预先在护目镜中设置自己熟悉的目标语言,当启动语言转换时,自动将当前的语言版本转换成目标语言。此外,用户还可以在启动语言转换功能后设置目标语言,如通过指令“转换成英语”来设置目标语言的类别。
值得注意的是,版本校正模块中的文字可以为标签中的原始文字,也可以为经过文字放大模块放大后的文字。当标签文字满足用户阅读需求时,不需要对文字进行放大,因此直接对原始的文字进行版本校正。当用户对放大后的文字进行阅读时,若发现文字的语言版本不对,可以对放大后的文字进行矫正。
因此,当用户阅读文字发现文字版本不对时,可以发出“版本校正”的指令,声音采集模块采集用户的控制指令,将指令发送到处理模块进行处理。处理模块对用户发出的指令进行判断,当确定用户需要进行版本校正时,对文字的语言版本进行转化。此外,用户也可以通过眨眼、张嘴等操作来触发“版本校正”的指令,如设置连续眨眼四次就进行文字版本校正的处理,本发明不对具体的指令触发方式进行限定。与标签文字识别一样,当完成文字版本的校正后,可以通过显示模块显示校正后的文字,也可以通过扬声器模块播放校正文字,还可以将转换后的文字发送到相关联的移动终端,在此不再赘述。
此外,本发明为每一个待检测的危化品生成唯一的二维码,制作二维码标签,粘贴在待检测危化品的外包装上。危化品信息可以包括所在单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息、警示标志信息和安全操作规程信息。进一步地,该危化品信息还可以包括生产信息、销售信息和运输信息,其中,生产信息包括生产单位、生产时间、生产单位地址和生产单位责任人,销售信息包括销售单位、销售单位地点、销售单位责任人和销售时间,运输信息包括运输单位、出发地址、终点地址、运输线路和运输状态。本发明构建危化品数据库,在服务器端存储危化品的相关信息。
因此,本发明所述的护目镜还包括二维码解析模块。当用户需要获取危化品外包装上二维码的信息时,触发图像采集模块采集二维码图像,采集的二维码图像发送到二维码解析模块,二维码解析模块与远端服务器进行通信,以获取二维码标签中的内容。如图3所示,对外包装上的二维码信息进行解析包括:
S31、接收图像采集模块采集的图像;
本发明图像接收模块接收的图像为通过镜框顶部设置的图像采集模块采集的图像,当用户佩戴护目镜检验危化品时,如果需要获取二维码标签信息,可以发送相应的控制指令,以对二维码信息进行解析。
S32、对接收的二维码图像进行二值化处理,得到二维码黑白图像;
对于二维码的解析,首先需要将二维码图像转化成黑白图像,因此本发明选择二值化算法,对二维码图像进行转化,具体的二值化算法本发明不做限定,可以灰度平局值值法、百分比阈值等。
S33、识别所述二维码黑白图像中的内容。
图像转化成黑白图像后,就能进一步对图像中的内容进行识别,获取危化品外包装上的二维码信息。
通过图像采集模块采集二维码图像时,可能存在不能对准二维码进行扫描的问题,也就是说,二值化后得到的二维码黑白图像可能难以识别,需要用户不断调整图像采集模块的扫描角度、扫描距离等,不断的角度、距离的调整使二维码解析模块不断地进行二维码的解析,解析效率低。因此,本发明的处理模块还包括定位模块,定位模块可以进行不同角度的旋转,以全面覆盖危化品的外包装侧。具体地,定位模块为激光照射装置,通过不同角度的旋转照射在危化品的不同位置。
用户进行二维码标签信息采集时,可以发出“扫描二维码”的指令,声音采集模块采集用户的控制指令,将指令发送到处理模块进行处理。处理模块对用户发出的指令进行判断,当确定用户需要进行二维码扫描时,启动定位模块发出激光照射在外包装上,用户根据激光照射的位置对定位模块的角度进行调整。用户可以通过指令的方式控制定位模块的调整角度,如“向左转动10度”等。当激光的照射位置与二维码位置相匹配时,停止定位模块的角度调整。位置匹配可以为激光的照射位置处于二维码位置内、激光的照射位置包含二维码位置或激光的照射位置与二维码位置相交等,本发明不作限定。
用户可以根据需要进行定位模块的调整,当完全二维码扫描定位后,同步联动调整图像采集模块的角度,与激光照射位置相匹配,以精确采集二维码标签信息。具体地,本发明中,定位模块设置于图像采集模块的边缘,图像采集模块活动连接于镜框的顶部,通过转动装置实现图像采集模块的转动。
因此,本发明所述的对二维码信息进行解析在步骤S31之前还包括:
S30、发出激光照射在外包装上,接收用户的角度调节指令,直到激光的照射位置与二维码位置相匹配。
此外,二维码标签中可以仅包括单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息等基础信息,当通过二维码解析模块解析获取二维码标签信息后,将标签信息通过无线信号收发装置发送到远端的服务器,服务器根据解析的信息在数据库中进行索引查找,获取危化品的销售信息、运输信息、形状等信息。二维码标签解析信息及在数据库中查找的信息都可以通过显示模块进行显示。本发明所述的护目镜还可以包括扬声器模块,用于播放二维码解析信息等,使用户及时获取相应的危化品信息,避免不了解危化品信息造成的安全事故。此外,还可以将获取的危化品信息发送到相关联的移动终端,在此不再赘述。值得注意是,本发明所述的二维码还可以为条形码、RFID标签等,而相应的二维码解析模块则为条形码解析模块、RFID标签识别模块等。因此,本发明所述的对二维码信息进行解析在步骤S33之后还包括:
S34、将识别的内容通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果;
用户通过二维码标签获取到危化品的颜色、形状等信息后,可以与当前看到的危化品进行比较,判断危化品是否出现变质等问题,以进行及时的处理。例如,当获取的危化品信息指示危化品为白色,但当前看到的危化品为红色时,提示危化品可能存在变质、信息错误等问题。
此外,还可以将二维码标签中获取的信息与数据库中返回的信息进行比较,判断两者的数据是否一致,若不一致,高亮显示不一致的危化品信息,提醒检验用户注意。例如,从二维码标签中获取的危化品类别与从数据库中索引得到的危化品类别不相同时,在显示模块高亮显示返回的危化品类别部分。此外,还可以通过语音播放“危化品类别信息不一致”等内容,使检验用户及时了解错误的危化品信息。因此,步骤S34之后还包括:
S35、判断二维码标签中获取的信息与服务器返回的信息是否一致,若不一致,高亮显示不一致的危化品信息。
当危化品的包装为透明包装时,本发明除了通过二维码标签获取危化品信息外,还可以通过图像识别获取当前的危化品信息。具体地,本发明通过图像采集模块采集当前危化品的图像,在采集的危化品图像中提取危化品区域,利用深度学习模型3D-CNN提取危化品区域的特征,并基于提取的特征对危化品进行分类。3D-CNN分类模型的具体生成如下:
构建3D-CNN卷积神经网络;通过危化品样本数据对3D-CNN卷积神经网络进行训练,得到3D-CNN分类模型;基于所述3D-CNN分类模型,提取危化品区域的特征,输出危化品的类别。
3D-CNN基本结构组件为3D卷积层、硬连线hardwired层、下采样层、全连接层和输出层。其中hardwired层通过对危化品区域进行处理产生多个通道信息,然后对多个通道进行处理。3D卷积层是三维的卷积核,该组件负责提取多种特征。下采样层组件负责对特征图进行降维,全连接层组件负责将二维特征组合成一维特征并用于最后输出层的分类输出。3D-CNN中,通常包括一个硬连线hardwired层、一个全连接层和一个输出层。3D卷积层、下采样层的数量可以根据实际情况进行选择,在此不作限定。下采样层通常设置在卷积层之后,全连接层位于最后一个卷积层和输出层之间。使用全连接层将卷积核生成的每个特征与第二下采样层中的所有特征全连接,生成危化品区域的特征向量。最终生成的特征向量输入输出层进行分类。输出层包括Softmax分类器,对输入的危化品进行分类输出。
构建好3D-CNN后,基于训练数据对3D-CNN进行训练,得到3D-CNN分类模型。本发明加载标注了类别信息的危化品区域数据,通过3D-CNN分类模型的损失函数对3D-CNN分类模型进行优化,训练生成3D-CNN分类模型。训练生成后,危化品进行特征学习,输出危化品的类别。
因此,本发明的护目镜还包括图像识别模块,用于识别危化品的类别。通过构建的3D-CNN分类模型识别危化品的类别后,将获取的危化品类别发送到远程服务器,服务器通过危化品的类别在数据库中进行索引,获取当前危化品的形状、成分信息、警示标志信息和安全操作规程信息等,将检索的信息返回给护目镜,以通过显示模块进行显示或扬声器模块进行播放,使用户更全面了解当前危化品的信息,避免操作不当引起的安全问题等。此外,与二维码标签识别一样,当还可以将图像识别的内容与数据库中返回的信息进行比较,判断两者的数据是否一致,若不一致,高亮显示或语音播放不一致的危化品信息,提醒检验用户注意。本发明还可以同时结合图像识别与二维码标签识别,当两者的识别结果不一致时,进行不一致的危化品信息提示。例如,当通过二维码标签识别出的危化品颜色为白色,而图像识别出的危化品颜色为红色时,则提示危化品的颜色信息不一致。因此,如图4所示,本发明通过图像获取当前危化品信息具体为:
S41、训练生成3D-CNN分类模型;
S42、接收图像采集模块采集的图像;
S43、基于所述3D-CNN分类模型识别危化品的类别;
S44、将识别的危化品的类别通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果;
S45、判断图像识别的信息与服务器返回的信息是否一致,若不一致,高亮显示不一致的危化品信息。
本发明提供了一种用于危化品检验的护目镜及其检验方法,护目镜是危化品检验过程中的必备用品,针对危化品的特征,在护目镜端设置图像采集模块、放大模块、版本校正模块、二维码解析模块及图像识别模块,以利用护目镜去危化品进行信息检验,不需要设置额外的处理设备,方便用户携带,使用户随时都能根据需要获取危化品的信息,及时获取相应的信息,避免危化品检验中的安全事故;通过放大模块对标签的文字进行放大,使用户能更清楚获取危化品包装上的文字信息,避免文字过小使用户不能有效获取危化品的信息,遗漏相关检验信息的问题;不需要借助额外的放大镜等部件,避免对护目镜镜片的改进,同时能对放大的倍数进行调整,放大效果好;通过版本校正模块对文字的版本进行校正,避免用户不能识别相应的文字造成信息遗漏的问题;根据用户的需求设置目标语言的类别,满足不同的用户群体需求;能够通过二维码标签及图像识别两种方式获取危险品的相关信息,避免安全事故的发生,全面获取危险品的信息;与现有的危险品数据库信息进行有效的结合,智能化识别危化品,快速获取、鉴别危化品信息;对识别出的信息与数据库返回的信息、或者二维码标签与图像识别信息进行比对,提示用户不一致的信息,使用户能针对危化品信息进行及时的处理;通过定位模块进行不同角度的旋转,以全面覆盖危化品的外包装侧,通过不同角度的旋转照射在危化品的不同位置,以准确定位二维码扫描的区域,避免不断调整图像采集模块的扫描角度、扫描距离等,提高二维码的解析效率;护目镜还能与客户端关联,客户端可以为管理人员所拥有的客户端,也可以为当前检验用户所拥有的客户端,使得远端的管理人员也能实时地了解当前检验的危化品信息,以及时地对当前的危化品检验进行指导;同时,检验用户在完成对危化品的检验后,能够对当前危化品的信息进行汇总、整理与分析,完善危化品的检验过程;护目镜端还设置语音转换模块、扬声器模块,将文字信息转换成语音信息进行播放,方便有阅读障碍的用户获取危化品信息,同时通过扬声器播放相应的信息,使用户能在检验的同时获取检验结果,及时获取相应的信息,避免危化品检验中的安全事故。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种用于危化品检验的护目镜,包括镜框、镜片和镜腿,其特征在于,在镜框的顶部设置有图像采集模块,在镜框的侧面设置有处理模块;所述处理模块包括放大模块、版本校正模块、二维码解析模块及图像识别模块;
所述放大模块包括:
图像接收模块,用于接收图像采集模块采集的图像;
文字提取模块,用于提取所述采集的图像中的文字;
文字放大模块,用于对提取的文字进行放大;
所述版本校正模块包括:
语言识别模块,用于识别文字的语言类别;
语言转换模块,用于将文字由识别的语言类别转换成目标语言文字;
所述二维码解析模块包括:
图像接收模块,用于接收图像采集模块采集的图像;
二值化模块,用于对接收的二维码图像进行二值化处理,得到二维码黑白图像;
黑白图像识别模块,用于识别所述二维码黑白图像中的内容;
所述图像识别模块包括:
训练模块,用于训练生成3D-CNN分类模型;
图像接收模块,用于接收图像采集模块采集的图像;
分类模块,用于基于所述3D-CNN分类模型识别危化品的类别;
索引模块,用于将识别的危化品的类别通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果。
2.根据权利要求1所述的护目镜,其特征在于,所述护目镜还包括定位模块,用于发出激光照射在外包装上,接收用户的角度调节指令,直到激光的照射位置与二维码位置相匹配,当激光的照射位置与二维码位置相匹配时,调用二维码解析模块。
3.根据权利要求1所述的护目镜,其特征在于,所述护目镜还包括显示模块、声音采集模块、语音转换模块及扬声器模块;所述显示模块用于显示放大模块、版本校正模块、二维码解析模块及图像识别模块的处理结果;所述语音转换模块用于将显示放大模块、版本校正模块、二维码解析模块及图像识别模块的处理结果转换成语音信息,所述扬声器模块用于播放所述语音转换模块转换后的语音信息;所述声音采集模块用于用户指令,以基于相应的指令调用显示放大模块、或版本校正模块、或二维码解析模块或图像识别模块。
4.根据权利要求1所述的护目镜,其特征在于,所述护目镜与客户端关联,所述客户端包括管理人员所拥有的客户端,及当前用户所拥有的客户端,用于接收护目镜获取的危化品信息。
5.根据权利要求3所述的护目镜,其特征在于,当二维码标签中获取的信息与服务器返回的信息不一致、或图像识别的信息与服务器返回的信息不一致时,通过显示模块高亮显示不一致的危化品信息或通过扬声器模块播放不一致的危化品信息。
6.根据权利要求1所述的护目镜,其特征在于,所述二维码解析模块包括:索引模块,用于将二维码解析信息通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果;
危化品信息包括所在单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息、警示标志信息和安全操作规程信息,还包括生产信息、销售信息和运输信息,其中,生产信息包括生产单位、生产时间、生产单位地址和生产单位责任人,销售信息包括销售单位、销售单位地点、销售单位责任人和销售时间,运输信息包括运输单位、出发地址、终点地址、运输线路和运输状态。
7.一种基于权利要求1-6任一项所述的护目镜进行危化品检测的方法,其特征在于,包括步骤S1、对标签文字进行放大;S2、对标签文字进行语言版本校正;S3、对外包装上的二维码信息进行解析;S4、基于危化品图像识别危化品信息;
所述步骤S1具体为:
S11、接收图像采集模块采集的图像;
S12、提取所述采集的图像中的文字;
S13、对提取的文字进行放大;
所述步骤S2具体为:
S21、识别文字的语言类别;
S22、将文字由识别的语言类别转换成目标语言文字;
所述步骤S3具体为:
S31、接收图像采集模块采集的图像;
S32、对接收的二维码图像进行二值化处理,得到二维码黑白图像;
S33、识别所述二维码黑白图像中的内容;
所述步骤S4具体为:
S41、训练生成3D-CNN分类模型;
S42、接收图像采集模块采集的图像;
S43、基于所述3D-CNN分类模型识别危化品的类别;
S44、将识别的危化品的类别通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果。
8.根据权利要求7所述的进行危化品检测的方法,其特征在于,所述步骤S31之前还包括:
S30、发出激光照射在外包装上,接收用户的角度调节指令,直到激光的照射位置与二维码位置相匹配。
9.根据权利要求7所述的进行危化品检测的方法,其特征在于,所述步骤S11之前还包括:
S10、采集用户的控制指令,判断所述控制指令是否为放大文字的指令,若是,执行步骤S11;
所述S13之后还包括S14和/或S15和/或S16、S17,其中,
S14、对放大后的文字进行显示;
S15、将放大后的文字发送到与护目镜关联的客户端;
S16、将获取的文字信息转换成语音信息;
S17、播放转换后的语音信息。
10.根据权利要求7所述的进行危化品检测的方法,其特征在于,步骤S33之后还包括:
S34、将识别的内容通过无线信号收发装置发送到远端的服务器,接收服务器在数据库中的危化品信息索引结果;
危化品信息包括所在单位名称、位置信息、危化品类别、CAS信息、成分信息、重量信息、警示标志信息和安全操作规程信息,还包括生产信息、销售信息和运输信息,其中,生产信息包括生产单位、生产时间、生产单位地址和生产单位责任人,销售信息包括销售单位、销售单位地点、销售单位责任人和销售时间,运输信息包括运输单位、出发地址、终点地址、运输线路和运输状态;
S35、判断二维码标签中获取的信息与服务器返回的信息是否一致,若不一致,高亮显示不一致的危化品信息;
步骤S44之后还包括:
S45、判断图像识别的信息与服务器返回的信息是否一致,若不一致,高亮显示不一致的危化品信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010533058.8A CN111680647A (zh) | 2020-06-12 | 2020-06-12 | 一种用于危化品检验的护目镜及其检验方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010533058.8A CN111680647A (zh) | 2020-06-12 | 2020-06-12 | 一种用于危化品检验的护目镜及其检验方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111680647A true CN111680647A (zh) | 2020-09-18 |
Family
ID=72454648
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010533058.8A Pending CN111680647A (zh) | 2020-06-12 | 2020-06-12 | 一种用于危化品检验的护目镜及其检验方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111680647A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113743412A (zh) * | 2021-07-22 | 2021-12-03 | 苏州藤岛自动化设备有限公司 | 一种基于深度神经网络的包装瓶身文字检测、识别系统 |
Citations (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1157442A (zh) * | 1995-11-15 | 1997-08-20 | 株式会社日立制作所 | 字符识别翻译系统和语音识别系统 |
CN101702154A (zh) * | 2008-07-10 | 2010-05-05 | 三星电子株式会社 | 对基于照相机的图像中的字符进行识别和翻译的方法 |
CN102289652A (zh) * | 2011-08-15 | 2011-12-21 | 广州市旭龙条码设备有限公司 | 红外条形码扫描器 |
CN202383711U (zh) * | 2011-11-30 | 2012-08-15 | 东莞市宏山自动识别技术有限公司 | 可自动调整角度的扫描枪 |
KR101377601B1 (ko) * | 2012-09-20 | 2014-03-25 | 주식회사 인지소프트 | 모바일 카메라를 이용한 자연 영상 다국어 문자 인식과 번역 시스템 및 방법 |
CN103745189A (zh) * | 2014-02-13 | 2014-04-23 | 广东旭龙物联科技股份有限公司 | 一种全方位高速激光条码扫描装置 |
CN105210057A (zh) * | 2013-03-15 | 2015-12-30 | 邓白氏公司 | 多语言商业标记管理以及音译合成 |
CN106056025A (zh) * | 2016-07-11 | 2016-10-26 | 深圳市兴通物联科技有限公司 | 光路结构及其扫码读码方法 |
CN106056024A (zh) * | 2016-07-11 | 2016-10-26 | 深圳市兴通物联科技有限公司 | 光路结构及其扫码读码方法 |
CN106093954A (zh) * | 2016-06-02 | 2016-11-09 | 邓湘 | 一种二维码激光测距车辆定位方法及其设备 |
CN206039075U (zh) * | 2016-09-14 | 2017-03-22 | 孙逸 | 一种智能翻译眼镜 |
CN106778440A (zh) * | 2016-12-21 | 2017-05-31 | 腾讯科技(深圳)有限公司 | 二维码识别方法及装置 |
CN107480660A (zh) * | 2017-09-30 | 2017-12-15 | 深圳市锐曼智能装备有限公司 | 危险物品识别系统及其方法 |
CN108881852A (zh) * | 2018-07-27 | 2018-11-23 | 中船电子科技有限公司 | 一种用于海关缉私执法的智能眼镜控制方法 |
CN109086732A (zh) * | 2018-08-16 | 2018-12-25 | 浙江海韵信息技术有限公司 | 一种智能眼镜侦察终端系统及控制方法 |
CN110058407A (zh) * | 2018-01-19 | 2019-07-26 | 尹寅 | 一种可拍摄照片和视频的智能眼镜系统 |
CN110287749A (zh) * | 2019-08-06 | 2019-09-27 | 广州开创电子技术有限公司 | 一种一维码及二维码的扫描识别设备 |
CN110321748A (zh) * | 2019-08-21 | 2019-10-11 | 北京意锐新创科技有限公司 | 高性能且立式角度可调节的扫码支付装置 |
CN110569849A (zh) * | 2019-08-19 | 2019-12-13 | 北京猫眼视觉科技有限公司 | 一种基于ar眼镜的多仪表同时识别及空间定位方法及系统 |
CN110648098A (zh) * | 2019-09-17 | 2020-01-03 | 深圳市城市公共安全技术研究院有限公司 | 一种危化品存储管理系统 |
CN110689306A (zh) * | 2019-10-08 | 2020-01-14 | 湖南科技大学 | 基于二维码的危化品公路运输管理系统及其运行方法 |
CN110765787A (zh) * | 2019-10-21 | 2020-02-07 | 深圳传音控股股份有限公司 | 一种信息交互的实时翻译方法、介质及终端 |
CN110765990A (zh) * | 2019-12-30 | 2020-02-07 | 浙江啄云智能科技有限公司 | 一种物品智能检测方法及系统、一种计算设备及存储介质 |
CN110909708A (zh) * | 2019-12-02 | 2020-03-24 | 上海秒针网络科技有限公司 | 检查提醒方法和装置、可穿戴硬件设备及存储介质 |
CN111027342A (zh) * | 2020-01-21 | 2020-04-17 | 广州尚臣电子有限公司 | 一种扫描模组 |
CN111242253A (zh) * | 2020-01-07 | 2020-06-05 | 四川安创环保科技有限公司 | 一种基于二维码的钛白粉产品销售追溯系统 |
-
2020
- 2020-06-12 CN CN202010533058.8A patent/CN111680647A/zh active Pending
Patent Citations (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1157442A (zh) * | 1995-11-15 | 1997-08-20 | 株式会社日立制作所 | 字符识别翻译系统和语音识别系统 |
CN101702154A (zh) * | 2008-07-10 | 2010-05-05 | 三星电子株式会社 | 对基于照相机的图像中的字符进行识别和翻译的方法 |
CN102289652A (zh) * | 2011-08-15 | 2011-12-21 | 广州市旭龙条码设备有限公司 | 红外条形码扫描器 |
CN202383711U (zh) * | 2011-11-30 | 2012-08-15 | 东莞市宏山自动识别技术有限公司 | 可自动调整角度的扫描枪 |
KR101377601B1 (ko) * | 2012-09-20 | 2014-03-25 | 주식회사 인지소프트 | 모바일 카메라를 이용한 자연 영상 다국어 문자 인식과 번역 시스템 및 방법 |
CN105210057A (zh) * | 2013-03-15 | 2015-12-30 | 邓白氏公司 | 多语言商业标记管理以及音译合成 |
CN103745189A (zh) * | 2014-02-13 | 2014-04-23 | 广东旭龙物联科技股份有限公司 | 一种全方位高速激光条码扫描装置 |
CN106093954A (zh) * | 2016-06-02 | 2016-11-09 | 邓湘 | 一种二维码激光测距车辆定位方法及其设备 |
CN106056025A (zh) * | 2016-07-11 | 2016-10-26 | 深圳市兴通物联科技有限公司 | 光路结构及其扫码读码方法 |
CN106056024A (zh) * | 2016-07-11 | 2016-10-26 | 深圳市兴通物联科技有限公司 | 光路结构及其扫码读码方法 |
CN206039075U (zh) * | 2016-09-14 | 2017-03-22 | 孙逸 | 一种智能翻译眼镜 |
CN106778440A (zh) * | 2016-12-21 | 2017-05-31 | 腾讯科技(深圳)有限公司 | 二维码识别方法及装置 |
CN107480660A (zh) * | 2017-09-30 | 2017-12-15 | 深圳市锐曼智能装备有限公司 | 危险物品识别系统及其方法 |
CN110058407A (zh) * | 2018-01-19 | 2019-07-26 | 尹寅 | 一种可拍摄照片和视频的智能眼镜系统 |
CN108881852A (zh) * | 2018-07-27 | 2018-11-23 | 中船电子科技有限公司 | 一种用于海关缉私执法的智能眼镜控制方法 |
CN109086732A (zh) * | 2018-08-16 | 2018-12-25 | 浙江海韵信息技术有限公司 | 一种智能眼镜侦察终端系统及控制方法 |
CN110287749A (zh) * | 2019-08-06 | 2019-09-27 | 广州开创电子技术有限公司 | 一种一维码及二维码的扫描识别设备 |
CN110569849A (zh) * | 2019-08-19 | 2019-12-13 | 北京猫眼视觉科技有限公司 | 一种基于ar眼镜的多仪表同时识别及空间定位方法及系统 |
CN110321748A (zh) * | 2019-08-21 | 2019-10-11 | 北京意锐新创科技有限公司 | 高性能且立式角度可调节的扫码支付装置 |
CN110648098A (zh) * | 2019-09-17 | 2020-01-03 | 深圳市城市公共安全技术研究院有限公司 | 一种危化品存储管理系统 |
CN110689306A (zh) * | 2019-10-08 | 2020-01-14 | 湖南科技大学 | 基于二维码的危化品公路运输管理系统及其运行方法 |
CN110765787A (zh) * | 2019-10-21 | 2020-02-07 | 深圳传音控股股份有限公司 | 一种信息交互的实时翻译方法、介质及终端 |
CN110909708A (zh) * | 2019-12-02 | 2020-03-24 | 上海秒针网络科技有限公司 | 检查提醒方法和装置、可穿戴硬件设备及存储介质 |
CN110765990A (zh) * | 2019-12-30 | 2020-02-07 | 浙江啄云智能科技有限公司 | 一种物品智能检测方法及系统、一种计算设备及存储介质 |
CN111242253A (zh) * | 2020-01-07 | 2020-06-05 | 四川安创环保科技有限公司 | 一种基于二维码的钛白粉产品销售追溯系统 |
CN111027342A (zh) * | 2020-01-21 | 2020-04-17 | 广州尚臣电子有限公司 | 一种扫描模组 |
Non-Patent Citations (1)
Title |
---|
丁火平;黄灿林;陈建平;: "一种危化品安全综合信息监控与应急系统体系框架", 计算机应用研究, no. 07, 15 July 2009 (2009-07-15) * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113743412A (zh) * | 2021-07-22 | 2021-12-03 | 苏州藤岛自动化设备有限公司 | 一种基于深度神经网络的包装瓶身文字检测、识别系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113592044B (zh) | 一种笔迹特征分析方法及装置 | |
CN112436477A (zh) | 一种变电站继电保护装置定值快速核对仪器 | |
CN111860487B (zh) | 基于深度神经网络的碑文标注检测识别系统 | |
CN111738979B (zh) | 证件图像质量自动检查方法及系统 | |
CN111680647A (zh) | 一种用于危化品检验的护目镜及其检验方法 | |
CN110287981B (zh) | 基于生物启发性表征学习的显著性检测方法及系统 | |
CN114662605A (zh) | 基于改进的YOLOv5模型的火焰检测方法 | |
Itakura et al. | Simple and effective tool for estimating tree trunk diameters and tree species classification | |
CN115359412B (zh) | 一种盐酸中和实验评分方法、装置、设备及可读存储介质 | |
CN117275025A (zh) | 一种用于批量图像标注的处理系统 | |
Almuzaini et al. | A review on medication identification techniques for visually impaired patients | |
CN114399816B (zh) | 社区火灾风险感知方法及装置 | |
Navada et al. | Design of Mobile Application for Assisting Color Blind People to Identify Information on Sign Boards. | |
Moetesum et al. | Segmentation and classification of offline hand drawn images for the bgt neuropsychological screening test | |
Swathi et al. | Assistance system for visually impaired using AI | |
CN114152621A (zh) | 一种处理方法及处理装置、处理系统 | |
CN115497152A (zh) | 基于图像识别的客户信息分析方法、装置、系统及介质 | |
Tangwannawit et al. | Recognition of lottery digits using OCR technology | |
KR101771810B1 (ko) | 식물의 종 판별장치 및 방법 | |
Rajput et al. | Alternative product label reading and speech conversion: an aid for blind person | |
Swathika et al. | Emergency exit sign detection system for visually impaired people | |
CN112232390A (zh) | 一种高像素大图像的识别方法和系统 | |
CN111046860A (zh) | 一种基于移动载体的智能理赔系统 | |
Raja et al. | A Peculiar Reading System for Blind People using OCR Technology | |
KR20190111284A (ko) | 건강검진 결과 스캔 및 분석방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |