CN108076295A - 一种高效率的基于多维码的机器视觉通信系统 - Google Patents

一种高效率的基于多维码的机器视觉通信系统 Download PDF

Info

Publication number
CN108076295A
CN108076295A CN201711348782.8A CN201711348782A CN108076295A CN 108076295 A CN108076295 A CN 108076295A CN 201711348782 A CN201711348782 A CN 201711348782A CN 108076295 A CN108076295 A CN 108076295A
Authority
CN
China
Prior art keywords
module
led
multidimensional
data
exposure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711348782.8A
Other languages
English (en)
Other versions
CN108076295B (zh
Inventor
郑海川
张�浩
程康伟
张宇
张明
易超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Five Special Automation Engineering Co Ltd
Original Assignee
Beijing Five Special Automation Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Five Special Automation Engineering Co Ltd filed Critical Beijing Five Special Automation Engineering Co Ltd
Priority to CN201711348782.8A priority Critical patent/CN108076295B/zh
Publication of CN108076295A publication Critical patent/CN108076295A/zh
Application granted granted Critical
Publication of CN108076295B publication Critical patent/CN108076295B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optical Communication System (AREA)

Abstract

本发明涉及一种高效率的基于多维码的机器视觉通信系统，属于危险品生产线或仓储作业的通讯领域。包括发送端和接收端；且发送端和接收端均包括如下模块：LED多维码显示矩阵、LED多维码显示控制电路、物理层协议分析处理模块、多维码解码器、传感器曝光同步控制电路和全局曝光高速传感器；其中，发送端和接收端中相同名称的模块互为逆过程。本发明在一个信息块中能够传输多bit信息；增加图像刷新速度，解决图像刷新与视觉传感器曝光的同步问题。

Description

一种高效率的基于多维码的机器视觉通信系统
技术领域
本发明涉及一种高效率的基于多维码的机器视觉通信系统，属于危险品生产线或仓储作业的通讯领域。
背景技术
目前，在工业自动化领域中无线通信技术应用广泛，相对于传统有线通信技术，该技术无需物理路线，有效去除铺设电缆的繁琐步骤，消除复杂工业环境对无线技术的影响。然而在危险品生产线或仓储作业过程中，许多无线通信技术受到了使用限制，WLAN通信存在窃听、篡改数据等风险；无线射频技术由于其辐射特性对危险品的性能产生影响，导出安全问题的发生。基于视觉的通信技术不受频谱管理限制，并且通信设备之间互不干扰，可解决危险品领域的无线通信问题。
当前使用二维码的视觉通信系统，有如下缺陷：
1.使用二维码作为图像表现形式：
缺点：二维码中每个黑白块，只能传输1bit信息，限制传输带宽。
2.二维码显示载体使用液晶显示器：
缺点1：二维码图像刷新速度低，限制传输带宽。
缺点2：二维码图像刷新与摄像机曝光时间没有同步，图像刷新速度至少低于摄像机曝光频率的1/2，进一步限制了传输带宽。
发明内容
本发明的目的是克服当前使用二维码的视觉通信系统存在限制传输带宽、图像刷新速度低为主的技术缺陷，提出了一种高效率的基于多维码的机器视觉通信系统；该系统解决了如下两个核心问题：1)在一个信息块中，实现多bit信息的传输；2)增加图像刷新速度，解决图像刷新与视觉传感器曝光的同步问题。
本发明所提的一种高效率的基于多维码的机器视觉通信系统，包括发送端和接收端；且发送端和接收端均包括如下模块：LED多维码显示矩阵、LED多维码显示控制电路、物理层协议分析处理模块、多维码解码器、传感器曝光同步控制电路和全局曝光高速传感器；
上述各个模块的连接关系如下：
LED多维码显示矩阵与LED多维码显示控制电路相连，LED多维码显示控制电路与物理层协议分析处理模块相连；物理层协议分析处理模块与多维码解码器相连，多维码解码器与传感器曝光同步控制电路相连，传感器曝光同步控制电路和全局曝光高速传感器相连；
分别将发送端模块编号为1，接收端中的模块编号为2，即：
发送端包含如下模块：LED多维码显示矩阵(1)、LED多维码显示控制电路(1)、物理层协议分析处理模块(1)、多维码解码器(1)、传感器曝光同步控制电路(1)、全局曝光高速传感器(1)；接收端包括如下模块：全局曝光高速传感器(2)、传感器曝光同步控制电路(2)、多维码解码器(2)、物理层协议分析处理模块(2)、LED多维码显示控制电路(2)以及LED多维码显示矩阵(2)；
其中，发送端和接收端中相同名称的模块互为逆过程；
其中，LED多维码显示矩阵，由多个发光二极管排列成矩阵形状，矩阵形状被区分成如下4个区域：
■识别标记区域：分布在矩阵区域的边缘位置，分为最亮参考点和最暗参考点两类：
◆最亮参考点：指示显示矩阵中，亮度最大值标识点；
◆最暗参考点：指示显示矩阵中，亮度最小值标识点；
■数据区域：是有效数据传输区域，由多个发光二极管组成，亮度值介于最亮参考点和最暗参考点之间；
■校验区域：提供校验数据，由多个发光二极管组成，亮度值介于最亮参考点和最暗参考点之间；
■广播同步序列标识区域：接收端用于解调数据发送周期和时刻的参考区域；由多个发光二极管组成，发送的帧周期基础上，又将每个周期分为多个相位，每个发光二极管亮暗的时间相位各不相同；
LED多维码显示控制电路又包括发送数据的比特位并串转换模块、多维度比特重组模块以及LED亮度控制模块；LED多维码显示控制电路接收物理层发送的数据，并将数据转化为控制LED矩阵亮暗的脉冲信号；
LED多维码显示控制电路中发送数据的比特位并串转换模块将需要发送的多位宽有效数据，转换成单比特序列；
多维度比特重组模块根据现实传感器亮度级数分辨率，确定多维度数量，并重组多维度比特序列；
LED亮度控制模块基于每个LED通过独立的亮度控制电路控制LED亮度，并重组数据，调整LED开关脉冲占空比，实现LED的亮度值与多维重组数据值相对应；
发送端的物理层协议分析处理模块，即物理层协议分析处理模块(1)将有效数据拆分为多个包，每个数据包添加各自的校验信息；
接收端的物理层协议分析处理模块，即物理层协议分析处理模块(2)将获得的数据减掉校验信息，校验不通过，则发送端重新发包，如果数据校验通过，开始组包；
多维码解码器包括如下功能模块：多维码标识区域定位模块、分割多维矩阵区域模块、亮度归一化模块、最小数据块分割模块、亮度分割模块以及数据重组模块；多维码解码器将数字图像数据解码为物理层协议分析模块所需要的数据信息；
其中，多维码解码器中的多维码标识区域定位模块具体通过图像二值化处理、标识区域的模板匹配的方式，获得矩阵区域在图像中的具体坐标位置、角度为主的信息；
分割多维矩阵区域模块将多维矩阵区域从原图中截取，并存储到的对应的内存空间中；
亮度归一化模块根据标识最亮参考点和标识最暗参考点的亮度值和位置分部，对多维矩阵区进行亮度归一化处理，消除区域亮度值的差别；
最小数据块分割模块将矩阵区域的每个LED对应的图像数据进行提取；
亮度分割模块：根据维度级数，根据每个最小亮度数据块的亮度值转换为多位宽数据；
数据重组模块将多位宽数据进行并串转换，排列为1比特序列，再将1比特序列进行分割重组为字节序列；
传感器曝光同步电路模块广播同步序列同步模块以及曝光周期和相位调整模块；
其中，传感器曝光同步电路模块中的广播同步序列同步模块对接收不同曝光周期和相位的图片，进行广播同步区域的图像块与协议规定的亮暗序列进行最大似然估计，计算出最佳曝光周期和相位；
曝光周期和相位调整模块的功能是接入高精度晶振，参考周期计数器和相位计数器的变化，生成图像传感器的曝光触发信号；
全局高速曝光传感器为全局曝光、高帧率以及LVDS接口的图像传感器。
有益效果
本发明一种高效率的基于多维码的机器视觉通信系统，与现有技术相比，具有如下有益效果：
1.在一个信息块中，实现多bit信息的传输；
2.增加图像刷新速度，解决图像刷新与视觉传感器曝光的同步问题。
附图说明
图1是本发明所述一种高效率的基于多维码的机器视觉通信系统的示意图；
图2是本发明所述的一种高效率的基于多维码的机器视觉通信系统中具体实施时LED多维码显示矩阵的示意图；
图3是本发明所述的多维码图案中帧和相位的关系示意图。
具体实施方式
下面结合附图，对本发明所述的一种高效率的基于多维码的机器视觉通信系统进行详细阐述。
实施例1
本实施例叙述了本发明所述一种高效率的基于多维码的机器视觉通信系统的具体实施。如图1所示，为本发明所述的机器视觉通信系统的框架示意图。从图中可以看到，该机器视觉通信系统主要包括发送端和接收端：其中，发送端和接收端分别包括LED多维码显示矩阵；LED多维码显示控制电路；物理层协议分析处理、多维码解码器、传感器曝光同步控制电路、全局曝光高速传感器。
具体到本实施例的实施，LED(发光二极管)多维码显示矩阵，如图2所示。从图2可以看出：100个发光二极管排成10x10矩阵形状，并被区分成如发明内容所述的4个区域：识别标记区域、校验区域、数据区域和广播同步序列标识区域，灯柱响应频率大于1MHz。
LED多维码显示控制电路中的多维度比特重组模块根据现实传感器亮度级数分辨率，确定多维度数量，并重组；具体实施时多维度比特序列亮度分辨率为2048级，那么11位2bit数据组成一个多维度比特数。
图3是本发明具体实施时多维码图案中帧和相位的关系示意图；图中帧率为1000Hz，相位分辨率是0.1ms；本实例具体实施时，接收端图像传感器的亮度级别可以分为2048级别，那么LED灯柱的亮暗也需要通过占空比调整亮度到2048级，用11bit位宽表示。
图3中，针对3个不同相位0.1ms、0.2ms和0.3ms，同一帧识别标记区域、数据区域、校验区域的亮度值不变，广播同步序列标识区域，灯柱亮度值按照相位进行先后明暗变化。
以上所述为本发明的较佳实施例而已，本发明不应该局限于该实施例和附图所公开的内容。凡是不脱离本发明所公开的精神下完成的等效或修改，都落入本发明保护的范围。

Claims (7)

1.一种高效率的基于多维码的机器视觉通信系统，其特征在于：包括发送端和接收端；且发送端和接收端均包括如下模块：LED多维码显示矩阵、LED多维码显示控制电路、物理层协议分析处理模块、多维码解码器、传感器曝光同步控制电路和全局曝光高速传感器；
上述各个模块的连接关系如下：
LED多维码显示矩阵与LED多维码显示控制电路相连，LED多维码显示控制电路与物理层协议分析处理模块相连；物理层协议分析处理模块与多维码解码器相连，多维码解码器与传感器曝光同步控制电路相连，传感器曝光同步控制电路和全局曝光高速传感器相连；
分别将发送端模块编号为1，接收端中的模块编号为2，即：
发送端包含如下模块：LED多维码显示矩阵(1)、LED多维码显示控制电路(1)、物理层协议分析处理模块(1)、多维码解码器(1)、传感器曝光同步控制电路(1)、全局曝光高速传感器(1)；接收端包括如下模块：全局曝光高速传感器(2)、传感器曝光同步控制电路(2)、多维码解码器(2)、物理层协议分析处理模块(2)、LED多维码显示控制电路(2)以及LED多维码显示矩阵(2)；
其中，发送端和接收端中相同名称的模块互为逆过程。
2.根据权利要求1所述的一种高效率的基于多维码的机器视觉通信系统，其特征在于：其中，LED多维码显示矩阵，由多个发光二极管排列成矩阵形状，矩阵形状被区分成如下4个区域：
■识别标记区域：分布在矩阵区域的边缘位置，分为最亮参考点和最暗参考点两类：
◆最亮参考点：指示显示矩阵中，亮度最大值标识点；
◆最暗参考点：指示显示矩阵中，亮度最小值标识点；
■数据区域：是有效数据传输区域，由多个发光二极管组成，亮度值介于最亮参考点和最暗参考点之间；
■校验区域：提供校验数据，由多个发光二极管组成，亮度值介于最亮参考点和最暗参考点之间；
■广播同步序列标识区域：接收端用于解调数据发送周期和时刻的参考区域；由多个发光二极管组成，发送的帧周期基础上，又将每个周期分为多个相位，每个发光二极管亮暗的时间相位各不相同。
3.根据权利要求1所述的一种高效率的基于多维码的机器视觉通信系统，其特征在于：LED多维码显示控制电路又包括发送数据的比特位并串转换模块、多维度比特重组模块以及LED亮度控制模块；LED多维码显示控制电路接收物理层发送的数据，并将数据转化为控制LED矩阵亮暗的脉冲信号；
LED多维码显示控制电路中发送数据的比特位并串转换模块将需要发送的多位宽有效数据，转换成单比特序列；
多维度比特重组模块根据现实传感器亮度级数分辨率，确定多维度数量，并重组多维度比特序列；
LED亮度控制模块基于每个LED通过独立的亮度控制电路控制LED亮度，并重组数据，调整LED开关脉冲占空比，实现LED的亮度值与多维重组数据值相对应。
4.根据权利要求1所述的一种高效率的基于多维码的机器视觉通信系统，其特征在于：发送端的物理层协议分析处理模块，即物理层协议分析处理模块(1)将有效数据拆分为多个包，每个数据包添加各自的校验信息；
接收端的物理层协议分析处理模块，即物理层协议分析处理模块(2)将获得的数据减掉校验信息，校验不通过，则发送端重新发包，如果数据校验通过，开始组包。
5.根据权利要求1所述的一种高效率的基于多维码的机器视觉通信系统，其特征在于：多维码解码器包括如下功能模块：多维码标识区域定位模块、分割多维矩阵区域模块、亮度归一化模块、最小数据块分割模块、亮度分割模块以及数据重组模块；多维码解码器将数字图像数据解码为物理层协议分析模块所需要的数据信息；
其中，多维码解码器中的多维码标识区域定位模块具体通过图像二值化处理、标识区域的模板匹配的方式，获得矩阵区域在图像中的具体坐标位置、角度为主的信息；
分割多维矩阵区域模块将多维矩阵区域从原图中截取，并存储到的对应的内存空间中；
亮度归一化模块根据标识最亮参考点和标识最暗参考点的亮度值和位置分部，对多维矩阵区进行亮度归一化处理，消除区域亮度值的差别；
最小数据块分割模块将矩阵区域的每个LED对应的图像数据进行提取；
亮度分割模块：根据维度级数，根据每个最小亮度数据块的亮度值转换为多位宽数据；
数据重组模块将多位宽数据进行并串转换，排列为1比特序列，再将1比特序列进行分割重组为字节序列。
6.根据权利要求1所述的一种高效率的基于多维码的机器视觉通信系统，其特征在于：传感器曝光同步电路模块广播同步序列同步模块以及曝光周期和相位调整模块；
其中，传感器曝光同步电路模块中的广播同步序列同步模块对接收不同曝光周期和相位的图片，进行广播同步区域的图像块与协议规定的亮暗序列进行最大似然估计，计算出最佳曝光周期和相位；
曝光周期和相位调整模块的功能是接入高精度晶振，参考周期计数器和相位计数器的变化，生成图像传感器的曝光触发信号。
7.根据权利要求1所述的一种高效率的基于多维码的机器视觉通信系统，其特征在于：全局高速曝光传感器为全局曝光、高帧率以及LVDS接口的图像传感器。
CN201711348782.8A 2017-12-15 2017-12-15 一种基于多维码的机器视觉通信系统 Active CN108076295B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711348782.8A CN108076295B (zh) 2017-12-15 2017-12-15 一种基于多维码的机器视觉通信系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711348782.8A CN108076295B (zh) 2017-12-15 2017-12-15 一种基于多维码的机器视觉通信系统

Publications (2)

Publication Number Publication Date
CN108076295A true CN108076295A (zh) 2018-05-25
CN108076295B CN108076295B (zh) 2020-04-24

Family

ID=62158342

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711348782.8A Active CN108076295B (zh) 2017-12-15 2017-12-15 一种基于多维码的机器视觉通信系统

Country Status (1)

Country Link
CN (1) CN108076295B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109450534A (zh) * 2018-09-29 2019-03-08 吉林大学 基于图像传感器的可见光无线局域网
CN113055090A (zh) * 2021-05-11 2021-06-29 吉林大学 与拍摄方位无关的多光源光学成像通信系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11223870A (ja) * 1998-02-06 1999-08-17 Fuji Photo Optical Co Ltd カメラ
WO2000028485A1 (en) * 1998-11-07 2000-05-18 Identalink Uk Limited Identity system
CN101052987A (zh) * 2004-11-02 2007-10-10 丁勇皙 使用多维码来请求服务的方法和装置
CN101171597A (zh) * 2005-03-11 2008-04-30 手持产品公司 具有全局电子快门控制的条形码读取装置
CN102103669A (zh) * 2009-12-22 2011-06-22 英特尔公司 使用编码的安全性信息进行的自动安全性控制
CN102625124A (zh) * 2012-03-05 2012-08-01 北京交通大学 一种立体编码、解码装置及系统
US20130020393A1 (en) * 2011-07-22 2013-01-24 Electronics And Telecommunications Research Institute Apparatus and method for dynamic multidimensional codes with time and visual recognition information
CN103761798A (zh) * 2014-01-07 2014-04-30 立德高科(北京)数码科技有限责任公司 多维防伪信息图码算法规则及防伪信息数据的识别方法
CN105354747A (zh) * 2015-10-09 2016-02-24 徐蔚 基于统一发码的信息处理网络及方法和传感接入设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11223870A (ja) * 1998-02-06 1999-08-17 Fuji Photo Optical Co Ltd カメラ
WO2000028485A1 (en) * 1998-11-07 2000-05-18 Identalink Uk Limited Identity system
CN101052987A (zh) * 2004-11-02 2007-10-10 丁勇皙 使用多维码来请求服务的方法和装置
CN101171597A (zh) * 2005-03-11 2008-04-30 手持产品公司 具有全局电子快门控制的条形码读取装置
CN102103669A (zh) * 2009-12-22 2011-06-22 英特尔公司 使用编码的安全性信息进行的自动安全性控制
US20130020393A1 (en) * 2011-07-22 2013-01-24 Electronics And Telecommunications Research Institute Apparatus and method for dynamic multidimensional codes with time and visual recognition information
CN102625124A (zh) * 2012-03-05 2012-08-01 北京交通大学 一种立体编码、解码装置及系统
CN103761798A (zh) * 2014-01-07 2014-04-30 立德高科(北京)数码科技有限责任公司 多维防伪信息图码算法规则及防伪信息数据的识别方法
CN105354747A (zh) * 2015-10-09 2016-02-24 徐蔚 基于统一发码的信息处理网络及方法和传感接入设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109450534A (zh) * 2018-09-29 2019-03-08 吉林大学 基于图像传感器的可见光无线局域网
CN109450534B (zh) * 2018-09-29 2021-05-25 吉林大学 基于图像传感器的可见光无线局域网
CN113055090A (zh) * 2021-05-11 2021-06-29 吉林大学 与拍摄方位无关的多光源光学成像通信系统
CN113055090B (zh) * 2021-05-11 2022-03-22 吉林大学 与拍摄方位无关的多光源光学成像通信系统

Also Published As

Publication number Publication date
CN108076295B (zh) 2020-04-24

Similar Documents

Publication Publication Date Title
Fang et al. High-speed indoor navigation system based on visible light and mobile phone
CN106537816B (zh) 推导可见光信号中标识符的方法、设备和计算机可读介质
US9450671B2 (en) Transmitting and receiving apparatus and method for light communication, and the light communication system thereof
US10218440B2 (en) Method for visible light communication using display colors and pattern types of display
Aoyama et al. Visible light communication using a conventional image sensor
CN105306141B (zh) 一种使用摄像头的室内可见光异步定位方法
CN103959749A (zh) 发送装置、接收装置及方法
CN107255524B (zh) 一种基于移动设备摄像头检测led光源的频率的方法
CN111404607B (zh) 基于机器学习和ofdm的室内可见光通信定位方法及系统
CN103986517B (zh) 一种采用动态二维图像信息进行信息传输的方法及系统
CN106372701B (zh) 一种光标签的编码及识别方法
CN108076295A (zh) 一种高效率的基于多维码的机器视觉通信系统
KR20080012270A (ko) 촬상 장치들을 위치추적하는 시스템 및 방법
WO2019120156A1 (zh) 基于光标签的定位方法及系统
CN105388455B (zh) 摄像头室内可见光定位系统中一种消除背景光扰动的方法
CN109361457A (zh) 基于可见光通信的信号收发装置及实现方法、系统
CN111614399B (zh) 智能终端之间的可见光高速通信方法
CN106797250B (zh) 用于传送和接收可见光数据的装置和方法
CN105611274B (zh) 一种三维图像数据的传输方法、装置及三维成像系统
CN1332529A (zh) 用于确定一个数字信号的质量的设备与方法
CN107888288A (zh) 一种基于移动终端的短距离可见光通信方法及其硬件系统
Qv et al. A high efficient code for visible light positioning system based on image sensor
CN111490823A (zh) 基于卷积神经网络的可见光成像通信解码方法
CN109671121A (zh) 一种控制器及其可见光定位视觉检测方法
CN106650544A (zh) 数据传递装置、数据读取装置、数据编译码系统及其方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant