文章编号：1002-2082 (2021) 02-0276-07
批量高速二维码视觉检测识别系统
李建刚1,2，黄诗浩1,2，郑启强1,2，杨 鑫1,2，黄 靖2，周伯乐3
（1. 福建工程学院 微电子技术研究中心，福建 福州 350100；2. 福建工程学院 工业自动化福建省高校工程研究中心，
福建 福州 350118；3. 深圳市智致物联科技有限公司，广东 深圳 518116）
摘 要：针对工业实际项目提出一种高效、准确的二维码识别方法，并开发了基于机器视觉的二维码高速、批量识别系统。首先根据被测二维码在目标子空间内的位置，提出利用几何关系定位每个二维码感兴趣区域并批量处理二维码的方法。在此基础上，采用添加高斯噪声的方式模拟生产实际中可能产生的噪声，评估系统抗噪能力。最后分析系统识别率与二维码运动速度的关系并比较实验结果。通过实验验证，在1 800张的测试数据集中，二维码移动速度在296.8 mm/s 情况下，无噪声图像中每个二维码定位识别平均时间为17.8 ms ，有噪声图像为21.3 ms ，识别率均为100%，该系统满足实时在线检测需求。
关键词：机器视觉；条码识别；线阵相机；图像处理
中图分类号：TN911.73 文献标志码：A DOI ：10.5768/JAO202142.0202004
Identification system for batch of two-dimensional code
with high speed bad on machine vision
LI Jian’gang 1,2，HUANG Shihao 1,2，ZHENG Qiqiang 1,2，YANG Xin 1,2，HUANG Jing 2，ZHOU Bole 3
（1. Rearch Center for Microelectronics and Engineering, Fujian University of Technology, Fuzhou 350100, China ；2. Fujian Provincial University Engineering Rearch Center for Industrial Automation, Fuzhou 350118, China ；
3. Shenzhen Zhizhiwulian Technology Company Limited, Shenzhen 518116，China ）
Abstract ：A recognition technology of two-dimensional code was propod with an effective and accurate way for industrial applications, and the identification system for a batch of two-dimensional code with high speed bad on machine vision was developed. Firstly, a method of locating the region of interest in each two-dimensional code with batch processing was propod according to the geometric relationship between the measured two-dimensional code and the target subspace. Then, the anti-noi ability of the system was evaluated by adding Gaussian n
oi in the images, which simulated the noi produced in the actual process.Finally, the relationship between the recognition rate in the system and the motion speed of the two-dimensional code was analyzed, and the experimental results with references were compared. The results indicate that the average recognition time of each two-dimensional code is 17.8 ms with noiless images and is 21.3 ms with noi images respectively in the test data t of 1 800 sheets with the motion speed of 296.8 mm/s, and the recognition rate is 100%. The system meets the online detection requirements.Key words ：machine vision ；barcode recognition ；linear array camera ；image processing
raper的中文意思是什么引言
二维码能够存储商品的生产数据，如制造日
期、原产地等，具有信息容量大、译码可靠性高以及读取速度快等优点，广泛应用于工业、农业、生
收稿日期：2020-09-30； 修回日期：2020-10-27
基金项目：国家自然科学基金青年基金（61604041）；福建省自然科学基金青年基金（2016J05147）
作者简介：李建刚（1990−），男，硕士研究生，主要从事机器视觉技术方面的研究。E-mail ：*****************通信作者：黄诗浩（1985−），男，博士，副教授，主要从事光电信息材料与器件、机器视觉等方面的研究。E-mail ：********************
第 42 卷 第 2 期应 用 光 学Vol. 42 No. 22021 年 3 月Journal of Applied Optics
Mar. 2021
物医疗检测等领域[1-3]。准确识别二维码所包含的信息对商品数据的高效采集、分类、存储等具有重要的意义。传统识别二维码的方法是通过手持二维码扫描枪或智能手机进行识别，具有速度慢、效率低、误检及漏检等缺点。基于机器视觉的二维码识别具有自动化程度高、速度快等优点，在工业生产、生物检测等领域具有较大的应用价值。
基于机器视觉的二维码识别问题，主要的研究方向是针对不同的应用场景，通过数学算法提高二维码的识别效率。如为了实现复杂背景下二维条码区域的有效定位，文献[4]基于透视N点投影算法，借助李群和李代数之间的局部同构关系，对二维码进行定位识别，识别的稳定性和精确度都比较高，但未见识别时间方面的报道；文献[5]采用传统的Hough变换纠偏，无法满足复杂背景下的二维码定位工作。文献[6]引入了机器学习和级联过滤的策略提高定位精度，但该方法处理的时间较长，不适用于批量识别检测。文献[7]结合曲面拟合和改进的自适应阈值法，分割图像，有效提升了二维码的识别效率。
文献[8]提出一种基于二维码的符号特征寻找满足三层包围关系的连通区域图形，避免了变换校正不确定性等问题，从而达到对二维码的定位，提高识别速度。这些算法均针对特殊的应用场合，能够达到二维码的准确识别，但是引入的算法往往比较复杂，导致二维码的识码时间较长，不适合实时识别二维码的应用场合。
在噪声干扰下的二维码检测方面，文献[9]利用双边滤波消除图像中的背景噪声，提高二维码识别成功率。文献[10]采用图像预处理与中值滤波算法优化了传统二维码识别算法，但在识码速度方面略有不足。文献[11]提出一种基于稀疏表示和字典学习的自适应去噪算法，对每个图像块进行稀疏分解然后训练，能在滤除噪声的同时，保持图像的细节，提高了二维码的识别效率，但实时识别能力较差。文献[12]提出利用窗口系数的改进中值滤波方法，识别二维码，识别率达到100%。文献[13]通过改进的边缘检测方法，具有较强的抗噪声能力，但所消耗的时间随之增加。
综上，针对复杂环境下图像二维码的定位及去除噪声干扰方面，不同的算法可以提高二维码的识别率，但是复杂的算法往往以牺牲识别时间为代价。本文立足于工业实际项目，提出利用蓝牙芯片表面二维码在视场中的几何关系定位二维码感兴趣区域并批量处理识别二维码的方法。开发了基于机器视觉的二维码高速、批量识别系统，记录每个蓝牙芯片上的二维码信息，实现批量蓝牙芯片的快速识别并准确出库与入库，解决实际应用中存在的问题。
1 项目需求分析及系统设计
1.1 项目需求分析
本项目所要识别的二维码被贴在蓝牙芯片上，蓝牙芯片按10×10的阵列排布于物料盘上，应用机器视觉检测技术识别物料盘中所有的二维码信息，记录每个蓝牙芯片的生产编号，实现批量蓝牙芯片的快速出入库。所设计的二维码识别系统方案如图1所示，装满蓝牙芯片的物料盘放置在传送带上，当物料盘移动到相机视场时，相机采集图像并由自主开发的检测软件对图像中所有二维码进行识别，并标注出具体的码制正确、码制错误、漏贴以及无法识别的二维码等情况的位置。
IT: Information transfer
IT
IC
LAC
CB
MT
MB
LS
IC: Industrial computer
LAC: Linear array camera
MT: Material tray
CB: Conveyor belt
LS: Light source
MB: Mobile board
图1二维码识别系统原理图
Fig. 1 Schematic of two-dimensional code recognition system
本项目需求是快速、批量识别二维码，识别率达到99%以上，还需要考虑光反射等原因造成采集图像不清晰以及图像传感器因长期工作温度过高等原因引起的图像噪声问题。
1.2 批量二维码初定位
依靠目标检测等复杂的算法[14-15]实现二维码的目标定位存在着定位时间过长等缺点，不适用于本项目的实时检测识别二维码特点。本文根据项目自身的特点，设计了一种基于位置几何关系的二维码自动定位方法。其原理如图2所示。首先通过模板匹配定位图像中物料盘上的两个标志
zip是什么意思应用光学 2021，42（2） 李建刚，等：批量高速二维码视觉检测识别系统· 277 ·
点MP ，得到物料盘与像素坐标原点PCO 的相对位置信息；其次根据标志点MP 的位置与每个蓝牙芯片的位置关系，定位每个蓝牙芯片的中心坐标位
∆x ∆y 其中：m ，n 均为1至10内的正整数，m 对应于本项目的100个批量二维码的列数，n 对应于行数；、
分别为从像素坐标原点PCO 到标志点MP 的
横、纵坐标的距离；w 1、l 1分别为标志点MP 到第1个二维码横、纵坐标的距离，w 2、l 2为相邻两个二维码之间横、纵坐标的距离。以蓝牙芯片的中心位置自动生成100个600×375像素的蓝牙芯片感兴
趣的区域（region of interest ，ROI ）。最后对每个区域的ROI 进行图像处理与二维码识别，并显示结果。该方法运用在二维码初定位这一步骤，相比于其他的图像定位方法，能节省更多的时间。值得说明的是被测蓝牙芯片必须都放置在物料盘的指定位置（凹槽），且自动生成的ROI 尺寸需设定的足够大。
1.3 噪声分析与图像处理
图像产生噪声的因素有：电路各元器件相互影响、图像传感器长期工作温度过高等，这些噪声主要来源于电子器件产生的热噪声[16-17]，热噪声是典型的高斯白噪声。图像噪声如果不经过恰当的方法降低或去除，会给机器解码增加一定的难度，降低识别效率，但是许多图像去噪方法在降低噪声
的同时，也使得图像边缘模糊了，导致机器无法正确解码，又或者是不恰当的图像去噪处理导致二维码识别时间过长，影响二维码的识别。
本系统在光源设计部分结合线阵相机的特点，通过多次实验调节光源位置消除了光反射对图像
采集质量的影响。同时综合考虑了生产实际中可能产生的噪声对图像质量的影响，在实验的过程中，采用了人为添加高斯噪声对采集到的图像进行了仿真模拟。在识别二维码时首先把采集的彩
色图像转化为灰度图像，然后对图像进行二值化处理，将二维码转换成黑白条码，进而转化为二进制
信息；再根据二维码的编码规则进行译码和纠错。其工作流程如图3所示。
Start Acquire image
Code initial locating ROI cycle detection
Image preprocessing
Code recognition and preci locating
End
Decoding optimization parameter ttings 图 3 系统工作流程图
Fig. 3 Flow chart of image processing system
1） 获取图像：获取线阵相机采集到的图像；2） 解码优化：创建二维码模板，设置二维码的极性、二维码码粒个数、二维码模型的类型参数，提高二维码的识别率；
3） 二维码初定位：根据模板匹配定位图像标志点（定位精度为0.704 mm ），进而获取图像上的多个ROI 区域；
4） 图像预处理：对ROI 进行图像预处理：灰度化、均值滤波、对比度增强、形态学分析，提取二维码图像，进一步提高二维码识别率；
5） ROI 循环检测：对每个ROI 进行逐一检测识别；6） 二维码识别与精准定位：采用基于位置探测图形的方法[18-19]，精准定位二维码，由二维码解析库，实现二维码信息识别，并显示二维码信息，框出二维码精准位置。
2 系统测试结果与分析
2.1 二维码检测结果
基于机器视觉的二维码高速批量识别系统，包
PCO Δy Δx
MP
W 1
l 2
accountmanager
l 2
株洲新东方l 1
垂眼妆W 2
W 2
MT
MP
MP: Mark point MT: Material tray PCO: Pixel coordinate origin
图 2 芯片二维码自动定位示意图
Fig. 2 Schematic of automatic locating for two-dimensional
code on chip
· 278 ·
应 用 光 学第 42 卷 第 2 期
括显示屏、工控机、工业相机、工业镜头、光源、步进电机、传送带、可移动平台和支架型材等部件。用于显示数据的显示屏是71.67 cm(21.5寸)的AOC(admiral overas corporation)智能显示屏，具有可壁挂特性，便于工业现场使用；工控机型号为研祥IPC-710ECO-1816，具有耐高温、防水、防尘等优势；工业镜头型号为Schneider Apo-Compo-non 4.0-60，像素尺寸为7.04 μm ，适用大靶面线扫描相机；工业线扫描相机型号为DALSA LA-GM-08K08A ，像素位深8 bit ，可采集高速运动物体的图像，所选用的工业镜头与工业线阵相机都具有较强的抗噪声能力，因此去噪方法选用“均值滤波”去噪即可；光源采用长条形LED 灯，照射方向与相机采集方向一致，对高速运动的物体进行补光，获取物体清晰的图像。物料盘放置于可移动平台上，可移动平台固定于传送带上，由可调速步进电机驱动传送带，带动可移动平台移动，实现物体图像的采集。工控机CPU 型号i5-2 400，主频3.10 GHz ，8 GB 内存，在自主研发软件下进行，图4是二维码识别系统实验平台。
LAC SM CB
MT MB SLS
LAC: Linear array camera SM: Stepper motor MT: Material tray SLS: Strip light source MB: Mobile board CB: Conveyor belt
图 4 系统实验平台
Fig. 4 Experimental platform of system
使用该平台测试得到的一组典型的实验结果如图5所示。线阵相机采集到图像后，经过二维码初定位、图像处理、二维码精准定位及解码后，将检测结果显示于工程界面。
分析图5的结果，图中物料盘对角两个方框为定位物料盘的准确位置，区域A 是工程界面用于显示物料盘的检测结果。插图B 、C 和D 分别表示机器识别得到的正确的二维码、码制错误的二
维码和漏贴的二维码检测结果，其余物料盘中矩形框均代表二维码定位识别成功。
图6为单个蓝牙芯片中二维码的信息读取，系统对能够正确读取到的二维码，将其信息以文本文档形式保存到本地电脑，工人可以选择是否把这些信息同步到服务器，对于不能识别的二维码，信息将不被录入，并且报警提示工人。
图 6 单个二维码识别结果显示
Fig. 6 Display for single two-dimensional code recognition
2.2 系统抗噪声能力
实验采集1 800张蓝牙芯片图像，其中600张为不添加高斯白噪声的图像，另外1 200张为噪声图像，分两份，每份600张，分别添加方差0.08和0.09的高斯白噪声，每张二维码图像像素大小都为600×375。对1 800张图像进行检测，典型的结果如图7所示，其中（a ）、（b ）和（c ）为一组，代表无噪声情况下蓝牙芯片二维码的原始图像、定位结果和识别结果；（d ）、（e ）和（f ）为一组，代表在噪声方差为0.08情况下蓝牙芯片二维码的图像、定位结果和识别结果；（g ）、（h ）和（i ）为一组，代表在噪声方差为0.09情况下蓝牙芯片二维码的图像、定
图 5 批量识别结果显示Fig. 5 Display for batch recognition
应用光学 2021，42（2） 李建刚，等：批量高速二维码视觉检测识别系统
· 279 ·
位结果和识别结果。实验结果显示对噪声方差小于0.09的情况下，系统能稳定定位并准确识别到蓝牙芯片表面的二维码，当噪声方差大于0.09时，检测过程算法不能稳定识别二维码。可知系统针对噪声方差小于0.09的图片具有较强的抗噪能力。一般工业相机产生的噪声是人眼无法看到的，在实际检测识别过程中噪声不会超过方差0.09。定位到二维码图像后，本文采用基于位置探测图形的方法精准定位二维码，原理是定位二维码中的3个顶点，该方法具有较强的抗噪声能力。
(a) 无噪声下蓝牙
芯片的图像
(b) 无噪声下二维码定位(c) 无噪声下二维码识别结果
(d) 噪声方差为0.08下蓝牙芯片的图像(e) 噪声方差为0.08下
二维码定位
(f) 噪声方差为0.08下
lady gaga paparazzi
二维码识别结果
(g) 噪声方差为0.09下蓝牙芯片的图像(h) 噪声方差为0.09
下二维码定位
(i) 噪声方差为0.09下
as二维码识别结果
图7典型图像定位以及检测结果
Fig. 7 Typical image locating and testing results
2.3 识别率与二维码运动速度的关系
系统采集到的图像是否变形失真，直接影响到基于位置探测图形的二维码定位以及后续的二维码识别。本文所采用的是线阵相机，与面阵相机采集图像的方法不同，其采集的图像成像质量会影响二维码的识别率，该线阵相机最大行频为13 kHz，此参数与线阵相机拍摄速度有关。由于生产线上的物料
盘在可移动平台的牵引下处于高速运动的状态，因此物料盘上装载的芯片二维码运动速度与线阵相机的拍摄速度不匹配必然导致采集到的图像存在压缩和拉伸现象。本系统中，二
其中：n为步进电机的转数；k=0.4为传动比；L d为电机每转一圈驱动二维码的移动距离。通过调节步进电机转数进行多次实验，得到系统识别率与二维码运动速度的关系图，如图8所示。
1.0
the new york times250275300325350
网络会计
Speed/(mm/s)
0.5
图8系统二维码识别率与二维码移动速度关系Fig. 8 Relationship between recognition rate and movement speed
由图8可知，当二维码移动速度未达到267.18 mm/s时，二维码未能移动到相机拍摄视场中，因此系统
怎么样才能学好英语对二维码识别率为0；当速度达到267.18 mm/s～274.46 mm/s范围内，系统开始检测到二维码，但是二维码运动速度慢于线阵相机的拍摄速度，导致图像压缩，部分二维码无法识别；当二维码移动速度达到274.46 mm/s～319.14 mm/s范围内，系统能较好地检测二维码，该速度区间范围内，对应的图像质量由较小压缩到完整图像再到较小拉伸，该速度区间内，图像存在着较小的变形情况，但不影响系统对二维码的识别；继续加快二维码移动速度，速度在319.14 mm/s～325.82 mm/s范围内，二维码运动速度比线阵相机拍摄速度快，导致图像存在拉伸现象，识别率开始下降；当二维码移动速度超过325.82 mm/s后，线阵相机未能定位两个标志点，系统识别率为0。
通过上述分析，为了尽可能地降低图像变形情况，提高系统稳定性，本文折中选取头尾两个识别率为100%的速度平均值，即二维码移动速度为296.8 mm/s。计算机在二维码高速运行状态下，准确识别有无噪声二维码各594张，无噪声情况下，没检测到的3张二维码里，其中2张是漏贴二维码，另外1张是DM（data matrix）码，码制错误，每个二维码平均定位时间17.8 ms，识别率达到100%；噪声情况下，没检测到的6张二维码里，其中3张是漏贴二维码，另外3张是贴DM码，每个二维码平均定位时间21.3 ms，识别率达到100%。
· 280 ·应 用 光 学第 42 卷 第 2 期
