一种用于梨外观品质视觉分级生产线的制作方法

1.本实用新型涉及梨外观品质检测以及分级技术领域，具体是一种用于梨外观品质视觉分级生产线。


背景技术：

2.水果外观品质检测及自动分级对提高鲜食水果的市场竞争力和利润水平具有重要意义，梨作为最常见的水果之一，对其外观品质进行检测是十分必要的。目前梨外观品质检测方法主要为人工检测，该种方法会消耗大量的人力资源并且分级的主观性较强，准确度和效率都较为低下；机器视觉检测以无接触、无损伤、自动化程度高和安全可靠等突出优点，已成功应用于柑橘和苹果外观检测中，因此将机器视觉用于梨外观品质检测是可行的。
3.中华人民共和国国家质量监督检验检疫总局下属中国国家标准化管理委员会于2008年发布了中华人民共和国国家标准gb/t10650
‑
2008《鲜梨》，该标准为现行有效状态，将梨的外观品质分为了三个等级优等、一等、二等，分级依据为梨的果形、色泽、单果重、果面缺陷等特征，其中果面缺陷的种类和面积是分级标准中最重要的指标，由此可以用视觉检测出梨表面的缺陷种类和面积，再根据国家标准分级。
4.专利号cn201621138384.4的文献公开了一种刺梨分级机，包括依次设置的上游组输送滚筒、下游组输送滚筒和驱动输送滚筒转动的电机，上游组输送滚筒中相邻两滚筒之间的距离为20mm，下游组输送滚筒中相邻两滚筒之间的距离为35mm，上游组输送滚筒和下游组输送滚筒的下方均设置有收集槽。该装置结构简单，并且效率较高。现有的分级装置只能在同一个时间段内对一个梨进行分级，无法实现高效连续的分级执行，使用挡板推送梨，使梨直接从平台上滑落，期间发生碰撞，会对梨造成二次损伤。


技术实现要素：

5.针对现有的研究方向的空缺和技术方面的不足，本实用新型拟解决的技术问题是，提供一种用于梨外观品质视觉分级生产线。该生产线实现了连续分级，提高分级效率。
6.本实用新型解决所述技术问题的技术方案是，一种用于梨外观品质视觉分级生产线，其特征在于，用于梨外观品质视觉分级生产线，其特征在于，该装置包括传送带机械结构、上位机、图像采集系统、传送带驱动系统、分级执行系统、plc和通信系统；
7.传送带机械结构是生产线的主体机械结构，起运输样本梨到不同功能区域的作用，整个传送带机械结构形成一个环形的回流式传送带；
8.传送带驱动系统用于驱动环形的回流式传送带的启动、停止、减速及增速、匀速状态；
9.所述上位机直接控制图像采集系统中的ccd工业相机，实现图像采集，用于获取梨的外表面图像；上位机通过通信系统与plc通信，给plc发送指令，使plc控制传送带驱动系统和分级执行系统，达到控制整个装置的目的；
10.上位机具有显示屏，能够显示分级结果，同时发送给plc。
11.所述分级执行系统包括推拉式电磁铁、电磁铁固定架和分级槽，推拉式电磁铁和电磁铁固定架固定在图像采集系统后方的回流式传送带上；分级槽具有多个通道，内部粘贴缓震材料，分级槽放置在推拉式电磁铁的对侧，每个推拉式电磁铁对准一个通道，每个通道对应一个分级等级，记为一个分级区域；推拉式电磁铁与plc连接，plc在接收到上位机发送的分级结果后，使能对应等级的推拉式电磁铁，进而将样本梨送入指定的分级区域。
12.整个传送带机械结构由两条直线传送带和两个转向机构成，形成一个环形的回流式传送带，两条直线传送带和两个转向机分别由一个步进电机驱动，多个步进电机均受plc控制，实现同步，两条直线传送带和两个转向机通过传动机构形成环形的回流式传送带，整条环形传送带同步运转，整个环形传送带用支架架起，同时图像采集系统、传送带驱动系统和分级执行系统也安装在支架上。
13.所述上位机为python制作的gui界面，界面包括功能按钮、信息显示和图像显示等区域，用户可以用该界面操控装置、获取设备信息、查看采集图像和分级结果；上位机直接控制图像采集系统中的ccd工业相机，实现图像采集，用于获取梨的外表面图像；上位机通过通信系统与plc通信，给plc发送指令，使plc控制传送带驱动系统和分级执行系统，达到控制整个装置的目的；采集的梨的外表面图像在上位机内经过预处理、特征提取、机器学习分类等运算，得到样本梨的分级结果，在显示栏中显示，并通过通信系统发送给plc；
14.所述图像采集系统起采集样本梨外表面图像的作用，系统包括ccd工业相机、镜头、led环形光源、图像采集箱和电源适配器，电源适配器为图像采集系统供电使环形光源正常工作，环形光源为图像采集系统提供均匀的亮度；图像采集箱放置在传送带的支架上，图像采集箱的框架与第一条直线传送带的支架通过螺钉紧固；框架的表面安装黑色亚克力板，隔绝外部光线减小图像采集时受到的干扰；ccd工业相机选用彩色数字ccd工业相机，能够获取样本梨表面的更多特征，将其与镜头连接，能够在有效距离内获取清晰的图像；工业相机的接口为千兆网口，使用网线与上位机的网线接口连接；
15.所述传送带驱动系统包括电机控制器，以plc作为驱动系统的控制器实现电路的逻辑控制和时序控制；电机控制器与plc连接，plc在接收到上位机发送的驱动指令后，向电机控制器提供指令信号，电机控制器产生驱动步进电机的波形并且提供有效电压，实现对步进电机的控制；
16.所述分级执行系统包括推拉式电磁铁、电磁铁固定架和分级槽，推拉式电磁铁和电磁铁固定架固定在第一条直线传送带上；分级槽是由亚克力板制成的槽形区域，分级槽具有多个通道，内部粘贴缓震材料用于缓冲碰撞，分级槽放置在推拉式电磁铁的对侧，每个推拉式电磁铁对准一个通道，每个通道对应一个分级等级，记为一个分级区域；推拉式电磁铁与plc连接，plc在接收到上位机发送的分级结果后，使能对应等级的推拉式电磁铁，进而将样本梨送入指定的分级区域；
17.所述通信系统使用zigbee、蓝牙、wifi等无线通信方式，采用zigbee形式时，上位机所在的计算机和plc挂载zigbee通信模块，通过zigbee协议实现上位机和plc的通信，通信内容为上位机向plc发送的驱动指令、分级结果和plc向上位机发送的图像采集指令。
18.所述ccd相机型号为mv
‑
em200c，ccd相机感光面积为4.8mm
×
3.6mm；所述镜头型号为hx2x
‑
t1，为变焦镜头，焦距为12mm
‑
36mm，最小物距为20cm；所述led环形光源型号为hdr
‑
90
‑
45；所述plc型号为西门子s7
‑
200smart，cpu为st40，输入i/o为24个，输出i/o为16个；所
述电机控制器型号为tb6600，额定电流4.2a，细分数为6400；所述步进电机型号为57byg250c，步进角为1.8
°
，扭矩为1.8n
·
m；所述推拉式电磁铁行程为60mm，推力为100n。
19.与现有技术相比，本实用新型有益效果在于：
20.(1)本实用新型分级生产线采用了水平设置的推拉式电磁铁推送的分级机构，控制简单，执行迅速，提高了分级效率，适用于对分级速度有一定要求的实际工作环境，并且在推拉式电磁铁和分级区域加装了缓冲材质，有效减小水果二次机械损伤。使用槽钢固定传送带的滚轮，使得传送带松紧可以调节，保持传送带长时间稳定运行，提高了生产效率。采集箱使用黑色亚克力板作为箱壁，保证图像采集不受外界光照影响，进一步保证了采集图像的准确性。
21.(2)本实用新型分级生产线融合机械传动、传感检测、嵌入式、图像处理与模式识别等技术于一体，功能完整，能够实现一套完整的生产过程。
22.(3)本实用新型分级生产线采用回流式传送带能够实现连续监测，提高分级效率。
附图说明
23.图1为本实用新型用于梨外观品质视觉分级生产线的整体结构示意图；
24.图2为本实用新型用于梨外观品质视觉分级生产线的整体结构主视图；
25.图3为本实用新型用于梨外观品质视觉分级生产线的整体结构侧视图；
26.图4为本实用新型用于梨外观品质视觉分级生产线的整体结构俯视图；
27.图5为本实用新型用于梨外观品质视觉分级生产线中图像采集系统的安装位置示意图；
28.图6为本实用新型用于梨外观品质视觉分级生产线中分级执行系统的示意图；
29.图7为本实用新型用于梨外观品质视觉分级生产线中直线传送带的安装结构示意图；
30.图8为本实用新型用于梨外观品质视觉分级生产线中转向机的结构示意图；
31.图9为本实用新型用于梨外观品质视觉分级生产线的控制结构示意图；
32.图10为本实用新型用于梨外观品质视觉分级方法的流程示意图；
33.图中：1、图像采集箱；2、承托盘；3、转向机；4、直线传送带；5、分级槽；6、推拉式电磁铁；7、电磁铁固定架；8、电机固定架；9、链条；10、步进电机；11、链轮；101、采集箱框架；102、黑色亚克力板；103、ccd工业相机；301、转向机皮带；302、转向机支架；303、转向机滚轮；401、槽钢；402、固定片；403、传送带滚轮；404、传送带支架；405、传送带皮带；406、直角连接件；501、分级槽挡板；502、分级槽支架。
具体实施方式
34.下面给出本实用新型的具体实施例。具体实施方式仅用于进一步详细说明本实用新型，不限制本技术的保护范围。
35.本实用新型提供一种用于梨外观品质视觉分级生产线(参见图1
‑
图8)，包括图像采集箱1、承托盘2、转向机3、直线传送带4、分级槽5、推拉式电磁铁6；两条直线传送带4和两条转向机3拼接在一起，使用传动机构相连接，组成环形回流式传送带；图像采集箱1放置在一条直线传送带4上，图像采集箱1的采集箱框架101为40mm铝材，表面带有滑槽，可安装固
定键，该条直线传送带4桁架上表面适当位置打孔，通过螺钉螺母将该条直线传送带4和固定键紧固，使得图像采集箱1和该条直线传送带4相对固定；承托盘2放置在环形传送带上；分级槽5放在图像采集箱后方的直线传送带4外侧，两者紧贴；推拉式电磁铁6上带有螺纹孔，电磁铁固定架7带有圆孔，通过螺钉将两者紧固，该条直线传送带4桁架上表面适当位置打孔，通过螺钉螺母将当前直线传送带4和电磁铁固定架7紧固，使得推拉式电磁铁6和当前直线传送带4相对固定；步进电机10上带有螺纹孔，电机固定架8带有圆孔，通过螺钉将两者紧固，两条直线传送带4桁架侧面均带有一定长度滑槽，可穿过螺钉，通过螺钉螺母将直线传送带4和对应的电机固定架8紧固，使得两个步进电机10和对应的直线传送带4相对固定；
36.所述图像采集箱1包括采集箱框架101、黑色亚克力板102、ccd工业相机103和环形光源，采集箱框架101使用的铝材表面带有滑槽，适当大小的黑色亚克力板102卡在滑槽内，并用热熔胶将其与采集箱框架101粘连，使其固定，ccd工业相机103带有螺纹孔，相机固定件带有双向的螺纹孔，可以使用螺钉同时与ccd工业相机103和采集箱框架101进行紧固，使ccd工业相机103能够固定在合适的位置，ccd工业相机103与镜头连接；
37.ccd工业相机103与上位机通信，上位机内加载有上述的分级方法，上位机与plc进行双向通信，plc通过电机控制器与相应的步进电机电连接，在分级槽的每个通道对应的推拉式电磁铁附近安装光电限位开关，该光电限位开关安装在梨输送方向前距相应推拉式电磁铁10cm的位置处，控制相应通道的推拉式电磁铁动作，在图像采集箱入口位置安装有光电限位开关，所有光电限位开关、推拉式电磁铁都与plc通信；
38.所述ccd相机型号为mv
‑
em200c，分辨率为1280*960，感光面积为4.8mm
×
3.6mm，具有连续、外触发及软触发三种图像采集方式；所述镜头型号为hx2x
‑
t1，为变焦镜头，焦距为12mm
‑
36mm，最小物距为20cm；所述led环形光源型号为hdr
‑
90
‑
45；
39.本技术可以设置两个相机，两个相机放置在图像采集箱1顶部两侧的采集箱框架101上，样本梨运输至两个相机中间区域开始采集，通过这种方式尽可能大的获得梨表面全圆周的图像，使得分级结果尽可能准确；设置两个相机的情况下，将两个相机采集到的图像做图像拼接，再使用上述的分级方法处理。
40.所述转向机3包括转向机皮带301、转向机支架302和转向机滚轮303，转向机支架302包括垂直方向的支架和水平的弧形支架，弧形支架的弧形侧面上按照一定间隔打孔，安装数个转向机滚轮303，数个转向机滚轮表面套接转向机皮带，转向机滚轮303是一段直径较大而另一端直径较小的台柱形滚轮，使套在其表面的转向机皮带301表面各处能按照同样的角速度运动；
41.所述直线传送带4包括槽钢401、固定片402、传送带滚轮403、传送带支架404、传送带皮带405和直角连接件406，传送带支架404包括垂直方向的支架和水平的桁架，在桁架两端沿输送方向均延伸有槽钢401，且在桁架左右侧面均设置槽钢，槽钢401与桁架两端相接，二者之间通过直角连接件连接在一起；
42.传送带滚轮403的轮轴为阶梯轮轴，在槽钢401远离桁架的一端侧面位置打通孔，该通孔尺寸适配于滚轮轮轴内端，两个传送带滚轮403的轮轴内端穿过相应的通孔；
43.固定片402中心位置为开孔，开孔尺寸适配于滚轮轮轴外端，将固定片402套在滚轮403的轮轴外端，固定片中心开孔周围打小孔，同时在槽钢401对应位置打孔，用螺钉螺母将固定片和槽钢两者紧固，使得滚轮403在不横向晃动的情况下能够正常转动；传送皮带套
装在两个传送带滚轮403上，一个传送带滚轮与步进电机通过链条连接为主动传送带滚轮，另一个为从动传送带滚轮；主动的传送带滚轮403安装在一端的槽钢401侧面上，通过链条11与步进电机连接，主动的传送带滚轮靠近桁架端打孔，主动的传送带滚轮所在位置的桁架外侧面上设置滑槽，槽钢能在滑槽的带动下沿输送方向相对桁架移动，直角连接件406为拐角为直角的连接件，直角连接件406的两个端面都有圆孔，两个直角连接件为一对，每对直角连接件其中一个与槽钢401通过螺钉螺母紧固，另一个与桁架的滑槽通过螺钉螺母紧固，滑槽能相对桁架移动，再将每对直角连接件406通过螺钉螺母紧固，使主动的传送带滚轮403与传送带支架404相对固定，传送带皮带405套在传送带滚轮403上，由于滑槽的存在，主动的传送带滚轮403一端的槽钢401可以调节位置，保证传送带皮带405处于紧绷状态；
44.所述分级槽5包括平行分级槽挡板和发散分级槽挡板501和分级槽支架502，两种分级槽挡板501均由亚克力板制成，分级槽5入口处为多个平行放置的平行分级槽挡板，平行分级槽挡板与槽底垂直，多个平行分级槽挡板沿槽深方向平行布置，平行分级槽挡板尾部接发散分级槽挡板的前端，多个发散分级槽挡板501整体呈向尾端发散式放置，越往尾端内部间距越大，槽底也向下倾斜，方便样本梨的存储，发散分级槽挡板的尾部由横板将相邻的两个发散分级槽挡板尾部和槽底连接起来，平行分级槽挡板和发散分级槽挡板501及槽底形成的整体放置在分级槽支架502上，使分级槽的入口与直线传送带相应位置的承托盘出口相对；分级槽中通道数量与分类器4的等级一致，每个通道确定为一个等级的分级区域，本实施例中设置有四个等级，设置四个通道。
45.所述步进电机10型号为57byg250c，步进角为1.8
°
，扭矩为1.8n
·
m，电机轴与链轮11过盈配合形成紧密连接，与主动的传送带滚轮403轮轴上的链轮用链条9连接，形成传动结构；电机控制器选用型号tb6600，额定电流4.2a，细分数为6400，plc型号为西门子s7
‑
200smart，cpu为st40，可输入i/o为24个，可输出i/o为16个，步进电机10的输入与电机控制器的输出端用导线连接，电机控制器的输入端与plc的输出i/o用导线连接；
46.本实用新型用于梨外观品质视觉分级生产线及分级方法的工作原理和工作流程是：
47.本实用新型分级生产线的工作原理为：
48.在样本梨被传送带运输到图像采集区域(图像采集箱内)后，设置在传送带输送方向、距离ccd相机10厘米位置处，且位于图像采集箱内的光电限位开关给控制传送带的plc发送一个信号；plc接收到信号后，改变电机控制器的输出，使驱动两条传送带的步进电机10都停止转动，将样本梨停在指定的图像采集范围内，步进电机经减速过程最终能使传送带停止运动时样本梨位于ccd相机图像采集的合适位置，plc控制所有步进电机停止后通过通信系统向上位机发送开始采集的指令；上位机接收到采集指令，控制ccd工业相机10采集一帧图像，图像通过千兆网线经由计算机的网口传入上位机，上位机对图像进行处理，并特征提取，将提取的特征值输入设计训练好的分类器中，进行相关特征的分类(上位机内加载并执行本技术的分级方法)；分类结果(缺陷为哪一类或几类表面缺陷，缺陷的总面积，梨的等级)显示在上位机界面上，同时上位机通过通信系统将分级结果发送给plc；plc接收到该分级结果后，控制所有步进电机10的转动，将样本梨运出图像采集区域，并使分级槽入口附近对应的光电限位开关(设置在传送带输送方向、距离分级槽入口10厘米位置处)；样本梨运送到指定级别的分级区域，该分级区域对应的光电限位开关通过通信系统给控制传送带
的plc发送一个信号；plc接收到信号后，改变电机控制器的输出，使所有步进电机10停止转动，将样本梨停在指定的分级执行范围内，plc同时给对应的推拉式电磁铁6发送指令；推拉式电磁铁6接收到信号后，执行推送动作，将样本梨推送到对应的分级槽5通道内；分级完成。
49.本实用新型分级生产线的工作流程包括以下步骤：
50.步骤1、将样本梨放置在承托盘2上，传送带的皮带405在步进电机10的驱动下移动，将承托盘2到指定的位置，即图像采集箱1内部，光电限位开关检测到样本梨到达指定位置，通过通讯系统发送给plc一个电平信号；
51.步骤2、plc接收到光电限位开关的信号后，通过通讯系统向上位机发送指令，上位机向ccd工业相机103发送一系列指令用于开启相机，调焦，设置帧率、延迟等参数，采集图像，关闭相机，释放相机等操作，完成图像采集；
52.步骤3、数字图像输入通过千兆网线传入上位机；经软件加载的一种可行的梨外观品质的分级方法；
53.梨外观品质分级方法的过程是：对采集到的图像做感兴趣区域(roi)提取，使梨处在图像中心位置；对图像进行亮度校正、阈值分割和模糊处理等预处理操作，获取梨表面的缺陷区域；提取表面缺陷轮廓，计算缺陷的hu不变矩、傅里叶描述子和灰度共生矩等特征；将提取的特征进行融合；将融合后的特征输入到事先训练好的神经网络学习模型中进行分类：输出分类结果；其具体步骤为：
54.(1)通过工业相机获取待分级梨的图像；
55.(2)对图像进行灰度变换得到原图像的灰度图，之后使用大津法(otsu)自动选取合适的阈值对灰度图进行二值化thresh_binary处理，使图像中灰度小于阈值部分的像素被置为0，大于的部分像素被置于255，处理后的图像，背景灰度值为0，前景灰度值为255，得到可以分离样本梨表面的掩膜；之后对掩膜进行腐蚀、膨胀、开运算和闭运算，之后将掩膜与原图片相乘，提取梨外表面的图像；
56.(3)对(2)中梨外表面图像提取轮廓，设梨外表面的轮廓是一个有k个点的数字边界，则从边界的任意一点(x0,y0)开始，以逆时针方向在该边界上行进，会遇到坐标对(x1,y1),(x2,y2),
…
,(x
k
‑1,y
k
‑1)，将这些坐标表示为x(k)＝x
k
y(k)＝y
k
的形式。在这种表示形式下，边界表示为坐标序列s(k)＝[x(k),y(k)],k＝0,1,2
…
,k
‑
1。k根据边界长度进行设置，k＝16。
[0057]
之后，将每个坐标对当作一个复数来处理，得：
[0058]
s(k)＝x(k) jy(k),k＝0,1,2
…
,k
‑1[0059]
这样将x轴作为复数序列的实轴，y轴作为复数序列的虚轴。将二维数据简化为一维数据。将s(k)进行离散傅里叶变换(dft)就得到轮廓的傅里叶描述子a(u)：
[0060][0061]
其中u为傅里叶变换后的各频率点；
[0062]
等分梨表面边界，取其k等分点坐标对应的傅里叶描述子，组成一个k
×
1的矩阵；将得到的特征矩阵输入分类器1，得到结果为待分级梨的果形评价；
[0063]
(4)提取出(2)中梨外表面图像的b、g和r三个分量，然后计算b、g和r三个分量矩阵
的二阶矩(方差)，得到3
×
1维的特征矩阵；将得到的特征矩阵输入分类器2，得到结果为待分级梨的色泽评价；
[0064]
(5)对(1)中获取的图像进行色彩空间转换，将原图像由bgr图像转换为hsv图像，并提取hsv空间中的亮度分量v，用灰度图与亮度分量v相除，进行亮度校正，得到样本梨的亮度校正图像；使用大津法(otsu)自动选取合适的阈值对亮度校正后的灰度图进行二值化thresh_binary处理，得到用于分离样本梨表面缺陷的掩膜；之后对掩膜进行腐蚀、膨胀、开运算和闭运算，之后将掩膜与原图片相乘，提取梨外表面的缺陷区域，得到样本梨的缺陷图像；
[0065]
(6)对(5)中的缺陷图像进行几何特征和纹理特征的提取：
[0066]
①
计算缺陷图像的hu不变矩：
[0067]
对于连续图像f(x,y)，图像的p q阶几何矩(标准矩)m
pq
为：
[0068][0069]
其中x和y分别为图像像素点的横坐标和纵坐标；
[0070]
p q阶中心距μ
pq
定义为：
[0071][0072]
其中和是图像的重心，m
pq
为图像的p q阶几何矩；
[0073]
数据库中的缺陷图像都是离散的数字图像，其几何矩和中心矩为：
[0074][0075][0076]
其中n和m是图像的高度和宽度，即像素点的行数和列数；
[0077]
之后对计算出的中心矩进行归一化，获得归一化中心距η
pq
：
[0078][0079]
利用缺陷图像的二阶和三阶归一化中心矩构造七个不变矩m1～m7：
[0080]
m1＝η
20
η
02
[0081]
m2＝(η
20
η
02
)2 4η
121
[0082]
m3＝(η
30
‑
3η
12
)2 (3η
21
‑
η
03
)2[0083]
m4＝(η
30
η
12
)2 (η
21
η
03
)2[0084]
m5＝(η
30
‑
3η
12
)(η
30
η
12
)((η
30
η
12
)2‑
3(η
21
η
03
)2)
[0085]
(3η
21
‑
η
03
)(η
21
η
03
)(3(η
30
η
12
)2‑
(η
21
η
03
)2)
[0086]
m6＝(η
20
‑
3η
02
)((η
30
η
12
)2‑
(η
21
η
03
)2) 4η
11
(η
30
η
12
)(η
21
η
03
)
[0087]
m7＝(3η
12
‑
η
30
)(η
30
η
12
)((η
30
η
12
)2‑
3(η
21
η
03
)2)
[0088]
‑
(η
03
‑
3η
21
)(η
21
η
03
)(3(η
30
η
12
)2‑
(η
21
η
03
)2)
[0089]
将算出的7个不变矩按顺序组成一个7
×
1的矩阵；
[0090]
②
计算缺陷图像的傅里叶描述子：
[0091]
计算方法同(3)，等分缺陷边界，取其k等分点坐标对应的傅里叶描述子，组成一个k
×
1的矩阵；此时k取值24。
[0092]
③
计算缺陷图像的灰度共生矩：
[0093]
灰度共生矩阵是对图像上保持某距离的两象素分别具有某灰度的状况进行统计得到的，对于连续图像f(x,y)，取图像中任意一点(x,y)及偏离它的另一点(x a,y b)，这一对点的灰度值设为(g,h)。令(x,y)在整个图像上移动，则会得到各种(g,h)值，设灰度值的级数为k，则(g,h)的共有k2种组合，对于整个图像，统计出每一种(g,h)值出现的次数，然后排列成一个矩阵，用(g,h)出现的总次数将每一种(g,h)值出现的次数归一化为出现的概率p(g,h)，这样的矩阵称为灰度共生矩阵；
[0094]
通过研究灰度的空间相关特性来描述图像的纹理，并用一些标量来表征灰度共生矩的特征，计算得到下面四个标量：
[0095]
对比度con：
[0096][0097]
能量asm：
[0098][0099]
熵ent：
[0100][0101]
相关性corr：
[0102][0103]
其中
[0104]
其中
[0105]
将算出的对比度、能量、熵和相关性这四个特征按顺序组成一个4
×
1的矩阵；
[0106]
(7)将(6)中的hu不变矩、傅里叶描述子和灰度共生矩三种特征进行融合，即将三个特征矩阵按照计算的顺序首尾相连，得到一个(7 k 4)
×
1维的矩阵，将融合后的特征加上标签后输入分类器3，得到缺陷种类；计算该缺陷面积；
[0107]
(8)建立一个长度为11的空向量，将(3)中的果形评价结果为向量的第一个元素，将(4)中的色泽评价结果为向量的第二个元素，按照样本表面缺陷类型的预测结果为x(x为0至8中的一个整数)，则将该表面缺陷的面积为向量的第x 3个元素，剩余的其他元素全部设为0的原则，将(7)中的缺陷面积写入向量；将向量输入分类器4，得到分级结果；
[0108]
步骤4、将步骤3中得到的分级结果通过通信系统发送给plc，plc根据该信息，控制
步进电机10的转动，将载有样本梨的承托盘2运输出图像采集箱1，运送到指定级别的分级区域，plc对相应的推拉式电磁铁6使能，推拉式电磁铁6执行分级动作，将样本梨推入分级槽5内，完成分级流程。
[0109]
通过特征融合对梨外观进行识别，其识别率可以达到95％以上。
[0110]
本实用新型未述及之处使用于现有技术。