基于CNN的枪械关重件复杂加工特征识别

邵海瑞1,刘伊华2,王希阔3,王永娟1

(1.南京理工大学 机械工程学院, 南京 210094;2.中国兵器工业第208研究所,北京 102202; 3.中国人民解放军63856部队,吉林 白城 137001)

摘要:加工特征识别是CAD、CAPP以及CAM之间的智能化接口,对实现CAD、CAPP、CAM集成具有重要意义。原有的加工特征识别技术局限于对零件三维拓扑结构的属性邻接图进行操作,对于一些复杂加工特征识别准确率低、效率低。针对此问题,提出一种基于卷积神经网络(CNN)的复杂加工特征识别方法。对枪械关重件的结构特点和机加工艺过程进行分析并分类,采用复杂加工特征多角度捕捉图像法创建复杂加工特征数据集,通过复杂加工特征卷积神经网络模型训练数据集,并利用复杂加工特征分类器进行分类,输出复杂加工特征结果。结合UG平台以枪械某关重件为例验证了复杂加工特征识别过程。

关键词:枪械关重件;复杂加工特征;卷积神经网络;图像识别

1 引言

特征识别是连接设计与生产加工之间的桥梁,CAD系统三维建模表达的是底层几何和拓扑信息,而下游应用需要的是高层次的应用特征,例如加工特征信息。因此对加工特征识别的优劣关乎下游的生产加工。目前对于特征识别主要分为基于边界匹配的特征识别[1]、基于立体分解的特征识别[2]和基于神经网络的特征识别[3]

随着计算机软硬件的快速发展,也为神经网络技术的发展提供了良好的环境,基于神经网络的特征识别也出现越来越多的研究成果。将零件的三维结构转化为三维彩色图片,然后输入给神经网络模型,这一方法给零件加工特征识别注入了新的解决方案。国内外研究学者对其有大量的研究,Google[4]公司提出了Google Net卷积神经网络模型,引入了inception模块;Kaiming等[5]提出了ResNet网络模型,引入Residual结构;Hu等[6]提出了SENet网络模型,能够有效抑制卷积核的通道,以上的研究都对模型进行了优化,从不同方面提高了神经网络的准确率和有效性。Zhang等[7]将深度学习应用到特征识别中,具有较高的识别率。

于洋等[8]通引入解决子图同构问题的VF2算法对加工特征进行识别。唐硕等[9]通过边界表示的方法对孔类零件进行特征识别。王军等[10]提出基于图和痕迹的相交特征识别算法对STEP-NC相交特征进行识别。陆凯等[11]将加工特征识别问题转化为图学习问题,提出一种基于数据驱动的飞机结构件加工特征识别方法。薛晓辉等[12]运用遗传算法对BP神经网络进行优化以解决数控加工特征识别。齐峰等[13]提出一种应用特征构成面及其属性邻接边信息构成特征编码的特征表示模型并结合基于径向基函数的神经网络进行加工特征的识别。吕超凡等[14]K近邻算法构建点云的旋转不变表示,结合融入几何实验知识的点云分类网络进行加工特征识别。高远等[15]通过以遗传算法为主的神经网络对数控加工特征进行识别。张禹等[16]以混沌算法、遗传算法、BP神经网络算法结合BP神经网络中以进行STEP-NC制造特征识别。许如欢[17]提出一种基于几何推理和神经网络相结合的加工特征识别混合算法。部分学者[18-20]将三维拓扑结构转化为点云数据,然后输入给神经网络模型进行训练,最后对加工特征进行分类识别。

以上学者对特征识别的研究具有显著的成果,但是也存在相交特征和复杂特征不能完全识别、对属性邻接图冗余操作等问题。而枪械关重件外形轮廓较为复杂,多为异形面,因此提出一种基于卷积神经网络的复杂加工特征识别方法,为下游提供加工特征信息。首先对枪械关重件进行复杂加工特征分类,然后将零件的三维几何拓扑结构模型转化为图片格式,并创建各个复杂加工特征图像数据集,建立其基于深度学习的卷积神经网络模型,再次构建复杂加工特征分类器,最后基于UG平台进行实例验证枪械关重件的复杂加工特征识别。

2 复杂加工特征分类

在零件的设计阶段,设计者会有多种方法构建零件的三维模型,其中的特征称之为几何形状特征,但是几何形状特征却不适用于生产加工阶段,因此在生产加工阶段提出加工特征概念。枪械关重件中含有深孔特征,此深孔特征具有超大的深径比,且枪械关重件还有尺寸小,形状较为复杂,形面加工多,加工工序多等特点。结合关重件的加工过程和工艺特点对关重件的几何形状特征进行重新提取、分解、归类、聚合。以某型号的自动武器为例,将其加工特征分成六大类21小类,其中复杂加工特征主要包含深孔、螺纹孔、不规则槽、圆弧面、螺旋槽、螺旋面等特征,如图1所示。

图1 枪械关重件加工特征分类框图
Fig.1 Classification of processing characteristics of guns and heavy parts

3 卷积神经网络理论

卷积神经网络是一种包含卷积计算且具有深度结构的前馈神经网络,是深度学习算法之一,一般由输入层、卷积层、池化层、全连接层和输出层组成[21],如图2所示。其中输入层为特征图像的输入;卷积层通过内部的卷积核和激励函数对特征图像进行提取;池化层通过池化函数对卷积层得到的特征图进行特征选择和信息过滤;全连接层对经过卷积层和池化层提取的特征进行非线性组合以得到输出;输出层使用逻辑函数输出分类标签和结果。

图2 卷积神经网络一般结构框图
Fig.2 General structure diagram of convolutional neural network

3.1 卷积层

卷积层主要对输入层的特征图像进行特征提取,其主要包括卷积核、卷积层参数和激励函数。卷积层的主要原理为卷积核沿着该层输入的特征图像以卷积步长进行移动,并在对应位置进行卷积运算。卷积核是卷积层中最重要的组成元素,组成卷积核的每个元素都对应一个权重系数和一个偏差量。卷积层参数主要包含卷积核大小、步长和特征填充方式,卷积核越大,可提取的输入特征越复杂。卷积步长定义了卷积核两次扫过特征图时位置的距离。填充方式主要分为有效填充、相同填充、全填充和任意填充4种。卷积层中采用激励函数来协助其表达复杂特征,表示形式为:

(1)

常用的激励函数主要有sigmoid函数、Tanh函数、ReLU函数,其中应用最多的是ReLU函数(见图3),ReLU函数的表示形式为:

图3 ReLU函数及其导函数曲线
Fig.3 ReLU function and its derivative function

(2)

ReLU激励函数当x≥0时,梯度为1,不存在梯度饱和问题;当x<0时,增加了网络的稀疏性,提高了模型的泛化能力,因此采用ReLU激励函数对卷积层的参数进行激励。

3.2 池化层

池化层又称下采样层,由卷积层输入的特征图数据传递至池化层进行特征选择和过滤,在保存有用信息的基础上减少数据量,进而会减少卷积神经网络的训练量和提高训练效率。对池化层的操作方式主要有平均池化、最大池化、混合池化和随机池化四种,其主要受池化窗口大小、步长和填充方式控制。最大池化方式进行特征图的提取与处理。表示形式为:

(3)

式中:P为填充层数;S0为卷积步长; F为卷积核大小;(ij)为特征图的像素。

3.3 全连接层

全连接层位于卷积神经网络隐含层的最后部分,用于对提取到的特征进行分类组合并输出最后的结果。特征图像经过卷积层和池化层的提取、压缩和输出之后,经过最后一个全连接层进行分类识别,一般采用逻辑回归,Softmax回归对样本进行分类,并输出最终的结果。其中Softmax回归函数表示形式为:

(4)

由式(4)可以看出,当输入特征为x,预测类别为i的概率为P,特征的所有类别概率和为1,对于特征值越大的类别,最后该类输出的概率值也就越大。

4 基于CNN的复杂加工特征识别方法

简单加工特征的识别已经有较多的识别方法,但是对于复杂加工特征却没有行之有效的方法予以识别,因此本文主要研究枪械关重件复杂加工特征的识别。

基于卷积神经网络的复杂加工特征识别主要从复杂加工特征多角度捕捉图像法构建复杂加工特征数据集、建立复杂加工特征卷积神经网络模型和构建复杂加工特征图像分类器等3个方面对枪械关重件的复杂加工特征进行识别。采用复杂加工特征多角度捕捉图像的方法创建数据集,然后将数据集输入给卷积神经网络模型进行训练,之后采用损失函数计算模型的误差值和最小梯度法对模型进行优化,最后采用Softmax分类器对获取的三维拓扑结构图像进行分类识别,最后输出识别结果,其流程如图4所示。

图4 基于CNN的复杂加工特征识别流程框图
Fig.4 CNN-based method flow for the identification of complex processing features

4.1 复杂加工特征多角度捕捉图像方法

复杂加工特征数据集决定复杂加工特征卷积神经网络模型的输入,对复杂加工特征分类器有基础性的意义。采用复杂加工特征多角度捕捉图像方法构建复杂加工特征数据集。

首先使用参数化建模的方法创建若干个形状大小参数不同的三维模型,然后根据复杂加工特征分类对拓扑结构进行抽取,然后对抽取的加工特征从图像背景、视图方向、线框模型、特征颜色、特征平移、特征旋转、特征缩放等方面进行控制变量法操作输出avi格式视频,最后将输出的avi格式视频转化为统一格式的jpg二维彩色图像。下面以枪械关重件中的深孔加工特征为例说明构建深孔加工特征数据集的具体步骤如下:

1) 采用参数化建模方法,创建枪械关重件中深孔的三维模型;

2) 抽取深孔几何特征。对深孔的三维模型进行抽取几何体操作,选择单个面选项;

3) 输出avi格式视频。对抽取出的深孔加工特征进行视图背景、视图方向、线框类型、实体颜色、实体平移、实体旋转、实体缩放等方面进行处理,得到加工特征在不同视图背景、不同视图方向、不同线框类型、不同实体颜色、不同实体位置、不同实体角度、不同实体大小的视频;

4) 输出jpg格式图片。对上一步骤输出的视频通过外部软件转化为每帧输出的jpg格式图片。

根据上述方法,分别建立枪械关重件复杂加工特征数据集,在此列出深孔加工特征数据集和螺旋面加工特征数据集,如图5和图6所示。

图5 深孔加工特征部分数据集示意图
Fig.5 Deep hole machining feature part data set

图6 螺旋面加工特征部分数据集示意图
Fig.6 Partial data set of spiral surface processing features

4.2 复杂加工特征卷积神经网络模型

根据枪械关重件复杂加工特征分类,并结合枪械关重件的机加工艺特点,对枪械关重件的复杂加工特征识别效果更佳,以卷积神经网络为框架,设计一种包含四层卷积层、四层池化层和三层全连接层的卷积神经网络结构模型,其每层的参数如图7所示。

图7 隐含层参数框图
Fig.7 Hidden layer parameters

4.3 复杂加工特征图像分类器

在对数据集和模型构建完成以后,需要对模型进行评估和优化,然后采用复杂加工特征分类器对其进行加工特征分类。对模型的评估采用交叉熵函数来描述计算结果中真实概率与预测概率的差异,其计算公式为:

(5)

式中:L表示交叉熵;y表示期望输出;表示实际输出。

确定损失函数以后,需要根据损失函数计算出的函数值,采用梯度下降法来修正复杂加工特征卷积神经网络模型,从而减小误差,以达到网络预测的结果不断接近真实结果。在优化卷积神经网络的模型之后,采用Softmax的方式对复杂加工特征进行分类。

构建枪械关重件的复杂加工特征数据集和搭建卷积神经网络模型之后,用python程序在PyCharm平台中编写复杂加工特征图像分类算法,算法流程如图8所示。

图8 复杂加工特征图像分类算法流程框图
Fig.8 Complex processing feature image classification algorithm flow

具体步骤为:

1) 获取所有加工特征图像数据集,其中包含M个加工特征,每个加工特征中含有N张加工特征图,循环变量初始值为i=1,j=1,其中Wi-N表示第i个加工特征的数据集,Wi-j表示第i个加工特征数据集中的第一张加工特征图;

2) 依次读取第i个特征的第j张加工特征图,输入给训练好的复杂加工特征卷积神经网络模型,得到第Wi-j张加工特征图的预测概率为Pi-j

3) 然后根据得到的Pi-j计算Wi-j加工特征图的最大期望值Emax=max{E1,E2,E3,…,EN};

4) 根据得到的最大期望值,结束复杂加工特征图像识别,输出最终的复杂加工特征类型。

5 模型及实例分析

根据本文提出的基于卷积神经网络的复杂加工特征图像识别方法,采用Python语言编写程序,以PyCharm平台结合TensorFlow深度学习框架构建复杂加工特征分类器,并通过UG的API接口建立复杂加工特征识别模块对其进行实例验证。

5.1 模型分析

将枪械关重件训练集输入给复杂加工特征卷积神经网络模型训练参数,如表1所示。训练次数和数据集损失值的函数曲线,如图9所示,训练次数和数据集准确率的函数曲线,如图10所示。

表1 模型训练参数
Table 1 Model training parameters

参数值参数值图片尺寸值[64×64×3]训练次数200每步图片数64学习速率0.000 1

图9 数据集损失函数曲线
Fig.9 Data set loss function

图10 数据集识别率函数曲线
Fig.10 Data set recognition rate function

5.2 复杂特征识别实例

在卷积神经网络完成大量的数据训练以后,选择枪械关重件进行复杂加工特征识别验证。其关重件特征在上述六大类加工特征之中,通过抽取几何体、复杂加工特征多角度捕捉图像法以及复杂加工特征图像识别分类等操作,部分加工特征识别结果,如表2所示。

表2 复杂加工特征识别结果
Table 2 Partial processing feature recognition results

加工特征识别结果加工特征识别结果圆柱孔扫掠腔深孔圆弧面螺旋面内孔倒圆矩形槽螺旋槽

枪械某关重件复杂加工特征识别结果,如图11所示,从识别结果可以看出,该方法能够识别出复杂加工特征类型。

图11 枪械某关重件复杂加工特征识别结果界面
Fig.11 Recognition results of complex processing features of a certain key important part of firearms

5.3 对比分析

1) 神经网络与传统方法

基于边界匹配的加工特征识别方法对特征的定义简单,能准确地描述特征面邻接属性,算法效率高,但是无法识别相交特征;基于立体分解的加工特征识别方法能够识别简单的相交特征,但是识别过程是基于大量的布尔运算,会导致计算量大,效率低。而基于卷积神经网络的复杂加工特征识别方法有较高的效率,能够识别相交特征,并且能够识别尺寸大小不同、视图方向不同的加工特征。

2) 不同神经网络方法

文献[22]中基于多层感知机(multilayer perceptron,MLP)模型,采用改进的NBA算法优化BP神经网络,能识别出孔、盲孔、通槽、台阶、T形槽、盲槽和部分相交特征。文献[23]中基于CNN模型可以识别不同类型的钻孔的可加工制造性。文献[7]中构建孔、槽、台阶等24种常见的简单特征数据集,然后基于CNN对其进行加工特征分类识别。本研究中提出的基于CNN的复杂加工特征识别模型,不仅能够识别孔、槽、台阶等简单加工特征,而且能够识别深孔、枪用螺旋槽等复杂加工特征,是对原有加工特征识别的一种扩展。

6 结论

1) 提出了复杂加工特征多角度捕捉图像方法,创建了复杂加工特征数据集,建立了复杂加工特征卷积神经网络模型,构建了复杂加工特征分类器;

2) 通过枪械关重件复杂加工特征识别实例验证了基于卷积神经网络的枪械关重件复杂加工特征识别方法有效、可行。

参考文献:

[1] Zhang Y,Luo X,Zhang B,et al.Semantic approach to the automatic recognition of machining features [J].The International Journal of Advanced Manufacturing Technology,2017,89(1/4):417-437.

[2] Geng W,Chen Z,He K,et al.Feature recognition and volume generation of uncut regions for electrical discharge machining [J].Advances in Engineering Software,2016,91:51-62.

[3] Heslinga FG,Pluim JPW,Dashtbozorg B,et al.Approximation of a pipeline of unsupervised retina image analysis methods with a CNN[C]//Medical Imaging 2019:Image Processing.International Society for Optics and Photonics.2019.10949:109491N.

[4] Szegedy C,Liu W,Jia Y,et al.Going deeper with convolutions[C]//Proceedings of the IEEE conference on computer vision and pattern recognition.[S.l.]:[s.n.],2015:1-9.

[5] He K,Zhang X,Ren S,et al.Deep residual learning for image recognition[C]//Proceedings of the IEEE conference on computer vision and pattern recognition.[S.l.]:[s.n.],2016:770-778.

[6] Hu J,Shen L,Sun G.Squeeze-and-excitation networks[C]//Proceedings of the IEEE conference on computer vision and pattern recognition.[S.l.]:[s.n.],2018:7132-7141.

[7] Zhang Z,Jaiswal P,Rai R.Feature Net:Machining feature recognition based on 3D Convolution Neural Network [J].Computer-Aided Design,2018,101(03):12-22.

[8] 于洋.基于NX二次开发的特征识别与提取[J].电子世界,2021(13):200-201.

Yu Y.Feature recognition and extraction based on the secondary development of NX [J].Electronic World,2021(13):200-201.

[9] 唐硕.基于NX/Open的三维模型特征识别方法研究[J].内燃机与配件,2021(08):194-195.

Tang S.Research on 3D model feature recognition method based on NX/Open [J].Internal Combustion Engine and Parts,2021(08):194-195.

[10] 王军,欧道江,舒启林,等.基于STEP-NC的相交特识别技术[J].计算机集成制造系统,2014,20(05):1051-1061.

Wang J,Ou D J,Shu Q L,et al.Intersection recognition technology based on STEP-NC [J].Computer Integrated Manufacturing System,2014,20(05):1051-1061.

[11] 陆凯,李迎光,刘旭,等.数据驱动的飞机结构件加工特征识别方法[J].航空制造技术,2021,64(08):32-40,57.

Lu K,Li Y G,Liu X,et al.Data-driven recognition method for processing features of aircraft structural parts [J].Aviation Manufacturing Technology,2021,64(08):32-40,57.

[12] 薛晓辉.基于图和神经网络的数控加工特征识别[J].农村经济与科技,2017,28(04):300.

Xue X H.Numerical control machining feature recognition based on graph and neural network [J].Rural Economy and Technology,2017,28(04):300.

[13] 齐峰,谭建荣,张树有.基于径向基函数神经网络的特征识别技术研究[J].计算机辅助设计与图形学学报,2002(06):562-565.

Qi F,Tan J R,Zhang S Y.Research on feature recognition technology based on radial basis function neural network [J].Journal of Computer Aided Design and Graphics,2002(06):562-565.

[14] 吕超凡,黄德林,刘天元,等.基于点云深度学习的加工特征识别方法[J/OL].计算机集成制造系统:1-17 [2021-10-25].http://kns.cnki.net/kcms/detail/11.5946.TP.20210723.1817.020.html.

Lv C F,Huang D L,Liu T Y,et al.Process feature recognition method based on point cloud deep learning [J/OL].Computer Integrated Manufacturing System:1-17 [2021-10-25].http://kns.cnki.net/kcms/detail/11.5946.TP.20210723.1817.020.html.

[15] 高远,于颖.基于图和神经网络的数控加工特征识别[J].机电一体化,2015,21(10):7-11,37.

Gao Y,Yu Y.Numerical control machining feature recognition based on graph and neural network [J].Mechatronics,2015,21(10):7-11,37.

[16] 张禹,董小野,李东升,等.基于STEP和改进神经网络的STEP-NC制造特征识别方法[J].航空学报,2019,40(07):256-267.

Zhang Y,Dong X Y,Li D S,et al.STEP-NC manufacturing feature recognition method based on STEP and improved neural network [J].Acta Aeronautica Sinica,2019,40(07):256-267.

[17] 许如欢.基于几何推理和神经网络的加工特征识别混合算法[D].武汉:华中科技大学,2019.

Xu R H.Hybrid algorithm for processing feature recognition based on geometric inference and neural network [D].Wuhan:Huazhong University of Science and Technology,2019.

[18] 张振可.基于深度学习的三维点云识别检测的研究[D].太原:太原科技大学,2020.

Zhang Z K.Research on 3D point cloud recognition and detection based on deep learning [D].Taiyuan:Taiyuan University of Science and Technology,2020.

[19] 马耀龙.基于3D点云数据的加工特征自动识别[D].大连:大连理工大学,2019.

Ma Y L.Automatic recognition of processing features based on 3D point cloud data [D].Dalian:Dalian University of Technology,2019.

[20] 高玉龙.基于加工面点云数据深度学习的加工特征自动识别[D].大连:大连理工大学,2021.

Gao Y L.Automatic recognition of processing features based on deep learning of processing surface point cloud data [D].Dalian:Dalian University of Technology,2021.

[21] 张胜文,周曦,李滨城,等.基于图像深度学习的零件加工特征信息提取方法[J].中国机械工程,2022,33(03):348-355.

Zhang S W,Zhou X,Li B C,et al.Part processing feature information extraction method based on image deep learning [J].China Mechanical Engineering,2022,33(03):348-355.

[22] Jian C F,Li M,Qiu K Y,et al.An improved NBA based STEP design intention feature recognition [J].Future Generation Computer Systems,2018,88:367-362.

[23] Ghadai S,Balu A,Sarkar S,et al.Learning localized features in 3D CAD models for manufacturability analysis of drilled holes [J].Computer Aided Geometric Design,2018,62:263-276.

Recognition of complex processing features of firearm key important parts based on convolutional neural network

SHAO Hairui1, LIU Yihua2, WANG Xikuo3, WANG Yongjuan1

(1.School of Mechanical Engineering, Nanjing University of Science and Technology, Nanjing 210094, China; 2.The 208th Research Institute of China Ordnance Industry, Beijing 102202, China; 3.The 63856th Troop of PLA, Baicheng 137001, China)

Abstract: Processing feature recognition is an intelligent interface between CAD, CAPP and CAM, which is of great significance to the integration of CAD, CAPP and CAM. The original processing feature recognition technology is limited to the operation of the attribute adjacency graph of the three-dimensional topological structure of the part, and the recognition efficiency and accuracy of some complex processing features are low. In response to this problem, a complex processing feature recognition method based on Convolutional Neural Networks (CNN) was proposed. The structural characteristics and machining process of the firearm key important parts were analyzed and classified. Using the complex processing features, a multi-angle capture image method was adopted to create the data sets of complex processing features, then a convolutional neural network model of complex processing features was used to train the data sets, and a complex processing feature classifier was used for classification, and finally output the complex processing feature results. Combined with the UG platform, the complex processing feature recognition process was verified by taking firearm key important parts as an example.

Key words: firearm key important parts; complex processing feature; convolutional neural network; image recognition

本文引用格式:邵海瑞,刘伊华,王希阔,等.基于CNN的枪械关重件复杂加工特征识别[J].兵器装备工程学报,2022,43(08):304-310.

Citation format:SHAO Hairui, LIU Yihua, WANG Xikuo, et al.Recognition of complex processing features of firearm key important parts based on convolutional neural network[J].Journal of Ordnance Equipment Engineering,2022,43(08):304-310.

中图分类号:TJ205

文献标识码:A

文章编号:2096-2304(2022)08-0304-07

收稿日期:2021-11-01;

修回日期:2021-12-13

基金项目:基础科研项目(JCKY2018209A001)

作者简介:邵海瑞(1998—),男,硕士,E-mail:617174311@qq.com。

通信作者:王永娟(1972—),女,博士,教授,E-mail:13951643935@139.com。

doi: 10.11809/bqzbgcxb2022.08.046

科学编辑 曾鹏飞 博士(沈阳理工大学副教授)

责任编辑 唐定国