久久久com_日韩激情免费视频_欧美一区二区三区综合_亚洲欧洲精品一区

 
齒輪工業領域服務平臺,行業技術的領航者;
把齒輪傳動之脈搏,譜信息時代之新篇!
當前位置: 首頁 » 技術中心 » 最新技術資訊

基于 VSD-YOLOv5s 的輕量化注塑齒輪缺陷檢測

發布時間:2024-06-11 | 來源:組合機床與自動化加工技術 | 作者:申飛等
   針對注塑齒輪加工過程中在線缺陷檢測存在的識別速度較慢、識別精度較低等問題,提出了一種基于 ShuffleNetV2 主干網絡的改進 YOLOv5s 網絡模型。在 YOLOv5s 網絡模型的基礎上將原來的 C3 主干網絡結構替換為輕量化 ShuffleNetV2 結構,降低模型參數量和尺寸,提升識別速度。引入 SE 注意力機制,并通過 DIOU-NMS 方法去除冗余框,減少錯誤抑制,提高識別精度。實驗結果表明: 相比于原模型,改進的模型識別準確率提升了 0.9%,平均識別精度提升了 1.7% ,識別速度提升了 5 fps,滿足注塑齒輪表面缺陷在線識別的速度以及精度要求。

  在注塑齒輪生產過程中,由于溫度、注塑時間等因素影響,齒輪可能出現表面黑點、輪齒變形、輪齒缺失等缺陷。由于齒輪缺陷檢測過程往往十分復雜,檢測設備也較為昂貴,因此在實際生產中迫切需要對齒輪進行快速檢測和分析。傳統齒輪制造過程中的檢測方式以人工檢測為主,但是人工檢測不可避免地會出現錯檢、漏檢等問題。機器視覺檢測是一種非接觸式無損檢測,在高速、精細和重復的制造過程中更加可靠,與傳統的檢測方法相比,具有不可替代的優越性。

  陳碩等提出利用廣泛的 Canny 算子提取出待檢齒輪的輪廓,通過計算機求解出輪廓之間的距離,但該方法可能在提取輪廓時出現誤差且識別速度較低。郭冕等提出以模態分解模型將齒輪信號分解,并通過 BP 神經網絡,實現微型塑料齒輪缺陷檢測,但該方法在齒輪信號除噪聲方面檢測識別精度低、魯棒性差。楊亞等采用 SURF 算法對于齒輪的特征進行匹配,獲取缺陷信息后采用 OSTU 算法對缺陷進行分割處理并分類,但是該方法不能很好的分類缺陷。JEON-GHYEON 等采用聲波頻率分析法,采用 CNN 模型進行分析缺陷,數據分析需要大量時間,導致檢測效率降低。仇嬌慧等提出一種改進的 YOLOv5 網絡模型,但該模型中的主干網絡 C3 結構以及添加的注意力機制結構導致參數量上升、識別速度降低。

  基于上述問題,本文提出一種改進的 YOLOv5s (即 VSD-YOLOv5s) 網絡模型。該網絡模型使用輕量化 ShuffleNetv2 主干網絡,引入 SE 注意力機制及 DI-OU-NMS 方法,提升注塑齒輪缺陷檢測的識別精度與識別速度。

  一、YOLOv5s 網絡模型結構

  YOLOv5 包含 4 個版本的目標檢測網絡模型,即 YOLOv5s、YOLOv5m、YOLOv51 和 YOLOv5x,模型的規模和訓練參數的數量在 4 個版本中依次增加,其中,YOLOv5s 網絡模型最快。考慮到缺陷檢測需要嚴格的實時性,本文以最簡單、最快的網絡模型 YOLOv5s 作為基準,來完成表面缺陷的在線檢測。YOLOv5s 的結構由 4 部分組成,輸入端、Backbone 網絡、Neck 網絡、Prediction 輸出端,如圖 1 所示。輸入端采用自適應圖像填充、自適應錨框計算和 Mosaic 數據增強,以提升檢測的準確性; 在 Backbone 網絡中,使用了 Focus 模塊、C3 主干網絡模塊和卷積模塊。Focus 模塊主要用于切片操作,通過增加特征圖的維度來縮小特征圖的尺寸,同時保留圖像特征信息。C3 主干網絡模塊中的殘差結構有效防止梯度消失,使得特征更加細致; Neck 網絡中主要包含 C3 網絡模塊、上采樣和下采樣過程,降低計算量,同時提高特征融合能力和信息保留度。Prediction 輸出端中使用 NMS 后處理方法篩選多個目標錨框,抑制無效信息,以提高識別準確性。


  二、改進的 YOLOv5s 網絡模型

  為了滿足注塑齒輪表面缺陷在線檢測的速度和識別精度要求,本文提出了一種 VSD-YOLOv5s 網絡模型,對 YOLOv5s 的結構進行了修改,能夠檢測不規則和細小的齒輪缺陷。

  將主干網絡 C3 替換為 ShuffleNetV2

  YOLOv5s 中主干網絡 C3,如圖 2 所示,旨在更好地提取圖像的深層特征。C3 主要由 Bottleneck、Conv2d、BN + SiLU 激活函數組成,輸入通道分為兩個分支,通過兩個分支的卷積運算,將特征映射中的通道數減半。然后特征映射通過第二分支中的 Conv2d 層、BN 層和瓶頸層,并利用 Concat 層對兩個分支進行深度融合。最后,通過連續穿過 Conv2d 層和 BN 層生成模塊的輸出特征映射,特征映射的大小與主干網絡 C3 的輸入大小相同。


  YOLOv5s 主干特征提取網絡采用 C3 網絡結構,帶來較大的參數量,識別速度較慢,應用受限。因此本文將主干特征提取網絡替換為更輕量的 ShuffleNetV2 網絡結構,以實現網絡模型的輕量化,提升識別速度和識別精度。

  如圖 3 所示,本文使用先進的 ShuffleNetv2 單元,其中 Channel Split 操作將通道數平均分成兩部分,代替了原有的分組卷積結構。每個分支中的卷積層輸入、輸出通道數均相同,其中一個分支不進行任何操作以減少基本單元數。針對 ShuffleNetv2 中單元塊的下采樣,不再采用 Channel Split,通過在每個分支中添加stride = 2 代替原有的 Channel Split 模塊以提高模型容量及檢測效率。最后使用 Concat、Channle Shuffle 代替原有的 Add、Re-LU 模塊以增加模型通道之間的信息交流。綜合上述改動,特征圖空間大小將減半,且使模型具有較高的模型容量和檢測效率,減小了模型的計算復雜度,降低了模型的內存占用率,極大地提高了模型的計算效率。


  引入 SE 注意力機制模塊

  注意力機制是指重點關注檢測部分而忽略無關要素,SE 注意力機制模塊,如圖 4 所示。首先,對特征映射進行壓縮操作以獲得通道的全局特征; 然后,對全局特征進行激勵操作,以學習通道之間的關系,并獲取不同通道的權重; 最后,對原始特征映射進行乘法操作,得到最終的特征。這個機制有助于模型更加注重信息量最大的通道特征,同時抑制那些不重要的通道特征。


  本文通過引入 SE 注意力機制模塊,以建立卷積特征通道之間的相互依賴性來提高網絡的表示能力。首先,輸入特征圖 X,讓其經過 Ftr操作生成特征圖 U; 然后,進行 Squeeze 操作、Excitation 操作,Scale 操作。Squeeze 操作是一種壓縮操作,它將輸入圖像 的高度 H 和寬度 W 都壓縮為 1,但通道數不變的矩陣。通常使用全局平均“池化”操作來實現,以確保最終特征包含輸入圖像的所有信息。Excitation 操作對通過 Squeeze 操作生成的 1 × 1 × C 特征圖進行維度降低和恢復操作,使用全連接層獲取不同通道的權重,自動關注具有最高權重的通道。Scale 操作是一種簡單的加權運算操作,它將 Excitation 操作生成的特征圖與輸入特征圖通過 Sigmoid 激活函數進行 Channel 運算,得到輸出值。

  將 NMS 改進為 DIOU-NMS

  在 YOLOv5s 原有的 NMS 中,使用 IOU 度量來抑制冗余檢測框,IOU 的全稱為交并比,即表示為預測邊框 A(Prediction box) 和真實邊框 B(Ground truth box) 的交集和并集的比值。IOU 的計算公式為:


  但 IOU 度量法并未將兩個框之間的中心點距離考慮在抑制標準之內,此時模型檢測到的遺漏框和錯誤框的數量將會增加。考慮到以上情況,為提高模型檢測的準確性,本文使用 DIOU-NMS 方法,其計算函數方程可以定義為:


  式中: Si 表示第 i 個檢測框對應的置信度得分,RDIOU ( M,bi ) 表示基于 DIOU 的檢測框交叉比,M 表示置信度得分最高的檢測框,bi 表示剩余檢測框集合中的第 i 個檢測框,Nt 表示設定的閾值。本文 DIOU 損失函數的懲罰項可以定義為:


  如圖 5 所示,c 是覆蓋兩個錨框的最小封閉框的對角線長度,d = ρ 2 ( b,bgt ) 是兩個錨框的中心點的距離。其中 b 和 bgt分別表示和的中心點,ρ 為歐氏距離,c 為覆蓋兩個框的最小包圍框的對角線長度。DIOU 損失函數可以定義為:



  以此來看,DIOU 損失函數不是按外接矩形和并集面積的差值,而是同時最小化外接矩形的面積和兩框中心點的距離,這會使得網絡更傾向于移動邊界框的位置來減少損失函數。因此,考慮到影響邊界框檢測的 3 個幾何因素,即重疊區域、中心點距離和縱橫比,并在此基礎上將 DIOU-NMS 方法添加到本文的模型中,從而加快了模型的收斂速度,提高了模型的性能。


  三、結果與分析

  實驗環境: 在該實驗中使用的計算機中央處理單元(CPU 型號) 是 Intel(R) Core(TM) i7-12700F CPU@ 2.10 GHz,并且運行存儲器是 16 GB。圖形處理器 (GPU 型號) 為 NVIDIA GeForce RTX 1080 獨立顯卡,顯存為 8 GB。采用 64 位 Windows 10 操作系統作為軟件環境,PyCharm 作為開發平臺,PyTorch 作為深度學習框架,Python 作為編程語言,CUDA 11.3 版本并行計算框架作為開發平臺,如圖 7 所示。


  實驗數據集共包含 2000 張分辨率為 640 × 640 的圖片,按照 8∶ 2 的比例劃分為數據集和驗證集。在訓練過程中,設置每批次訓練 16 張圖片,初始學習率為 0.003,IOU 閾值為 0.5,針對所有參照模型均按照這些參數訓練 300 個 Epoch。

  數據集預處理: 采用自制的齒輪缺陷數據集,其中主要包括輪齒變形、輪齒缺失、表面黑點3 種情況,如圖 8 所示。運用 VSD-YOLOv5s 模型進行缺陷檢測,采用 Mosaic 增強方法和自適應錨框方法對于數據集進行前期處理。


  本文 VSD-YOLOv5s 模型的模型評估指標主要包括準確率(P) 、召回率(R) ,平均識別精度(MAP) 、識別速度(FPS) 。


 

  式中: TP 表示正確識別齒輪缺陷,FP 表示對齒輪缺陷識別的錯誤分類,FN 表示不明齒輪缺陷,C 表示齒輪缺陷對象類別的數量,k 表示 IOU 閾值,N 表示閾值的 IOU 數量,P(k) 表示識別精度,R(k) 表示召回率。

  如圖 9 所示,為了對 VSD-YOLOv5s 模型的檢測性能進行全面評估,本文采用 YOLOv5s 和 VSD-YOLOv5s 作為縱向比較模型、采用經典的目標檢測模型 Fast- RCNN 作為橫向比較模型,設置相同的實驗參數,上述模型的檢測效果表 1 所示。


  由表1 的實驗結果可知,VSD-YOLOv5s 的 MAP 達到 94.1%,準確率達到 95.1%,相較于另外 3 種模型有所提升,對各類表面缺陷具有良好的檢測效果,識別速度相較于 YOLOv5s,FPS 提高5 fps。因此,與 YOLOv5s,Fast-RC-NN 兩種模型相比,VSD-YOLOv5s 模型具有優越的檢測性能,取得了最佳的檢測效果,能夠滿足在線缺陷檢測系統的較高識別精度需求。

  本文將3 種模型在測試過程中產生的準確率以及召回率記錄并繪制 P-R 曲線圖,如圖 10 所示,通過 P-R 曲線我們可以看到 VSD-YOLOv5s 模型的性能優于 Fast-RCNN 和 YOLOv5s。


  為了驗證不同改進方法對 YOLOv5s 模型性能的影響,本文對多種改進方法進行了比較與討論,如表 2 所示。“√”表明網絡模型中加入此模塊,而“× ”表明網絡模型中沒有加入此模塊。原 YOLOv5s 模型的大小是 14.58 MB,FPS 為 70 fps。使用 ShuffleNetV2 模塊的輕量級 ShuffleNetV2-YOLOv5s 模型的大小減少到 7. 95 MB,FPS 提升到74 fps。結果表明,當在模型中加入 ShuffleNetV2 時,可達到模型輕量化的效果并提升識別速度; 單獨使用 SE 模塊時,YOLOv5s 模型的 MAP 從 91.2% 增加到 92.1% 。ShuffleNetV2-YOLOv5s 模型的 MAP 從 91.80% 增加到93.8% 。當SE 注意力機制、DIOU-NMS 以及 ShuffleNetV2 同時應用時,相比于原模型,VSD-YOLOv5s 模型的識別準確率提升了 0. 9% ,識別精度提升了 1.7% ,識別速度提升了 5 fps, 模型的性能得到了全面改善,達到最優。


  四、結論

  針對注塑齒輪缺陷檢測存在的問題,提出一種 VSD-YOLOv5s 的齒輪缺陷檢測輕量化網絡模型結構,在改進后的模型架構中,使用了輕量級的 ShuffleNetV2 模塊,為了準確識別注塑齒輪缺陷的不同種類,在模型中引入 SE 注意力機制,將 NMS 改進為 DIOU-NMS 方法加速模型的收斂,在不同測試集進行測試驗證 VSD-YOLOv5s 網絡模型的可行性,實驗結果表明,模型滿足在線檢測系統對高實時性、低漏檢率和低誤檢率的要求,結構更簡化,復雜度更低,檢測識別精度更高。未來在模型的實際應用中,將建立缺陷樣本庫,并及時收集和完善樣本庫,提升檢測效果。

  參考文獻略.

[ 技術中心搜索 ]  [ ]  [ 告訴好友 ]  [ 打印本文 ]  [ 關閉窗口 ]  [ 返回頂部 ]
久久久com_日韩激情免费视频_欧美一区二区三区综合_亚洲欧洲精品一区
国产极品jizzhd欧美| 久久69精品久久久久久久电影好| 亚洲中文字幕无码专区| 久久最新资源网| 国产精品一区=区| 精品一区二区三区无码视频| 亚洲一二三区精品| 欧美激情网站在线观看| 国产精品久久久精品| 久久综合亚洲社区| 国产精品手机在线| 国产精品入口日韩视频大尺度| 国产成人精品免费视频大全最热| 99亚洲国产精品| 91成人综合网| 丰满少妇久久久| 欧美亚洲国产视频小说| 欧美日韩第二页| 欧美国产二区| 欧美亚洲国产精品| 欧洲一区二区在线| 欧美日韩一区在线观看视频| 欧美亚洲第一区| 欧美亚洲视频在线看网址| 黄频视频在线观看| 国产一区喷水| 91精品在线影院| 国产精品91久久| 国产国产精品人在线视| 国产成人涩涩涩视频在线观看| 久久精品国产69国产精品亚洲 | 欧美亚洲黄色片| 日本一区二区三区视频在线观看| 色一情一乱一伦一区二区三区丨| 日本婷婷久久久久久久久一区二区| 国产欧美日韩精品丝袜高跟鞋| 中文字幕日韩精品一区二区| 久99九色视频在线观看| 欧美日韩成人黄色| 欧美一区二区三区精品电影| 日韩免费av一区二区| 日韩.欧美.亚洲| 精品视频无码一区二区三区| 国产美女久久精品香蕉69| 久久婷婷开心| 久久精品亚洲94久久精品| 欧美日本在线视频中文字字幕| 国产精品传媒毛片三区| 亚洲精品中文字幕在线| 免费在线观看日韩视频| 成人久久一区二区| 色av吧综合网| 欧美大成色www永久网站婷| 亚洲熟妇无码另类久久久| 极品尤物一区二区三区| 苍井空浴缸大战猛男120分钟| 日韩在线视频中文字幕| 中文字幕欧美日韩一区二区| 日韩av电影免费播放| 国产肉体ⅹxxx137大胆| 欧美性大战久久久久xxx| 国产精品一区电影| 色婷婷综合成人| 欧美激情精品久久久久久变态| 日韩国产欧美一区| 国产精品一区二区三区在线播放 | 欧美专区在线播放| 亚洲精品乱码久久久久久蜜桃91 | 国产精品久久久91| 欧洲亚洲一区二区三区四区五区| 欧美 日韩 激情| 97久久伊人激情网| 国产精品成人一区二区三区吃奶| 日本最新一区二区三区视频观看| av动漫在线观看| 国产精品久久久久久久小唯西川| 亚洲成色www久久网站| 国产免费黄色av| www.美女亚洲精品| 日本久久久a级免费| 99在线观看视频免费| 国产欧美精品久久久| 久久久精品免费| 日本在线观看天堂男亚洲| 97免费视频观看| 国产精品成人观看视频免费| 狠狠综合久久av| 久久久久久久999| 欧美一区二区三区综合| 国产精品96久久久久久又黄又硬| 中文字幕人成一区| 国产偷人视频免费| 国产精品日韩高清| 欧美极品视频一区二区三区| 久久精品日韩| 午夜肉伦伦影院| 国产成人在线播放| 丁香六月激情婷婷| 97色在线播放视频| 欧美激情视频在线观看| 国产有码在线一区二区视频| 国产精品日韩在线一区| 日韩在线三区| 久久久久久久久久久久久国产精品| 亚洲欧洲中文| 久久亚洲a v| 色一情一乱一伦一区二区三区丨| 国产a级片免费观看| 午夜精品美女久久久久av福利| 成人精品一二区| 最新欧美日韩亚洲| 国模精品视频一区二区| 久久亚洲国产成人| 国产肉体ⅹxxx137大胆| 国产精品电影久久久久电影网| 欧美综合在线播放| 777午夜精品福利在线观看| 久操成人在线视频| 成人伊人精品色xxxx视频| 在线一区高清| 91精品久久久久久久久中文字幕| 中文字幕在线观看一区二区三区| 国内精品久久影院| 精品久久久久久综合日本| 国产免费毛卡片| 亚洲精品中文字幕无码蜜桃| 97久久国产精品| 精品国产免费av| 97碰碰碰免费色视频| 日本一区二区在线| 日韩在线视频一区| 麻豆一区区三区四区产品精品蜜桃| 国产精品国产精品国产专区蜜臀ah| 国产日韩精品电影| 午夜精品久久久久久久无码| 久久久综合av| 亚洲91精品在线亚洲91精品在线| 国产大片精品免费永久看nba| 欧美视频在线第一页| 欧美激情亚洲国产| 久久久久久久久影视| 粉嫩精品一区二区三区在线观看| 熟女少妇在线视频播放| 视频直播国产精品| 国产日韩亚洲欧美在线| 成人免费视频91| 日本久久久a级免费| 日韩亚洲欧美中文高清在线| 国产伦精品一区二区三区免费视频 | 欧美成人一区二区在线观看| 欧美日本亚洲视频| 国产高清www| 国产一区免费观看| 日韩av免费在线看| 国产精品久久av| 99久久99久久精品国产片| 亚洲中文字幕无码不卡电影| 欧美伊久线香蕉线新在线| 久久夜色精品国产欧美乱| 91av在线国产| 精品无人区一区二区三区 | 午夜欧美一区二区三区免费观看| 国产高清www| 国产日本欧美一区二区三区| 日韩欧美猛交xxxxx无码| 精品国产网站地址| 91久久精品美女高潮| 人人澡人人澡人人看欧美| 久久精品国产91精品亚洲| 99精品一级欧美片免费播放| 欧美激情亚洲天堂| 日本不卡高清视频一区| 欧美激情xxxxx| 国产精品乱子乱xxxx| 久久精品国产综合精品| 国产美女高潮久久白浆| 麻豆成人av| 热久久免费国产视频| 亚洲免费精品视频| 久久亚洲精品视频| www.日韩免费| 国产一区香蕉久久| 午夜免费久久久久| 国产aⅴ精品一区二区三区黄| 久久精品亚洲一区| 99精品国产高清一区二区| 国产亚洲精品自在久久| 日韩av色综合| 无码内射中文字幕岛国片| 风间由美久久久| 国产在线精品一区二区中文| 视频一区亚洲| 日本成人中文字幕在线| 婷婷五月色综合| 亚洲精品免费av| 亚洲一区二区在线免费观看| 亚洲精品免费av| 亚洲18私人小影院| 欧美激情视频一区二区三区不卡| 久久成人在线视频|