999精品在线视频,手机成人午夜在线视频,久久不卡国产精品无码,中日无码在线观看,成人av手机在线观看,日韩精品亚洲一区中文字幕,亚洲av无码人妻,四虎国产在线观看 ?

基于改進YOLOv5s的交通標志檢測算法

2023-08-21 08:36:05白云羅鈺
現代信息科技 2023年12期
關鍵詞:深度學習

白云 羅鈺

摘? 要:針對城市道路的交通標志在真實路況中存在光照不均、遮擋等因素導致的在目標檢測任務中出現參數量過多、檢測速度慢等問題,文章基于原有YOLOv5s的網絡框架提出一種改進后的目標檢測網絡Shuffle-Block,首先選用開源的CCTSDB數據集進行實驗,引入Shuffle-Block模塊替換YOLOv5s原始的CSPDarknet主干網絡,使得YOLOv5s的網絡模型輕量化,降低模型的復雜程度。

關鍵詞:YOLOv5s;交通標志;深度學習;目標檢測

中圖分類號:TP183;TP391.41 文獻標識碼:A 文章編號:2096-4706(2023)12-0006-04

Traffic Sign Detection Algorithm Based on Improved YOLOv5s

BAI Yun, LUO Yu

(School of Aviation, Inner Mongolia University of Technology, Hohhot? 010051, China)

Abstract: In response to the problems of excessive parameter count and slow detection speed in object detection tasks caused by uneven lighting and occlusion of traffic signs on urban roads in real road conditions, this paper proposes an improved object detection network Shuffle-Block based on the original YOLOv5s network framework. Firstly, the open-source CCTSDB dataset is selected for experiment, and the Shuffle-Block module is introduced to replace the original CSPDarknet backbone network of YOLOv5s, make YOLOv5s network model lightweight and reduce the complexity of the model.

Keywords: YOLOv5s; traffic sign; deep learning; object detection

0? 引? 言

近年來,我國城鄉公路建設發展迅速,機動車保有量大幅增長。但是人們對交通的道路安全意識淡薄,且真實路況中交通標志被遮擋、光照不均等外界因素,造成交通事故頻頻發生,交通安全成為當今社會的一個重要問題。交通標志檢測作為智能交通系統中的重要組成部分,主要應用在自動駕駛輔助系統[1](Automatic Driving Assistance System, ADAS)、因素非常多,如光照條件、部分遮擋等,因此交通標志檢測是一項具有挑戰的研究方向。

目前,由于深度學習的不斷發展,目標檢測技術[2]也在不斷更新。Han等人[3]提出一種刪除低于閾值的連接的剪枝策略,使得網絡的連接稀疏,從而降低網絡的復雜度。Li等[4]對每層卷積中低于閾值的通道進行裁剪操作,達到壓縮模型的目的。邱天衡等[5]提出交通控制、自主駕駛等領域。隨著深度學習的興起,目標檢測任務得到了極大的發展,其任務是在圖像或視頻中顯示出交通標志的類別和位置,但影響檢測的因出了一種改進特征融合結構的YOLOv5算法模型,并且降低了網絡的參數量和計算量,在提升模型檢測精度的同時保持了模型的輕量化。郭磊等[6]提出了一種針對小目標檢測的YOLOv5算法模型,在小目標物體檢測上具有更強的特征提取能力和更高的檢測精度。

深度學習算法在目標檢測上的表現優異,給交通標志檢測帶來了更多的可能性。本文選用YOLOv5s模型結合Shuffle-Block輕量級網絡進行實驗,在減少參數量和計算量等方面都有著相當不錯的表現。

1? 輕量化網絡簡介

輕量化網絡的技術不止一個方向,它們之間相互獨立又相互補充,合理的設計網絡結構能夠起到很好的互補作用。輕量化模塊設計主要是圍繞更輕便的計算單元展開,和常規卷積操作相比擁有更少的參數量和計算量。YOLOv5s模型的主干網絡采用CSPDarknet53結構,該結構參數量較多,且網絡層數復雜。因此,對主干網絡進行裁剪或替換,實現YOLOv5s的輕量化設計。

根據網絡的結構層次,可以將輕量化網絡劃分為模型的輕量化結構設計和模型壓縮兩大類,輕量化結構設計是在設計模型時就遵從輕量化思想,模型壓縮是在原有的模型基礎上,例如減少卷積數量、增加網絡的并行度、采用深度可分離卷積等[7],列出了近年來比較優秀的輕量化網絡,主要有Squeeze Net、Mobile Net系列、Shuffle Net系列、Ghost Net等。

谷歌公司在2017年輕量化網絡中首次提出了一種將圖像通道和圖像區域分開處理的深度可分離卷積概念。深度可分離卷積分由深度卷積(Depth Wise convolution, DW conv)和逐點卷積(Point Wise convolutions, PW conv)結合而成。在幾乎不影響精度的情況下深度可分離卷積可以大幅度降低網絡的計算量以及每秒浮點運算次數(FLoating point OPerations per Second, FLOPS)。對于傳統的卷積運算,在進行卷積運算時需要同步考慮圖像區域中的所有通道,從而導致計算量增加,模型參數復雜。

在卷積核大小為wF×hk普通卷積中,卷積核的深度與輸入特征矩陣深度相同為M,卷積核個數與輸出特征矩陣深度相同為N,整個運算過程中共有個wF×hk×M×N卷積核,每個卷積核都要經過Dw×Dh次運算。如圖1為傳統的卷積過程,其運算計算量Fconv可以如式(1):

Fconv = wF×hk×M×N×Dw×Dh? ? ? ? ? ? ? ?(1)

在深度卷積階段,只需要1個卷積核大小為wk×hk深度為M的卷積核;在逐點卷積階段,需要N個卷積核大小為1×1深度為N的卷積核,深度卷積和逐點卷積的每個卷積核都需要經過Dw×Dh次運算。如圖2為深度分離卷積的過程,其計算量Fdc如式(2):

Fdc = wk×hk×M×Dw×Dh + M×N×Dw×Dh? ? ?(2)

深度可分離卷積與傳統卷積的計算量之比R如式(3):

從傳統卷積與深度可分離卷積的計算量和參數量之間可以得到,在相同的計算效果下,無論是參數量還是計算量都比傳統卷積極大減少了模型的計算量。Shuffle-Block中特征提取組件使用的是深度可分離卷積,而深度可分離卷積則更加適合在嵌入式設備上部署運行。

2? 改進的YOLOv5s檢測算法

2.1? 輕量化網絡

隨著深度學習技術的發展,交通標志的檢測朝著自動化、智能化的方向發展,深度學習算法對交通標志有著優異的檢測性能,可實現傳統方法難以達到的檢測效果。YOLOv5s作為開源的目標檢測網絡與同一系列目標檢測網絡相比,在速度和精度上有著明顯的優勢。由于YOLOv5s在初始模型的特征階段對目標的檢測效果非常差,網絡模型體積較大,參數量多,對硬件要求高且不能再在移動端部署。針對以上情況,本文提出了一種改進YOLOv5s的輕量化檢測算法。

2.2? 引入輕量化

圖3為Shuffle-Block在網絡結構中重新設計了兩種核心模塊,如圖3(a)大小不變單元所示,主要用于提取特征同時保持特征圖的大小。首先,在進行卷積操作前,使用通道分割(Channel Split, CS)將輸入通道分為兩個分支,左分支不進行處理,右分支分別進行深度卷積等一系列處理,再將左分支的通道與右分支卷積輸出特征進行融合并進行通道混洗,使各分支間的特征信息得以交流,從而加強兩通道之間的圖像信息融合;如圖3(b)2倍下采樣單元所示,主要對圖像特征進行2倍下采樣,左右分支都進行了降采樣操作,且兩個分支上的普通卷積均改為了深度可分離卷積,大幅減少了計算量,加快了模型的訓練速度,達到輕量化模型的目的。

為了減少原YOLOv5s的計算量,本文選用Shuffle-Block來構建主干網絡,使其現有的網絡層數少于YOLOv5s網絡使用的Darknet53結構,一方面參數量減少,另一方面模型大小也壓縮了,從而實現網絡輕量化。

本文檢測算法整體網絡結構為端到端的一階段網絡YOLO結構,分為輸入端、主干網絡、頸部網絡和輸出端等五個部分,輸入端像素大小為416×416、RGB通道的交通標志圖像,主干網絡被稱為特征提取網絡,本文由Shuffle-Block網絡的前半部分結構構成,從而使得其功能組件,在移動端嵌入式設備上實現交通標志檢測,頸部網絡的主要作用是進行特征融合,本文將深層的特征圖經過上采樣與中層特征信息進行融合,這樣可以更好地融合淺層的位置信息和深層的語義信息從而提升模型的檢測能力。

3? 實驗及結果分析

3.1? 實驗數據

本文以交通標志為研究對象,因開源數據集CCTSDB來源于車載攝像頭、城市道路、高速公路等多個復雜交通場景[8]與真實路況相近,選用該數據集進行實驗。在該數據集中用LabelImg標注工具將數據集的標簽細分為Prohibitory、Speed limit、Warning、Mandatory四個大類。

3.2? 實驗環境和訓練方法

本文模型的訓練和測試均在Ubuntu操作系統上完成,實驗的初始學習率為0.01,循環學習率為0.2,IoU訓練的閾值設置為0.2,batch-size設置為16,總訓練的試驗次數為200輪。

具體實驗環境配置如表1所示。

為了突出模型具有良好的有效性和普適性,使用YOLOv5s中原有的Mosaic數據增強方法,對輸入圖像特征進行隨機裁剪、縮放、排布的方式進行拼接,之后輸入網絡進行訓練。Mosaic是對CutMix的改進版,Mosaic通過對選出的四張圖片進行拼接,得到一張新的圖片之后,傳入神經網絡模型中進行學習,增強了檢測物體的有效信息,提高了網絡識別模型的穩定性,能夠減少對圖片錯誤信息標簽的識別,提高該模型的泛化性和魯棒性。如圖4為采用Mosaic數據增強后的圖像示例。

在上述實驗環境中在設置相同的batch-size,img-size,對改進后的模型及YOLOv5s模型進行對比實驗,分別以準確率(Precision)、召回率(Recall)、均值平均準確率(means Average Precision, mAP)對模型識別的效果進行評測。使用每秒傳輸幀數(Frame Per Second, FPS)對檢測速度進行評估。到模型訓練損失幾乎不降低的條件下停止訓練。

通過表2混淆矩陣來計算精確率與召回率。

召回率是指在真實情況下正樣本中預測結果為正樣本的比例,能夠衡量模型的漏檢程度。計算公式為:

精確率是指預測結果中正樣本中真實情況為正樣本的比例,能夠衡量模型的錯檢程度。其計算公式為:

圖5為兩者的準確率曲線對比,改進后模型的準確率相對于YOLOv5s模型較低,但在經過100個epochs后仍能達到0.898,實現輕量化的同時也保證了模型的精度不變。

圖6為兩者的Recall曲線的對比。在經過130個epoch后,兩者的Recall趨于相同,改進后模型的Recall能達到0.898。

由實驗結果可知,經過兩者對比,本文選用Shuffle-Block來構建主干網絡,使其現有的網絡層數少于YOLOv5s網絡使用的Darknet53,一方面參數量大幅減少,另一方面模型大小也壓縮了,從而實現網絡輕量化。但是從檢測效果上觀察,如圖7所示,相比于YOLOv5s改進后的模型檢測效果略差,在網絡輕量化的同時,會出現檢測率識別低的情況。圖7(a)、(b)分別為自然場景下的YOLOv5s和改進后的模型檢測結果,對比發現改進后網絡識別模型的準確率低于YOLOv5s模型。

4? 結? 論

本文提出了一種基于YOLOv5s的輕量化交通標志檢測算法,主要對YOLOv5s的目標檢測網絡進行分析,使用Shuffle-Block對YOLOv5s中的主干網絡CSPDarknet53進行了替換,實現網絡輕量化設計,在開源數據集上驗證了所提出的算法可以在大幅降低計算量的同時保證了較高的檢測精度,相比YOLOv5s的參數量降低了58.7%,計算量降低了54.66%,但改進后的模型平均精度mAP降低了約2.1個百分點,達到0.898。因此,在后續研究中,模型滿足輕量化的同時,也要保證較高的檢測精度,使其可以更好地部署在移動端。

參考文獻:

[1] 楊港.混合交通環境自動駕駛系統測試方法研究 [D].吉林:吉林大學,2022.

[2] TAO X Y,GONG Y H,SHI W W,et al. Object Detection with Class Aware Region Proposal Network and Focused Attention Objective [J].Pattern Recognition Letters,2020,130:353-361.

[3] HAN S,POOL J,TRAN J,et al. Learning both Weights and Connections for Efficient Neural Network [J/OL].arXiv:1506.02626 [cs.NE].[2022-11-09].https://arxiv.org/abs/1506.02626v1.

[4] LI H,KADAV A,DURDANOVIC I,et al. Pruning Filters for Efficient Convnete [J/OL].arXiv:1608.08710 [cs.CV].[2022-11-09].https://arxiv.org/abs/1608.08710v2.

[5] 邱天衡,王玲,王鵬,等.基于改進YOLOv5的目標檢測算法研究 [J].計算機工程與應用,2022,58(13):63-73.

[6] 郭磊,薛為,王邱龍,等.一種基于改進YOLOv5的小目標檢測算法:CN202111382559.1 [P].2022-03-25.

[7] ZHU L,XIE Z H,LUO J,et al. Dynamic Object Detection Algorithm Based on Lightweight Shared Feature Pyramid [J/OL].Remote Sensing,2021,13(22):4610[2022-11-09].https://www.mdpi.com/2072-4292/13/22/4610.

[8] ZHANG J M,HUANG M T,JIN X K,et al. A Real-Time Chinese Traffic Sign Detection Algorithm Based on Modified YOLOv2 [J/OL].Algorithms,2017,10(4):127[2022-11-09].https://www.mdpi.com/1999-4893/10/4/127.

作者簡介:白云(1973—),男,漢族,內蒙古呼和浩特人,副教授,碩士研究生,研究方向:智能交通系統;羅鈺(1998—),

女,漢族,陜西咸陽人,碩士研究生在讀,研究方向:深度學習、圖像處理。

收稿日期:2022-12-29

基金項目:內蒙古自治區關鍵技術攻關計劃項目(2019GG271);內蒙古自治區直屬高?;究蒲袠I務費項目(JY20220227);內蒙古自治區高等學??茖W研究項目(NJZY22387);內蒙古工業大學科學研究項目(ZY202018)

猜你喜歡
深度學習
從合坐走向合學:淺議新學習模式的構建
面向大數據遠程開放實驗平臺構建研究
基于自動智能分類器的圖書館亂架圖書檢測
搭建深度學習的三級階梯
有體驗的學習才是有意義的學習
電子商務中基于深度學習的虛假交易識別研究
現代情報(2016年10期)2016-12-15 11:50:53
利用網絡技術促進學生深度學習的幾大策略
考試周刊(2016年94期)2016-12-12 12:15:04
MOOC與翻轉課堂融合的深度學習場域建構
大數據技術在反恐怖主義中的應用展望
深度學習算法應用于巖石圖像處理的可行性研究
軟件導刊(2016年9期)2016-11-07 22:20:49
主站蜘蛛池模板: 欧美日本激情| 一级毛片在线播放免费观看| 99在线视频精品| 99热线精品大全在线观看| 亚洲国产理论片在线播放| 亚洲欧美综合另类图片小说区| 四虎国产成人免费观看| 欧美午夜小视频| 九九热精品视频在线| 婷婷综合缴情亚洲五月伊| 国产第一页免费浮力影院| 人人妻人人澡人人爽欧美一区| 99热免费在线| 欧美激情第一欧美在线| 午夜一区二区三区| 99精品伊人久久久大香线蕉 | 日韩 欧美 国产 精品 综合| 国产原创第一页在线观看| 亚洲欧美日韩中文字幕一区二区三区| 国产91成人| 蜜桃视频一区二区| 69av免费视频| 国模私拍一区二区三区| 久久伊人操| 久久永久视频| 国产一二三区在线| 全免费a级毛片免费看不卡| 亚洲高清无码久久久| 视频一区亚洲| 91国内视频在线观看| 成人另类稀缺在线观看| 伊人精品视频免费在线| 日韩天堂视频| 中文一级毛片| 伊人色综合久久天天| 青青青亚洲精品国产| 思思99热精品在线| 亚洲性视频网站| 精品国产免费观看一区| 久久大香香蕉国产免费网站 | 91九色国产porny| 无码日韩人妻精品久久蜜桃| 欧洲亚洲一区| 精品国产91爱| 特级精品毛片免费观看| 在线播放国产99re| 国产亚洲欧美另类一区二区| 日韩一区精品视频一区二区| 777国产精品永久免费观看| 色成人综合| 黄色网页在线播放| V一区无码内射国产| a级毛片一区二区免费视频| 亚洲二三区| 日韩小视频网站hq| 91精品国产自产91精品资源| AV不卡国产在线观看| 伊人网址在线| 国产91成人| 国产精品人莉莉成在线播放| 国产女人爽到高潮的免费视频| 精品福利视频导航| 亚洲美女视频一区| 免费观看男人免费桶女人视频| 67194亚洲无码| 91成人免费观看| 精品国产黑色丝袜高跟鞋| 波多野结衣无码中文字幕在线观看一区二区 | 精品国产www| 福利在线一区| 在线观看网站国产| 114级毛片免费观看| 国产精女同一区二区三区久| 亚洲国产无码有码| 午夜视频在线观看免费网站| 国产欧美在线观看一区| 欧美国产精品不卡在线观看| 五月天在线网站| 久久综合国产乱子免费| www.av男人.com| 国产视频入口| 精品一区二区久久久久网站|