草庐IT

BiSeNet - 轻量级实时语义分割

前言在语义分割领域,由于需要对输入图片进行逐像素的分类,运算量很大。通常,为了减少语义分割所产生的计算量,通常而言有两种方式:减小图片大小和降低模型复杂度。减小图片大小可以最直接地减少运算量,但是图像会丢失掉大量的细节从而影响精度。降低模型复杂度则会导致模型的特征提取能力减弱,从而影响分割精度。所以,如何在语义分割任务中应用轻量级模型,兼顾实时性和精度性能具有相当大的挑战性。BiseNet论文地址:[1808.00897]BiSeNet:BilateralSegmentationNetworkforReal-timeSemanticSegmentation(arxiv.org)本文对之前的实时

YOLOv5+BiSeNet——同时进行目标检测和语义分割

前言在Gayhub上看到个项目,有人在YOLOv5的基础上,新增了一个分割头,把BiSeNet语义分割算法加入到了目标检测中,使其能够同时进行目标检测和语义分割。项目地址:https://github.com/TomMao23/multiyolov5效果预览先看我使用原作者提供的模型,复刻出来的效果:(本来想放视频的,不过传了两次CSDN都莫名其妙消失了,那就放动图了)模型架构目标检测模型采用的是YOLOv5,具体原理在我之前的博文【目标检测】从YOLOv1到YOLOX(理论梳理)里已经详细解读过。语义分割模型采用的是部分BiSeNet结构,因为我不是这个方向的,具体原理不做细究,放张BiSe