当前位置: 首页 > news >正文

YOLO26改进 - 卷积Conv LAE 轻量级自适应提取卷积,从多尺度特征图中获得更多的上下文信息和高分辨率细节

# 前言
本文介绍了轻量级旁路匹配(LSM - YOLO)模型中的轻量级自适应提取(LAE)模块在YOLO26中的结合应用。LAE模块通过注意力机制和卷积操作,能从多尺度特征图中获取更多上下文信息与高分辨率细节,减少噪声影响,提取医学图像中感兴趣区域(ROI)的详细特征。我们将LAE集成到YOLO26的主干网络中,并在相关配置文件中进行设置。实验表明,LSM - YOLO在胰腺肿瘤、BCCD血细胞检测和Br35h脑肿瘤检测等数据集上以最小参数成本实现了先进性能,验证了LAE模块的有效性。

文章目录: YOLO26改进大全:卷积层、轻量化、注意力机制、损失函数、Backbone、SPPF、Neck、检测头全方位优化汇总

专栏链接: YOLO26改进专栏

@

目录
  • 介绍
    • 摘要
  • 文章链接
  • 基本原理
  • 核心代码
  • 实验
    • 脚本
    • 结果

介绍

image-20250105223110486

摘要

在当前的医学感兴趣区域(ROI)检测领域,现有的算法难以同时兼顾实时性能与准确性,无法满足医学自动检测不断增长的需求。尽管基础的YOLO框架凭借其快速的运算速度能够确保实时检测,但在维持高精度方面仍存在挑战。为解决上述问题,我们提出了一种名为轻量级旁路匹配Lightweight Shunt Matching - YOLO(LSM - YOLO)的新型模型,该模型由轻量级自适应提取(LAE)和多路径旁路特征匹配(MSFM)两部分构成。首先,借助LAE进行精细化特征提取,模型能够从多尺度特征图中获取更丰富的上下文信息和高分辨率细节,进而在降低噪声干扰的同时,精准提取医学图像中ROI的详细特征。其次,利用MSFM进一步优化高级语义特征与低级视觉特征的融合,使ROI特征与邻近特征能够更好地融合,从而提高检测率,为医学诊断提供更有效的辅助。实验结果显示,LSM - YOLO在胰腺肿瘤私有数据集上的平均精度(AP)达到48.6%,在BCCD血细胞检测公共数据集上达到65.1%,在Br35h脑肿瘤检测公共数据集上达到73.0%。我们的模型在这三个数据集上以最少的参数成本实现了当前先进的性能。

文章链接

论文地址:论文地址

代码地址:代码地址

基本原理

image-20250105223220072

核心代码

class LAE(nn.Module):# Light-weight Adaptive Extractiondef __init__(self, ch, group=16) -> None:super().__init__()self.softmax = nn.Softmax(dim=-1)self.attention = nn.Sequential(nn.AvgPool2d(kernel_size=3, stride=1, padding=1),Conv(ch, ch, k=1))self.ds_conv = Conv(ch, ch * 4, k=3, s=2, g=(ch // group))def forward(self, x):# bs, ch, 2*h, 2*w => bs, ch, h, w, 4att = rearrange(self.attention(x), 'bs ch (s1 h) (s2 w) -> bs ch h w (s1 s2)', s1=2, s2=2)att = self.softmax(att)# bs, 4 * ch, h, w => bs, ch, h, w, 4x = rearrange(self.ds_conv(x), 'bs (s ch) h w -> bs ch h w s', s=4)x = torch.sum(x * att, dim=-1)return x

实验

脚本

import warnings
warnings.filterwarnings('ignore')
from ultralytics import YOLOif __name__ == '__main__':
#     修改为自己的配置文件地址model = YOLO('./ultralytics/cfg/models/26/yolo26-LAE.yaml')
#     修改为自己的数据集地址model.train(data='./ultralytics/cfg/datasets/coco8.yaml',cache=False,imgsz=640,epochs=10,single_cls=False,  # 是否是单类别检测batch=8,close_mosaic=10,workers=0,optimizer='MuSGD',amp=True,project='runs/train',name='yolo26-LAE',)

结果

image-20260117144143299

http://www.jsqmd.com/news/347253/

相关文章:

  • CMake制作动态库与静态库对比
  • YOLO26改进 - 卷积Conv MKDC 多核深度卷积块:多分支架构协同捕获局部细节与全局语义,提升特征判别力 ICCV 2025
  • YOLO26改进 - 卷积Conv 增强感受野与多尺度特征捕获:引入RFB感受野块(Receptive Field Block)多分支卷积结构
  • SW草图绘制之倒角和圆角
  • YOLO26改进 - SPPF模块 替代SPPF, Mona多认知视觉适配器(CVPR 2025):打破全参数微调的性能枷锁:即插即用的提点神器
  • YOLO26改进 - SPPF模块 SPPELAN 空间金字塔池化与增强局部注意力:替代SPPF增强多尺度上下文捕获,提升检测精度
  • YOLO26改进 - 卷积Conv 融合多阶门控聚合网络MogaNet与 CA block,提升复杂场景与小目标检测鲁棒性
  • YOLO26改进 - 卷积Conv 即插即用轻量化突破:OREPA在线卷积重参数化,通过动态结构演化实现高效特征提取与自适应优化
  • YOLO26改进 - SPPF模块 替代SPPF,FFocal Modulation焦点调制:即插即用轻量设计优化全局语义捕获
  • YOLO26改进 - SPPF模块 发论文神器!LSKA注意力改进SPPF,增强多尺度特征提取能力,高效涨点!!!
  • 钣金件化学池视觉跟踪系统方案
  • YOLO26改进 - SPPF模块 AIFI基于注意力的尺度内特征交互:替代SPPF构建高效混合编码器,提升模型综合效能
  • 2.5 response资源路径
  • YOLO26改进 - C3k2 C3k2 融合 LSConv (Large-Small Conv)融合大核感知与小核聚合,提升小目标特征判别力 CVPR 2025
  • YOLO26改进 - C2PSA C2PSA融合CPIASA跨范式交互与对齐自注意力机制 交互对齐机制,提升小目标与遮挡目标判别力 ACM MM2025
  • YOLO26改进 - 下采样 轻量化突破:ADown 下采样让 YOLO26 参量减、精度升
  • YOLO26改进 - C3k2 C3k2融合LWGA轻量分组注意力(Light-Weight Grouped Attention):四路径并行架构破解通道冗余难题 AAAI 2026
  • 豆包问答中为何看不到你的品牌?可能是内容“不可见” - 品牌2025
  • YOLO26改进 - C2PSA C2PSA融合DiffAttention差分注意力:轻量级差分计算实现高效特征降噪,提升模型抗干扰能力
  • YOLO26改进 - C3k2融合 C3k2融合Mona多认知视觉适配器:打破全参数微调的性能枷锁:即插即用的提点神器 CVPR 2025
  • YOLO26改进 - C2PSA C2PSA融合Mask Attention掩码注意力,可学习掩码矩阵破解低分辨率特征提取难题 2025 预印
  • 巴菲特的市场看法与经济预测
  • YOLO26 改进 - 注意力机制 空间增强注意力SEAM(Spatially Enhanced Attention Module)提升遮挡场景检测鲁棒性
  • WSL2 完整开发环境配置指南
  • YOLO26改进 - C3k2 C3k2融合HMHA分层多头注意力机制:优化模型在复杂场景下的目标感知能力 CVPR 2025
  • YOLO26改进 - C2PSA C2PSA融合Mona多认知视觉适配器:打破全参数微调的性能枷锁:即插即用的提点神器 CVPR 2025
  • YOLO26 改进 - 注意力机制 Mask Attention掩码注意力,可学习掩码矩阵破解低分辨率特征提取难题 2025 预印
  • YOLO26 改进 - 注意力机制 轴向注意力Axial Attention(Axial Attention)优化高分辨率特征提取
  • 语言模型推理能力的认知负荷评估研究
  • YOLO26 改进 - 注意力机制 MCAttn 蒙特卡洛注意力:全局上下文与局部细节协同建模,破解微小目标特征表达难题