news 2026/7/11 4:01:23

ConvNeXt 改进 :ConvNeXt添加DLKA-Attention可变形大核注意机制(CVPR 2024),二次创新CNBlock结构 ,实现涨点

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
ConvNeXt 改进 :ConvNeXt添加DLKA-Attention可变形大核注意机制(CVPR 2024),二次创新CNBlock结构 ,实现涨点

本文教的是方法,也给出几种改进方法,二次创新结构,百变不离其宗一文带你改进自己模型,科研路上少走弯路。


前言

引入可变形大核注意力 (D-LKA Attention) 的新方法来增强医学图像分割。这种方法使用大型卷积内核有效地捕获体积上下文,避免了过多的计算需求。D-LKA Attention 还受益于可变形卷积,以适应不同的数据模式。

理论介绍

  • 大核卷积(Large Kernel Convolution):大核卷积通过使用更大的卷积核来捕捉更广泛的上下文信息。与传统的卷积操作相比,它能在相同的感受野下减少参数量,降低计算复杂度。该方法能够在保持较低计算开销的情况下实现全局信息的聚合。
  • 可变形卷积的作用:在医学图像中,病变区域或器官的形状常常是不规则的,传统的卷积操作难以处理这些形变。可变形卷积通过学习偏移量来调整采样网格,使得卷积核能够灵活地适应不同形态的物体。这种灵活性可以更好地表示病变或器官的边界,从而提高分割的精度。

D-LKA 块包括如下:

  • LayerNorm(层归一化):用于标准化输入特征,以促进训练的稳定性。
  • 可变形大核注意力(D-LKA Attention):通过动态调整卷积核形状来增强特征表示能力。
  • 多层感知机(MLP):进一步处理特征并生成最终输出。
  • 残差连接(Residual Connections):确保信息在更深的层次中有效传递,防止梯度消失或信息丢失。
    下图摘自论文:

理论详解可以参考链接:论文地址
代码可在这个链接找到:代码地址

训练代码参考和下载:手把手教你使用ConvNeXt训练自己数据集和推理,ConvNeXt模型训练(CVPR 2022),一个能挑战 Vision Transformer 的卷积神经网络,含完整代码和数据集


文章目录

  • 前言
  • 理论介绍
  • 🐴一、实战细节
    • ⚡⚡实验结果画图
    • ⚡⚡改进模块代码
    • ⚡⚡使用教程
      • ☑️步骤1
      • ☑️步骤2
      • ☑️步骤3
      • ☑️步骤4
  • 🐴二、模型结构分析
    • ⚡⚡ 注意机制结构分析
    • ⚡⚡ConvNeXt 结构分析
      • ☑️CNBlock 结构图
    • ⚡⚡二次创新实战
      • ☑️第一种改进手法
        • 📐模块的传参分析教程
      • ☑️第二种改进手法
      • ☑️第三种改进手法
  • 🐴三、论文常用的评估指标
      • ☑️准确率 (Accuracy, ACC)
      • ☑️精确率 (Precision)
      • ☑️召回率 (Recall)
      • ☑️F1分数 (F1 Score)
  • 总结

🐴一、实战细节

⚡⚡实验结果画图

画图效果如下,代码可一键运行

画图代码:

# -*- coding: utf-8 -*-""" @Auth :落花不写码 @File :画图.py @IDE :PyCharm @Motto :学习新思想,争做新青年 """importmatplotlib.pyplotaspltimportpandasaspd
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/7/11 4:00:53

BAW模型实战避坑指南:为什么你的美式期权定价总是不对?

BAW模型实战避坑指南:为什么你的美式期权定价总是不对? 在量化金融领域,美式期权定价一直是实践中的难点。BAW(Barone-Adesi-Whaley)模型作为经典解决方案,理论上简洁优雅,但实际应用中却暗藏诸…

作者头像 李华
网站建设 2026/7/9 17:29:50

STM32H743(M7内核)基于CubeMX与源码手动集成ThreadX实战指南

1. 为什么需要手动集成ThreadX? 很多开发者第一次接触STM32H743和ThreadX时,可能会疑惑:既然CubeMX已经提供了ThreadX的配置选项,为什么还要手动集成?这里有个坑我得提前告诉你——CubeMX对ThreadX的支持其实并不完善。…

作者头像 李华
网站建设 2026/7/9 17:10:19

Qwen3-TTS-Tokenizer-12Hz保姆级教程:20分钟录音,克隆你的声音

Qwen3-TTS-Tokenizer-12Hz保姆级教程:20分钟录音,克隆你的声音 1. 为什么选择Qwen3-TTS-Tokenizer-12Hz克隆声音 想象一下,你只需要录制20分钟的语音,就能让AI完美复刻你的声音特点——从独特的语调变化到习惯性的停顿节奏。这正…

作者头像 李华
网站建设 2026/7/9 20:16:22

Windows Server 2019 多用户远程桌面配置全攻略

1. Windows Server 2019多用户远程桌面配置入门 如果你正在管理一台Windows Server 2019服务器,并且需要让多个团队成员同时远程连接操作,那么正确配置多用户远程桌面功能就变得至关重要。我刚开始接触服务器管理时,也在这个问题上踩过不少坑…

作者头像 李华