admin 管理员组

文章数量: 1184232

VX: shixiaodayyds,备注【即插即用】,添加即插即用模块交流群。

文章目录

  • 模块出处
  • 模块介绍
  • 模块提出的动机(Motivation):
  • 适用范围
  • 模块代码及使用方式


模块出处

Paper:Iwin Transformer: Hierarchical Vision Transformer using Interleaved Windows

Code:https://github/JopKnoppers/Iwin-Transformer

模块介绍

CNN+Transformer的混合通信方式:

Iwin:交错序列上的全局卷积和窗口注意协同工作,有效地逼近标准全局注意力

核心创新点:

  • 引入深度卷积 (dwc

本文标签: 即用 即插 模块 Transformer arxiv