【Block总结】DFFN,门控机制选择性保留低频和高频信息

论文信息

  • 标题: Efficient Frequency Domain-based Transformers for High-Quality Image Deblurring
  • 论文链接: Lingshun Kong, Jiangxin Dong, Mingqiang Li, Jianjun Ge, Jinshan Pan
  • GitHub链接: https://github.com/kkkls/FFTformer
    【Block总结】DFFN,门控机制选择性保留低频和高频信息_第1张图片

创新点

  1. 频域自注意力求解器 (FSAS): 提出了高效的频域自注意力求解器,通过逐元素乘法替代传统的矩阵乘法,显著降低了计算复杂度。

  2. 判别性频域前馈网络 (DFFN): 设计了一种基于JPEG压缩算法的前馈网络,引入门控机制以选择性保留低频和高频信息,提升去模糊效果。

  3. 不对称网络架构: 采用不对称的编码器-解码器结构,FSAS仅在解码器中使用,以优化去模糊性能。

你可能感兴趣的:(Block总结,计算机视觉,transformer,人工智能)