网站首页
编程语言
数据库
系统相关
其他分享
编程问答
NeurIPS2022
2022-12-07
【NeurIPS2022】Cross Aggregation Transformer for Image Restoration
【NeurIPS2022】CrossAggregationTransformerforImageRestoration研究动机:当前方法Transformer方法把图像分成8x8的小块处理,thesquarewindowlacksinter-windo
2022-12-03
【NeurIPS2022】ScalableViT: Rethinking the Context-oriented Generalization of Vision Transformer
【NeurIPS2022】ScalableViT:RethinkingtheContext-orientedGeneralizationofVisionTransformer这篇论文来自清华大学深圳研究生院和字节跳动。从Swin开始,attenti
2022-12-03
【NeurIPS2022】Fast Vision Transformers with HiLo Attention
这个论文的核心贡献是提出了一种新的注意力机制HiLo(High/Lowfrequency)。如下图所示,在上面部分,分配了\(1-\alpha\)比例的head用于提取高频注意力,下面分配了\(\alp