AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别 (aaai2025审稿结果)

文章编号:41838 资讯动态 2024-12-03 AAAI 创新奇智 人工智能 2022

近日,创新奇智关于 双注意力机制少样本学习 的研究论文《Dual Attention Networks for Few-Shot Fine-Grained Recognition》被全球人工智能顶会接收为Main Track论文。

AAAI(The National Conference on Artificial Intelligence)是人工智能领域的主要学术组织之一国际先进人工智能协会(American Association for Artificial Intelligence),主办的A类人工智能学术会议。今年会议共收到9251篇投稿,最终经过大量的筛选,录取率仅为15.0%,创下历史新低。创新奇智投稿的论文脱颖而出,得益于一直以来在计算机视觉领域深厚的创新力。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

概述:

细粒度图像识别是计算机视觉和模式识别领域的基础研究课题,但是大量优质细粒度图像数据的获取和标注需要耗费大量的人力和财力,这为细粒度图像识别的推广和使用带来了巨大的障碍。

少样本学习是目前研究的热门方向之一,能够极大地减少细粒度图像识别对于标注样本的依赖,故少样本的设定下进行细粒度图像识别的相关研究,内容和成果均符合实际应用的需求。

本文通过卷积神经网络与注意力机制提取图像中的部件与全局特征,通过基于图的多示例学习对局部特征进行建模,丰富了细粒度部分的内在结构相关性,通过注意力机制发掘对细粒度图像识别有用的微妙全局信息,从而得到更高的少样本细粒度图像识别的准确率。

主要贡献

1、提出了一种由双注意力流构成的元学习方式的新型少样本细粒度框架,以获取细粒度定制图像嵌入表示。

2、开发了包含硬/软注意力机制的双注意力网络,不仅实现细粒度物体部分间重要关联的显式构建,而且能够隐式获取细微但有辨识性的细节。

3、基于三个常用的细粒度基准数据集进行了综合的实验,本文提出的模型在识别准确性上明显优于其他解决方案。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

这是一种基于双注意力流的少样本细粒度图像识别方法,包括以下步骤:

步骤1: 提取样本的特征图(feature map),生成特征图的空间注意力图(spatial attention map)引导,利用注意力引导机制,生成用于软注意力流的加权特征图,同时筛选出用于硬注意力流的深度描述符(deep descriptor)。

步骤2: 加权特征图使用全局聚合操作得到全局嵌入特征;将一个样本筛选出的所有深度描述符建模为一个多示例学习(multi-instance learning)的包(bag), 使用基于图的多示例学习方法挖掘样本部件之间的关系,得到部件嵌入特征。

步骤3: 将两个注意力流得到的全局嵌入特征和部件嵌入特征拼接得到样本最终的嵌入表示,基于原型表示和最近邻方法进行类别预测和模型训练。

本方法与现有技术相比,其显著优点为:

(1)本方法使用了两个注意力流分别得到了部件级别的关键信息和全局聚合信息,不仅对细粒度图像识别提供了区分新的部件级信息,也补充了对细粒度图像识别有用的微妙全局信息。

(2)对于硬注意力流,使用多示例方法将筛选出的有用深度描述符建模为包,并基于图的方法对包进行编码一体化得到对应细粒度部件的深度描述符的整体表示,丰富了细粒度部分的内在结构相关性。

(3)与基于双线性池的方法相比,我们的方法复杂度更低更加易于训练且有更高的识别效率。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

在三个常用的少样本细粒度图像识别数据集 (CUB Birds,StanFord Dogs和Stanford Cars) 上进行了实验,上图实验结果表明,论文提出的方法几乎在所有数据集上均明显优于其他基准方法。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

上图结果显示出我们的模型对语义簇数的鲁棒性,并且当簇数为3时识别的准确率最高。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

我们提出的基于MIL的聚合方法与原始MIL池化方法的效果,上表结果显示无论是否与全局特征进行连接,我们的方法均表现出较好的效果。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

从上表结果可见,引入本文中考虑细粒度部件间关系的方法会显著提高少样本低粒度识别的准确性。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

最后,我们将实验中一些硬/软注意力样例进行可视化,上图中第一排为输入图像;第二排为硬注意力选取的深度描述符的位置,可见均对应物体的细粒度部分,如头、耳、尾、轮胎等;第三排展示软注意力,更多的细节细粒度模式能够被软注意力关注到。

版权文章,未经授权禁止转载。详情见 转载须知 。


本文地址: http://www.gpxz.com/article/067176f394d41ff2861d.html
全局中部横幅
网易独家

网易是中国领先的互联网技术公司,为用户提供免费邮箱、游戏、搜索引擎服务,开设新闻、娱乐、体育、财经、科技等30多个内容频道,及博客、视频、论坛等互动交流,网聚人的力量。

首旅如家酒店集团官网

首旅如家酒店集团旗下拥有莫泰酒店,建国饭店,京伦饭店,和颐至尊酒店,派柏云酒店,南山休闲会馆,和颐至格酒店,如家精选酒店,欣燕都,如家快捷酒店等多个子品牌.上官网预订,享最优房价.

金山云

金山云,全球高品质云服务专家,云计算领先平台,云产品解决方案,游戏云平台,先进医疗云平台,专业政务云、音视频解决方案

就职范文网

就职范文网每日更新常用职场范文、自我介绍、总结报告、工作计划、申请书等优质范文,欢迎您的参考使用!

-常州西典办公设备有限公司

碎纸机刀片,碎纸机刀具,碎纸机机芯生产基地常州西典办公设备有限公司专业从事塑胶成型、五金冲压、数控加工及碎纸机刀片,碎纸机刀具,碎纸机机芯的生产加工;具备精密塑胶、五金模具的开发设计及制造能力,是一家集模具制造、塑胶成型、五金加工及装配于一体的综合性企业

广州茅台酒回收

广州茅台酒回收,广州回收茅台酒,哪里回收茅台酒,黄埔_天河_白云_海珠_荔湾_越秀_增城_番禺茅台酒回收价格,飞天茅台酒回收,上门高价回收茅台酒,生肖茅台酒回收

红色文化网

坚持以马克思列宁主义、毛泽东思想、邓小平理论、“三个代表”重要思想和科学发展观为指导,坚持正面宣传,弘扬红色文化,为社会主义文化大发展大繁荣服务,为巩固中国共产党的执政基础服务,为党和国家工作大局服务。

美品树

美品树(MEIPINSHU)是小业态日百快时尚折扣零售品牌,公司致力于通过整合全球优质上游供应链资源和百万家线下零售网点资源,以原创定制和品牌联营为商品驱动,以智能大数据技术为零售引擎,打造10万+家覆盖全国的日百折扣品牌店,满足3亿大众家庭极致性价比的产品需求

隔音板

赛迪木质吸音板厂家是集生产销售声学吸音板,槽木吸音板,孔木吸音板,软包吸音板等声学材料供应商

温州市民卡

温州市民卡温州市民卡


全局底部横幅