AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别 (aaai2025审稿结果)

文章编号:41838 最新资讯 2024-12-03 AAAI 创新奇智 人工智能 2022

近日,创新奇智关于 双注意力机制少样本学习 的研究论文《Dual Attention Networks for Few-Shot Fine-Grained Recognition》被全球人工智能顶会接收为Main Track论文。

AAAI(The National Conference on Artificial Intelligence)是人工智能领域的主要学术组织之一国际先进人工智能协会(American Association for Artificial Intelligence),主办的A类人工智能学术会议。今年会议共收到9251篇投稿,最终经过大量的筛选,录取率仅为15.0%,创下历史新低。创新奇智投稿的论文脱颖而出,得益于一直以来在计算机视觉领域深厚的创新力。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

概述: SPAn>

细粒度图像识别是计算机视觉和模式识别领域的基础研究课题,但是大量优质细粒度图像数据的获取和标注需要耗费大量的人力和财力,这为细粒度图像识别的推广和使用带来了巨大的障碍。

少样本学习是目前研究的热门方向之一,能够极大地减少细粒度图像识别对于标注样本的依赖,故少样本的设定下进行细粒度图像识别的相关研究,内容和成果均符合实际应用的需求。

本文通过卷积神经网络与注意力机制提取图像中的部件与全局特征,通过基于图的多示例学习对局部特征进行建模,丰富了细粒度部分的内在结构相关性,通过注意力机制发掘对细粒度图像识别有用的微妙全局信息,从而得到更高的少样本细粒度图像识别的准确率。

主要贡献

1、提出了一种由双注意力流构成的元学习方式的新型少样本细粒度框架,以获取细粒度定制图像嵌入表示。

2、开发了包含硬/软注意力机制的双注意力网络,不仅实现细粒度物体部分间重要关联的显式构建,而且能够隐式获取细微但有辨识性的细节。

3、基于三个常用的细粒度基准数据集进行了综合的实验,本文提出的模型在识别准确性上明显优于其他解决方案。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

这是一种基于双注意力流的少样本细粒度图像识别方法,包括以下步骤:

步骤1: 提取样本的特征图(feature map),生成特征图的空间注意力图(spatial attention map)引导,利用注意力引导机制,生成用于软注意力流的加权特征图,同时筛选出用于硬注意力流的深度描述符(deep descriptor)。

步骤2: 加权特征图使用全局聚合操作得到全局嵌入特征;将一个样本筛选出的所有深度描述符建模为一个多示例学习(multi-instance learning)的包(bag), 使用基于图的多示例学习方法挖掘样本部件之间的关系,得到部件嵌入特征。

步骤3: 将两个注意力流得到的全局嵌入特征和部件嵌入特征拼接得到样本最终的嵌入表示,基于原型表示和最近邻方法进行类别预测和模型训练。

本方法与现有技术相比,其显著优点为:

(1)本方法使用了两个注意力流分别得到了部件级别的关键信息和全局聚合信息,不仅对细粒度图像识别提供了区分新的部件级信息,也补充了对细粒度图像识别有用的微妙全局信息。

(2)对于硬注意力流,使用多示例方法将筛选出的有用深度描述符建模为包,并基于图的方法对包进行编码一体化得到对应细粒度部件的深度描述符的整体表示,丰富了细粒度部分的内在结构相关性。

(3)与基于双线性池的方法相比,我们的方法复杂度更低更加易于训练且有更高的识别效率。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

在三个常用的少样本细粒度图像识别数据集 (CUB Birds,Stanford Dogs和Stanford Cars) 上进行了实验,上图实验结果表明,论文提出的方法几乎在所有数据集上均明显优于其他基准方法。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

上图结果显示出我们的模型对语义簇数的鲁棒性,并且当簇数为3时识别的准确率最高。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

我们提出的基于MIL的聚合方法与原始MIL池化方法的效果,上表结果显示无论是否与全局特征进行连接,我们的方法均表现出较好的效果。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

从上表结果可见,引入本文中考虑细粒度部件间关系的方法会显著提高少样本低粒度识别的准确性。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

最后,我们将实验中一些硬/软注意力样例进行可视化,上图中第一排为输入图像;第二排为硬注意力选取的深度描述符的位置,可见均对应物体的细粒度部分,如头、耳、尾、轮胎等;第三排展示软注意力,更多的细节细粒度模式能够被软注意力关注到。

版权文章,未经授权禁止转载。详情见 转载须知 。


本文地址: /article/067176f394d41ff2861d.html
全局中部横幅
全局中部横幅
2345看图王-速度超快的看图软件(二三四五旗下)

2345看图王是2345推出的一款速度超快并且格式兼容超多的高清看图软件,支持常用的jpg、bmp、gif、tiff、png等多达96种格式图片的查看,同时兼容阅读PDF/OFD双格式文件,功能齐全,使用便捷。

移动运用管理平台-数夫软件

数夫移动运用管理平台具有高扩充性、高集成性、高兼容性特点,通过云端对移动设备的各种应用属性进行自主管控。涵盖移动应用开发、管理、安全、整合等。

水厂托管运行/营-上海化工生物制药废水处理-水处理系统改造-上海瀚圻环保科技有限公司

上海瀚圻环保科技有限公司专业从事水厂托管运行,水厂托管运营,生物制药废水处理,化工废水生化处理,水厂托管运营,水处理系统改造等水处理项目工艺集成及系统整体解决方案,拥有丰富的行业经验,先后成功服务吉林,上海多家客户,深得用户的认可和好评,业务合作热线021-54397987.

建湖县科宏机械制造有限公司

建湖县科宏机械是一家专业生产齿轮泵齿轮的厂家

青岛物流专线_青岛零担配货站_青岛货运公司-青岛南渠物流有限公司

青岛物流专线青岛南渠物流有限公司位于山东省青岛市李沧区重庆中路1093号青岛市交运南渠大型货运公司,开通了青岛到上海专线、青岛到北京专线、青岛到天津专线、青岛到南京专线、青岛到无锡专线、青岛到苏州专线、青岛到杭州专线、青岛到宁波专线、青岛到义乌专线、青岛到温州专线、青岛到大连专线、青岛到沈阳专线物流运输。

苍溪找找网-找工作、找房子、找对象、找服务

苍溪找找网为您提供高效快捷的找工作、找房子、找对象、找服务服务,让您轻松实现生活需求。

信阳市明珠珍珠岩有限公司,信阳珍珠岩,信阳保温材料,信阳保温板

信阳市明珠珍珠岩有限公司是一家集矿石开采、粉碎加工膨胀珍珠岩(珠光砂)制品生产制造经营企业。手机:13837612185

测色仪-高光谱相机-雾度计-分光测色仪厂家-彩谱科技(浙江)有限公司

国产测色仪首选【彩谱】,杭州彩谱科技有限公司是颜色检测领域的国内测色仪品牌领军企业,专业从事国产测色仪,台式测色仪,手持便携式测色仪,高光谱相机等光谱检测设备的研发、生产和销售,国产色彩与光泽分析领域领导者.

石家庄太阳能路灯厂家,张家口太阳能路灯,邯郸太阳能路灯厂家,保定太阳能路灯价格,邢台太阳能路灯,廊坊太阳能路灯厂,廊坊太阳能路灯安装

石家庄太阳能路灯厂家,张家口太阳能路灯,邯郸太阳能路灯厂家,保定太阳能路灯价格,邢台太阳能路灯,廊坊太阳能路灯厂,廊坊太阳能路灯安装

舜甫装备-食药领域全模块服务领航者-食药EPC建厂设备专业服务商

舜甫集团多年致力于食药领域EPC建厂服务,赋能用户高效生产,公司提供各类提取设备,浓缩设备以及植物提取生产线,骨素提取生产线,调味品生产线,中药提取生产线,蛋白肽生产线,酱料生产线,中试生产线.公司集科研开发、工艺设计服务、工程总包、设备制造、安装调试及培训为一体的综合性服务商.

佛山五金冲压加工-佛山市鑫晨照五金制品有限公司

佛山市鑫晨照五金制品有限公司是一家主营佛山五金冲压加工、佛山五金冲压配件、佛山五金家具配件加工电话:13178541146.

海洋生物制品制备全技术链产业公共服务平台

  海洋生物制品制备全技术链产业公共服务平台

全局底部横幅