AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别 (aaai2025审稿结果)

文章编号:41838 资讯动态 2024-12-03 AAAI 创新奇智 人工智能 2022

近日,创新奇智关于 双注意力机制少样本学习 的研究论文《Dual Attention Networks for Few-Shot Fine-Grained Recognition》被全球人工智能顶会接收为Main Track论文。

AAAI(The National Conference on Artificial Intelligence)是人工智能领域的主要学术组织之一国际先进人工智能协会(American Association for Artificial Intelligence),主办的A类人工智能学术会议。今年会议共收到9251篇投稿,最终经过大量的筛选,录取率仅为15.0%,创下历史新低。创新奇智投稿的论文脱颖而出,得益于一直以来在计算机视觉领域深厚的创新力。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

概述:

细粒度图像识别是计算机视觉和模式识别领域的基础研究课题,但是大量优质细粒度图像数据的获取和标注需要耗费大量的人力和财力,这为细粒度图像识别的推广和使用带来了巨大的障碍。

少样本学习是目前研究的热门方向之一,能够极大地减少细粒度图像识别对于标注样本的依赖,故少样本的设定下进行细粒度图像识别的相关研究,内容和成果均符合实际应用的需求。

本文通过卷积神经网络与注意力机制提取图像中的部件与全局特征,通过基于图的多示例学习对局部特征进行建模,丰富了细粒度部分的内在结构相关性,通过注意力机制发掘对细粒度图像识别有用的微妙全局信息,从而得到更高的少样本细粒度图像识别的准确率。

主要贡献

1、提出了一种由双注意力流构成的元学习方式的新型少样本细粒度框架,以获取细粒度定制图像嵌入表示。

2、开发了包含硬/软注意力机制的双注意力网络,不仅实现细粒度物体部分间重要关联的显式构建,而且能够隐式获取细微但有辨识性的细节。

3、基于三个常用的细粒度基准数据集进行了综合的实验,本文提出的模型在识别准确性上明显优于其他解决方案。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

这是一种基于双注意力流的少样本细粒度图像识别方法,包括以下步骤:

步骤1: 提取样本的特征图(feature map),生成特征图的空间注意力图(spatial attention map)引导,利用注意力引导机制,生成用于软注意力流的加权特征图,同时筛选出用于硬注意力流的深度描述符(deep descriptor)。

步骤2: 加权特征图使用全局聚合操作得到全局嵌入特征;将一个样本筛选出的所有深度描述符建模为一个多示例学习(multi-instance learning)的包(bag), 使用基于图的多示例学习方法挖掘样本部件之间的关系,得到部件嵌入特征。

步骤3: 将两个注意力流得到的全局嵌入特征和部件嵌入特征拼接得到样本最终的嵌入表示,基于原型表示和最近邻方法进行类别预测和模型训练。

本方法与现有技术相比,其显著优点为:

(1)本方法使用了两个注意力流分别得到了部件级别的关键信息和全局聚合信息,不仅对细粒度图像识别提供了区分新的部件级信息,也补充了对细粒度图像识别有用的微妙全局信息。

(2)对于硬注意力流,使用多示例方法将筛选出的有用深度描述符建模为包,并基于图的方法对包进行编码一体化得到对应细粒度部件的深度描述符的整体表示,丰富了细粒度部分的内在结构相关性。

(3)与基于双线性池的方法相比,我们的方法复杂度更低更加易于训练且有更高的识别效率。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

在三个常用的少样本细粒度图像识别数据集 (CUB Birds,StanFord Dogs和Stanford Cars) 上进行了实验,上图实验结果表明,论文提出的方法几乎在所有数据集上均明显优于其他基准方法。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

上图结果显示出我们的模型对语义簇数的鲁棒性,并且当簇数为3时识别的准确率最高。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

我们提出的基于MIL的聚合方法与原始MIL池化方法的效果,上表结果显示无论是否与全局特征进行连接,我们的方法均表现出较好的效果。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

从上表结果可见,引入本文中考虑细粒度部件间关系的方法会显著提高少样本低粒度识别的准确性。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

最后,我们将实验中一些硬/软注意力样例进行可视化,上图中第一排为输入图像;第二排为硬注意力选取的深度描述符的位置,可见均对应物体的细粒度部分,如头、耳、尾、轮胎等;第三排展示软注意力,更多的细节细粒度模式能够被软注意力关注到。

版权文章,未经授权禁止转载。详情见 转载须知 。


本文地址: https://www.gpxz.com/article/067176f394d41ff2861d.html
全局中部横幅
全局中部横幅
北京欢乐谷官方网站

大型东方神话秀《金面王朝》,北京欢乐谷华侨城大剧院2021年全新呈现,“三星堆”神奇上新,“山海经”强势加持,《元神》东方神话数字沉浸展!

必胜客宅急送外卖网上订餐官网

必胜客宅急送官网提供PIZZA披萨外送网上订餐,点餐.查看PIZZA披萨外卖订餐优惠,必胜客网上订餐专享优惠,必胜客外卖菜单,必胜客团购及新品!24小时送餐电话:4008123123.

蚌埠人

蚌埠人是以提供蚌埠本地信息服务为主的地域性生活资讯网站。网站提供本地固定电话号码查询、分类信息发布、蚌埠论坛社区等服务,是蚌埠地区起步较晚,但发展快、内容丰富、互动性强的综合门户网站,也是蚌埠人喜欢的网站。

西安网站优化

铭赞富海360网络营销系统专业从事互联网营销服务的公司,主要业务为:企业网站推广,百度关键词排名,网站SEO优化外包等网络营销解决方案,为向互联网商业转型的传统企业提供了精准的互联网营销服务与方法。

中山华礼龙家具有限公司

中山华礼龙家具有限公司坐落于伟人孙中山的故乡-中山市。是一家致力于现代化家具、开发、生产、销售为一体的高档家具企业。

佛山市中医院

佛山市中医院创建于1956年,是一所集医、教、研及康复于一体的大型三级甲等中医医院,以中医骨伤科闻名国内外,是广州中医药大学附属医院(非直属)、2011年全国地级市中医医院综合竞争排名第一。

油耗监控系统,GPS油耗监测,车辆油量监控,一匹科技车队燃油管理

一匹科技是一家专业从事GPS油耗监控、油耗监控系统研发和车载北斗GPS定位终端销售和安装的高科技公司!

Linear代理商

凌力尔特(LinearTechnology)授权指定的Linear代理商,凌力尔特公司作为Linear代理商唯一销售渠道,为购买Linear公司芯片提供最便捷的方式,是快速发展的Linear代理商.

珠海南方集成电路设计服务中心

珠海南方集成电路设计服务中心,ZHICC,广东省集成电路设计与生产基地,广东省IC,珠海市集成电路产业孵化基地,珠海ICC,公共技术服务平台,珠海集成电路,电路设计,IP核,MPW,芯片测试,EDA工具,创客空间,IC,系统应用方案,后端设计,IC人才培养,icc,珠海IC,EDA工具服务,芯片测试服务,IP知识产权,MPW服务,系统应用方案,IC后端设计,IC人才培养,IC孵化,创客空间

成都肛肠专科医院

电话:028-86611987,成都肛肠专科医院是中西部地区唯一的国家公立三级甲等肛肠医院,源于1851,前身是原黄济川痔漏医院,为国家临床重点专科,肛肠博士研究生招生单位。

全局底部横幅