样本和标签? 合并 IBM 为多标签小样本图像分类带来新进展! (样本和标签怎么对应)

文章编号:43778 资讯动态 2024-12-09 多标签小样本 数据增强 LaSO

目前大多数关于图像小样本分类的研究工作都是研究单标签场景,每个训练图像只包含一个对象,然而现实中的场景中以多对象多标签居多,因此对于多标签小样本的图像分类研究更 具现实意义。IBM 的研究人员对多标签小样本的图像分类进行了研究,并在 CVPR 2019 大会上进行了论文分享,相关成果发表在 IBM 官网博客上,雷锋网 AI 科技评论编译如下。

当我们将人工智能和机器学习扩展到面向企业和工业界应用的更广泛的任务集时,从更少的数据集中学到更多是必要的。数据增强是一个重要的工具,特别是在没有足够的训练数据的情况下,它通过自动合成新的训练样本来改进学习。小样本学习就是这样的一个例子,其每个类别只有一个或很少的样本可用。之前大多数关于图像小样本分类的研究工作都是研究「单标签」场景,其中每个训练图像只包含一个对象,因此只有一个类别标签。然而,更具有挑战性和现实意义的场景是多标签、小样本的图像分类,其训练数据样本较少,图像具有多个标签,而之前的研究工作尚未对该场景进行广泛的研究探索。

为了研究上述课题,我们在 2019 年 6 月举行的 IEEE 计算机视觉与模式识别(CVPR 2019)大会上发表了相关论文,对多标签、小样本图像分类进行了研究。本论文题目为《LaSO:面向多标签小样本学习的标签设置操作网络》(「LaSO:Label-Set operations networks for multi-label few-shot learning」,论文地址:),提出了一种训练深度神经网络的新方法,即将图像样本对与一定的标签集相结合,合成具有「合并」标签的新样本。例如,考虑图 1 中的两幅图像,一幅描绘的是「一个人遛羊和狗」,另一幅描绘的是「一个人抱着一只狗和一只猫」。第一张图片的标签是「人」、「羊」和「狗」,第二张是「人」、「狗」和「猫」。通过给定的这两幅图像,LaSO 网络合成了新的训练样本,这些样本通过对标签执行联合、交叉和减法操作而产生。「联合」生成了一个标有「人」、「狗」、「猫」和「羊」的样本,「交叉」和「减法」生成了分别标有「人」、「狗」和「羊」的多个样本。LaSO 网络直接在深度神经网络学习的特征空间进行操作。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 1:在两幅图像上进行 LaSO 网络操作的案例

作为一个单一的多任务网络,LaSO 网络通过使用特定的损失函数共同训练,以使其操作适应相应的标签集操作任务(图 2)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 2:支持交叉、联合和减法操作标签集的 LaSO 网络体系结构

多任务网络是在一个大规模的多标签数据集上进行训练的,每个图像的多个标签与出现在图像上的目标相对应。我们通过使用不同的方法对产生的 LaSO 网络进行了测试,以评估它们在操作多标签内容方面的潜力。这些测试包括使用在真实、留存的多标签数据上经过预训练的分类器对生成的示例进行分类,以及使用 LaSO 网络合成的特征向量来测试源自留存的测试集的检索(图 3)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 3:基于合成 LaSO 向量进行的图像检索的定性结果

LaSO 网络被设计成直接在图像表征进行操作,而不需要任何额外的输入来控制操作。换句话说,就是不需要人工干预来指示它们要操作哪些标签。因此,在训练过程中,它们可以潜在地泛化到包含尚未见过的新类别的图像上。在这方面,LaSO 网络可以用来挑战多标签小样本的分类任务。在这种情况下,LaSO 网络从所提供的训练样本随机对中合成新的训练样本。在本文中,我们将 LaSO 网络的这种能力应用到一个新的多标签小样本分类基准中,希望能引起对这一重要问题的更多研究。通过使用 LaSO 网络在所给出的基准上进行数据增强的结果表明,将其推广到新的类别具有很强的潜力(图 4)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 4:LaSO 增强表现(底部四行)VS 基准(顶部三行)

多标签小样本分类是一项全新的、具有挑战性和实用性的研究工作。我们为这个研究工作提出了第一个基准。在该基准上利用神经网络对 LaSO 标签集操作进行了评估,结果表明 LaSO 具有很好的应用潜力。我们希望本次工作能激励更多的研究人员去研究这个有趣的问题。

原创文章,未经授权禁止转载。详情见 转载须知 。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019


本文地址: https://www.gpxz.com/article/b9d2bb0a37deb8b8ca8d.html
全局中部横幅
全局中部横幅
徐州扫地车,扫地机价格,徐州洗地机

徐州尚锦商贸有限公司专业生产销售容恩洗地机,徐州洗地机,手推式洗地机,手推式扫地机,驾驶式扫地机,徐州扫地车,电动清扫车,电动环卫车,环卫清扫车,陕西工业吸尘器,酒店专用吸尘器,商用吸尘器,大功率吸尘器,无尘室吸尘器,沙发清洗机,升降平台,高压清洗机,尘推车等清洁设备。

Continentalhydraulics

Continentalhydraulics|液压泵|液压阀|亚太区销售服务中心:021-58780503,原厂授权品质保证。

专业大型包装彩盒坑盒卡盒广东深圳印刷工厂

深圳市荣典智能制造有限公司是一家拥有15年生产经验专业大型全开印刷制品工厂,具备复杂的生产工艺要求、高性价比大批量生产成本控制、做难做的包装。提供:包装盒、手提袋、彩盒、礼品盒、坑盒、说明书、画册宣传册印刷。客户遍布跨境电商、电子加工厂、玩具、外贸商、食品工厂、珠宝首饰、美妆行业。

axure吧(axure8)

axure8.0测试版现已开放下载。axure吧(axure8)是一家专注于axurerp的专业产品经理网站,提供线上、线下产品经理教程、讲座,除常规axure软件培训外,还提供产品经理的进阶教程。

红警系列游戏下载

开机网致力于为热爱《红警》系列的玩家们打造一个全方位的游戏资源下载平台。这里收录了包括《红色警戒2共和国之辉》、《尤里的复仇》、《红色警戒3起义时刻》以及《世界大战》等在内的多款经典红警游戏全集。不仅如此,平台还提供了丰富的mod、地图、任务包以及攻略秘籍等,所有资源均免费开放下载。加入我们,一起在这个充满策略与智慧的战场上,展现你的指挥才能,征服属于你的游戏世界。

悠久资源(xu9.cn)

悠久资源(xu9.cn),为各位网络管理员网站建设者提供企业网站程序源码及模板下载,PbootCMS,帝国CMS及Wordpress源码模板,并提供网站使用教程,网站SEO优化教程,服务器安全教程,数据库安全教程等,程序使用过程中遇到的问题解决方案。

社会稳定风险评估师

社会稳定风险评估师,是以有效规避、预防、控制重大事项实施过程中可能产生的社会稳定风险,更好的确保重大事项顺利实施为基础,结合调查、分析、论证、评估、报批、核准等多方工作的新型高度融合型人才,是企业改制、征地拆迁、安全生产、环境保护、民族宗教、机构改革、重点项目建设等稳评领域的实施者和必备专业人才。“社会稳定风险评估师”成为稳评项目竞标、第三方稳评机构备案、能力评价、考核、聘用和继续教育学时等的重要依据,预算绩效评价主评人能力水平项目根据《中共中央国务院关于全面实施预算绩效管理的意见》和《中央企业综合绩效评价管理暂行办法》等文件精神,以绩效评价行业执业准则为指导,以预算绩效评价能力培养为核心,结合绩效评价市场需求、应具备的实操能力、专业能力要求设置课程体系,培养专业能力突出、具有良好职业道德、能够独立领导和组织开展本单位全面实施预算绩效管理应用领域的工作及其各项任务的专业人才,打造中国特色的绩效评价培养体系,帮助政府部门和企事业单位系统、全面地开展全过程绩效评价,助力深化全面预算绩效管理改革,为实现中国财政体系现代化和企业治理体系现代化提供人才支撑。

文言文

文言吧提供古代文言文原文,包括文言文怎么学,文言文阅读,文言文大全,文言文翻译,文言文意思,文言文在线阅读等各种经典文言文名篇,想了解更多文言文知识,请关注文言吧

全局底部横幅