样本和标签? 合并 IBM 为多标签小样本图像分类带来新进展! (样本和标签怎么对应)

文章编号:43778 资讯动态 2024-12-09 多标签小样本数据增强LaSO

目前大多数关于图像小样本分类的研究工作都是研究单标签场景,每个训练图像只包含一个对象,然而现实中的场景中以多对象多标签居多,因此对于多标签小样本的图像分类研究更 具现实意义。IBM 的研究人员对多标签小样本的图像分类进行了研究,并在 CVPR 2019 大会上进行了论文分享,相关成果发表在 IBM 官网博客上,雷锋网 AI 科技评论编译如下。

当我们将人工智能和机器学习扩展到面向企业和工业界应用的更广泛的任务集时,从更少的数据集中学到更多是必要的。数据增强是一个重要的工具,特别是在没有足够的训练数据的情况下,它通过自动合成新的训练样本来改进学习。小样本学习就是这样的一个例子,其每个类别只有一个或很少的样本可用。之前大多数关于图像小样本分类的研究工作都是研究「单标签」场景,其中每个训练图像只包含一个对象,因此只有一个类别标签。然而,更具有挑战性和现实意义的场景是多标签、小样本的图像分类,其训练数据样本较少,图像具有多个标签,而之前的研究工作尚未对该场景进行广泛的研究探索。

为了研究上述课题,我们在 2019 年 6 月举行的 IEEE 计算机视觉与模式识别(CVPR 2019)大会上发表了相关论文,对多标签、小样本图像分类进行了研究。本论文题目为《LaSO:面向多标签小样本学习的标签设置操作网络》(「LaSO:Label-Set Operations networks for multi-label few-shot learning」,论文地址:),提出了一种训练深度神经网络的新方法,即将图像样本对与一定的标签集相结合,合成具有「合并」标签的新样本。例如,考虑图 1 中的两幅图像,一幅描绘的是「一个人遛羊和狗」,另一幅描绘的是「一个人抱着一只狗和一只猫」。第一张图片的标签是「人」、「羊」和「狗」,第二张是「人」、「狗」和「猫」。通过给定的这两幅图像,LaSO 网络合成了新的训练样本,这些样本通过对标签执行联合、交叉和减法操作而产生。「联合」生成了一个标有「人」、「狗」、「猫」和「羊」的样本,「交叉」和「减法」生成了分别标有「人」、「狗」和「羊」的多个样本。LaSO 网络直接在深度神经网络学习的特征空间进行操作。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 1:在两幅图像上进行 LaSO 网络操作的案例

作为一个单一的多任务网络,LaSO 网络通过使用特定的损失函数共同训练,以使其操作适应相应的标签集操作任务(图 2)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 2:支持交叉、联合和减法操作标签集的 LaSO 网络体系结构

多任务网络是在一个大规模的多标签数据集上进行训练的,每个图像的多个标签与出现在图像上的目标相对应。我们通过使用不同的方法对产生的 LaSO 网络进行了测试,以评估它们在操作多标签内容方面的潜力。这些测试包括使用在真实、留存的多标签数据上经过预训练的分类器对生成的示例进行分类,以及使用 LaSO 网络合成的特征向量来测试源自留存的测试集的检索(图 3)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 3:基于合成 LaSO 向量进行的图像检索的定性结果

LaSO 网络被设计成直接在图像表征进行操作,而不需要任何额外的输入来控制操作。换句话说,就是不需要人工干预来指示它们要操作哪些标签。因此,在训练过程中,它们可以潜在地泛化到包含尚未见过的新类别的图像上。在这方面,LaSO 网络可以用来挑战多标签小样本的分类任务。在这种情况下,LaSO 网络从所提供的训练样本随机对中合成新的训练样本。在本文中,我们将 LaSO 网络的这种能力应用到一个新的多标签小样本分类基准中,希望能引起对这一重要问题的更多研究。通过使用 LaSO 网络在所给出的基准上进行数据增强的结果表明,将其推广到新的类别具有很强的潜力(图 4)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 4:LaSO 增强表现(底部四行)VS 基准(顶部三行)

多标签小样本分类是一项全新的、具有挑战性和实用性的研究工作。我们为这个研究工作提出了第一个基准。在该基准上利用神经网络对 LaSO 标签集操作进行了评估,结果表明 LaSO 具有很好的应用潜力。我们希望本次工作能激励更多的研究人员去研究这个有趣的问题。

原创文章,未经授权禁止转载。详情见 转载须知 。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

全局中部横幅
GPS定位器

深圳市伊爱高新技术开发有限公司长期专注于以4G视频终端,国六GPS,工程机械GPS,空作业车GPS,农机GPS,融资租赁GPS,4G定位器,微型定位器,挖掘机GPS,物流GPS,北斗GPS定位器,DSM。集APP/软件/硬件系统开发、制造、销售、运营、服务于一体,应用产品涵盖物流、交通运输、工程机械、农业机械、政企车辆、私家车等领域。

第五人格下载安装

4399安卓游戏为您提供第五人格手机版下载、第五人格安卓版下载,第五人格攻略、评测,更多第五人格下载安装尽在4399手机游戏网。

北京礼采采数智科技有限公司成立于2019年

北京礼采采数智科技有限公司成立于2019年,总部位于北京,自主研发供应链Saas平台,为礼业数字化转型升级的SaaS平台。礼采采致力于为礼业提供技术支持、全品类供应链资源和运营服务。

上海宣烽办公设备有限公司

上海硒鼓加粉 专业硒鼓加粉首选宣烽办公。提供各品牌硒鼓加粉50元起,一次性加粉满200返50正在促销中。最高性价比,最高品质,快速上门服务,打印机/传真机/复印机/电脑一站式维修、租赁、耗材配送服务。热线021-6299777113022178593

中青家政网

中青家政源创于1994年,全国家庭服务业百强企业,家政服务业提质扩容国家级领跑者企业,家政服务员国家职业技能标准、培训教程研发单位,培训介绍家政服务员,母婴护理员,家务服务员,家庭照护员,婴幼儿护理,养老护理员,保姆,钟点工,月嫂,北京市诚信家政服务品牌公司

擦拭布

杭州洁可林实业有限公司是一家集工业清洁擦拭系列用品加工、生产、销售集一体的专业品牌公司,专业提供工业擦拭布、擦拭纸、吸油棉等工业擦拭用品。jiekelin(洁可林)是我们的自有品牌。

调直框,久诺机械制造有限公司,长葛市双箭机械厂

长葛市久诺机械制造有限公司是一家生产销售调直框的公司,欢迎咨询调直框相关问题。

德普华检测集团(STS)

德普华检测集团(STS)是国内专业从事产品检测和认证咨询服务的第三方检测认证机构(CNASL7649实验室),主要致力于电子电器无线通讯产品的CE认证、FCC认证、蓝牙BQB认证、CCC认证、TELEC认证、JATE认证、SRRC认证、IC认证、CB认证、UKCA认证等服务。同时,STS遵循“公正、科学、准确、高效”的质量方针,以“品质至上,用心服务”为服务宗旨,专注于无线通讯产品检测&认证

永康物流网

浙江永康物流网是以全面、易用为宗旨的永康同城物流信息搜索引擎。提供永康物流中心的专线查询、公司查询、运单查询、车辆查询、网点查询,永康物流园含零担专线、整车货运、物流调度。

江苏盛矽电子科技有限公司002

江苏盛矽电子科技有限公司是一家集科研、生产、销售为一体的国家高新技术企业。公司结合实际生产需求,立足于自身发展优势,致力于打造千级无尘生产车间及公用系统、研发中心、检测中心等配套机构。

家博会/一站式家装采购会展服务平台

家博会(内含家博门票)也称家装博览会、家具展、装修博览会、家装展、建材展会等-每年在上海/广州/武汉/杭州/成都/深圳/重庆/北京/南昌/无锡/青岛/天津/郑州/贵阳/沈阳/昆明/苏州/南京/南通/大连/昆山/东莞/常州/厦门/南宁/唐山/绍兴等多城市开展,家博会是基于装修采购丰富的品牌商家资源、成熟商业运作模式所打造的将装修设计、装修顾问、装修采购于一体的线下家装展览服务平台

蟒蛇科普

海南大蟒科技有限公司是中国维一一家获准合法养殖繁育蟒蛇的企业,公司的主营业务是蟒蛇皮销售,蟒蛇油生产和销售.

全局底部横幅