样本和标签? 合并 IBM 为多标签小样本图像分类带来新进展! (样本和标签怎么对应)

文章编号:43778 资讯动态 2024-12-09 多标签小样本 数据增强 LaSO

目前大多数关于图像小样本分类的研究工作都是研究单标签场景,每个训练图像只包含一个对象,然而现实中的场景中以多对象多标签居多,因此对于多标签小样本的图像分类研究更 具现实意义。IBM 的研究人员对多标签小样本的图像分类进行了研究,并在 CVPR 2019 大会上进行了论文分享,相关成果发表在 IBM 官网博客上,雷锋网 AI 科技评论编译如下。

当我们将人工智能和机器学习扩展到面向企业和工业界应用的更广泛的任务集时,从更少的数据集中学到更多是必要的。数据增强是一个重要的工具,特别是在没有足够的训练数据的情况下,它通过自动合成新的训练样本来改进学习。小样本学习就是这样的一个例子,其每个类别只有一个或很少的样本可用。之前大多数关于图像小样本分类的研究工作都是研究「单标签」场景,其中每个训练图像只包含一个对象,因此只有一个类别标签。然而,更具有挑战性和现实意义的场景是多标签、小样本的图像分类,其训练数据样本较少,图像具有多个标签,而之前的研究工作尚未对该场景进行广泛的研究探索。

为了研究上述课题,我们在 2019 年 6 月举行的 IEEE 计算机视觉与模式识别(CVPR 2019)大会上发表了相关论文,对多标签、小样本图像分类进行了研究。本论文题目为《LaSO:面向多标签小样本学习的标签设置操作网络》(「LaSO:Label-Set Operations networks for multi-label few-shot learning」,论文地址:),提出了一种训练深度神经网络的新方法,即将图像样本对与一定的标签集相结合,合成具有「合并」标签的新样本。例如,考虑图 1 中的两幅图像,一幅描绘的是「一个人遛羊和狗」,另一幅描绘的是「一个人抱着一只狗和一只猫」。第一张图片的标签是「人」、「羊」和「狗」,第二张是「人」、「狗」和「猫」。通过给定的这两幅图像,LaSO 网络合成了新的训练样本,这些样本通过对标签执行联合、交叉和减法操作而产生。「联合」生成了一个标有「人」、「狗」、「猫」和「羊」的样本,「交叉」和「减法」生成了分别标有「人」、「狗」和「羊」的多个样本。LaSO 网络直接在深度神经网络学习的特征空间进行操作。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 1:在两幅图像上进行 LaSO 网络操作的案例

作为一个单一的多任务网络,LaSO 网络通过使用特定的损失函数共同训练,以使其操作适应相应的标签集操作任务(图 2)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 2:支持交叉、联合和减法操作标签集的 LaSO 网络体系结构

多任务网络是在一个大规模的多标签数据集上进行训练的,每个图像的多个标签与出现在图像上的目标相对应。我们通过使用不同的方法对产生的 LaSO 网络进行了测试,以评估它们在操作多标签内容方面的潜力。这些测试包括使用在真实、留存的多标签数据上经过预训练的分类器对生成的示例进行分类,以及使用 LaSO 网络合成的特征向量来测试源自留存的测试集的检索(图 3)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 3:基于合成 LaSO 向量进行的图像检索的定性结果

LaSO 网络被设计成直接在图像表征进行操作,而不需要任何额外的输入来控制操作。换句话说,就是不需要人工干预来指示它们要操作哪些标签。因此,在训练过程中,它们可以潜在地泛化到包含尚未见过的新类别的图像上。在这方面,LaSO 网络可以用来挑战多标签小样本的分类任务。在这种情况下,LaSO 网络从所提供的训练样本随机对中合成新的训练样本。在本文中,我们将 LaSO 网络的这种能力应用到一个新的多标签小样本分类基准中,希望能引起对这一重要问题的更多研究。通过使用 LaSO 网络在所给出的基准上进行数据增强的结果表明,将其推广到新的类别具有很强的潜力(图 4)。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019

图 4:LaSO 增强表现(底部四行)VS 基准(顶部三行)

多标签小样本分类是一项全新的、具有挑战性和实用性的研究工作。我们为这个研究工作提出了第一个基准。在该基准上利用神经网络对 LaSO 标签集操作进行了评估,结果表明 LaSO 具有很好的应用潜力。我们希望本次工作能激励更多的研究人员去研究这个有趣的问题。

原创文章,未经授权禁止转载。详情见 转载须知 。

「合并」 样本和标签? IBM 为多标签小样本图像分类带来新进展!| CVPR 2019


本文地址: https://www.gpxz.com/article/b9d2bb0a37deb8b8ca8d.html
全局中部横幅
全局中部横幅
我爱游戏网

我爱游戏网是一个集合了各种热门手游的综合游戏平台,在这里可以免费下载到主流的手机游戏资源,同时还有丰富的游戏攻略和资讯提供给玩家朋友。我爱游戏网分享大家热衷的手机游戏,安全高效为玩家朋友提供免费的游戏下载服务。

小马宝莉小游戏,小马宝莉小游戏大全,4399小马宝莉小游戏全集,4399小游戏

4399小马宝莉小游戏大全收录国内外小马宝莉类小游戏,包括小马宝莉闯关小游戏,小马宝莉冒险小游戏等。更多小马宝莉游戏尽在4399小游戏,好玩记得告诉你的朋友哦!

方解石磨粉机

方解石磨粉机,方解石微粉磨,方解石立式磨粉机,方解石雷蒙磨等多款超细微粉磨设备是如今粉体机械市场的热销产品,推动了我国工业制粉以及矿石加工行业的新发展,想要了解上海微粉磨可以咨询我们!

五一网

玩游戏,上51.COM。51游戏是国内知名的网页游戏社区化平台,集游戏研发运营、真人交友、博客空间、美女主播等娱乐业务为一体,51游戏只做口碑最好的网页游戏运营和客户服务。

完颜古方

北京完颜古方商贸有限公司主要针对旗下品牌:完颜古方、与子芙蓉、婉妍古方、完颜阿童等纯天然无添加植物护肤产品开发与经营。联系电话:13911724040

华硕商城ASUS

华硕商城是华硕官方直营商城,主营ROG,天选,灵耀、a豆、无畏、proart等华硕好屏系列,台式机、一体机及中小企业商用系列,主板、显卡、显示器、路由器等产品的在线购买及售后服务。

夸克

夸克pc/app为你带来极速、智能、安全、高效的搜索体验,找答案,找资料,找工具,办公,学习,工作必备应用。夸克提供浏览器搜索引擎、网盘、AI扫描王工具及小说阅读等高效功能,为你提供稳定,安全,流畅的浏览环境和优质的产品服务体验

手机软件下载

河东手机站为用户提供最新海量安卓软件、安卓游戏、苹果软件、苹果游戏下载,并且每日更新海量手机软件与相关app操作教程!

绿石碳

广州绿石碳科技股份有限公司(股票代码871278)成立于2009年,2017年在新三板挂牌上市。作为国内领先的专业碳中和服务商,十五年来,绿石碳始终围绕着低碳咨询、碳管理咨询、碳管理信息化、碳排放核查等核心业务精耕细作,在国内外低碳领域享有盛誉。

安美智能制造

安美智能制造是一家集技术咨询、项目策划、工程设计、工程施工及管理、工程运营及维护、洁净室材料生产于一体的专业公司。安美环境始创于90年代初,拥有自己的生产基地和研发中心,可以为客户提供全方位生产服务。安美长期专注于洁净室和相关受控环境的工程项目工作。凭借在该领域30余年的丰富经验,积蓄了丰厚的专业知识和对洁净室交钥匙工程的深入理解。安美提供的洁净室系统可以满足各行业对室内环境质量的不同需求,可同时有效控制室内尘埃浓度、气流组织、相对湿度以及压力和温度等各项指标参数。

阀门网

阀门型号大全,阀门厂家信息,阀门在线询价、报价服务系统!


全局底部横幅