论文解读 基于强化学习的时间行为检测自适应模型 2018 AAAI (论文解读基于什么理论)
雷锋网 AI 科技评论按 ：互联网上以视频形式呈现的内容在日益增多，对视频内容进行高效及时的审核也变得越来越迫切。因此，视频中的行为检测技术也是当下热点研究任务之一。本文主要介绍的就是一种比传统视频行为检测方法更加有效的视频行为检测模型。
在近期雷锋网 GAIR 大讲堂举办的线上公开上，来自北京大学深圳研究生院信息工程学院二年级博士生黄靖佳介绍了他们团队在 AAAI 2018 上投稿的一篇论文，该论文中提出了一种可以自适应调整检测窗口大小及位置的方法，能对视频进行高效的检测。视频回放地址：
黄靖佳，北京大学深圳研究生院信息工程学院二年级博士生。2016 年毕业于华中科技大学计算机学院信息安全专业，获学士学位。现研究方向为计算机视觉、行为检测、增强学习等。
以下是 AI 科技评论对嘉宾分享的内容回顾。
分享主题 ：AAAI 2018 论文解读：基于强化学习的时间行为检测自适应模型
分享提纲：
分享内容：
大家好，我的分享首先是介绍一下行为检测的应用背景，接下来介绍我们团队提出的 SAP 模型，以及模型在实验数据集上的性能，最后是对本次分享的总结。
行为检测任务的介绍
但是这种方法在解决任务时存在两个难点。
首先是对于一个没有切割过的视频，比如在图中这个视频中，所需要检测的目标是一个三级跳运动，三级跳在不同的情况下，根据人的不同，所持续的时间也是不同的。
第二个难点是，目标时间出现的位置是在视频中的任意时间点。
所以说用「两阶段方法」进行目标行为预测，会产生非常多不同尺度，不同位置 proposal。最简单的方法是用不同尺度的滑动窗口，从前到后滑动，产生非常多的 proposal，然后再做分类。这种方法虽然行之有效，但时间复杂度和计算复杂度都相当高，使得在完成这项任务时往往需要花费大量的计算资源。
为了避免这种低效的检测方法，我们提出了一种可以自适应调整检测窗口大小及位置的方法，对视频进行高效的检测。
我们最开始的想法是能不能仅使用一个滑动窗口，只需要从头到尾滑动一遍就完成 proposal 产生过程呢？
这就必须要求窗口能不断地自适应地根据窗口所覆盖的内容，能够不断调节窗口的大小，最终的窗口大小能精确覆盖目标运动，从而得到检测的窗口区间。
我们使用增强学习作为背后的模型支撑来完成这样的循环过程，达到我们的目的。下面是 SAP 模型的框架图。
关于 Temporal Pooling Layer
在原有的 C3D 模型中，要求输入的视频帧是固定的，一般是 16 帧或 8 帧。以 16 帧为例，当视频帧多于 16 帧，就需要对视频帧下采样，采样成 16 帧，送到视频中进行处理，这样在采样过程中会丢失非常多细节信息，造成特征表达不准确等问题。
而我们提出的 Temporal Pooling Layer 的输入帧可以是任意长度。
我们在增强学习中的奖励设置机制。在增强学习中，对于一个 agent，如果 agent 执行了一个动作后，我们认为是执行正确的，就给一个奖励；如果认为是错的，就给一个惩罚。
SAP 模型的训练过程，可到文末观看嘉宾的视频回放，或关注嘉宾的 GitHub 地址获取相关代码。
SAP 模型的测试
实验过程
我们的实验是在 THUMOS'14 数据集展开的，用它的 validation set 训练模型，在 test set 上进行实验评估。我们使用了是以下两个衡量标准。第一个是 recall 值和平均 proposal 数量函数第二个是 recall 和 IoU。
proposal 做分类后的评判标准是：Average Precison 和 mAP
检测性能的结果
上图红色圈注的部分比较的是不同的模型，在取相同的 proposal 数量，用同样的分类器做分类，哪个模型的性能会更好。结果发现，在只有 50 个 proposal 的时候，我们的方法表现的最好。
总结
代码相关资料GitHub地址：
雷锋网GAIR大讲堂视频回放地址：
更多免费直播视频，请关注微信公众号： AI科技评论。
原创文章，未经授权禁止转载。详情见 转载须知 。
本文地址： /article/a666d62e2cddb43d0b77.html
hao123是汇集全网优质网址及资源的中文上网导航。及时收录影视、音乐、小说、游戏等分类的网址和内容，让您的网络生活更简单精彩。上网，从hao123开始。
新开好服网(www.xinkaihf.com)提供优质的今日新开传奇发布网列表,打造一个高效的传奇发布站点,对每个新开传奇私服网站资料,热血传奇私服的开区信息都严格把关让所有玩家热爱传奇的玩家都能快速找到自己喜欢的游戏。
成都app开发哪家公司好？【成都希格斯网络科技有限公司028-62711128】是一家最走心、高品质、有深度的互联网解决方案提供商,也是国内领先技术vc孵化服务商为创业者提供：直播APP,教育系统,新零售O2O系统开发,电商B2C/BBC系统,新闻APP,出行打车APP系统,旅游APP等。我们专注于移动互联网，服务涵盖：软件系统定制开发、创业项目技术VC扶持孵化计划、人才培养、创投融资等服务。能够完美地进行iOS、AndroidApp开发以及产品开发定制。(HiggsesInc.isfocusonmobileappoutsourcingservices,weareabletodoperfectlyonMobileAppdevelopmentandcustomization.)
【选择飞数科技】石家庄网站建设,石家庄网站制作,石家庄做网站公司,石家庄网站建设,石家庄网站制作,石家庄做网站公司,可按照客户需求定制开发.
爱尼丝化妆品是一家集化妆品代加工、面膜OEM、护肤品OEM、精油OEM、原液OEM、身体药油OEM、水乳霜OEM、致力服务电商微商,日化线专业线的广州化妆品代加工厂家。
中智磁性机械有限公司专业生产:旋转式除铁器,抽屉式除铁器,高强力磁棒,悬挂除铁器,永磁除铁器,磁棒,磁滚筒,磁滚筒,除铁箱,除铁槽以及各种规格磁性材料等
我们打造出速度更快的超级计算机和规模更大的游戏平台。
橙舟SAAS小程序,小程序公众号SAAS系统服务商，外卖返利小程序,,商城系统,拓客小程序等开发定制搭建,小程序代理加盟。
RIB玻璃钢底船-进口橡皮艇价格-威海朝阳船艇开发有限公司威海朝阳船艇开发有限公司是一家集研发、生产、销售为一体的专业生产各种船艇及其配件的现代式管理企业。公司采用韩国进口原材料,型号涵盖RIB游艇、钓鱼船、漂流船、冲锋舟、RIB玻璃钢底船、进口橡皮艇、海帕伦船等四十余种规格,产品主要出口韩国、欧洲、美洲等各个国家和地区。欢迎致电咨询!
发吧网是国内领先的B2B电子商务平台,b2b平台免费发布信息网，为您提供全面的B2B行业资讯、供应、求购、库存信息、品牌信息等,是国内企业免费发布B2B信息，电子商务网络贸易的首选网站。
1、电话咨询黎明练字企业方；2、达成意向后前往黎明练字公司实地考察；3、寻找适合黎明练字加盟店铺；4、签署黎明练字加盟合作意向书；6、黎明练字公司择日前往考察；8、公司根据店铺情况设计装修图与陈列图；9、加盟商进行店铺装修公司协助策划、培训、配货、宣传等开业筹备；10、开店并反馈网站客服开店成功；...。
美国当地时间2017年11月13日至15日，第一届机器人学习大会，1stAnnualConferenceonRobotLearning，在加州山景城召开，尽管这是没有任何历史参考的大会，但在组织者的强大号召力下，见雷锋网之前文章，荐会，CoRL，机器人与机器人领域的下一个顶级会议，，在会议开幕前4个月门票就被抢光，包括雷锋网记者在...。
雷锋网消息，在不久前的WRC2018世界机器人大会上，NVIDIA展出了专为机器人设计的芯片JetsonXavier，同时，NVIDIA高级软件经理李铭博士也向雷锋网等媒体详细介绍了这款芯片的特点，阐述了JetsonXavier如何推动机器人软硬件技术的发展，JetsonXavier于今年6月初在2018年台北国际电脑展，COMPUT...。
虽然Sora目前在内测阶段，都还不能用呢，但已经有一大堆人卖课卖培训了，不得不佩服这些做培训的，他们的眼光永远都是超前的，人家官方都还用不了呢，大佬们就能出教程了?据说已经卖了2w多份，一天时间200W到手，下面的收费课程不知道大家是否看过，这些都是假假假，从公开的宣传海报中，我们可以看到这些课程主要针对的是内容创作者、广告营销从业者...。
申明，1.以上内容仅代表揭发者自己，不代表黑猫揭发立场，2.未经授权，本平台案例制止任何转载，违者将被清查法律责任，3.黑猫揭发处置揭发不收取任何费用，凡以黑猫揭发名义不要钱的均为混充、诈骗行为，请及时报警并与黑猫官网反应，揭发邮箱heimaotousu@vip.sina.com，4.请大家选用官网渠道处置生产纠纷，不要轻信第三方机构...。
唐纳德·特朗普唐纳德·特朗普，DonaldTrump，1946年6月14日—，，出世于美国纽约，祖籍德国巴伐利亚自在州，德裔美国共和党籍政治家、企业家、房地产...7·13美国总统选举枪击事情外地时期2024年7月13日18时15分许，美国前总统特朗普在宾州举办竞选集会宣布演讲时，一名枪手从集会现场外高处向特朗普所在的演讲台，开......。
在燃油车时代，红旗是惟一具备上流属性的国产品牌，它早在2020年12月份就推出了纯电动大型SUV红旗E，HS9，不过这款车从2021年开局就中止了更新换代，如今，红旗又想起了这款车，3月7日，新款红旗E，HS9正式上市，新车共推出4款车型，售价为58.98，77.98万元，这款车的定位比目前火爆的问界M9还要高，那么新车上市后，将会给...。
coreldraw是加拿大Corel公司的平面设计软件，coreldraw软件是Corel公司开发的一款软件，它融合了绘画与插图、文本操作、绘图编辑等高质量的输入于一体的矢量图绘图软件，该图像软件是一套屡获殊荣的图形、图像编辑软件，它蕴含两个绘图运行程序，一个用于矢量图及页面设计，一个用于图像编辑，这套绘图软件组合带给用户弱小的交互式...。
当初各种游戏层出不穷，其中有好游戏也有烂游戏，而一款游戏想要大火离不开完成的宣传，玩家们也经常为找不到好游戏而困扰，这时，一款好的游戏盒便能处置这种疑问，各种破解游戏盒子除了副品游戏外，破解游戏遭到许多玩家的喜欢，破解版除了有变态的**外，还有有限游戏币，内购破解，解锁付费，消弭广告等配置，缺陷就是或者存在的病毒，和经常介绍一些一刀9...。
东芝蓝牙耳机驱动是Win7系统的蓝牙耳机驱动，安装好驱动后，你的蓝牙耳机即可正常使用，能够解决耳机没有声音
逗号，逗号如何，什么逗号，哪些逗号，怎么逗号
平面设计作品？平面设计作品鉴赏由清华大学美术学院教授何杰主编。内容包括海报设计-1/、包装装潢设计作品、书籍设计和图片设计，平面设计作品怎么写平面广告设计描述是为设计/1233，平面设计作品鉴赏书籍简介“平面设计/鉴赏”是教育部的职业，搭配作品，包装设计，制作作品集合。1、如何才能做一个好的平面设计作品OK平面设计作品，首先要有新颖的思路，图案内容选择的出发点要有新意，画面要优美，整体要有意境，让观者产生共鸣。如果是去面试，那要看你去面试的是什么样的公司。我觉得你可以准备两种作品，一种是你最引以为傲的，体
2022全新天狼星网络验证系统源码官方正版全网首发源码资源仅供学习研究美工使用，请勿用于商业和非法用途!源码说明天狼星搭建应该都知道吧用过都说好现在我就来分享一下这套是我自己从花钱买来的天狼星网络...
平面设计作品？平面设计作品鉴赏由清华大学美术学院教授何杰主编。内容包括海报设计-1/、包装装潢设计作品、书籍设计和图片设计，平面设计作品怎么写平面广告设计描述是为设计/1233，平面设计作品鉴赏书籍简介“平面设计/鉴赏”是教育部的职业，搭配作品，包装设计，制作作品集合。1、如何才能做一个好的平面设计作品OK平面设计作品，首先要有新颖的思路，图案内容选择的出发点要有新意，画面要优美，整体要有意境，让观者产生共鸣。如果是去面试，那要看你去面试的是什么样的公司。我觉得你可以准备两种作品，一种是你最引以为傲的，体
逗号，逗号如何，什么逗号，哪些逗号，怎么逗号
东芝蓝牙耳机驱动是Win7系统的蓝牙耳机驱动，安装好驱动后，你的蓝牙耳机即可正常使用，能够解决耳机没有声音
戴尔灵越177000系列触控屏笔记本重装系统WIN10步骤(一键重装方法)
