训练极低比特网络 如何做模型量化 直播丨商汤科技 (如何训练比特犬正确方法视频)

文章编号:44134 资讯动态 2024-12-09 商汤 模型量化

随着深度学习的发展,神经网络被广泛应用于各种领域,模型性能的提高同时也引入了巨大的参数量和计算量。模型量化是一种将浮点计算转成低比特定点计算的技术,可以有效的降低模型计算强度、参数大小和内存消耗,但往往带来巨大的精度损失。尤其是在极低比特(<4bit)、二值网络(1bit)、甚至将梯度进行量化时,带来的精度挑战更大。

本次直播,我们邀请了商汤研究院--链接与编译团队的两位研究员,分享团队在模型量化方面的的一系列研究工作,其中包含CVPR 2020、ICCV 2019等多篇与北航刘祥龙老师团队合作的论文成果。

一、课程信息

主题:如何做模型量化,训练极低比特网络

观看链接:↓↓↓

二、分享提纲

1、如何训练极低比特(<4bit)的网络

2、如何训练高效的二值化网络

3、如何用量化技术来加速模型训练

4、模型量化在实际场景的落地

5、模型量化与网络结构搜索结合

三、嘉宾介绍

直播丨商汤科技:如何做模型量化,训练极低比特网络

商汤科技研究院高级研究员

余锋伟研究员本硕毕业于北京航空航天大学计算机学院。曾获得MOT16视频多目标跟踪冠军,ASC世界大学生超级计算机竞赛一等奖,华为奖学金,研究生国家奖学金等。现作为内部开源技术中台的架构师之一,负责训练加速、自动模型部署、模型量化、神经网络编译器等技术的研发和落地。在ECCV、ICCV、CVPR、ICLR上共发表5篇论文。

直播丨商汤科技:如何做模型量化,训练极低比特网络

商汤科技研究院见习研究员

龚睿昊同学曾获得商汤科技未来之星、CCF优秀大学生、北京市三好学生、国家奖学金等。现主要研究方向为深度学习模型的量化加速技术,在ICCV、CVPR、ICLR、PR等期刊会议上发表6篇论文(其中1篇一作,4篇二作),期间负责量化框架的设计和开发,支持量化模型在多业务线项目落地。

四、直播报名

扫码添加AI研习社顶会小助手(AIyanxishe2)微信好友备注“论文解读+量化”后进入报名微信群,获取课件和直播间地址

直播丨商汤科技:如何做模型量化,训练极低比特网络

原创文章,未经授权禁止转载。详情见 转载须知 。

直播丨商汤科技:如何做模型量化,训练极低比特网络


本文地址: https://www.gpxz.com/article/6a3ccb1f15626304b1a6.html
全局中部横幅
全局中部横幅
易启科技

易启科技-企业级高可用云服务器、云虚拟主机、网站服务器租用托管服务提供商,一站式服务器解决方案,弹性灵活、按需付费,轻松助力企业及个人云端部署!

颜色代码查询

可以通过该工具查询相应的颜色对应的代码。

高德地图

高德地图官方网站,提供全国地图浏览,地点搜索,公交驾车查询服务。可同时查看商家团购、优惠信息。高德地图,您的出行、生活好帮手。

牛客网

求职之前,先上牛客,就业找工作一站解决。互联网IT技术/产品/运营/硬件/汽车机械制造/金融/财务管理/审计/银行/市场营销/地产/快消/管培生等等专业技能学习/备考/求职神器,在线进行企业校招实习笔试面试真题模拟考试练习,全面提升求职竞争力,找到好工作,拿到好offer。_牛客网_牛客在手,offer不愁

步进电机减速器

淄博新源电机有限公司(www.ziboxinyuandianji.com)是淄博是一家专业的步进减速电机,步进电机减速器以及直流减速电机生产厂家。以好的步进减速电机产品、优惠的价格、周到的售后服务欢迎广大客户惠顾,价格咨询电话

健康管理师

职业报名工作网|健康管理师报名平台!提供健康管理师,健康管理师考试,高级健康管理师,健康管理师报考条件等信息发布!健康管理师培训,报名考试一站式服务!经培训考试合格后颁发健康管理师证书,全国联网查询,全国通用。

SKTC张力控制器

上海菱联自动化控制技术有限公司(www.linglianauto.cn)可以为您提供SKTC张力控制器,东电研纠偏控制器,PCB扭矩传感器,美国PCB传感器,MITSUHASHI三桥纠偏控制器的等产品。公司和国内外许多企业建立了业务联系并成为其常年产品供应商和合作伙伴。其良好的价格、信誉和周到快捷的服务、售前售后的技术支持,让您买的顺心用的称心。

花小米

花小米-2024最新网络贷款口子信息平台,网贷还不上怎么办?逾期严重上岸操作技巧,芝麻分涨分技巧,信用卡办理提额,上岸交流,无需查征信大数据也可以申请贷款,不看大数据的口子,不查征信的口子,一站式学会如何做好征信维护,如何解决借款过程中的问题,尽在花小米!

问人人知识网

问人人知识网-是一个内容丰富的知识分享型网站。为阅读者提供生活知识百科、有价值的经验分享、学习参考资料以及各类优秀范文参考,同时还为读者提供海量优质好文章摘抄等内容。


全局底部横幅