2019 图鸭科技 CLIC CVPR 图像压缩挑战赛冠军方案全解读 (图鸭科技 创始人)
雷锋网 AI 科技评论按：在 CVPR 2019 CLIC 图像压缩挑战赛中，图鸭科技所提出的算法 TucodecSSIM 夺得了 MS-SSIM 和 MOS 两项指标的冠军，算法 TucodecPSNR 夺得了 PSNR 指标的冠军，算法 TucodecPSNR40dB 则夺得高码点图像压缩 Transparent Track 的冠军。以下为图鸭科技提供的技术解读。
近年来随着人工智能技术的发展，基于深度学习的图像压缩技术已取得了飞速的发展。一个典型的基于深度学习的图像压缩框架包括：自编码网络结构设计、量化、码率估计和率-失真优化等几个模块。本文将主要介绍图鸭科技在 CVPR 2019 CLIC 图像压缩挑战赛上的相关技术方案，针对于比赛所设置的低码点和高码点压缩两个赛道，我们基于变分自编码网络设计了可进行端到端优化的图像压缩方案。该方案包括一个非线性编码网络、软量化模块、一个非线性解码网络和一个熵估计模块。我们技术方案的特色之处总结如下：
1. 提出了基于全局特征分析的 non-lcao 注意力模块，并融合进编码网络和解码网络，以实现提升自适应码字分配性能的目的。
2. 设计了一种基于自适应聚类的软量化方法以降低量化损失。
3. 提出了能融合超先验子网络和基于 pixel cnn++的上下文模型的码率估计模块。
得益于优良的网络结构和算法设计，我们所提出的算法 TucodecSSIM 夺得了 MS-SSIM 和 MOS 两项指标的冠军，算法 TucodecPSNR 夺得了 PSNR 指标的冠军，算法 TucodecPSNR40dB 则夺得高码点图像压缩指标的冠军。接下来将具体介绍我们的算法方案：
(1) 编码网络和解码网络
我们的主干压缩自编码网络使用了如图 1 所示的非对称结构，它包括卷积、非线性单元和残差 non-local 注意力卷积等模块。值得注意的是，通过使用残差 non-local 注意力模块来对特征的全局关联性进行捕捉和建模，图像中的纹理、边界等复杂部分能得到更好的重建。在 kodak 标准数据集上的实验表明，通过在编码和解码网络结构中融合 non-local 注意力模块，能在 PSNR 指标熵带来 0.6db 的提升。
图 1 编码和解码网络结构示意图
( 2) 量化
在现在的大部分方案中，取整量化
是一种常用的方式。我们通过实验测评发现，这种直接将浮点数映射到整数的量化方式会极大的降低重建精度（PSNR 指标至少降低 0.5db, MS-SSIM 指标降低至少 1.5db）。为了降低量化带来的精度损失，我们设计了一种基于自适应聚类的软量化方案，具体介绍如下：
给定可学习的中心点
，可使用最近邻分配的方式来计算量化值：
但式 (1) 的量化方式是不可导，因此将使用如下所定义的软分配方式进行替换，以保证在训练过程中能进行端到端的优化：
在用 tensorflow 进行实现时，可以用如下的代码对参数进行量化：
(3) 先验概率和码率估计
为了进行码率估计，使用拉普拉斯分布对压缩特征的分布进行表示，分布的参数包括均值
和方差
。为了对分布的均值和方差进行端到端的计算，设计了如图 2 所示的网络结构：
图 2. 码率估计模块示意图，该模块包括超参自编码网络、上下文网络和熵参数网络三部分。
码率估计模块由三个子网络构成：超参网络
，参数为
；上下文网络
，参数为
；熵参数网络
，参数是
。如图 2 所示，超参网络由超参编码网络、量化模块和超参解码网络组成。超参网络的量化特征也需要编码，使用非参的概率密度估计方式进行先验概率建模：
此外我们使用了 Pixelcnn++网络结构对特征的上下文关系进行捕捉和建模；最后使用卷积模块进行熵参数网络的构建，并将超参网络的输出和上下文网络的输出进行级联来作为熵参数网络的输入来计算相应的均值和方差。主干自编码网络压缩特征的分布可以表示为：
最后码率估计将由两部分组成：一部分是对主干自编码网络中压缩特征的估计码率，一部分是超参自编码网络压缩特征的估计码率：
(4) 后处理
在方案 TucodecPSNR 中，我们使用了改进的 266 算法作为基础，但低码率压缩算法重建图最显著的缺点是存在伪影，并且很多纹理细节会丢失。为了改进在低码率条件下重建图的质量，我们设计一个有效地后处理模块，后处理模块的具体细节如图 3 所示。
图 3 后处理算法结构示意图
(5) 实验结果
我们从 CLIC 2019 训练集和 flickr.com 上收集了 5000 张高清图片，并从中采集了百万张的图像块作为训练集。为对网络进行高效训练，我们使用 tensorflow 平台对相应网络结构进行实现。在方案 TucodecSSIM 中，进行网络训练使用的损失函数如下所示：
除上述损失函数外，也结合了对抗生成网络对压缩网络进行端到端的训练。为了满足比赛的 0.15bpp 的约束要求，我们训练了 5 个模型分别对应λ=0.2/0.3/0.4/0.5/0.6，最后使用动态规划算法进行码字分配。
在方案 TucodecPSNR40db 中，进行网络训练所使用的损失函数如下所示：
在模型训练完毕后，为了满足比赛的 PSNR 值不小于 40db 和 MS-SSIM 值不小于 0.993 的约束，共训练了 5 个模型，对应的 λ=4096/4800/5500/6500/8000。最后使用动态规划算法进行码字分配。在方案 TucodecPSNR 中，使用了我们改进的 H266 算法作为基础，并结合后处理网络进行性能的提升，我们给出了三个模型，分别对应 QP 36/37/38，并最后进行码字分配以满足 0.15bpp 约束的要求。所提出算法的测评指标如下表所示：
版权文章，未经授权禁止转载。详情见 转载须知 。
本文地址： https://www.gpxz.com/article/4d04ae71575d52bc3003.html
是8K导航网旗下最专业好用的学术导航网站！学术导航为科研人员提供学术名站、文库文档、学术基金、专利、标准、期刊杂志、在线课程、考研、TED、艺术展馆、科普知识、学术导航名站等相关网站导航指引。科研人专属的网址导航。
天津安世佳电子科技有限公司市场部是一家天津监控、天津监控器、天津闭路监控、天津监控摄像机、天津红外摄像机、天津停车场道闸、天津道闸、天津报警器、天津安检门、天津金属探测器、...
中国医学科学院肿瘤医院
浙江奥泰克自动化技术有限公司
室内环境净化治理国家甲级资质公司湖北格瑞乐环保，提供除甲醛、甲醛检测、空间消毒、杀菌除螨、水质污染检测与治理、室内空气检测和治理以及室内香氛净化、空气污染净化等各类环保服务，全国环保咨询热线：400-027-8156
浙江新大塑料管件有限公司成立于2001年,是一家专业从事生产燃气及供水用聚乙烯(PE)电熔连接、热熔对接、PE球阀、钢塑转换及热熔承插、PPR管件及钢丝网管件等工贸一体化的国际现代化企业
KK社区是国内的安卓手游,源码分享,技术交流社区，这里有海量好玩安卓软件，热情的互动氛围，最有创意和技术的UP主，在KK社区和全球玩家共享乐趣。
云脉三六五由一批拥有丰富经验的跨境电商精英与充满活力的互联网技术人员共同组建。我们的愿景是用IT技术服务十万跨境企业，百万跨境人。我们的使命是提升中国跨境人的国际竞争力，助力中国货，通全球。期待遇见有趣的你，与你一起做有价值有意义的事
保护地研究-物种库(数字标本资源库)。全国数字标本资源库，自然保护地数字生物物种资源库（简称“物种库”），收集和提供保护地物种数据，以保护地为主线，用图片、文字、视频等形式全面记录保护地物种状况。本站的重点栏目有：物种卡、物种描述、生物多样性、气候变化、物种名录、物种分类、保护地物种。支持我们，请联系QQ：468780427微信：lzx2101。
问考吧为考生提供自考网上报名系统、报名时间、自考专业、自考本科专科、成绩查询入口、历年真题下载、自考查分、准考证打印、自考办电话、自考院校及专业等自学考试信息资讯。
菲尼克斯矿山设备（上海）有限公司与美国黑石科技有限公司合资，专营破碎设备、制砂设备、碎石设备等大型破碎机械设备、制砂生产线设备等大型矿山设备的销售和服务，公司具备一定的技术实力和生产能力，为海内外客户提供成套破碎生产线设备提供保障。
命令与征服之红色警戒3起义时刻游戏专题;提供命令与征服之红色警戒3起义时刻中文版下载,命令与征服之红色警戒3起义时刻攻略大全,命令与征服之红色警戒3起义时刻汉化补丁,命令与征服之红色警戒3起义时刻视频解说,攻略视频,修改器,汉化下载,完美存档,MOD,配置,教学,截图,壁纸等资料。更多《命令与征服之红色警戒3起义时刻》相关内容尽在游侠网。
10月17日消息，在大家印象里，电视机顶盒是一个小方盒子，需要连接电源线和HDMI线，布线非常杂乱，而广电总局在最新发布的行业标准，机顶盒通用遥控技术要求和测量方法，中，展示了一种全新的直插式机顶盒，直插式机顶盒指HDMI插头直接装配在主体电路板上的插入式微型机顶盒，这种设计不仅简化了安装过程，还减少了线缆的使用，使得整体外观更加简洁...。
在全国各地都有着不同特色的美食，不同的地域有着不同的风味，能够满足不同人群的消费需求，有红鸡毛店川菜是一家专注于为消费者们提供巴蜀地区特色的美食，凭借着与众不同的美食风味，获得了南北不同地域消费者的口味需求，先后在全国建立了两百多家连锁加盟门店，遍布在全国众多的城市中，在市场中有着不错的人气，是加盟商眼中的香饽饽，那么有红鸡毛店川菜加...。
龙承辉算是，创客马拉松，的老朋友了，作为乐美客高校计划的负责人，早在上届，创客马拉松·华农站，上，龙承辉就以导师的身份参与了比赛，比赛结束之后似乎还没过瘾，所以硬创邦在即将开启的创马深大站，又邀请了他来担当导师，并对他进行了一次专访，龙承辉创客故事多龙承辉是一个资深的，老创客，了，在五六年前的学生时代，龙承辉就开始了他的创客之路，据他...。
发表在专业问答2021，10，2814，35展示机型信息，品牌型号，当贝x3系统版本，当贝OS2.0将dlp投影仪接上电源并打开，然后打开投影仪的系统设置，选择网络设置，找到需要连接的无线网名称，输入密码进行连接，成功后就能够直接使用，具体操作步骤如下，dlp投影机使用方法1.接通电源将dlp投影仪接上电源，然后按机身上面的开关键将投...。
发表在专业问答2020，11，1111，07展示机型信息，品牌型号，坚果微果i6、iPhone12、华为p40系统版本，JMGO4.0、iOS14.2、EMUI10.1软件版本，乐播投屏8.4.78将微果投影仪和手机连接到同一网络；，打开微果投影仪上的乐播投屏，记录设备编号；，打开手机端的屏幕镜像或多屏互动，搜索对应设备并进行配对...。
手游代理行业近年来逐渐兴起，为许多人提供了创业和致富的机会，然而，随着行业的发展，一些不法分子也混迹其中，利用一些新手代理对行业的不了解，进行欺诈行为，如果你不幸成为了手游代理被骗的受害者，那么应该如何应对呢，这一点可以具体参考下风林手游给到想要从事这一行的小伙伴们一些小建议，你要知道被骗已经是既定的事实，这时候你的愤怒、失望可以说毫...。
外地期间10日，北约华盛顿峰会颁布宣言，在北约配合美国遏华策略的背景下，这份宣言对中国启动了恶意攻打，它宣称中国对北约利益、安保和价值形成应战，诬称中国是俄乌抵触的，选择性允许者，，对跨大东洋安保形成系统性应战，作为俄乌抵触的始作俑者，北约非但不反躬自省，反而对不时劝和促谈的中国，甩锅，栽赃，让环球再次见识了这个，热战遗孽，的本性，时...。
1、不悔恨性价比高CT6在C级车中不时是超高性价比的存在，入门级车型目前才28万但也正由于不时下探的售价，造成CT6的保值率不时不怎样样同时不单只CT6，整个美系车在国际的保值率都是惨不忍睹的国人偏爱德系车，2、空间作为一款中大型车，我觉得ct6的空间就真的不用多说了，特意的宽阔，前排十分的温馨，我1米76的身高坐在外面，没有任何的压...。
近年来，随着互联网的快速发展，电商、社交媒体、内容平台逐渐崛起。其中，百家号作为百度旗下的内容创作平台，也迅速走红，吸引了众多网民的关注和参与。然而，我认为百家号作品不值得推荐，原因如下。首先，百家号
毕亚兹蓝牙适配器驱动是一款专为该蓝牙适配器所推出的驱动安装程序。通过在电脑上安装该USB蓝牙适配器驱动，就能够完美连接电脑、手机和蓝牙设备，支持Win7/8/10的32位/64位操作系统，让用户使用操作更加方便。功能介绍支持Windows2000、WindowsXP、WindowsVista、Windows7等系统IVTBlueSoleil蓝牙驱动支持中文界面支持多个系统实现电脑之间的无线连接功能产品特点包装简洁，
使用sqlserver2008创建a数据库或表时，几个简单的SQL2000-3分析器语句标题7。7.选择distincte.age，详细指定每个字段的字段名，什么视图用来构建表结构。1、使用什么视图建立表结构,要详细说明每个字段的字段名和数据类型使用命令-1查看表结构/可以使用内置存储过程sp_MShelpcolumns。如查询Tabletabel1Structure:sp_MShelpcolumnstabel1元数据最常见的定义是关于数据的结构化数据，或者简单地说是关于数据的信息。日常生活中的图例、图书
近日腾讯视频悄悄上线了一起看的功能，也就是说你可以和你的好友一起追剧讨论相关剧情了，那么腾讯视频一起看可以连麦吗？也有一些小伙伴反映自己腾讯视频没有一起看这个功能，这是为啥呢？,腾讯视频一起看可以连麦吗腾讯视频一起看为何进不去
奥特曼系列是日本动漫界的重磅IP，每个人心中或许都曾有过化身为光的梦想，近期，不少奥特曼迷向小编咨询2024年无需网络的奥特曼游戏有哪些，身为奥特曼游戏的忠实拥趸，小编特此整理了几款值得一试的奥特曼单机游戏推荐给大家，对于那些跃跃欲试的玩家们，可以跟上小编的步伐，一起来探索，基于奥特曼题材的格斗游戏，它采用了写实的画风，精准地再现了奥...。
在2000年的时候，互联网兴起，普通老百姓刚刚开始接触互联网，到处是流量，那时候即便你有一点点网络技术，做个废品单页，搜索引擎一收录，那流量就是源源不断……，卖任何产品，基本都能赚到盆满金满，互联网经过20几年的发展，早已今非昔比了，现在都在追求，私域流量，，何为，私域流量，?说，私域流量，前，先说，公域流量，在搜索引擎，论坛，贴吧，...。
在国内外，除了百度以外，还有很多其他的广告联盟，要说百度联盟和其他联盟的不同之处，最重要的一点百度在中文互联网环境下搜索引擎中占领军地位，1.，百度，品牌的价值百度联盟和其他联盟最大的不同之处在于它是依托百度品牌而建立的，在国内的搜索引擎中，百度无疑是绝对的，霸主，，它拥有着其他搜索引擎无可比拟的市场占有率，依托百度这个品牌，百度联盟...。
在3月18日上午的WinHEC，Windows硬件工程产业创新峰会，上，微软宣布了Windows10与腾讯、360合作，腾讯高级副总裁汤道生、360董事长周鸿祎分别上台讲述了合作内容，其中有一项细则颇值得回味，这两家公司在当时都有提到会预装自家软件在Windows10里，腾讯在WinHEC上称，将在Windows10中预装腾讯电脑管家...。
消息，据美联社报道，特斯拉正在召回13万辆汽车，原因是汽车信息娱乐系统中的CPU在快速充电期间过热，可能导致汽车的触摸屏出现故障或完全空白，此前，特斯拉曾于5月3日推出一种无线更新，OTA，的方式，试图解决问题车辆的触摸屏故障，其中就包括2022年生产的Model3和Y，以及2021年和2022年的ModelX和S几种型号的车辆...。
