的逼真效果更进一步 ML AR 谷歌 通过引入 实时自拍 ARCore
雷锋网 AI 科技评论按：ARCore 是谷歌于去年 2 月份正式推出的 增强现实（AR）软件开发工具包，给开发者提供了一个开发 AR APP 的平台。不到一个月前，谷歌正式推出 ARCore 1.7 版本，为其添加了前置摄像头 AR 自拍能力以及动画效果支持；而日前，谷歌又为其引入了机器学习技术，使其实时自拍 AR 的逼真效果更进一步，该技术相关的文章发布在谷歌 AI 的官方博客上，雷锋网 AI 科技评论编译如下。
通过将数字内容与信息叠加到物质世界的真实场景中，来让人类实现超越现实的感官体验。例如， 谷歌地图的 AR 功能 ，能够在现实场景中叠加方向信息来为你指路。借助于 Pixel 相机中的 Playground 模式 ，你可以使用 AR 从不同的视角看世界。并且通过借助于最新发布的 「YouTube Stories」 以及 ARCore 全新的面部增强（Augmented Faces）API ，你可以在自拍上添加动画面具、眼镜、帽子、皮肤等特效。
实现这种 AR 功能的关键挑战之一，就是以合适的方式将虚拟内容锚定到现实世界：这一过程需要一套能够追踪到每一次微笑、皱眉或假笑的高动态表面几何结构的独特的感知技术。
ARCore 的3D 网格以及它能实现的一些特效
为此，我们引入了机器学习（ML）技术来推断近似的 3D 表面几何结构，并且仅需要用到一个单摄像头输入而无需使用专用的深度传感器。这种方法利用面向移动 CPU 界面推断或其可用的全新移动 GPU 功能的 TensorFlow Lite ，实现了逼真的实时 AR 效果。与「 YouTube Stories」 全新的创作者特效所利用的技术一样，这项技术已通过 最新的 ARCore SDK 和 ML Kit Face Contour Detection API 向广泛的开发者社区开放。
用于自拍 AR 的机器学习工作流
我们的机器学习工作流由两个协同工作的实时深度神经网络模型组成：一个是探测器，它在整张图像上运行并计算出面部位置；另一个是通用的 3D 网格模型，它在探测器计算出来的面部位置上运行，并通过回归预测近似的表面几何结构。精确地裁剪面部能够极大地减少对一般的数据增强的要求，例如由旋转、平移和比例变换组成的仿射变换（affine transformations）等，同时让网络将大部分性能投入于预测坐标来提高其准确性——这对于锚定合适的虚拟内容至关重要。
裁剪完所关注的位置后，该网格网络一次仅应用于一个单帧，并利用加窗平滑（windowed smoothing）来减少面部处于静态时的噪音，同时避免在大幅移动期间出现的延迟。
针对 3D 网格，我们采用了 迁移学习 ，并训练了一个具有多个目标的网络：该网络能够同时地基于合成、渲染的数据预测 3D 网格坐标以及基于类似于所提供的带有注释的、现实世界的数据预测 2D 语义轮廓。最终的网络为我们提供了基于合成数据乃至现实世界数据的合理的 3D 网格预测。所有模型都在源自于地理学多样化的数据集的数据上进行训练，并接着在平衡、多样化的测试集上进行定性和定量性能的测试。
3D 网格网络接收经裁剪的视频帧作为输入。由于它不依赖于额外的深度输入，因而也可以应用于预先录制的视频。该模型不仅输出 3D 点的位置，还输出在输入中存在并合理对齐的面部概率。一种常见的替代方法就是为每个地标预测出 2D 热图，但这种方法并不适用于深度预测，并且对于如此多的数据点来说，使用这种方法耗费的计算成本非常高。
通过迭代自展和精炼预测，我们进一步提高了模型的准确性和鲁棒性，同时也将数据集发展成为愈加具有挑战性的实例，如鬼脸，拍摄角度倾斜以及面部遮挡等。此外，数据集增强技术也扩展了可用的 ground truth 数据，并开发出了对摄像头瑕疵等人工产品问题或极端光照条件具有弹力的模型。
数据集扩展和改善路径
我们使用 TensorFlow Lite 进行设备内置的神经网络推理。 新推出的 GPU 后端 加速能够有效提升性能，并显著降低功耗。此外，我们还设计了具有不同性能和效率特性的一系列模型架构，来覆盖到更加广泛的消费级硬件。较简单网络之间的最重要的区别就在于残差块（Residual Block）设计和可接受的输入分辨率（最简单模型中的输入分辨率为 128×128 像素，而最复杂模型中的输入分辨率为 256×256）。同时，我们还改变了层数以及子采样率（输入分辨率随网络深度的减少而减少的速度）。
这一系列的优化的结果就是：使用更简单的模型带来了实质性的加速，同时也将 AR 特效质量的降低幅度最小化。
最复杂模型（左）和最简单模型（右）的比较：在简单模型上，时序一致性以及对嘴唇、眼睛的追踪稍微降低。
这些成果最终则能够通过以下方式，让用户在 YouTube、ARCore 以及其他客户端体验到更加逼真的自拍 AR 效果：
另外，我们还通过以下方式实现了逼真的妆容效果：
案例对比：5 个目标在不同光线下的真实化妆效果以及 AR 化妆效果
我们很高兴将这项新技术分享给创作者、用户以及开发者。感兴趣的读者可以通过下载最新的 ARCore SDK （下载地址：）来将这项技术用起来。未来，我们还计划将这项技术广泛应用到更多的谷歌产品线中。
via：
原创文章，未经授权禁止转载。详情见 转载须知 。
本文地址： https://www.gpxz.com/article/68867ff6d1d7db833149.html
中国医药信息查询平台是中国权威医药数据库之一,建有海量的医学和药学内容。包括疾病,症状,药品,医生,医院,中药材,食品营养,针炙穴位,医美等30+数据库,拥有百科,视频,问答,病例,预约,咨询,便民购药等板块。为大众提供了专业,科学,可靠,实用的健康科普知识,让大众面对医疗健康信息不再迷茫。
中国广电四川
协鸿(江苏)智能装备有限公司是一家生产制造：立式加工中心、数控钻床、龙门加工中心、卧式加工中心的企业，位于交通便利、产业密集的江苏省徐州市龙固电子产业园6号。
「28影视(www.caasdata.com)2025年热门影视聚合平台！每日24小时实时更新院线新片、网络热播剧，涵盖科幻、悬疑、言情、家庭剧等30+类型，1080P高清无广告免费观看！无需注册登录，手机/电脑/电视多端互通，一键聚合经典港剧、欧美日韩热播剧集。实时热搜榜单同步全网热度，热门影视资源秒级更新，追剧党必备的无门槛观影平台，就在聚视热播！」
同花顺旗下一站式基金投资平台，轻松找到最适合您的基金。并为您提供基金净值查询、投资收益计算、基金定投、基金网上交易、基金数据等多种专业、及时、全面的基金服务。
天津中盛恒智网络科技有限公司,中盛恒智,中盛传媒,PR发稿公司,传媒公司,发稿公司
视源股份主营业务为液晶显示主控板卡和交互智能平板的设计、研发与销售。其中，交互智能平板是公司以液晶显示主控技术为基础，结合多点触摸交互技术、数字信号处理技术与计算机软硬件技术，开发出的具有自主知识产权的集电视、电脑、电子白板等功能于一体的电子产品。视源股份旗下有两个品牌，一个是教育信息化应用工具提供商希沃（seewo），一个是高效会议平台MAXHUB。
西安莲湖生殖医院
法律考试相关题库
辽阳瑞鸿化工有限公司
SPOTTER致力于全球市场B2B跨境贸易分销，通过数字化能力精准赋能卖家品牌布局海外渠道，提供亚马逊VC、供应链管理、SEVC智能平台等全方位服务，帮助品牌商出海提速。1000+品牌信赖，9亿美元交易额，98.7%库存准确率
龙珠Z卡卡罗特游戏专题;提供龙珠Z卡卡罗特中文版下载,龙珠Z卡卡罗特攻略大全,龙珠Z卡卡罗特汉化补丁,龙珠Z卡卡罗特视频解说,攻略视频,修改器,汉化下载,完美存档,MOD,教学,配置,截图,壁纸等资料。《龙珠Z卡卡罗特》是一款格斗题材的游戏。
本次给大家带来的是建造类游戏有哪些2022，建造类游戏开放性较大，自由度很高，玩家可以随心所欲的在游戏中建造属于自己的建筑，所以这类游戏对于很多玩家来说是比较受欢迎的，小编在这里给大家准备了几款好玩的建造类手游下载推荐，感兴趣的小伙伴可以与小编一起来看看，1、，迷你世界，迷你世界，是一款拥有卡通风格的沙盒建造手游，精美的卡通风格深受...。
很多人群关注健康问题，其中健康奶饮品以诸多营养成分而颇受关注，引发了老少消费者的欢迎和信赖，福鑫羊奶专卖店作为行业中实力品牌，以不断提高产品品质和质量，在各地范围内塑造了颇高人气和竞争实力，多年发展中，汇集了大批粉丝客源，且吸引一众创业者加盟开店的意向，那么福鑫羊奶专卖店加盟怎么样，扶持多吗，福鑫羊奶专卖店加盟怎么样品牌为了向广大消费...。
智慧城市的热潮方兴未艾，单个城市出现多个智慧城市项目建设厂商不足为奇，竞争着实激烈，雷锋网了解到，浪潮正采用，特许经营权，的方式，为济南、娄底、亳州、怀化、常德等十余个城市提供智慧城市运营服务，并在全国29个省份、90多个城市开展智慧城市建设业务，雷锋网对话浪潮执行总裁陈东风和浪潮副总裁姜振华获悉浪潮开展智慧城市业务的内在逻辑，用投资...。
工信部公布，目前全国已经开通5G基站11.3万个，预计到年底将达到13万个，5G套餐签约用户已有87万个，发展势头良好，在亚信安全首席技术官薛辉看来，5G未来将至，一面是手机厂商和消费者的狂欢Party；另一面，是5G技术对安全从业者提出的新式挑战，5G安全，撑起异构世界的基石规定时间、地点和人员，大家对第一名没有异议，这，是有限的游...。
发表在专业问答2022，2，1513，38展示机型信息，品牌型号，iPhone13系统版本，iOS15.3软件版本，腾讯视频8.2.6腾讯视频改名字总共分为三步，可以通过个人中心找到昵称更换，然后更改新昵称即可，详细的操作步骤如下，腾讯视频怎么改名字1.打开个人中心在腾讯视频的下面菜单栏找到个人中心并点击打开；2.打开用户界面在个人中...。
9月25日8时44分，中国人民束缚军火箭军向太平洋关系公海海域，完成发射1发携载训练模拟弹头的洲际弹道导弹，准确落入预定海域，此次导弹发射，是火箭军年度军事训练例行性布置，有效测验武器装备功能和部队训练水平，到达了预期目标，中方提早向无关国度作了通报，...。
翼龙，X无人机是一款远程、重载、独立遂行多义务的中空长航时无人机系统，这型无人机片面基于实战场景以及客户需求，驳回正向设计理念，是中空长航时无人机系统产品的，天花板，，处于国际先进水平，翼龙，X无人机现已常态化展开实验试飞上班，该机集远航程、重挂载、多用途等泛滥好处于一身，充沛承袭了翼龙系列无人机成熟技术和实战阅历，又翻新地融入了当今...。
女人梦见婴儿拉屎，预示着您近期会和家人进来同游，并且此次游玩让您愈加珍视家庭、享用和家人在一同的幸福感和满足感，梦见婴儿拉屎的相关梦幻解析，梦见婴儿拉屎，预示着您近期会意想事成，生存美满幸福，家庭和睦，事业增增日上，老人梦见婴儿拉屎，预示着您财运亨通，完事大吉大利，家人在意的的光阴比拟多，而且生存的很开心、幸福，中老年人梦见婴儿拉屎，...。
古文献对哥窑没有“金丝铁线”的记载_石华_新浪博客,石华,
每日瑜伽电脑版是一款专注于瑜伽导练的运动软件，该软件中包含了不同时长、不同等级的动态瑜伽课程，各种高清视频
ARESCommander是一款功能强大的CAD软件，适合日常工作和复杂项目，使用集成在应用程序中的ACIS®实体建模可以创建三维对象。
重庆分类目录网站将2011年10月共153个网站收录信息按收录时间分类整理归档列表，可以方便网友浏览按年月查询，更好地享受精彩网站的魅力！
火柴人系列游戏拥有简单的游戏画风，但是在游玩的时候能够让大家体验到愉快的游戏氛围，有那么多火柴人游戏，有没有一个火柴人拿枪射击的小游戏呢，其实只要在游戏中拾取道具就能够拿枪进行射击了，火柴人系列游戏的玩法颇多，拿枪自然也不再话下，接下来与小编往下看看都有哪些火柴人手游值得体验的吧，这是一款火柴人系列的动作游戏，玩家能够操控火柴人进行简...。
百度站长平台发布通知，百度站长工具不在支持sitemapXML文档格式索引，之前提交的需要站长们自行删除，Sitemap简单讲就是网站各页面列表的集合，站长可以自己编辑并提交Sitemap到百度搜索提升网站被百度蜘蛛的爬取率有助于百度蜘蛛发现并抓取网页信息提高网站收录，对于sitemap百度规定了三种形式包括XML，TXT和Sitem...。
生粉水，这个听起来似乎平凡无奇的名字背后，其实隐藏着一种在中国饮食文化中占据重要地位的食材，它不仅是一种烹饪辅料，更是连接传统与现代、健康与美味的桥梁，本文将带你走进生粉水的世界，揭开它的神秘面纱，生粉水，不只是淀粉生粉水，主要成分是玉米淀粉或其他植物性淀粉，但它的用途远远不止于此，在厨房里，生粉水被广泛用于勾芡，使得汤汁变得浓稠顺滑...。
随着人们对生活的关注度在不断地提升，更倾向于选择健康营养的食物，现熬的八宝粥在市场颇受欢迎，粥现已成为常吃的主食，口感软糯细滑，营养丰富，一日三餐都可以，具有很大的市场需求，出现有众多粥铺品牌，谷稻香八宝粥是一个专注于健康养生粥经营的连锁品牌，一直以来，坚持选用精良的原料加工制作，每天现熬现卖，得到市场的广泛认可，足迹现已覆盖到全国各...。
科技巨头自研芯片的阵营或新增一位成员——字节跳动，消息称，知情人士透露字节跳动正在自研云端AI芯片和Arm服务器芯片，雷锋网在字节跳动领英账号的职位信息中看到，一个已经停止接受求职申请的职位为芯片后端设计工程师，主要的工作职责是参与芯片的流片，量产，封测，质量管控等工作，结合知情人士的消息和招聘信息来看，字节跳动有很大的概率在进行芯片...。
