的逼真效果更进一步 ML AR 谷歌 通过引入 实时自拍 ARCore
雷锋网 AI 科技评论按：ARCore 是谷歌于去年 2 月份正式推出的 增强现实（AR）软件开发工具包，给开发者提供了一个开发 AR APP 的平台。不到一个月前，谷歌正式推出 ARCore 1.7 版本，为其添加了前置摄像头 AR 自拍能力以及动画效果支持；而日前，谷歌又为其引入了机器学习技术，使其实时自拍 AR 的逼真效果更进一步，该技术相关的文章发布在谷歌 AI 的官方博客上，雷锋网 AI 科技评论编译如下。
通过将数字内容与信息叠加到物质世界的真实场景中，来让人类实现超越现实的感官体验。例如， 谷歌地图的 AR 功能 ，能够在现实场景中叠加方向信息来为你指路。借助于 Pixel 相机中的 Playground 模式 ，你可以使用 AR 从不同的视角看世界。并且通过借助于最新发布的 「YouTube Stories」 以及 ARCore 全新的面部增强（Augmented Faces）API ，你可以在自拍上添加动画面具、眼镜、帽子、皮肤等特效。
实现这种 AR 功能的关键挑战之一，就是以合适的方式将虚拟内容锚定到现实世界：这一过程需要一套能够追踪到每一次微笑、皱眉或假笑的高动态表面几何结构的独特的感知技术。
ARCore 的3D 网格以及它能实现的一些特效
为此，我们引入了机器学习（ML）技术来推断近似的 3D 表面几何结构，并且仅需要用到一个单摄像头输入而无需使用专用的深度传感器。这种方法利用面向移动 CPU 界面推断或其可用的全新移动 GPU 功能的 TensorFlow Lite ，实现了逼真的实时 AR 效果。与「 YouTube Stories」 全新的创作者特效所利用的技术一样，这项技术已通过 最新的 ARCore SDK 和 ML Kit Face Contour Detection API 向广泛的开发者社区开放。
用于自拍 AR 的机器学习工作流
我们的机器学习工作流由两个协同工作的实时深度神经网络模型组成：一个是探测器，它在整张图像上运行并计算出面部位置；另一个是通用的 3D 网格模型，它在探测器计算出来的面部位置上运行，并通过回归预测近似的表面几何结构。精确地裁剪面部能够极大地减少对一般的数据增强的要求，例如由旋转、平移和比例变换组成的仿射变换（affine transFormations）等，同时让网络将大部分性能投入于预测坐标来提高其准确性——这对于锚定合适的虚拟内容至关重要。
裁剪完所关注的位置后，该网格网络一次仅应用于一个单帧，并利用加窗平滑（windowed smoothing）来减少面部处于静态时的噪音，同时避免在大幅移动期间出现的延迟。
针对 3D 网格，我们采用了 迁移学习 ，并训练了一个具有多个目标的网络：该网络能够同时地基于合成、渲染的数据预测 3D 网格坐标以及基于类似于所提供的带有注释的、现实世界的数据预测 2D 语义轮廓。最终的网络为我们提供了基于合成数据乃至现实世界数据的合理的 3D 网格预测。所有模型都在源自于地理学多样化的数据集的数据上进行训练，并接着在平衡、多样化的测试集上进行定性和定量性能的测试。
3D 网格网络接收经裁剪的视频帧作为输入。由于它不依赖于额外的深度输入，因而也可以应用于预先录制的视频。该模型不仅输出 3D 点的位置，还输出在输入中存在并合理对齐的面部概率。一种常见的替代方法就是为每个地标预测出 2D 热图，但这种方法并不适用于深度预测，并且对于如此多的数据点来说，使用这种方法耗费的计算成本非常高。
通过迭代自展和精炼预测，我们进一步提高了模型的准确性和鲁棒性，同时也将数据集发展成为愈加具有挑战性的实例，如鬼脸，拍摄角度倾斜以及面部遮挡等。此外，数据集增强技术也扩展了可用的 ground truth 数据，并开发出了对摄像头瑕疵等人工产品问题或极端光照条件具有弹力的模型。
数据集扩展和改善路径
我们使用 TensorFlow Lite 进行设备内置的神经网络推理。 新推出的 GPU 后端 加速能够有效提升性能，并显著降低功耗。此外，我们还设计了具有不同性能和效率特性的一系列模型架构，来覆盖到更加广泛的消费级硬件。较简单网络之间的最重要的区别就在于残差块（Residual Block）设计和可接受的输入分辨率（最简单模型中的输入分辨率为 128×128 像素，而最复杂模型中的输入分辨率为 256×256）。同时，我们还改变了层数以及子采样率（输入分辨率随网络深度的减少而减少的速度）。
这一系列的优化的结果就是：使用更简单的模型带来了实质性的加速，同时也将 AR 特效质量的降低幅度最小化。
最复杂模型（左）和最简单模型（右）的比较：在简单模型上，时序一致性以及对嘴唇、眼睛的追踪稍微降低。
这些成果最终则能够通过以下方式，让用户在 YouTube、ARCore 以及其他客户端体验到更加逼真的自拍 AR 效果：
另外，我们还通过以下方式实现了逼真的妆容效果：
案例对比：5 个目标在不同光线下的真实化妆效果以及 AR 化妆效果
我们很高兴将这项新技术分享给创作者、用户以及开发者。感兴趣的读者可以通过下载最新的 ARCore SDK （下载地址：）来将这项技术用起来。未来，我们还计划将这项技术广泛应用到更多的谷歌产品线中。
via：
原创文章，未经授权禁止转载。详情见 转载须知 。
神算命占卜网，大师真人在线算命，真人预测，免费算命，算命大师，算命街，算卦街，真人在线一对一算命，批八字，算卦、占卜、风水，星座，生肖，起名，面相手相，在线预测，网上算命，周易，五行，奇门遁甲，易经命理，算命一条街。
小鹅通开通热线：4000371003、小鹅通客服，小鹅通服务商：13316880029，专注于在线教育直播课堂一站式服务；提供小鹅通店铺开店指导、店铺装修、线上运营、招生引流等服务，为您打造独立专属在线直播课程。小鹅通官网，小鹅通客服，小鹅通客服电话，小鹅通开通，小鹅通开通咨询，小鹅通价格咨询，小鹅通怎么开通，小鹅通开通费用，河南小鹅通，深圳小鹅通，小鹅通官方咨询，郑州小鹅通，广州小鹅通。
【象美传媒】深圳宣传片制作,拍摄产品广告片,海外众筹视频拍摄,企业短剧拍摄公司,深圳宣传片制作影视团队,企业宣传片拍摄/产品TVC广告宣传片,产品短视频拍摄制作筹划执行
指标100网是一个全新的,通达信公式指标分享平台，支持会员购买，免费下载,通达信公式指标自助下载，通达信副图指标下载，通达信选股公式下载，通达信竞价指标公式源码下载。
河南鑫恒岩重工科技有限公司是主要生产砂浆设备生产线的厂家，公司以生产干粉砂浆设备,干混砂浆设备，砂浆设备，干混砂浆搅拌站,干粉砂浆生产线，干混砂浆生等为主，集研发、生产、销售为一体的企业。
![[在云南]](http://www.gpxz.com/zdmsl_image/jietu/jt_14094.png "[在云南]")
顺风车|求职招聘|房屋租售|二手车|生意转让|本地头条|同城吃喝玩乐-[在云南]-云南全方位的便民信息服务平台-昆明大观网
深圳轻喜到家中国家庭数字化生活服务平台,轻喜到家提供日常保洁、高端保洁、保姆、母婴护理、育婴早教、产康护理、家电清洗、家居养护等专业的到家服务。
百客酒店用品
亳州市海川蛋制品有限公司2001年1月成立，专注鸡蛋制品研发生产。总投资5000余万元，专业生产多种蛋粉产品，年产3000余吨。如鸡蛋黄粉、全粉等。是从事蛋制品的专业企业。
云茶之邦创立于2005年，以“勤劳认真出好茶”的理念，主做临沧市三座大雪山原生态古树普洱茶，多年沉淀至今已建成集加工、生产、销售、仓储、茶文化传播、茶文旅为一体的普洱茶完整产业链企业。
携车网是上海车水马龙信息技术股份有限公司旗下网站。上海车水马龙信息技术股份有限公司成立于2011年,是国内最早进入汽车后市场的O2O网站,致力于为车主提供省钱、省事、透明的高品质汽车维修保养服务。
氢能领跑者行动
烤肉是现在年轻人出门吃饭时都会选择的美食，美味的口感与高营养价值令人百吃不厌，餐饮行业的快速发展，各种烤肉品牌出现在市场上，在为食客带去更多饮食选择的同时，也为一些创业者提供平台，梁山烤肉致力于为消费者带去特色炭火烤肉美食，亲民化消费价格，热情周到服务，赢得了顾客的赞美，那么梁山烤肉有多少分店，运营好吗，梁山烤肉是一家在国内外享有盛誉...。
3月7日，疑似一加Ace3V的真机谍照出炉、新机拿到入网备案、闲聊站也在同日放出了线稿，它应该会是首发新神U骁龙7，Gen3的机器，这红绿灯相机排列，又像小米9，又像魅族16s，又像下面会提到的iPhone16系列，但讲真，不如前代靓仔↓一加Ace3V现有爆料，机型名PJF110，首发骁龙7，Gen3，SM7675，1.5K屏，没用...。
发表在当贝投影仪2022，5，2009，50，当贝什么时候发布4K投影仪，当贝4K激光投影仪啥时候发布，这是我今年来，在论坛里看到提问次数较多的问题之一，特别是在海外版当贝MarsPro发布之后，如今，激光光源，4K分辨率的中长焦投影仪—当贝X3Pro，它来了，当贝X3Pro是一款采用ALPD激光荧光光源，配备0.47UHDDMD显...。
服装，泛指衣服鞋包玩具饰品等的总称，多指衣服，服装在人类社会发展的早期就已出现，古代人把身边能找到的各种材料做成粗陋的，衣服，用以护身，人类初的衣服是用兽皮制成的，包裹身体的早，织物，用麻类纤维和草制成，服装代理是指服装出口商与国外的服装代理商达成协议，由服装出口商作为委托人，授权服装代理人代表出口商推销服装产品、签订合同，由此而产生...。
天生丽质是许多女性梦寐以求的肌肤状态，但事实上，除了少部分人，大多数人在日常生活中肌肤都会出现各种问题，或是不够白皙，或是常有过敏状况等等，面对种种肌肤问题，当然是要寻求专业的解决办法，在这方面，wis护肤品的专业性值得信赖，wis护肤品怎么样，快随小编的笔尖一起看看这一品牌的实力吧，关于wis护肤品wis护肤品其实并不只是一个单纯的...。
全包13万的预算，说多不多，说少也不算少，在具体车型选择上看你更倾向于哪一方便，如果更在意品牌和口碑，可以考虑低配的合资车型，若是看重实用性和科技配置，那么不妨看看国产自主品牌，很多小伙伴一提到国产车可能就要摇头了，说实话，近几年国产车的表现还真是不可同日而语，设计越来越国际化，销量和口碑也均十分优异，对于预算不多的消费者而言，或许是...。
申明，1.以上内容仅代表揭发者自己，不代表黑猫揭发立场，2.未经授权，本平台案例制止任何转载，违者将被清查法律责任，3.黑猫揭发处置揭发不收取任何费用，凡以黑猫揭发名义不要钱的均为混充、诈骗行为，请及时报警并与黑猫官网反应，揭发邮箱heimaotousu@vip.sina.com，4.请大家选用官网渠道处置生产纠纷，不要轻信第三方机构...。
申明，1.以上内容仅代表揭发者自己，不代表黑猫揭发立场，2.未经授权，本平台案例制止任何转载，违者将被清查法律责任，3.黑猫揭发处置揭发不收取任何费用，凡以黑猫揭发名义不要钱的均为混充、诈骗行为，请及时报警并与黑猫官网反应，揭发邮箱heimaotousu@vip.sina.com，4.请大家选用官网渠道处置生产纠纷，不要轻信第三方机构...。
华晨宝马5系和出口5系各有各的好处，1、出口宝马5系的优势在于其静止性能出色，操控感强，因为其倾向于静止型设计，因此在驾驶时能更好地感遭到车辆的灵活照应和操控性，此外，出口宝马5系在外观上也更具静止感，愈加时兴，2、华晨宝马5系的优势在于其温馨性和空间，华晨宝马5系的轴距长，后排空间大，可以提供更好的乘坐体验，此外，华晨宝马5系在内饰...。
Java中如何设计一个简单的学生选课人数统计系统？在现代教育系统中，学生选课是一个重要的环节。为了更好地管理和统计学生选课情况，开发一个简单实用的学生选课人数统计系统是非常必要的。在这篇文章中，将介绍如何使用Java语言设计一个简单的学生选课人数统计系统。该系统具有以下几个主要功能：1.学生信息管理：包括学生的基本信息，如学号、姓名、性别、年龄等。2.课程信
一、老虎地图安卓版老虎地图是一款非常受欢迎的安卓手机游戏，它可以让玩家快速查看地图信息，让玩家更加轻松地进行游戏。老虎地图安卓版是一款非常有趣的安卓游戏，它可以让玩家
皇冠速成秘笈教程,该皇冠速成秘笈教程为五段视频教程，前三段淘宝皇冠速成教程时长为6分半钟，后两端为总结，时长较短。教程精确分析了淘宝买家购物时的实际需求，并总结卖家如何根据需求来为淘宝店铺进行优化设置,您可以免费下载。
这是一个最好的时代，人人都能通过互联网副业挣到钱，只要你是正常人，脑子正常的那种，我有一个西安的残疾人学员，没有进过学校一天，但通过网络项目，去年成功创业开公司，还获得政府高新技术补贴，简直是现实版的张海迪，后面我也会和大家分享这个案例，所以，以后来的同学，别一上来就和我说什么也不会啊，没有技能啊，如果你真的觉得没有，然后把你的履历告...。
2016年9月，美团完成一项收购案，对象是钱袋宝，价格在几亿美金，借此，王兴曲线获得第三方支付全牌照，美团支付呼之欲出，彼时美团不断突破边界，与阿里对峙，再造一个新的支付工具挑战支付宝，不是没有可能，但这也会对美团的重要股东腾讯旗下的微信支付构成威胁，收购案被公布一个月，美团支付没什么动静，两个月过去，一切依旧，三个月后，这家公司终于...。
2020年是，新基建，元年，从国家层面的支持，到各个领域的企业纷纷投入建设，以5G、物联网、云计算、工业互联网、区块链等为代表的新一轮技术革命的浪潮正朝着这个时代奔涌而来，AI巨掣们在经过了疫情的洗礼后愈发坚定，义无反顾投入到了，新基建，的建设中，，新基建，为AI产业化落地注入了新能量，作为全行业最先专注AI赛道的科技媒体，雷锋网重磅...。
日前，国外一位网友kroopthesnoop在Reddit上称自己收到的iPhone7Plus是爆炸了的，新浪的驻美记者第一时间对此新闻进行了报导，据称，这部iPhone是在用户收到的时候就爆炸了，并未开机使用神马的，表示这应该是在运输的途中受到了外力的冲击，导致手机内部的锂离子电池发生燃爆，强调了这与苹果的手机质量并无关联，近期的手...。
当AI赛道来到下半场，如何真正借助大模型引领各行各业发展创新，成为头部互联网企业的必争之地，放眼全球，企业对大模型的需求日益增加，这不仅因为其强大的数据处理和分析能力，更因为其在实际应用中的出色表现，大模型通过预训练大量数据，提升了模型对内容的理解力和生成力，面向行业，无论是在市场营销、办公提效，还是客户服务等方面，如何将更好的将大模...。
