必读 AI专家们推荐的 Part 论文 2 (ai 专家)
译者：AI研习社（ 季一帆 ）
双语原文链接： ‘Must-Read’ AI Papers Suggested by Experts - Pt 2
我们之前写了一篇文章，向大家推荐了一些AI必读论文，引起很好的反响。现在，我们推出了第二篇文章。这次推荐的论文依然是分量十足、诚意满满，各位推荐者都认为自己推荐的论文是AI人员必读的经典之作，不知各位读者怎么看。现在，我们来看看这次入选的是哪些论文吧！
不过在这之前，我还是向您推荐 我们之前的那一篇文章 ，那篇文章也绝对值得一读。
推荐人：MILA博士研究员，Alexia Jolicoeur-Martineau
f-GAN: Training Generative Neural Samplers using Variational Divergence Minimization f-GAN: 使用变分散度最小化训练生成神经采样器
Alexia提出可以将若干分类器视为估计f散度，于是，GAN可以被解释为最小化估计和散度。在论文中，Microsoft Research的研究人员详细介绍了相关工作、论文方法和实验验证。 阅读原文 获取更多信息。
Sobolev GAN
本文将WGAN-GP中的梯度范数惩罚视为约束鉴别器，从而使其unit-ball具有梯度。论文的数学论证极其复杂，但我们只要记住，关键在于可以对鉴别器添加各种各样的约束。这些限制条件可以防止鉴别器过分严格。论文中的Table1非常重要，我曾数次翻阅该论文，只为查看Table1，该表显示了可用的各种不同约束。 阅读原文 获取更多信息。
推荐人：DeepMind高级研究员，Jane Wang
老实说，我并不会觉得有哪篇论文要比其他论文更重要，因为我认为所有论文都是相互依存的，而科学是协作的成果。但还是要说，就我个人而言，还是会更加偏爱一些论文的，从这些论文中我受益匪浅，但这并不是说其他论文不好。这只意味着，我个人比较喜欢以下两篇论文。
Where Do Rewards Come From?
本文提出了一种通用的奖励计算框架，在给定适应度函数和环境分布的情况下，该框架给出了最优奖励函数的概念。实验结果表明，在此最佳奖励函数中，传统的外在和内在行为概念均有体现。 阅读原文 了解更多信息。
推荐论文2： Building machines that learn and think like people （让机器向人类一样学习与思考）- Brenden Lake et al
本文回顾了认知科学的进展，表明要想实现真正像人类一样学习和思考的机器，需要当前研究的创新性改进。具体来说，我们认为这样的机器应具有以下能力：1）建立可解释的、可理解的世界因果模型，而不仅仅是解决模式识别问题；2）在物理学和心理学层面进行学习，以支持和丰富机器所学知识；3）利用相关性以及学会学习使机器快速获取知识，并扩展到新的任务和情况。 阅读原文 了解更多信息。
推荐人：WinterLight Labs机器学习负责人，Jekaterina Novikova
推荐论文1： Attention Is All You Need （“笨蛋”，根本问题是注意力）- Ashish Vaswani et al.
在NLP科学家于2017年提出" Attention is All You Need "之后，BERT或GPT-2 / 3等大型预训练语言模型如雨后春笋般出现。这些模型令人称奇的结果不仅引起了ML / NLP研究人员的强烈关注，在公众中也引起波澜。例如，2019年，OpenAI宣称GPT-2“太过危险而不能公开”，这说法简直让人抓狂，但事实是，GPT-2确实能够生成与真实新闻无法区分的假新闻。几周前发布的GPT-3甚至被称为“自比特币以来最大的新闻”。 阅读原文 了解更多信息。
推荐论文2： Climbing towards NLU: On Meaning, Form, and Understanding in the Age of>）- Emily M. Bender et al.
AI大热，但我希望向你泼点冷水，冷静下来好好看看2020年7月ACL会议的最佳主题论文-“迈向NLU：关于数据时代的意义，形式和理解”。作者认为，尽管现有模型（例如BERT或GPT）成果丰硕，但与人类相比，很难说它们是理解了语言及其含义。作者解释道，理解是人们在交流中，根据所说话语明白对话意图时发生的。这样，如果仅仅是语言文字，没有现实生活中的交互作用，则不可能学习和理解语言。换句话说，“从一定形式中是学习不到意义的”，这就是为什么即使巨大且复杂的语言模型也只是学习意义的“映射”，而不能了解意义本身。 阅读原文 了解更多信息。
推荐人：加拿大国家银行，AI科学首席顾问，Eric Charton
推荐论文1： The Computational Limits of Deep Learning （中的计算极限）- Johnson et al
麻省理工学院和IBM Watson Lab发表的这篇论文对DL出版文献进行汇总分析，介绍了DL模型训练计算量的增加与其性能表现间的相关性。同时论文指出，随着计算能力的提高，模型性能改善呈放缓趋势。 阅读原文 了解更多信息。
推荐论文2： Survey on deep learning with class imbalance（关于类别不平衡的DL综述）. Journal of Big>
该论文汇总介绍了不同DL是如何处理类别不平衡问题，该问题存在于信用建模、欺诈检测或医学检测/癌症检测等各种工业应用中。论文对不同方法进行比较分析，并着重介绍了各种方法处理类别不平衡数据的差异，为进一步的研究指明方向， 阅读原文 了解更多信息。
推荐人：NASA，机器学习主管，Anirudh Koul
也许几年后回头看，人们会发现2020年似乎是自我监督元年。自监督学习就是用非标注数据进行预训练，然后在有限标注的下游任务进行微调。仅在2020年6月之前，众多SOTA被先后打破，包括但不限于PIRL，SimCLR，InfoMin，MOCO，MOCOv2，BYOL，SwAV，SimCLRv2等众多自监督学习方法引起广泛关注。通过以下这个例子来感受一下这些方法究竟多么让人称奇吧。仅仅使用不带标签的ImageNet，然后用1％的标签进行微调，SimCLRv2模型就可以在ImageNet数据集上实现92.3％的Top-5准确性。很神奇吧，仅仅1％的标注就可以取得这样令人满意的结果。对于缺少标注数据的领域如医学、卫星等来说，自监督学习就是这些领域应用的福音。
推荐论文： A Simple Framework for Contrastive Learning of Visual Representations （一个简单的图像表示对比学习框架）- Ting Chen et al
优秀的论文不仅实验严密、结果出色，而且还能简介明了的向读者清晰的表达自己的关键思想。SimCLR就是如此，简洁明了，效果出色，这使其成为对比学习领域最值得阅读论文之一。研究表明，在特定数据集中，通过数据增强策略获得更好的图像表示，对于对比学习至关重要。希望更多研究者关注到SimCLR，在X射线、MRI、音频、卫星图等领域推动该方法进一步的研究与发展。
推荐人：摩根士丹利副总裁，NLP/ML研究员，Oana Frunza
Revealing the Dark Secrets of BERT （BERT探秘）- Olga Kovaleva et al.
BERT Transformer结构极大推进了机器对文本数据的表示和理解能力，对于NLP的研究发展具有革命性的意义，可以说这就是NLP的“ImageNet”。Transformer架构的关键在于自我注意机制，“BERT揭秘”一文便对注意力的背后原理进行了探讨。
更准确地说，这项研究量化了注意力头捕获的语言信息，包括句法和语义关系等。此外，论文还进一步研究了自我注意模式的多样性及其对各种任务的影响。
该论文的研究聚焦于深层次理解强大的transformer架构，不仅利于推动该领域的进一步发展，而且有利于研究人员做出更明智的决策。也就是说，如果知道某些精简的小型体系结构会产生相似的性能，这就意味着在架构设计和空间占用方面有了更好的选择。
阅读原文 了解更多信息。
推荐人：捷豹路虎，高级数据科学家，Tamanna Haque
推荐书籍： Deep Learning with R （R语言）- François Chollet et al.
本文从概念到实践对深度学习进行详细介绍，对于理解深度学习具有重要帮助。由于黑匣子性质，神经网络不仅训练成本高昂，而且不具可解释性。同时，最近数据保护法规的更改将推动可解释AI的研究，神经网络受到挑战。
尽管如此，在某些商业应用中，只有神经网络才能有效地完成工作，因此掌握神经网络技术依然至关重要。在我使用R语言进行一年左右的深度学习研究与实践中，本书是我的良师益友，指导我熟练地使用神经网络并完成图像识别项目。
推荐人：伯克利数据科学学院，首席ML科学家兼ML/AI负责人，Mike Tamir
推荐论文1： Right for the Wrong Reasons: Diagnosing Syntactic Heuristics in Natural Language Inference （错误的真正原因：自然语言推理中的启发式句法诊断）
我推荐的第一篇论文是MaCoy，Pavlick和Linzen的“错误的真正原因：自然语言推理中的启发式句法诊断”，论文表明transformer架构显著推动了自然语言推理等NLU任务的进步。在技术研究之外，“错误的真正原因”强调了基于当前数据集的系统缺陷，这在NLU任务中是致命漏洞。本论文将提醒AI从业者和研究人员保持清醒与理智。 阅读原文 了解更多信息。
推荐论文2： Emergence of Invariance and Disentanglement in Deep Representations （深度表示中的不变和解耦）
我推荐的第二篇论文是关于DL信息瓶颈分析的，也就是Achille和Soatto的研究成果“深度表示中的不变和解耦”， 阅读博客 了解详细信息。
推荐人：蒙特利尔AI伦理研究所，创始人，Abhishek Gupta
The State of AI Ethics Report
在蒙特利尔AI伦理研究所，我们一直在关注一些最具影响力的论文，这些论文不仅关注AI伦理的常见问题，而且基于经验科学并能指导实践。为此，我们将过去一个季度的工作整理成《 AI伦理道德报告，2020年6月 》，用于指导该领域的研究人员和从业人员在实践过程中遵守AI伦理责任。该报告的内容包括但不限于，NLP模型中对残疾人的社会偏见，YouTube反馈回路的潜在缺陷，AI治理，即在AI中实施道德规范的整体方法以及对抗性机器学习-行业观点。 阅读原文 了解更多信息。
AI系统与策略实验室，首席AI科学家，Jack Brzezinski
推荐论文：The Discipline of Machine Learning（机器学习学科建设）
~tom/pubs/MachineLearning.pdf
本文简要介绍了机器学习学科建设纲要，机器学习要解决的基本问题和与其他科学和社会的关系，以及进一步的发展方向。 阅读原文 了解更多信息。
AIRAmed，机器学习工程师，Diego Fioravanti
推荐论文： Overfitting （过拟合）
Diego认为AI人员要对“过拟合”有清晰完整的了解。本文涉及内容涵盖统计推断，回归等。 阅读原文 了解更多内容。
AI研习社是AI学术青年和AI开发者技术交流的在线社区。我们与高校、学术机构和产业界合作，通过提供学习、实战和求职服务，为AI学术青年和开发者的交流互助和职业发展打造一站式平台，致力成为中国最大的科技创新人才聚集地。
如果，你也是位热爱分享的AI爱好者。欢迎与译站一起，学习新知，分享成长。
版权文章，未经授权禁止转载。详情见 转载须知 。
本文地址： https://www.gpxz.com/article/c14280c2773c52db5a3a.html
北京市人民政府门户网站——首都之窗（www.beijing.gov.cn）是北京市政府的网上服务窗口，第一时间权威发布北京市政府重大决策部署和重要政策文件，提供政务服务，畅通公众与政府互动交流。
西西软件园是全新打造的个人上网安全,常用软件官方版,办公软件及编程开发等其它软件安全的下载站点,西西游戏网是集合大型单机游戏,模拟器游戏,游戏修改器下载,同时西西还是安卓游戏，安卓应用下载市场。
吉林省抗衰老学会,吉林省抗衰老学会,吉林省抗衰老学会
祛斑祛痘加盟品牌-香羞美肤专注解决祛痘、祛斑、祛痘印，青春痘、色斑、雀斑等皮肤问题的美容院祛痘全国连锁加盟。香羞美肤以高品质的祛斑祛痘产品、立竿见影的效果，颇受大众欢迎。咨询：18236951850。
财经走势网是一个专业的财经信息平台，提供实时行情、投资分析和市场动态。我们致力于为投资者提供准确、及时、全面的财经数据和资讯，涵盖股票市场、外汇市场、商品市场等多个领域。通过我们的网站，您可以获取到最新的财经新闻、行情走势和投资策略，帮助您做出明智的投资决策。立即访问财经走势网，了解更多有关财经走势的信息。
山东汇新供电设备租赁有限公司【电话:188-6610-5555】全国各地均有仓库~出租发电机,发电机租赁,柴油发电机租赁出租,大型发电机租赁,大型发电机出租等一系列优质发电机出租价格性价格适中,质量可靠,全国供应,欢迎来电咨询.
游技天地是游戏玩家的技能提升平台，提供专业的游戏攻略、技巧和游戏内战术。我们的团队由资深玩家组成，他们凭借丰富的游戏经验，为玩家提供实用的攻略和建议。
华勤技术股份有限公司创立于2005年，总部位于中国•上海，是全球智能硬件平台型企业。秉承改善人们沟通与生活的使命，为全球科技品牌客户提供产品级、系统级、软硬件研发、运营制造的端到端服务。产品、服务惠及全球100+国家和地区，每年为亿万消费者提供数以亿计的智能产品，包括智能手机、平板、电脑、智能穿戴、AIoT，数据中心产品，汽车电子等。
顺网科技是国内领先的互联网科技公司，多年来公司坚持以技术产品为核心，秉承“科技连接快乐”的企业使命，通过推进本地服务智能化、云服务Inside、元宇宙创新，迈向服务“50万家线下实体、5000万户家庭娱乐、5亿个人用户”的愿景。
页游网是最专业的网页游戏门户网站之一，内容涵盖最新的网页游戏资讯、免费的网页游戏资料、及时准确的网页游戏开服开测信息、丰富的网页游戏礼包活动、劲爆的3D页游收录等，并致力于成为为所有网页游戏用户提供一站式服务的开放平台。
下次一定是专门为白嫖怪开发的宝藏资源收集网站,为白嫖怪提供信息干货及资源,站长亲自整理收集,站内所有收集的资源都能免费下载,保证资源真实可靠,大家可放心使用。
游戏市场上适合小孩子玩的游戏特别多，因为小孩作为一个很大的游戏群体，他们同样有自己喜欢的游戏和爱好，今天小编就针对这些专门给大家分享一篇2023小孩最爱玩的游戏有哪些的文章，在很多的游戏里面精挑细选了几款特别适合小孩子玩的游戏，并且整个游戏的趣味性也很高，还能培养小孩子不同方向的能力，接下来就一起去看看这些游戏是有哪些吧，1、，割绳子...。
程序员有年薪十万和年薪百万之分，为什么会这样?因为程序员的水平高低不一样，今天小编就来带大家看看程序员的水平高低以及程序员的级别吧，0不入流程序员哥写的不是程序，是BUG，1初级程序员初级程序员的定义是可以独立完成项目，能独立完成项目，就需要懂好多东西了，从业务的角度来说，要懂很多业务逻辑，能够理解并且抽象成模型转换成代码，要会测试，...。
最近日本网友在各大论坛上都在讨论一张图片，名为，如果你看不懂这张图，那就说明你累了，，下面我们先看看这张图长什么样，看了半天也没看出来这黑黢黢的一堆小点点到底是什么东西，日本网友们则表示，如果你看不出来这张图是什么的话，那就说明你一定要休息了，如果你看到了下面四种情况的话，说明还有的救，大熊猫疲劳指数，★★★如果看到大熊猫的话说明你的...。
自拍似乎一直以来深受女性朋友的喜爱，不过传统的手机自拍，因场景不美丽，且拍照像素的问题，很多照片只能充当自我观赏之用，难以示人，网红自拍屋的出现却是解决这个问题，相机像素高，拍照后还会自动智能的美容，会拍出大片的质感，此外店内有丰富的场景，还有多种衣服可供选择，以此来彰显出消费者的气质魅力，拍出更加动人的照片，网红自拍屋也以此成为好的...。
中芯国际回应获美供应许可，尽最大努力保证生产扩产不受影响3月2日，针对媒体报道称，中芯国际的成熟工艺已获得部分美国设备厂商的供应许可，中芯国际在上证e互动上回复称，公司会尽最大努力，持续携手全球产业链伙伴，保证公司生产连续性及扩产规划不受影响，中芯国际强调，虽然不确定性依然存在，但公司始终坚持依法合规经营，有信心保证公司短期内生产经营...。
发表在综合交流大区2023，7，1714，31送女生的投影仪推荐什么呢，答案是轻薄小巧、画质出众的投影仪，这类型投影仪不仅方便携带和存放，同时出色的画质也保证了观影体验，那么具体推荐哪款投影仪呢，个人最为推荐的是当贝D5XPro，具体的特点如下，一、轻薄机身，携带方便对于当代女生来说基本都是在外租房，所以再选投影仪的时候轻薄款投影仪绝...。
发表在当贝投影仪2024，1，2915，04当贝X5Ultra是采用高端ALPD5.0超级全色激光技术的投影仪，拥有出色的亮度和色彩表现，更是提供4K超清分辨率，还可以自定义画面色彩参数，具体当贝X5Ultra怎么设置色彩呢，下面就为大家详细分享当贝X5Ultra色彩设置图文教程，看看该如何操作，当贝X5Ultra怎么设置色彩，1.打...。
沈阳市第二十一中学升学率是非常不错的，1997年晋升为市级重点中学，2016年21中已经升省重点了，学校现已发展成为一所规模较大的现代化完全中学，1997年步入市级重点高中行列，现占地约2.5万平方米，建筑面积约1.3万平方米，现有两座教学楼，一座实验楼，一座功能完备的多功能厅，还有一座设施齐全的体育馆正在筹建当中，学校现有三个年级，...。
上海市七宝二中发生了一起严重的校园暴力事件，这起事件发生在上海市七宝二中的校园内，据报道，一名学生在校园内遭受了多名同学的暴力袭击，这起事件引起了广泛的关注和谴责，人们纷纷呼吁加强对校园暴力事件的预防和打击，在这起事件中，受害者是一名中学生，他在校园内遭到了多名同学的围攻和殴打，据报道，这些施暴者使用了棍棒、拳脚等暴力手段，导致受害者...。
品牌名称芋观园投资金额万2013，08，08门店总数经营范围甜品适合人群自由创业加盟区域全国是否有区域授权否品牌发源地广州合同期限3年培训期限1，6个月特许使用费3000元营业条件要求保证金1.1万元人民币加盟费1万元人民币芋观园加盟详情芋观园是一个来自于台湾的经典美食，它对不起眼的芋头进行了重新定义，谱写着独特的芋观美食，它倡导，健...。
永远不要停止学习停止学习你就废了工作后悟出的职场道理永远不要让自己变成一个油条对保持敬畏和热情永远不能用消遣和游戏的态度对待你赖以安身立本的工作让自己时刻保持有利用价值你存在的理由就是被利用公司用你用得开心才证明你的价值学会及时总结持续改进自己的工作持续和改进你会发现工作不是日复一日的枯燥而是日新月异的创造学会争取公司...
斗鱼TV直播伴侣,斗鱼直播伴侣是斗鱼TV官方发布的斗鱼直播辅助软件，斗鱼TV直播伴侣不仅支持直播功能，还提供了直播视频录制功能，同时方便主播在直播的时候考到观众的弹幕评论，是斗鱼主播的得力助手,您可以免费下载。
大家是不是都很讨厌玩游戏玩着突然要看广告，这就很令人难受了，各种游戏各种软件时不时来个广告，让许多的人都丧失了兴趣，那么小编现在就来盘点一下2022有哪些真正免广告游戏大全，让大家都可以很方便的玩游戏，再也不用看广告了，1、，一梦江湖，一梦江湖，这款游戏是玩法非常自由的一款武侠游戏，玩家在里面可以体验到各种武侠动作，比如有轻功和各种...。
#剑指诈骗#近日，小李在网上结识了一名网友，没聊几句就通过对方介绍的交友APP与对方进行了裸聊，不料对方突然变脸，声称已通过木马病毒掌握了小李的聊天视频和通讯录好友，欲讹诈5000元，幸好@警民直通车，长宁分局蜀黍及时预警拦截，先骗子一步找到了小李蜀黍提醒，网上交友要谨慎！警民直通车，长宁的微博视频...。
随着越来越多的公司在运营中投入AI能力，他们意识到消除不公平偏见和生产合乎道德的AI并不是一项简单的任务，‘偏见，一词值得深入研究，例如，由于人、实践、系统等存在现实世界的偏见，复刻性的收集数据可能会复制现实世界的偏见，因此消除偏见的概念不是一个简单的问题，这个话题需要每个公司内部就什么是公平和不公平、什么是透明和可解释的以及什么需...。
雷锋网消息，7月3日，中国计算机学会，CCF，和杭州萧山区人民政府共同举办2018中国计算机大会，CNCC2018，新闻发布会，向各界介绍CNCC2018的筹备情况，据本届CNCC大会主席梅宏院士介绍，2018中国计算机大会，CNCC2018，将于10月25，27日在杭州国际博览中心，G20会场，举办，会议由中国计算机学会，CCF，主...。
11月30日，在2022腾讯全球数字生态大会智慧建筑与不动产专场上，腾讯云重磅推出三大智慧建筑与不动产行业解决方案，聚焦建筑建造、地产物业、城市与片区更新等三大地产子行业，为其提供数字化转型助力，同时，腾讯云还面向行业合作伙伴发布了，十亿计划，，与伙伴共建开放繁荣的建筑与不动产行业生态圈，腾讯云副总裁、智慧建筑与不动产行业负责人顾伟在...。
