详解全新大数据分析 英特尔戴金权 Zoo AI平台Analytics (大数据新概念陷阱)
雷锋网按：2018 全球人工智能与机器人峰会（CCF-GAIR）在深圳召开，峰会由中国计算机学会（CCF）主办，雷锋网、香港中文大学（深圳）承办，得到了深圳市宝安区政府的大力指导，是国内人工智能和机器人学术界、工业界及投资界三大领域的顶级交流盛会，旨在打造国内人工智能领域最具实力的跨界交流合作平台。
在大会第一天的“AI前沿”主会场，英特尔高级首席工程师、大数据技术全球CTO戴金权带来了题为“大数据分析+人工智能”的演讲。
戴金权负责领导英特尔全球（位于硅谷和上海）的工程团队在高级大数据分析（包括分布式机器学习和深度学习）上的研发工作，他带领团队一手研发了基于Apache Spark 框架的分布式深度学习库 BigDL，在这次演讲中，他还着重介绍了一个新产品：Analytics Zoo。会后，雷锋网就BigDL和Analytics Zoo对戴金权进行了专访。
英特尔AI软件工具图谱
近一年来，英特尔反复提到的“人工智能全栈解决方案”是其人工智能战略布局的最好诠释。
戴金权介绍到，英特尔一直致力于提供一个完整的端到端的全栈人工智能解决方案，从终端设备端到网络，再到数据中心的云端。
这一套解决方案的底层技术包括了至强可扩展处理器、NNP芯片、FPGA、网络以及存储技术，其上则是各种数据库、人工智能平台和具体的体验。
此次，戴金权更为详细地解释了英特尔的人工智能软件层。
在基础层，有英特尔针对机器学习优化的英特尔发行版Python、优化的DAAL的发行版、MKL-DNN和clDNN神经网络函数的优化库、开源的nGraph编译器等；在库这一层，有机器学习库的优化、TensorFlow/MXNet/Caffe/BigDL等的优化，再到工具包这一层，有开源视觉推断和神经网络优化工具包OpenVINO、VPU上的优化推断开发的英特尔Movidius SDK、CPU上的认知解决方案英特尔Saffron AI。这些端到端的解决方案可以帮助开发者更快速地开发AI应用。
戴金权一直致力于大数据分析，开发出基于Spark的分布式深度学习框架BigDL和Analytics Zoo，让更多的大数据用户、数据工程师、数据科学家、数据分析师能够更好地在大数据的平台上使用人工智能技术。
BigDL是将英特尔大数据平台与人工智能结合的产物，为什么要做这样的结合呢？
戴金权介绍了三个趋势。
第一个趋势，今天深度学习的发展很大程度上是由于数据规模来推动的。由下图可见，随着横坐标数据规模的增长，纵坐标显示的神经网络模型就越有效，越准确。任何深度学习的系统、框架、应用都要能够处理大规模的数据。
第二个趋势是业界大数据的发展，不管是互联网公司还是传统企业，大家都以Apache Hadoop建立起数据平台，这个平台聚集大家处理过的和未处理的数据，从而你能够将各种数据的处理、分析和应用，应用到这个平台上。从这个意义上说，任何数据处理和分析的框架、应用，包括深度学习的应用，都要能够非常好地和Apache Hadoop为标准的数据平台交互。
第三个趋势，深度学习的模型只是整个流程的一部分，要构建和应用深度学习模型，还有数据的导入、数据清洗、特征提取、对整个集群的资源的管理和各个应用之间对这个资源的共享等，这些工作事实上占据了机器学习或者深度学习这样一个工业级应用开发的大部分的时间和资源。所以，数据处理、机器学习，以及算法必须很好地和现有的大数据处理的工作流整合在一起。
戴金权深刻感觉到，在大数据处理工作和深度学习模型算法之间有很大的断层。深度学习顶尖研究人员不断在突破模型，但是数据科学家、分析师、普通用户却很难将模型应用到现实的生产环境当中去。深度学习处理的一大瓶颈就是数据，特别是生产数据，都是采用分布式存储，很难将其拷贝到另一个环境再来进行处理。
在戴金权看来，Apache Spark是业界最广泛应用的分布式集群计算引擎，它里面有大量的对数据分析处理的组件，比如说SQL的处理、实时流的处理，还有进行图分析的库。
基于Spark推出的BigDL是Spark上标准的库、标准的组件，能够和这些大数据、生态系统里面的不同的分析、处理的组件非常好地整合在一起。BigDL与目前主流的深度学习框架Caffe、Torch、TensorFlow所能实现的功能相同。虽然市面上已经有主流的深度学习框架，英特尔推出BigDL则是因为看到了将大数据分析与人工智能结合起来的一个空白点。BigDL可以直接在现有的Hadoop和Spark的集群上运行，不需要对集群做任何修改。
戴金权告诉雷锋网：“我们看到有另外一个很重要的应用场景，没有被这些现有的框架所覆盖到，我们有大量spark用户，从2007年开始开源开发，十年间已经成为了业内数据存储处理分析的标准，大家都已经建立了大数据集群，上面有大量的数据，集群可能几千台，互联网公司可能几万台这样的规模。
为了深度学习和人工智能应用，难道是要把这套大数据集群完全抛弃，再另外建一套新的系统吗？我觉得其实并不是一个最合理的路径，从某种意义上来说，应该在你现有的大数据的平台，大数据的集群上面，能够将新的深度学习、人工智能的技术，能够加进来。”
Analytics Zoo
自2017年1月英特尔开源BigDL起，已经有广泛的合作案例。在去年年中，戴金权的团队在Apache Spark和BigDL的基础上又构建了Analytics Zoo大数据分析和人工智能的平台。
差不多是在BigDL开源半年后，戴金权开始着手Analytics Zoo的构建。他谈到，在跟很多客户合作BigDL时，他感到，BigDL、Tensorflow这些框架里最终的AI应用还是有很长的距离。
应用开发本身是非常复杂的工作流水线，戴金权思考如何才能提供像Spark上的Streaming这样很方便地对特征进行处理的流水线，提供内置的模型、特征工程操作、迁移学习的流水线的支持。Analytics Zoo正是这样一个更高级别的数据分析+AI平台，能够利用Spark的各种流水线、内置模型、特征操作等，方便用户构建深度学习端到端应用。
某种意义上它是Spark和BigDL的扩充，它的目的是方便用户开发基于大数据端到端学习的应用，除了内置的模型、内置的一些非常简单的操作之外，它里面还提供了大量的高级的流水线的支持，能够使用Spark>
第一个例子是英特尔与京东展开的合作。京东有大概几亿张的图片存储在分布式存储系统当中，他们想要把这几亿张图片从大数据系统里面读出来，然后对它进行处理。在这个案例中，用了SSD的模型来试图识别图片里面有什么物品，探后再用DeepBit的模型，将物品的特征提取出来。原来京东已经在GPU卡上做了一些应用，但是这里面有一些问题，包括如何处理端到端数据的流水线，包括如何提高端到端处理的效率。戴金权介绍到，“当我们把整个处理的应用迁移到Spark和BigDL平台上，可以看到它提升了很多的运维的效率，使用BigDL/Spark在Intel Xeon（英特尔至强可扩展处理器）集群有效扩展，取得相对于GPU集群3.8倍性能提升。”
AI的三个核心点在大数据、算法、算力，现在很多人认为要有足够的AI算力，非GPU不可。京东的这个案例体现了BigDL与英特尔至强可扩展处理器配合，对整体深度学习表现的提升。戴金权告诉雷锋网，京东这个案例一开始是建立在多个GPU之上的，他们的团队在Caffe上训练，在开发、部署、性能方面都碰到问题。英特尔将京东方面迁移到Spark上面，跑在1200个逻辑的核，一台服务器支持50个逻辑，大致用了24台服务器,利用Spark这样的端到端流水线处理，与之前用GPU的方案相比可以达到差不多3.8倍的性能提升。
第二个案例是英特尔和MLSListings合作的案例，他们是加州的不动产交易商，他们可以识别用户浏览的房屋图片，为用户推荐相似的房屋。这套系统构建在Microsoft Azure上。
第三个案例是和世界银行在AWS上合作。世界银行通过志愿者上传的世界各地的食物图片，帮助大家来分析在世界各地的物价水平。其中如何通过大数据处理对图片进行清洗、处理，再用迁移学习来构建图片分类模型是值得关注的问题。
第四个案例是与UCSF的合作，通过3D的模型对医疗图象进行分类，首先对3D的MRI照片进行识别，然后对它进行分类，可以试图诊断膝盖上面的一些病症。
第五个案例是们和Cray公司（美国做超级电脑的公司）合作。合作内容是做近期的降水云图的预测，通过Seq2Seq的模型，把过去一小时的卫星云图做了一个序列，输入到模型里面，能帮预测下一个小时每10分钟这个卫星云图的变化，通过这个来进行一些降水的分析。
第六个案例是和GigaSpaces合作的通过基于自然语言处理对呼叫中心进行管理。当有用户打电话进来，把其语音转成文本以后，导入到BigDL系统里面，然后对它进行实时的流式处理，使用BigDL上的文本分类模型可以知道用户打电话进来是为什么，他是Windows出了问题还是Mac出了问题，自动就会把呼叫中心的电话录入到不同的部门。
最后，戴金权总结到，英特尔致力于端到端全栈人工智能解决方案。BigDL和Anaylitics Zoo致力于架起大数据和人工智能之间的桥梁，当用户已有基于Apache的大数据集群，就可以很方便地进行大数据分析和上人工智能应用，不仅能够有更高的资源利用率，还可以提升端到端的开发效率，以及提升部署效率。
英特尔AI事业部三位负责人讲解：AI技术如何落地应用
发布新一代NNP芯片外，英特尔AI软件和应用更透露其AI野心
原创文章，未经授权禁止转载。详情见 转载须知 。
本文地址： https://www.gpxz.com/article/25b8edcf9d7ebc2a468f.html
通过该工具可以多个地点Ping服务器以检测服务器响应速度。
提供课件,免费课件,试题,教案下载
上海鎏铖科技有限公司主要从事防火门,金属门框,矿物门芯,防火纤维水泥板,膨胀密封条,阻燃防潮密度板等产品销售,帮助了众多客户通过了国内国际防火测试.产品质量优异,防火性能好,价格合理,产品型号规格全,厂家直发,欢迎来电详谈18616658007.
中国消费网是中国消费领域最大的综合服务性网站，同时也是中国最大的在线投诉受理平台。
LOL网址导航网是专业的上网导航网站,精心收录各类优质热门网站信息,同时提供天气、快递、违章等各种生活便民查询工具网址,为您提供安全便捷的上网导航服务,现已被众多网友设为上网主页,网址导航大全首选LOL网址导航.
LOL网址导航网是专业的上网导航网站,精心收录各类优质热门网站信息,同时提供天气、快递、违章等各种生活便民查询工具网址,为您提供安全便捷的上网导航服务,现已被众多网友设为上网主页,网址导航大全首选LOL网址导航.
六盘水人才招聘网是六盘水在线求职招聘平台，提供人才求职，企业招聘，名企及国企招聘公告发布平台。致力于打造具有影响力的六盘水人才网和六盘水人才市场,六盘水招聘找工作，就上六盘水人才网！
企业邮箱特价买三年送三年，买5年送5年，注册申请电话4000-789-168，现在申请购买网易企业邮箱还有更多精美礼品赠送、 网易企业邮箱购买另享5折优惠、iPhone、iPad、购物卡拿到手软，赶快找我们领取您的专属优惠吧，还可免费试用哦，不满意不付款 号外：如果目前使用的企业邮箱不好用，需要升级企业邮箱，都可以找我们更换网易企业邮箱，原邮箱的数据我们可以免费迁移
峨眉电影集团为国家七大电影集团之一、西南地区最大的影视产业集团，于2003年经国家广播电影电视总局批准组建，是按照四川省委、省政府关于整合四川电影制片、发行、放映、播出资源要求，以峨眉电影制片厂、四川省电影公司、峨眉电影频道等国有资产为纽带，以影视产品的制作、生产、发行、放映、播出业务为依托组建的产业链条完整的电影集团。
上海华渑进出口有限公司是一家集特种光源的出口和经销进口UV光源国内销售的综合企业，美国和欧洲UV灯管的一级经销商，凭借其与美国UV灯管制造商的多年合作关系，以其优良产品性能和价格优势，公司致力于为中国电路板制造和印刷企业提供高质量、高安全的UV灯管，同时公司也携手中国光伏制造企业为中国新型能源的发展提供完善的配套产品。专业进口UV灯供应商紫外灯，紫外固化灯，水处理UV灯，印刷UV灯供应
唐山海森电子股份有限公司主要从事水田智能灌溉控制系统的设计、水资源远程测控管理系统、农田水肥墒药一体化自动化灌溉控制系统、农田机井灌溉控制器、智能大棚自动控制系统的研发、生产、销售、管护，公司从成立之初就确定了“创新引领、客户体验为王”的行业服务理念，全力打造成为农业投建管服一站式服务商，是中国水交所8个创始会员之一，合同节水联盟副理事长单位，水利部华北6省农业水价综合改革定点观摩培训示范基地。
安平县宏达拔丝设备厂建于1995年，座落于**丝网生产基地，**丝网之乡“安平”，交通十分便利。我们是一家拥有机械设备，雄厚的技术力量，是从事冷轧带肋钢筋设备,冷轧带肋钢筋生产线机械设计与制造的**厂家。
现在很多人都在听歌，以致于很多人萌生了做音乐的想法，制作音乐有的时候也并不是难事，很多人还不知道2022可以制作音乐的软件有哪些，接下来小编就为大家带来好用的制作音乐的软件推荐，接下来的APP推荐，小编为大家汇总的这种类型的APP，绝对是此款APP当中的佳作，如果大家遇到自己感兴趣的，点击下方链接即可下载，1、，音乐制作工坊，这款AP...。
广州云在指尖电子商务有限公司开办的，云在指尖，网上商城在销售商品后给上线会员返佣，其返佣规则具有明显的，层级关系，、，入门费，、，团队计酬，等特征，涉嫌传销，会员级别的晋升途径，一是增加累积消费金额，二是增加直接和间接发展的，指尖管家，数量，会员分为五种，各级别会员的具体要求如下，指尖管家，必须累积消费达到128元，分销商，必...。
菜大全，的模式是菜场代运营，也就是整合一个菜市场中各家摊贩们的菜品，做品控、打包，再以独立品牌的形象入驻到外卖平台上，至于菜大全加盟费多少，感兴趣的朋友不妨跟着小编一起去了解以下，作为外卖行业的娇娇者，生鲜市场被誉为电商后的一片蓝海，资本巨头们也纷纷瞄准了这个市场，不仅仅是饿了么和阿里也都在这个市场里不断试水，菜大全加盟，生鲜总部品...。
因认为，西瓜视频，App中，招募、组织游戏主播直播，王者荣耀，游戏内容的行为未获得授权许可，涉嫌侵犯，王者荣耀，著作权，2018年11月，腾讯公司将今日头条诉至广州知识产权法院，民事裁定书显示，2019年1月31日，法院作出禁令，裁定与，西瓜视频，App相关联的，运城市阳光文化传媒有限公司，、，今日头条有限公司，、，北京字节跳动科技有...。
12月4日，外媒TheInformation爆料称，苹果在为国行版iPhone适配百度AI模型时遇到困难，苹果会向百度支付适配和使用文心一言的费用，在今年3月，就有消息称苹果最后会使用百度文心一言，而之前，库克表示苹果AI会在25年4月开始支持更多的语音，就是说百度文心一言，上，iPhone，最快也要明年4月，但现在看，库克的饼，明...。
当地时间11月30日，英国市场监管机构责令美国社交媒体巨头脸书公司，现名，元，公司，出售去年收购的动图搜索平台Giphy，理由是这笔交易妨害公平竞争，有损用户和广告商利益，脸书去年5月收购Giphy，交易金额据媒体报道为4亿美元，完成收购后，脸书把Giphy整合进旗下图片和短视频分享平台，照片墙，Instagram，这是英国反垄断...。
雷锋网8月6日消息，据CNBC报道，美国博客网站Gawker自称获取多张Uber的内部财务文件截图，内容显示，自2012年以来，美国打车应用Uber呈现严重亏损，亏损额高达数千万美元、甚至上亿美元，最底下的红框部分即为总亏损，单位为，千美元，不难看出，013年Uber亏损超过了5600万美元，而在2014年上半年，Uber亏损超过...。
很多上了年龄的人群都清楚，以往在外打工的人群都会自己带行李坐车，于是自从现在有了物流快递之后，也为很多打工人群带去了福利，而作为大众群体使用较多益联达快运，它一直坚持以人性化服务为准，在大众心中留下了很不错的印象，为此，这也表示它在快递一行中发展的空间也很大，那么下面就来了解一下，益联达快运开店生意好不好，众多店铺共同成长，益联达快运...。
发表在专业问答2024，4，1113，30展示机型信息，品牌型号，RedmiLite版系统版本，MIUITV3.0Redmi投影仪连接wifi可以通过打开无线网络功能来连接wifi网络，总共可以分为三步，下面为Redmi投影仪怎么连接wifi的详细步骤做具体说明，Redmi投影仪怎么连接wifi1.打开投影设置在redmi投影仪应用界...。
[全球时报，全球网报道记者邢晓婧]10日，外交部发言人林剑掌管例行记者会，路透社记者提问称，近日有报道称中国首艘国产航母山东舰现身南海，菲律宾政府对此表示关切，中方对此有何回应，林剑回应称，，我不了解你提到的详细状况，倡导向主管部门征询，关系资讯山东舰编队现身岛链外，太平洋上起降舰载机，观察者网，[文观察者网山猫]日本防守省统合幕僚...。
梦见了蜘蛛，按周易五行剖析，幸运数字是3，桃花位在正西方向，财位在西北方向，如意色调是彩色，开运食物是向日葵，吉凶指数，86，梦见蜘蛛，1、待考者梦见大蜘蛛，预示着你学业效果方面会有理想的打破，2、求学者梦见蜘蛛打架，考试效果好，都是自己往常致力的效果，记得无法以就此自豪，3、女人梦见毒蜘蛛，预示着最近的肥壮状况不佳，或许会患有子宫...。
Git多人协作开发技巧实战经验分享在软件开发领域中，多人协作开发是一项非常重要的工作。而Git作为目前最流行的版本控制系统，成为了多人协作开发的首选工具。在使用Git进行多人协作开发时，合理的分支管理、团队配合和冲突解决都是关键。在本文中，我将分享一些Git多人协作开发的实战经验和技巧。首先，一个成功的多人协作开发项目，需要合理的分支管理。在Git中，主要有
7月5日消息，根据游戏媒体VGChartz公布的2023年5月销量数据，相比较Xbox360游戏主机，微软当前XboxSeriesS，X主机存在后继乏力的情况，该媒体绘制了XboxSeriesS，X游戏主机和Xbox360游戏主机的销量情况，XboxSeriesS，X游戏主机于2022年12月，也就是上市27个月销量突破2000万台；...。
如今，随着社会经济发展以及电子产品普及，wifi已经成为日常生活中不可或缺的重要元素，由于这一现象的出现随身wifi普及并且逐渐进入日常生活，一些智慧之选商发现这一商机想要加盟代理，在加盟之前了解随身wifi怎么加盟公司十分重要，了解之后才可以做出相应的准备工作和正确的判断和选择，下面小编就将随身wifi怎么加盟公司为智慧之选商答疑解...。
继荣耀30系列发布会主题以及将集齐三大神兽芯片之后，4月12日，荣耀官方微博又给我们带来了一大轰炸性的消息，即荣耀30系列或将搭载极速对焦黑科技，并在微博附上了一个荣耀30系列极速对焦抓拍的视频，该视频一经发布就在网上引起了网友的广泛关注，不少花粉用户发现视频成像质量与已发布的P40相当，猜测荣耀30系列或将实现P40同款八核对焦技术...。
7月18日，国际数据公司IDC发布，中国金融行业分布式事务型数据库市场份额，2023，技术验证结束，迎接高速增长，报告，下称，报告，报告，显示，2023年，腾讯云TDSQL凭借其在金融行业的长期大力投入，以20.6%的市场份额斩获中国第一，其中，在银行子市场，TDSQL同样以21.9%的市场规模稳居TOP1，成为金融行业本土化转...。
12月24日，2021百度奖学金十强名单出炉，自2013年设立以来，百度奖学金至今已连续举办9届，累计投入近2000万元培养中国顶尖AI人才，百度创始人、董事长兼CEO李彦宏将在12月27日召开的百度AI开发者大会上为10位顶级中国AI学者颁奖，百度奖学金，是面向全球顶级高校人工智能专业的中国学生奖学金激励计划，是AI领域资助金额与含...。
