欲依托算法与芯片构建场景优势 云知声发布多模态AI战略 (欲依托算法与什么有关)

雷锋网消息,当前我们正处于5G爆发的边缘,5G与AI的结合将真正促使AIoT智慧物联的落地与实现。可以预见的是,未来巨量的多维数据(如语音、图像、视频等)集中处理与边缘式分布计算的需求,将进一步挑战AI芯片的计算能力。

2019年1月2日,云知声在北京召开新闻发布会,正式公布了其多模态AI芯片战略与规划,并同步曝光了在研的三款定位不同场景的AI芯片。

2018年,“多模态”逐渐成为了业界研究的一个重点。如果把模态理解为感官,那么多模态即是调用多种感官的交互方式,它跨过了自然语言,其方式也更加贴近人,是AI未来的一个发展方向。

云知声发布多模态AI战略,欲依托算法与芯片构建场景优势

云知声创始人兼CEO黄伟认为,随着AIoT场景的逐渐丰富,未来应用对于端云互动有更强的需求,二者需要紧密结合,这要求对芯片设计和云端架构进行统一考量,具备多维度AI数据集中处理能力的多模态AI芯片将成必由之路。云知声接下来将依托AI算法与AI芯片构建场景优势,关键就在于多模态AI芯片战略。

基于此,云知声进一步对传统SoC(System on Chip)概念提出全新定义,其中S代表不同的AI服务能力即Skills,O代表云端与边缘侧的互动On/Off Cloud,C代表具备智能处理能力的AI芯片。

同时,云知声发布了DeepNet2.0多模态人工智能核心IP,其AI处理能力也从1.0的语音进化到2.0的多模态,支持语音、图像等处理能力。DeepNet2.0可兼容LSTM/CNN/RNN/TDNN等多种推理网络,支持可重构计算与Winograd处理,最高可配置算力达4Tops。目前云知声DeepNet2.0已在FPGA上得到验证,将在今年的全新多模态AI芯片海豚(Dolphin)上落地。

云知声发布多模态AI战略,欲依托算法与芯片构建场景优势

在会后的交流中,黄伟特别向雷锋网强调“多模态不是为了做视觉而做视觉,而是产品真正需要这种能力”。他以自动驾驶为例,可以通过面部图像识别司机注意力是否集中、是否疲劳驾驶,并根据识别结果提醒司机安全驾驶。“又如夜间行车时视野不如白天清晰,这时如果有实时图像增强的帮助就能大大提升安全性。”

作为一家国内领先的AI企业,云知声2014年开始切入物联网AI硬件芯片方案(IVM),并于2015年开始量产出货。在深入场景提供服务的过程中,为弥补通用芯片方案在给定成本和功耗条件下的能效比问题,以及在边缘算力、多模态AI数据处理方面的能力短板,2015年云知声正式启动自研AI芯片计划。

去年5月,云知声推出业内首款面向IoT的AI芯片UniOne及其解决方案雨燕(Swift),加速商业扩张与应用。该芯片采用云知声自主AI指令集,拥有具备完整自主知识产权的DeepNet1.0、uDSP(数字信号处理器),并支持DNN/LSTM/CNN等多种深度神经网络模型,性能较通用方案提升超50倍。

云知声发布多模态AI战略,欲依托算法与芯片构建场景优势

云知声联合创始人李霄寒曾指出,“UniOne不是一颗芯片,而是一系列芯片,它代表了云知声对于物联网AI芯片发展战略的整体构想”。在今天的发布会上,李霄寒再次从三方面论证了物联网多模态AI芯片的必要性。他认为,当前物联网产品线的AI芯片越来越明显地体现出三个趋势:

以此来看,面向物联网终端场景的AI芯片核心是解决垂直场景问题的能力,其呈现形式将不再是一个单一的硬件,而是承载着边缘能力与云端能力的多模态AI软硬一体解决方案。

在首款量产芯片雨燕已有大批客户导入,占领市场先发优势的背景下,2019年云知声在芯片落地规划方面仍将保持积极态度。

云知声发布多模态AI战略,欲依托算法与芯片构建场景优势

李霄寒向雷锋网透露,在持续迭代升级现有雨燕芯片的性能与服务之外,目前云知声多款面向不同方向的芯片也已在研发中,包括适用性更广的超轻量级物联网语音AI芯片雨燕Lite、可面向智慧城市场景提供对语音和图像等多模态计算支持的多模态AI芯片海豚(Dolphin),以及与吉利集团旗下生态链企业亿咖通科技共同打造的面向智慧出行场景的多模态车规级AI芯片雪豹(Leopard),三款芯片计划于2019年启动量产。

为实现多模态AI芯片的战略落地,目前云知声已在加速技术布局,并在机器视觉方面取得飞速进展。其中,面向机器视觉的轻量级图像信号处理器已可实现在不依赖外部内存的情况下,在30fps的速率下实时对传感器的图片进行预处理,以进一步提高后续机器视觉处理模块的处理速度和效果。

据悉,借助基于人脸信息分析的多模态技术,已可实现人脸/物体识别、表情分析、标签化、唇动状态跟踪等功能,可为产品交互和用户体验提供更多的可玩性和灵活性。

云知声发布多模态AI战略,欲依托算法与芯片构建场景优势

此外,在图像与芯片技术的产学研合作方面,云知声还与杜克大学所领导的美国自然科学基金旗下唯一人工智能计算中心ASIC达成深度合作,致力于AI芯片算法压缩与量化技术,以及非冯·诺依曼架构的新型AI芯片计算架构研究,将进一步为云知声多模态AI芯片战略的推进夯实基础。

目前,依托在家居、车载等真实场景下丰富的产品经验,以及具备先发优势的AI芯片能力,云知声将业务覆盖到包括智能家居、智能汽车、智能儿童机器人、智慧酒店、智慧交通等诸多场景。未来云知声将持续发力多模态AI芯片,不断拓展技术与场景生态,以实现面向未来AIoT时代的全面赋能。

原创文章,未经授权禁止转载。详情见 转载须知 。


本文地址: https://www.gpxz.com/article/4e4a812636c219086717.html
全局中部横幅
全局中部横幅
欢迎登录/注册松松云推广平台

注册/登录松松营销平台,您可以同时享受松松商城、松松软文、松松主机、松松任务派单等网络推广服务,登陆本平台您可以认识更多同行和潜在客户.

新闻头条

天下新闻头条为您精选当天最热门的新闻资讯,最受关注的社会新闻时尚八卦等,看新闻就来天下新闻头条!

应急照明集中电源厂家

浙江邑美电气科技有限公司专业致力于消防产品的生产、销售、安装施工、维护保养多元化企业。公司主要经营:EPS应急电源、UPS电源、消防巡检柜、消防泵控制柜、风机控制柜、火灾监控、电源监控、多功能仪表等电子电源控制设备。

河北开锁培训

河北开锁匠培训教程包括锁具修理、汽车开锁配钥匙培训等专业开锁技术培训教程,学开锁修锁到正规开锁学校学开锁王顶尖技术,包教包会不限时间,中途没有任何学杂费。欢迎实地考察!

免费发布平台

寻企网是免费的产品信息发布网,欢迎您来到寻企网查看全的生活服务信息,同时可以免费注册发布您公司的产品信息广告,让更多有需要的客户找到您.

流体装卸臂厂家

石家庄宝瑞祥工贸有限公司联系电话13930477756,主营流体装卸臂、鹤管、万向装卸臂、液氨胶管总成、金属软管总成

时尚美妆网

时尚美妆网是以时尚品牌、时尚达人信息搜录报道为主的时尚生活方式新媒体网站.定位于“用时尚解读生活”,以“时尚百科全书”的服务宗旨立足于时尚前沿,引领时尚潮流,深受时尚潮人、时装设计师及时尚爱好者们的喜爱.

沈阳加固公司

沈阳建筑加固工程有限公司,18年加固经验,资质齐全,承接:房屋改造加固,厂房加固,厂房改造设计,地基沉降加固,别墅加固,承重墙加固,酒店加固

安徽中振控股集团【官方网站】

安徽中振控股集团有限公司成立于2002年,业务板块涵盖地产开发、工程建设、物业管理、酒店管理、餐饮服务等。累计开发项目21个、开发面积超五百万方,为逾20万位业主筑建幸福美好生活,赢得了良好的市场口碑。2022年,集团公司为提升人居品质,迭代人居产品,致力于绿色生态建筑的开发、研究、推广,在安徽省省内进行新型绿色生态建筑————“第四代住宅”的合作研发,受到了省内多地地方政府的高度关注及深度支持。

投影网

投影网,家用投影仪论坛,一个专业、全面、及时的投影仪交流平台,内容涵盖各大投影仪品牌,包括当贝、极米、爱普生、明基、坚果投影仪,玩投影,就上投影网!

83上升星座

83上升星座网帮你分析各星座性格、爱好、属性、性质、元素、星体等各方面因素知识,助你在合作、婚配、组合等如鱼得水。


全局底部横幅