从云到端 而至 离客户更近的端侧AI 涌现 (云到端是什么意思)

文章编号:52183 资讯动态 2025-02-01 端侧AI AI大模型 广和通

AI发展正酣,随着终端芯片算力越来越高、端侧模型能力越来越强、实时响应及隐私保护的端侧应用需求增加,端侧AI已然具备落地的条件。端侧AI离客户和应用场景更近,也是具象化AI的重要方式。可以看到,端侧AI的浪潮“涌现”而至,原有的用户体验和生态格局将迎来革命性重塑。

从云到端:离客户更近的端侧AI「涌现」而至 端侧AI是指在终端设备(如车载智能座舱、智能除草机、机器人等终端场景或设备)上进行人工智能计算和处理,运行端侧模型。相较于云端大模型,端侧大模型在资源有限的设备上高效运行,需进一步对模型进行压缩、推理加速及能耗优化。目前轻量化模型技术包含模型剪枝、知识蒸馏和量化,以上技术往往组合使用,以达到最优的轻量化效果。将大模型部署在端侧设备中,可高效赋能智能终端,如降低延迟,更快地响应用户请求;隐私保护,减少数据传输,从而降低隐私泄露的风险;减轻云端服务器的计算负担,降低对中心化计算资源的依赖,从而降低成本;根据用户的具体设备和使用习惯进行定制化优化,提供更加个性化的服务;无网络连接的情况下也能使用,提高了应用的可用性和灵活性。

基于大模型在端侧部署的特点和优势,已落地或即将落地的应用场景包括:智能手机、智能家居、可穿戴设备、自动驾驶汽车、工业自动化、医疗设备等。随着AI技术的进步和芯片产业的发展,端侧部署AI的挑战正逐步被克服,更多的端侧应用场景正在落地实现并逐渐成熟。

从云到端:离客户更近的端侧AI「涌现」而至

首先,大模型本身的算法逐步在优化,在众多细分行业,模型的计算效率相较上一代均有一定量级的效率提升。模型参数变得更小,用户体验却更加智能。再者,更多参数较小的大模型被开源,且AI能力日趋成熟,例如智谱AI、阿里千问等大模型厂商都开源了亿级(0.xB左右)到百亿级(x0B)的大模型预训练模型。这大大降低了大模型应用开发者的使用门槛,同时加速端侧AI部署。此外,算法层级的技术,包括模型量化、剪枝、蒸馏为基础的模型压缩算法,以及专为端侧部署设计的软硬件平台,都正在快速发展,这使得大模型在端侧设备的部署变得更加高效。以上模型变化趋势使得端侧AI在本地所需算力、部署成本、运行效率得到大大提升,将助力各行各业智能升级。

目前,端侧AI芯片厂商、中游模组及软件厂商、下游终端厂商的产业链上下游正积极推动AI在端侧部署落地。多个芯片厂商已推出最新处理器,支持终端侧多模态生成式AI,并完成多款大模型的适配。广和通持续为AIoT产业提供模组及解决方案,正积极探索端侧AI相关技术,并已推出多款可应用于机器视觉、具身智能、智能割草等场景的端侧AI解决方案,满足不同终端对算力及模型的需求。

在端侧AI应用上,广和通深度布局视觉与听觉计算,推出高算力和轻量化机器视觉解决方案,融合了先进的处理能力与边缘计算优势,采用了目标检测、关键点检测、图像分割、超分辨率、图像增强、360环视拼接等高效的视觉处理算法。此外,广和通机器视觉解决方案支持蓝牙、Wi-Fi等多种无线通信连接方式,在高端智能影像终端、工业视觉终端、车载终端、机器人均具有广泛应用场景。 从云到端:离客户更近的端侧AI「涌现」而至

AI大模型作为当前人工智能领域的重要技术,是孕育新质生产力的重要手段。作为大模型应用的一个重要的实践领域,端侧AI大模型的全面落地发展需要全产业链推动,包括芯片算力增强、模型优化、软件厂商适配以及终端厂商的落地应用。广和通积极整合产业上下游资源,为产业提供融合通信、算力、AI算法、AI引擎、模型等能力的端侧AI解决方案,加速AI商用至终端。

版权文章,未经授权禁止转载。详情见 转载须知 。

从云到端:离客户更近的端侧AI「涌现」而至


本文地址: https://www.gpxz.com/article/0d8592996d83516b4514.html
全局中部横幅
全局中部横幅
购物网站导航大全

LOL网址导航网是专业的上网导航网站,精心收录各类优质热门网站信息,同时提供天气、快递、违章等各种生活便民查询工具网址,为您提供安全便捷的上网导航服务,现已被众多网友设为上网主页,网址导航大全首选LOL网址导航.

北京华捷艾米科技有限公司

集研发、生产、销售、服务于一体,专注于AR体感人机交互和人工智能领域研发与制造,成为继微软和苹果之后全球第三家完全拥有体感各项技术知识产权专利的高科技公司

泡花碱设备

淄博鑫欣泡花碱设备机械制造有限公司是一家泡花碱设备制造企业,致力于为客户生产安全、可靠、耐用的泡花碱设备。企业具备特种设备生产资质。拥有严格的质量管理体系。产品畅销国内外。

大连中睿科技发展有限公司

大连中睿科技发展有限公司,大连中睿科技公司,大连中睿公司,大连中睿,道路塌陷,道路塌陷灾害普查探测,地下空洞探测,空洞探测,地陷,探地雷达,管线雷达,管线探测,公路雷达,桥梁检测雷达,雷达冰厚检测仪,测冰雷达,公路层厚雷达,三维检测雷达,三维雷达,雷达车,车载道路灾害预警雷达系统,车载道路病害灾害预警雷达系统,多通道阵列雷达,多通道雷达,gpr,地质雷达,穿墙雷达,生命探测雷达,考古雷达,探月雷达,反恐雷达,结构扫描雷达,钢筋雷达,混凝土雷达

钢结构,

天港多年来致力于为您提供各种钢结构,钢结构桥梁,钢结构房屋。价格优惠,质量保证,欢迎垂询。

珠海伯轩医疗科仪有限公司

珠海伯轩医疗科仪有限公司,成立于1999年7月,拥有着先进的管理经验,精湛的工艺和优秀的技术人才。多年潜心专注于医疗护理、养老康复和家居护理等领域的设计研发,Acare品牌的各类型手动护理床、电动护理床、自动翻身床、急救推车、护理产床及护理周边设施等,获得来自全球超过900家客户的信赖与支持,并于2008年获得了“广东省著名商标”的荣誉称号。

山海文学

山海文学,专注小说推荐,每日更新精选热门佳作。无论您喜欢玄幻、言情、武侠还是其他类型的小说,都能在这里找到心仪的读物,尽享阅读乐趣。

山东青岛净化公司

青岛洁净净化技术有限公司是一家集空气净化系统技术的研发,净化工程的咨询与设计,工程安装施工,配套产品制造,工程售后服务于一体的高新技术企业.

菜鸟云新媒体管理系统

公众平台自助引擎(www.we7.cc),简称微擎,微擎是一款免费开源的微信公众平台管理系统,是国内最完善移动网站及移动互联网技术解决方案。

洛希网络科技

洛希网络科技-洛希爱做百科网隶属于潮州市潮安区浮洋镇洛希网络科技工作室,主要提供互联网整合营销推广、口碑营销推广服务,包括百度百科词条创建修改、360百科词条创建修改、抖音百科(识典百科)词条创建修改、搜狗百科词条创建修改、百度大家还在搜删除、百度下拉词删除、搜狐新闻删除、百度个人信息删除、软文营销、软文代写发布,网络新闻媒体发布、知乎问答代写代发、知乎大v代发点赞、知乎排名优化、知乎回答置顶、小红书笔记代写代发、小红书达人推广种草、小红书点赞评论和笔记排名等。

小鹏汽车丨未来出行探索者

小鹏汽车是一家专注未来出行的科技公司,致力于探索科技,引领未来出行变革。小鹏汽车旗下有全新小鹏P7、小鹏X9超级增程、小鹏G7、小鹏P7+、小鹏MONAM03、2025款小鹏X9、2025款小鹏G6、2025款小鹏G9等。

电池互联

我公司的最新招投标信息;为客户提供代客招投标服务;电池信息查询;电池交易

全局底部横幅