万卡万P万亿参数通用算力！摩尔线程夸娥智算中心解决方案重磅升级 (万卡是谁)
7月3日，上海——摩尔线程重磅宣布其AI旗舰产品夸娥（KUAE）智算集群解决方案实现重大升级，从当前的千卡级别大幅扩展至万卡规模。摩尔线程夸娥（KUAE）万卡智算集群，以全功能GPU为底座，旨在打造国内领先的、能够承载万卡规模、具备万P级浮点运算能力的国产通用加速计算平台，专为万亿参数级别的复杂大模型训练而设计。这一里程碑式的进展，树立了国产GPU技术的新标杆，有助于实现国产智算集群计算能力的全新跨越，将为我国人工智能领域技术与应用创新、科研攻坚和产业升级提供坚实可靠的关键基础设施。
此外，摩尔线程联合中国移动通信集团青海有限公司、中国联通青海公司、北京德道信科集团、中国能源建设股份有限公司总承包公司、桂林华崛大数据科技有限公司（排名不分先后）分别就三个万卡集群项目进行了战略签约，多方聚力共同构建好用的国产GPU集群。
摩尔线程创始人兼CEO张建中表示：“当前，我们正处在生成式人工智能的黄金时代，技术交织催动智能涌现，GPU成为加速新技术浪潮来临的创新引擎。摩尔线程矢志投身于这一历史性的创造进程，致力于向全球提供加速计算的基础设施和一站式解决方案，为融合人工智能和数字孪生的数智世界打造先进的加速计算平台。夸娥万卡智算集群作为摩尔线程全栈AI战略的一块重要拼图，可为各行各业数智化转型提供澎湃算力，不仅有力彰显了摩尔线程在技术创新和工程实践上的实力，更将成为推动AI产业发展的新起点。”
AI主战场，万卡通用算力是标配
大模型自问世以来，关于其未来的走向和发展趋势亟待时间验证，但从当前来看，几种演进趋势值得关注，使得其对算力的核心需求也愈发明晰。
首先，Scaling Law将持续奏效。Scaling Law自2020年提出以来，已揭示了大模型发展背后的“暴力美学”，即通过算力、算法、数据的深度融合与经验积累，实现模型性能的飞跃，这也成为业界公认的将持续影响未来大模型的发展趋势。Scaling Law将持续奏效，需要单点规模够大并且通用的算力才能快速跟上技术演进。
其次，Transformer架构不能实现大一统，和其他架构会持续演进并共存，形成多元化的技术生态。生成式AI的进化并非仅依赖于规模的简单膨胀，技术架构的革新同样至关重要。Transformer架构虽然是当前主流，但新兴架构如Mamba、RWKV和RetNet等不断刷新计算效率，加快创新速度。随着技术迭代与演进，Transformer架构并不能实现大一统，从稠密到稀疏模型，再到多模态模型的融合，技术的进步都展现了对更高性能计算资源的渴望。
与此同时，AI、3D和HPC跨技术与跨领域融合不断加速，推动着空间智能、物理AI和AI 4Science、世界模型等领域的边界拓展，使得大模型的训练和应用环境更加复杂多元，市场对于能够支持AI+3D、AI+物理仿真、AI+科学计算等多元计算融合发展的通用加速计算平台的需求日益迫切。
多元趋势下，AI模型训练的主战场，万卡已是标配。随着计算量不断攀升，大模型训练亟需超级工厂，即一个“大且通用”的加速计算平台，以缩短训练时间，实现模型能力的快速迭代。当前，国际科技巨头都在通过积极部署千卡乃至超万卡规模的计算集群，以确保大模型产品的竞争力。随着模型参数量从千亿迈向万亿，模型能力更加泛化，大模型对底层算力的诉求进一步升级，万卡甚至超万卡集群成为这一轮大模型竞赛的入场券。
然而，构建万卡集群并非一万张GPU卡的简单堆叠，而是一项高度复杂的超级系统工程。它涉及到超大规模的组网互联、高效率的集群计算、长期稳定性和高可用性等诸多技术难题。这是难而正确的事情，摩尔线程希望能够建设一个规模超万卡、场景够通用、生态兼容好的加速计算平台，并优先解决大模型训练的难题。
夸娥：国产万卡万P万亿大模型训练平台
夸娥（KUAE）是摩尔线程智算中心全栈解决方案，是以全功能GPU为底座，软硬一体化、完整的系统级算力解决方案，包括以夸娥计算集群为核心的基础设施、夸娥集群管理平台（KUAE Platform）以及夸娥大模型服务平台（KUAE ModelStudio），旨在以一体化交付的方式解决大规模GPU算力的建设和运营管理问题。
基于对AI算力需求的深刻洞察和前瞻性布局，摩尔线程夸娥智算集群可实现从千卡至万卡集群的无缝扩展，旨在满足大模型时代对于算力“规模够大+计算通用+生态兼容”的核心需求，通过整合超大规模的GPU万卡集群、极致的计算效率优化以及高度稳定的运行环境，以万卡智算集群的新超级工程，重新定义国产集群计算能力的新标准。
夸娥万卡智算解决方案具备多个核心特性：
超大算力，万卡万P： 在集群计算性能方面，全新一代夸娥智算集群实现单集群规模超万卡，浮点运算能力达到10Exa-Flops，大幅提升单集群计算性能，能够为万亿参数级别大模型训练提供坚实算力基础。同时，在GPU显存和传输带宽方面，夸娥万卡集群达到PB级的超大显存总容量、每秒PB级的超高速卡间互联总带宽和每秒PB级超高速节点互联总带宽，实现算力、显存和带宽的系统性协同优化，全面提升集群计算性能。
超高稳定，月级长稳训练： 稳定性是衡量超万卡集群性能的关键。在集群稳定性方面，摩尔线程夸娥万卡集群平均无故障运行时间超过15天，最长可实现大模型稳定训练30天以上，周均训练有效率在99%以上，远超行业平均水平。这得益于摩尔线程自主研发的一系列可预测、可诊断的多级可靠机制，包括：软硬件故障的自动定位与诊断预测实现分钟级的故障定位，Checkpoint多级存储机制实现内存秒级存储和训练任务分钟级恢复以及高容错高效能的万卡集群管理平台实现秒级纳管分配与作业调度。
极致优化，超高MFU： MFU是评估大模型训练效率的通用指标，可以直接反应端到端的集群训练效率。夸娥万卡集群在系统软件、框架、算法等层面一系列优化，实现大模型的高效率训练，MFU最高可达到60%。其中，在系统软件层面，基于极致的计算和通讯效率优化等技术手段，大幅提升集群的执行效率和性能表现。在框架和算法层面，夸娥万卡集群支持多种自适应混合并行策略与高效显存优化等，可以根据应用负载选择并自动配置最优的并行策略，大幅提升训练效率和显存利用。同时，针对超长序列大模型，夸娥万卡集群通过CP并行、RingAttention等优化技术，有效缩减计算时间和显存占用，大幅提升集群训练效率。
全能通用，生态友好： 夸娥万卡集群是一个通用加速计算平台，计算能力为通用场景设计，可加速LLM、MoE、多模态、Mamba等不同架构、不同模态的大模型。同时，基于高效易用的MUSA编程语言、完整兼容CUDA能力和自动化迁移工具Musify，加速新模型“Day0”级迁移，实现生态适配“Instant On”，助力客户业务快速上线。
万众一芯，共建大模型应用生态
万卡集群的建设需要产业界的齐心协力，为实现大模型创新应用的快速落地，让国产算力“为用而建”。发布会现场，摩尔线程携手中国移动通信集团青海有限公司、中国联通青海公司、北京德道信科集团、中国能源建设股份有限公司总承包公司、桂林华崛大数据科技有限公司（排名不分先后），分别就青海零碳产业园万卡集群项目、青海高原夸娥万卡集群项目、广西东盟万卡集群项目进行了战略签约。
借助摩尔线程先进的夸娥全栈智算解决方案，各方将携手共建强大的全国产智算平台，以加速产业数字化转型和高质量发展。夸娥万卡智算集群项目标志着国产AI算力基础设施的又一重大进展，将为各地的数字经济发展注入新活力。
图注：摩尔线程与中国移动通信集团青海有限公司战略签约
图注：摩尔线程与中国联通青海公司、北京德道信科集团战略签约
图注：摩尔线程与中国能源建设股份有限公司总承包公司、桂林华崛大数据科技有限公司战略签约
发布会后，无问芯穹、清程极智、360、京东云、智平方等五家合作伙伴代表纷纷登台，分享了摩尔线程夸娥智算集群如何助力其在大模型训练、大模型推理、具身智能等不同场景和领域的创新，展现了夸娥智算集群在实际应用中的巨大潜力与广泛适用性。
摩尔线程愿与广大行业伙伴并肩同行，发挥全栈AI的力量，加速推动一个由万卡智算集群为强大底座，多领域伙伴共建、广泛赋能数字经济的国产智算生态，共同开启一个属于大模型与生成式人工智能的新时代，为美好世界加速。在WAIC期间，摩尔线程将在上海世博展览馆（H2馆D616）开展“全栈AI 为美好世界加速”的主题成果展示，包括加速卡、服务器、超融合一体机和AIGC应用在内的摩尔线程全栈AI产品悉数亮相，并携手众多行业合作伙伴联合展示基于夸娥智算集群的丰富行业大模型与应用方案。
版权文章，未经授权禁止转载。详情见 转载须知 。
本文地址： /article/960f984606873aa25cd3.html
百度短网址服务(dwz.cn)专业的网址缩短服务，具有稳定、快速、安全的特点，支持批量缩短、批量短网址还原、数据报表、开放API接口等服务
為高校提供一套完整的汽车硬件,软件,智能技术,人工智能科研学习和云端组件工具,以建立高校职校AI人工智能实验室,助力高校职校加速智能汽车产业专业人才培养。
公众平台自助引擎（www.w7.cc），简称微擎，微擎是一款免费开源的微信公众平台管理系统，是国内最完善移动网站及移动互联网技术解决方案。
成都新杰泰物流有限公司是一家专营成都到各省市专线物流运输公司，提供各类大中型企业/工厂物流货运运输方案及成都物流专线价格收费咨询，业务包含整车零担、危险品运输、大件运输，货物运输、仓储、整车返往等，可上门取货，可送货上门！
安平县东旭金属制品厂专业生产退火黑铁丝，截断丝，镀锌丝，轴丝，钢丸专用丝，普通铁钉，保温钉。实体老厂家,质优价廉量大从优！联系电话15903211011（微信同号）
灵犀知心情感咨询，守护幸福，专注情感，百名国家心理专家在线，专业解决情感问题。
河北鼎力管业有限公司
贵阳视窗网是一个时事新闻聚合平台，致力于为用户提供全面的头条新闻。我们实时更新全球范围内的政治、经济、科技、文化等领域的新闻资讯，让您轻松掌握天下事，洞悉时事动态。
中电华建环境系统技术（无锡）有限公司依托中国电子信息产业和中石化工建设系统强大的技术、业务和管理优势而成立的工程技术公司。工业环境治理是我们的持续稳定的经营业务，工业废气治理、工业污水集中处理、中水回用、纯水处理事业板块是支撑中电华建公司持续发展的重要的事业载体。
深圳市康惠美餐饮管理有限公司
北京第二外国语学院3+1，北京第二外国语学院2+2国际本科学生在北京二外学习2-3年后，可以选择英国、美国、澳大利亚、加拿大等国家的多所大学继续学习。北京外国语学院国际本科，本硕连读留学项目自2004年办学以来，已培养出两千余名优秀毕业生
成语是汉字文化圈特有的语言形式，存在于汉语中，它是一个固定短语，表达了一个固定的语意，常带有历史故事及哲学意义。成语大多数由四个汉字组成，在文言文中使用广泛，也有其他字数不等的成语，在白话文或者日常会话中也经常出现。
现在有一个可能给ElonMusk造成心脏病的消息，前Google工程师成立了一个旨在，发展和促进基于人工智能，进而创造AI上帝，的宗教组织，安东尼·莱万多夫斯基共同创立了无人驾驶卡车运营公司Otto，Uber于2016年以6.8亿美元收购了这家公司，他随后成为谷歌无人驾驶汽车部门的工程负责人，并在五月份以窃取谷歌商业机密而被谷歌解雇，...。
2015年底，徐旭和他的团队最终决定用自己的产品来验证自己的研发能力，从面向B端提供智能模块到面向C端推出产品，于是也就有了北京毫米科技的ROOME品牌，以及其第一款智能产品——智能晚安灯，可以说，相较于其他从C端发展到B端的智能家居厂商而言，北京毫米科技算是少数从B端走到C端，而且现在来看，走地也算是比较成功的，12月20日，在雷锋...。
5月25日，在北京751罐召开了一场智能家居发布会，这场被游延筠称为，绿米联创的第一场品牌发布会，，持续了整整三个小时，发布会前，绿米联创创始人游延筠一封公开信洋洋洒洒数千字，道尽了绿米的过往十一年，从2016年Aqara品牌成立、2017年开出第一家线下体验店到如今230多个城市近600家体验店，以及如今的全屋智能系列产品，目前，绿...。
ChatGPT引发的新一轮AI浪潮，正在席卷生命科学界，2023年初，ChatGPT大火，继去年11月30日上线第5天用户获增100万，如今短短两个月时间，ChatGPT日活用户已超1亿，成为历史上增长最快的消费级应用程序，直到今天，与之相关的讨论仍层出不穷，伴随着ChatGPT的火热，国内市场也很难平静，百度、阿里、腾讯、网易、京东...。
图为，用友网络智能制造事业部副总经理叶秀林作者丨何思思编辑丨王刚王德清很多人认为，工业软件和工业数字化转型的关联并不大，其实不然，在软件行业，工业软件是一个小众产业，但在工业领域，却被誉为工业制造的大脑和神经，堪称工业领域的皇冠，高端工业软件更是皇冠上的明珠，正是这样的忽视，我国工业软件产业出现了技术能力薄弱、自主研发实力差、国外核心...。
医保中心的权力大，医保中心是医疗保险的办事机构，负责具体的经办工作，包括个人和单位的医保管理，他们受医疗保险处的领导，同时也受人力资源和社会保障局的管理，医保中心在医保事务的处理过程中拥有较大的权力，包括审核和支付医疗费用、管理医保基金、制定医保政策等，医保局是医保基金的管理者和监督者，负责监督医保中心的运行和管理，以及对医保政策的制...。
有关记者从津洽会暨PECC博览会组委会获悉，作为展会分会场之一，武清华北城将在5月28日—6月1日期间举办家居建材博览会，全场6大主题展馆共设1000个展位，展示超过5万种家居建材产品，满足广大消费者一站式置家的需求，同时，在梅江会展中心主会场N3馆还设有270平米的展厅，声、光、电、多媒体等技术手段，集中展示自立项以来华北城所取得的...。
美国对华关税有最新停顿！据参考信息征引美国媒体报道，外地期间8月31日，拜登政府再次推延发表对中国制作的电动汽车、电池、半导体和太阳能电池征收高额关税，并示意将在未来几天内发布最终选择，美国贸易代表办公室发言人示意，该机构，正在继续就拟议的修正做出最终选择，，这些修正是时任总统唐纳德·特朗普在2018年和2019年对中国商品征收的关税...。
外地期间7月28日，美国中央司令部颁布公报称，美，罗斯福，号航母被部署至美国第五舰队的作战区域内，△美，罗斯福，号航母，资料图，美国第五舰队的作战区域笼罩约250万平方英里的水域，包含阿拉伯湾、红海、阿曼湾、亚丁湾、阿拉伯海和印度洋的局部地域，此前被部署在该区域的美军，艾森豪威尔，号航母已于6月22日撤退红海回国，此前报道美，艾森豪威...。
应该是，为升值不求手腕，应该严惩杭州女神探聂海芬现状曾经侦破的案件被平反，聂海芬滥用职权受四处分，声誉散尽，截至2022年9月15日，聂海芬还在岗位上反常上班，聂海芬，女，1965年9月出世，1986年参与上班，添加中国共产党，杭州市公安局刑侦支队预审大队大队长，全国，三八，红旗手，2013年4月浙江省政法委已成立考查组，彻查聂海芬等...。
如何用手机ps掉头发第一步，用ps关上要修正的图片，第二步，点击，模拟图章工具，第三步，调整笔刷大小，将光标放在面部毛发左近，按住Alt键并单击鼠标左键取得样本颜色，而后将光标放在毛发上并单击鼠标左键擦除多余的毛发，第四步，移动光标，重复点击鼠标左键，直到多余的头发所有擦掉，第五步，决定含糊工具，适当加大图形，含糊封面，缩小操作痕迹，...。
比拟好用的手机杀毒软件有360手机卫士、腾讯手机管家、猎豹清算巨匠、网络手机卫士、豌豆荚安保巨匠、乐安保等，1、360手机卫士配置弱小，领有病毒查杀、隐衷包全、安保防护等配置，是用户手机安保的关键保证，2、腾讯手机管家集病毒查杀、骚扰阻拦、软件权限治理等配置于一身，能有效包全用户手机安保，3、猎豹清算巨匠专一于手机渣滓清算、广告阻拦等...。
一叶飘零的零的个人资料,360社区
通过备案多年以后网站名称修改对于因为站长之家多年以前就通过备案了当时备案使用维波网为网站名称但是实际使用的时候先以微博网为网站名称后来以日新网为网站名称最近又修改为站长之家为网站名称一直都没有受到什么影响因为备案对于使用博客新闻论坛等关键词的都需要其他手续所以我就使用最简单的方式通过备案的我自己观察发现大部分这样的行为...
重庆分类目录网站将2011年05月共222个网站收录信息按收录时间分类整理归档列表，可以方便网友浏览按年月查询，更好地享受精彩网站的魅力！
277游戏官网，玩277游戏，尽享精彩游戏世界！1.什么是277游戏277游戏是一个以角色扮演类游戏为主的游戏平台，包含了各种类型的游戏，如卡牌类、战斗类、魔法类、神话类等等，是一个游戏世界的汇聚地。这个平台的玩家数量非常庞大，目前已经拥有数百万的注册用户，不仅仅是因为游戏种类丰富，更是因为这个平台能够给玩家带来全新的游戏体验。2.277游戏官网的特点277游戏官网的特点在于其简单而便捷的游戏操作方式，能够让新手轻松上手。网站的界面设计也非常简洁明了，让人一眼就能找到自己想要玩的游戏类型。此外，在网站的首
华强洽洽是款专业的客服沟通聊天软件。具有上传速度快、提高竞价排名、咨询实时报价和型号自动匹配的特点，为用户一键提供在线库存管理、询报价和企业旺铺等功能。
