百度智能云重磅宣布:将点亮昆仑芯三代三万卡集群
创始人
2025-02-05 23:48:38
0次

近日,百度智能云成功点亮昆仑芯三代万卡集群,这也是国内首个正式点亮的自研万卡集群。据悉,百度智能云将进一步点亮3万卡集群。这一重大突破标志着百度在人工智能算力领域迈出了坚实的一步,不仅为百度自身的技术发展提供了强大动力,也为整个中国科技界、互联网行业和AI行业带来了新的发展机遇。

万卡集群优势凸显,助力算力突破与成本优化

万卡集群的建成不仅为百度带来了强大的算力支持,还推动了模型降本的趋势。在过去一年中,整个行业都在努力降低大模型的使用成本,而算力紧张是导致成本居高不下的重要因素之一。百度通过自研芯片和大规模集群的建设,不仅解决了自身算力供应的问题,还为整个行业提供了新的思路和方向。

从算力上看,超大规模并行计算能力可实现训练效率跃升,万卡集群可将千亿参数模型的训练周期大幅降低,满足AI原生应用快速迭代的需求。同时也能支持更大模型与复杂任务和多模态数据,支撑Sora类应用的开发。此外,万卡集群能够支持多任务并发能力,通过动态资源切分,单集群可同时训练多个轻量化模型,通过通信优化与容错机制减少算力浪费,实现训练成本指数级下降。

随着国产大模型的兴起,万卡集群逐渐从“单任务算力消耗”到“集群效能最大化”过渡,通过模型优化、有效训练率提升、动态资源分配等手段,智能调度任务,将训练、微调、推理任务混合部署,从而提升集群综合利用率,降低单位算力成本。

百舸赋能,全方位提升集群性能与稳定性

过去,多芯混训和激增的故障率等难题,成为万卡集群部署过程中的巨大挑战。而24年9月升级的百度百舸AI异构计算平台4.0(以下简称“百舸平台”),在万卡集群的建设中发挥了至关重要的作用。

首先,突破硬件扩展性瓶颈,如卡间互联的拓扑限制,避免通信带宽成为瓶颈;同时,围绕芯片及集群功耗,基于万卡规模常规方案功耗可达十兆瓦或更高,采用创新性散热方案,从而解决万卡集群的能效与散热问题;完善模型的分布式训练优化,采用高效并行化任务切分策略,训练主流开源模型的集群MFU提升至58%;在提升稳定性方面,提供容错与稳定性机制,避免由于单卡故障率随规模指数上升而造成的万卡集群有效性大幅下降,保障有效训练率达到98%;最后,针对机间通信带宽需求,建设超大规模HPN高性能网络,优化拓扑结构,从而降低通信瓶颈,带宽有效性达到90%以上。

百舸4.0构建了十万卡级别的超大规模HPN高性能网络,针对跨地域通信中的高延迟问题,通过优化的拓扑结构、多路径负载均衡策略及通信策略,实现了几十公里的跨地域通信。在通信效率上,百舸通过先进的拥塞控制算法和集合通信算法策略,实现了完全无阻塞,并通过10ms级别超高精度网络监控,保障了网络的稳定性。

在多芯混训方面,百舸展现了强大的资源整合能力。它能够将不同地点、不同规模的异构算力进行统一管理,构建起多芯资源池。当业务提交工作负载时,百舸可自动进行芯片选型,依据集群剩余的芯片资源,选择性价比最高的芯片来运行任务,从而最大化地利用集群的剩余资源,实现高达95%的万卡多芯混合训练效能。

此外,在集群稳定性方面,百舸提供了全面的故障诊断手段,能够快速自动侦测到导致训练任务异常的节点故障。百度自研的BCCL(百度集合通信库)能够快速定位故障并提供自动化的容错能力,将故障恢复时间从小时级降低到分钟级,极大地提高了集群的可靠性和可用性。

日前,花旗银行发布研报表示,DeepSeek、百度等中国模型展现出高效和低成本优势,将有助于加速全球AI应用开发,并在全球引发更多技术创新,推动2025年人工智能应用的拐点。中国工程院院士、清华大学计算机系教授郑纬民也表示,当下构建国产自主万卡系统充满挑战,但"至关重要"。

相关内容

热门资讯

完善社保体系促农村消费潜能释放 扩大内需、提振消费,是当前推动我国经济高质量发展的关键着力点。7月30日召开的中共中央政治局会议强调...
江波龙于9月8日斥资4.48亿... 江波龙(09976)发布公告,于2026年9月8日斥资4.48亿元回购124.95万股A股。
刚刚,突破“心理防线”!全球美... 汇率再成全球变数! 9月8日早上,美元兑日元USD/JPY跌破153,刷新今年2月以来新低,日内跌幅...
原创 从... 前言 加拿大人的关税铁锤,9月8日凌晨准时砸了下来,这不是一场普通的贸易摩擦,而是北美大陆持续了几十...
韩国股市酝酿触底博弈:外资抛售... 韩国股市在经历极端的杠杆出清与外资集中抛售后,正迎来估值与技术面的双重拐点。KOSPI 200估值已...
4胜0负!中国女篮优势明显 波... 北京时间9月9日消息,中国女篮将在今晚的世界杯8强资格赛中对阵波多黎各女篮,获胜的球队将晋级女篮世界...
巨头创始人离婚,未签婚前协议,... 近日,运动休闲品牌lululemon(露露乐蒙)创始人奇普・威尔逊(Chip Wilson)的离婚消...
太重铸锻件分公司降本增效超20... 面对原材料价格持续攀升、贵重合金成本大幅上涨的严峻市场形势,太重集团铸锻件分公司摒弃粗放生产模式,深...
原创 中... 中东这把火烧得越来越旺,油价窜到快100美元一桶,看着新闻心里挺感慨的。二十多年前中国搞电车、砸光伏...
甲氧基PEG修饰多肽定制:从分... 甲氧基聚乙二醇(mPEG)修饰多肽是生物医药领域一项关键的药物改性技术。通过在多肽分子表面引入亲水性...
上海朱吉:做双眼皮前,先搞懂自... 在上海生活久了,你会发现这座城市对“精致”的要求格外高。不少朋友来做双眼皮面诊时,习惯性地掏出手机里...
9.09股市早8点丨关键:不是... 关键:不是双底就是双头! 股市早8点 老沙自媒体 2026年9月9日(周三) ▊美股三大指数收跌 ...
全球化产能布局稳步推进,中邮证... 9月8日,中邮证券研报指出, 亚香股份(301220.SZ)盈利阶段性承压,全球化产能布局稳步推进。...
福建福鼎遭强降雨,水产养殖户:... 编者按 养殖户提前加固鱼排抵御台风,却败给了始料未及的淡水倒灌。打捞不尽的死鱼、无法理赔的灾情、沉重...
美股收盘:三大指数集体收跌 算... 财联社9月9日讯(编辑 赵昊)周二(9月8日),美股三大指数集体走低,均连续两个交易日收跌。 截至收...
高层密集变动后,水井坊交出半年... 新华社旗下中经智库9月8日发布的智库报告显示,2026年上半年,白酒行业已全面进入“量价利齐跌”的深...
股市必读:贵阳银行新发布《贵阳... 截至2026年9月8日收盘,贵阳银行(601997)报收于5.61元,上涨1.26%,换手率1.36...
河南省卫生健康委召开专题会议 ... 9月3日,河南省卫生健康委召开医学科技创新工作专题会议,深入学习贯彻习近平总书记关于科技创新和卫生健...
原创 继... 标题:继母给我煮粥,她出去吃好的,离家出走多年,一双鞋让我回家心切。 在浩瀚的星座世界里,每个星座...
铜价再创新高,还能再涨吗? 今年有望突破1.5万美元/吨。 图片来源:界面图库 LME铜价再创历史新高。 伦敦金属交易所(L...