点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:联想AMD AI大模型训练服务器树立行业新标杆
首页> 科技频道> 人工智能 > 正文

联想AMD AI大模型训练服务器树立行业新标杆

来源:光明网2025-03-17 09:57

  3月17日,联想宣布旗下首款AMD AI大模型训练服务器联想问天WA7785a G3在单机部署671B(满血版)DeepSeek大模型时,可实现极限吞吐量6708token/s,将单台服务器运行大模型的性能推向了新高,充分展现了联想在AI基础设施领域技术的深厚积淀与研发的快速响应能力。

  软硬协同打造业界性能新标杆

  依托联想万全异构智算平台,联想通过访存优化、显存优化、PCIe 5.0全互联架构创新以及精选SGLang框架中性能最优算子等诸多创新方式,对大模型从预训练、后训练到推理的全流程进行持续优化,在单台部署DeepSeek 671B大模型的联想问天WA7785a G3上实测最高吞吐量达6708 token/s。

  在模拟问题对话场景(上下文序列长度128/1K)时,最高可支持并发数158,TPOT 93毫秒, TTFT 2.01秒;而在模拟代码生成(上下文序列长度512/4K )时,并发数可达140,TPOT 100毫秒, TTFT 5.53秒。

  这一成绩意味着单台联想问天WA7785a G3可以支撑1500人规模企业的正常使用,是继联想问天WA7780 G3服务器单机部署满血版DeepSeek 大模型总吞吐量突破2500 token/s之后,单机部署该大模型推理性能的又一次突破。

  此次突破是联想中国基础设施业务群、联想研究院ICI实验室和AMD联合设计、协同调优、共同实现的。此结果也并非最终结果, 联想与AMD 还在持续尝试深度调优新方法。实现更高调优突破。

  硬核配置构筑强大DeepSeek算力底座

  联想问天 WA7785a G3服务器是联想与AMD双方深度合作的智慧结晶,正是双方通力合作带来的技术创新、软硬协同能力与架构突破为DeepSeek-R1满血版大模型插上性能腾飞的翅膀。

  强大算力引擎:联想问天WA7785a G3搭载了2颗AMD处理器和8颗AMD新一代Instinct OAM GPU,它们为大模型训练、推理等场景提供了强大的算力引擎。

  超大显存优势:WA7785a G3拥有超大的显存容量,单颗GPU的HBM3e显存容量高达192GB,总计达1.5TB。超大显存使得单机支持全量模型推理情况下,仍保留充足的KV缓存空间。而其显存带宽达到了惊人的5.3TB/s,GPU聚合带宽达896GB/s,节点间网络带宽3.2TB/s,更高的带宽可为推理解码实现极致加速,充分满足了大模型并行计算时对跨节点通信的高带宽需求,使其成为用户首选大模型推理服务器。

  特有创新架构:联想问天WA7785a G3的独特架构设计也为最大程度地释放算力潜能、突破带宽限制发挥了关键作用,其三重独立风道设计分别针对CPU节点、GPU节点和交换机节点进行精准散热控制,提高了散热效率,为服务器的稳定性和可靠性提供了有力保障。

  未来,联想将持续深化与产业伙伴的技术协作,通过架构创新、算法优化与硬件技术创新,不断突破性能边界,为各行业提供更高密度、更低能耗、更易部署的AI算力基础设施,推动AI算力向更高效、更普惠、更可持续的方向演进,助力中国智算产业的持续发展。(科文)

[ 责编:战钊 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 迎开学

  • 舞炮龙 庆新春

独家策划

推荐阅读
国家统计局2月28日公布《2025年国民经济和社会发展统计公报》。
2026-02-28 17:21
人们常说“眼见为实”,但如果今天再问一个问题:照片还能算现实的记录吗?答案或许已经不像过去那么简单。
2026-02-28 10:27
国家能源局27日发布的数据显示,目前,全国已有84个绿电直连项目完成审批,新能源总装机规模3259万千瓦。
2026-02-28 10:25
“具身天工3.0”刚刚发布——首届机器人半马赛事冠军正在加紧训练,成绩有望大幅提升;朱雀三号重复使用火箭蓄势待发,计划二季度再次挑战回收复用;小米汽车超级工厂的生产线一片繁忙,累计交付量已突破60万辆……
2026-02-28 10:23
今年以来,水利部指导督促各地抢抓河湖枯水期、施工影响小的窗口期,不断推动国家水网联网、补网、强链。
2026-02-28 10:22
几十年来,关于月球早期磁场是强是弱,科学界一直争论不休。如今,英国牛津大学科学家通过分析阿波罗任务带回的样本,发现月球曾拥有极强磁场,强度甚至一度超过地球磁场。
2026-02-28 10:19
发现分数量子反常霍尔效应和里德堡莫尔激子态,解决超导量子计算难题,攻克国产无液氦稀释制冷机和极高场全超导磁体等关键实验技术……
2026-02-27 09:39
2026年伊始,从美国拉斯维加斯消费电子展(CES)到中国春晚,中国自主研发的人形机器人频频“破圈”,多家中国企业的产品和应用不仅在海外业界引发热议,更是在全球社交媒体平台和国际媒体不断“刷屏”。
2026-02-27 09:36
中国人的“果盘子”里,苹果占据着举足轻重的地位。产业端加速向“数管+机器换人”转型,直播带货、跨境电商等新业态的兴起,也让中国苹果加速走向全球。
2026-02-27 09:35
随着2022年北京冬奥会的成功举办和“带动三亿人参与冰雪运动”目标的实现,中国滑雪装备产业正迎来前所未有的发展机遇。从笨重单调到轻便智能,从依赖进口到本土品牌崛起,滑雪装备的变迁不仅折射出中国冰雪运动的普及,更勾勒出一个新兴消费市场的崛起轨迹。
2026-02-27 09:32
记者从西北大学获悉,该校生命科学学院灵长类行为与进化发育研究团队的研究,揭示了亚洲叶猴物种表型的演化之谜。
2026-02-27 09:30
中国科学院近代物理研究所核结构研究团队与合作者通过高精度实验,明确了一种钼同位素释放其储存能量的关键机制,在原子核能量可控释放研究领域取得重要进展。
2026-02-26 09:46
电感器如同现代电子设备的“心脏”,让电流有序流动、设备稳定工作。
2026-02-26 09:35
“AI保姆”“智能教育助手”等产品,正以前所未有的速度和深度涌入未成年人的世界。不少家长感叹,这位无所不能、无时不在的“数字家教”成了解放自己的好帮手。
2026-02-26 13:44
全球人工智能技术迭代创新按下“快进键”,与各行业各领域的融合应用持续拓展深化。
2026-02-26 13:44
AI操控的机器人虽难以完全替代实验科学家,但AI系统已开始接管人类的数据分析师、研究编码员等工作。
2026-02-26 10:04
截至2025年,我国发明专利申请量已连续多年位居全球第一,成为名副其实的专利大国。
2026-02-26 09:55
他们走过了一段从弱到强、从“备胎”到“主角”的孤勇之路,实现了国内超低温大型制冷机市场从被国外100%垄断到国产化替代的“跨越式发展”。
2026-02-26 09:49
人工智能技术及其应用的跨领域、跨层级、跨主体特征,决定了其安全治理天然具有高度复杂性和协同需求。最后,面对人工智能技术快速迭代、应用场景动态迁移、风险形态持续演化的鲜明特点,制度体系必须具备敏捷响应与动态调适的智慧与弹性。
2026-02-25 09:45
曾经只存在于科幻电影中的“太空采矿”,正逐渐从文艺作品中的构想走进现实。
2026-02-25 09:49
加载更多