联想陈振宽:异构智算 释放AI基础设施新动能

4月18日,以“AI for All,让世界充满AI”为主题的联想创新科技大会(2024 Lenovo Tech World)在上海举办。

联想集团副总裁、联想中国基础设施业务群总经理陈振宽以《异构智算 释放AI基础设施新动能》为主题进行了演讲,分享联想在AI基础设施领域的战略布局、核心能力与技术创新成果。

“在人工智能1.0时代,基于全球智慧和本地创新,联想打造了全面的基础设施产品组合,包括计算、存储、网络、边缘和超融合,并在通用计算、科学计算和AI计算等不同算力领域获得大量的最佳实践,帮助千行百业的客户取得成功。”陈振宽表示,如今大模型开启的AI 2.0时代已经迈着大步朝我们走来,我们需要重塑过去积累的技术,来升级联想基础设施。

联想陈振宽:异构智算 释放AI基础设施新动能

联想集团副总裁、联想中国基础设施业务群总经理陈振宽

为解决用户面临的挑战,联想AI基础设施将聚焦三大领域实现科技创新,即超强算力、核心算法和液冷创新,释放AI基础设施新动能。他介绍说,基于三大领域,联想已经积累了八项核心能力,包括高性能、高可靠性以及液冷技术等。他重点分享了针对AI 2.0时代的五大创新技术,包括:算力匹配魔方、GPU内核态虚拟化、联想集合通信算法库、AI高效断点续训技术、AI与HPC集群超级调度器。

此外,陈振宽在大会上正式发布了联想万全异构智算平台。“联想万全异构智算平台是AI 2.0时代联想中国基础设施战略框架的核心。”他说,作为联想“全栈AI”战略布局的中坚力量,联想中国基础设施业务正以“一横五纵”战略框架,通过构建布局完整、稳定高效的AI导向的基础设施,为企业智能化转型打造坚实可靠的智算底座。

联想AI基础设施聚焦三领域,应对AI 2.0时代的算力挑战

过去40年,联想积累了包括全球供应能力、全球研发能力以及全球生态能力的全球智慧,并引领了一个又一个的中国IT技术发展浪潮。在通用计算领域,联想的x86服务器可靠性连续9年第一,截至2023年底已斩获536项性能世界纪录;在科学计算领域,联想9次实现中国HPCTOP 100 NO.1,助力中国在科学计算、仿真、气象等前沿领域的创新突破;联想基于中国特色需求设计了完整AI基础设施组合,助力中国客户赢得AI 1.0时代的发展。

在AI 2.0时代,AI大模型具备超强的泛化、生成能力,促使人工智能进入更广的应用场景和更深的业务流程中。陈振宽提到,在制造、金融、医疗、交通、能源、政府等各行业中,大模型在产品设计、金融评估、办公辅助、自动驾驶、能源调配等方方面面,颠覆式地改变生产方式,极速促进生产效率。然而,陈振宽也认为,随着AI 2.0时代对于AI算力的需求快速增加,算力使用者在使用AI基础设施的时候正在面临巨大的挑战。

陈振宽进一步介绍了AI 2.0时代用户在AI基础设施领域面临四大挑战:

如何选择和匹配算力是第一大挑战。陈振宽指出,目前已经有五种以上主流算法框架和十种以上算子库来支持不同的应用场景。同时,不同类型的GPU、服务器、存储和网络组成了上百种不同的集群配置。场景、算法和集群之间的选择和验证,不但技术繁杂而且周期长。

其次是如何减少故障中断时间。陈振宽强调,目前千卡集群每月至少有15次的故障断点。在常规的断点续训手段下,每次恢复训练需要几个小时,产生的额外费用超过百万元。随着AI集群规模从千卡到万卡,故障中断次数及恢复所需时间呈指数级增长。

第三大挑战是如何改善AI算力利用率。陈振宽引用行业通用的指标MFU(模型算力利用率)来作阐述,他指出当前业内MFU普遍在30%左右,顶尖的集群利用率也只能做到50%。行业需要解决GPU卡利用率,集群通讯效率,AI故障恢复,算法匹配度等系统性问题。

第四大挑战是如何突破散热瓶颈,降低PUE。陈振宽指出,在算力升级带来的能耗飙升的情况下,如何通过先进的散热技术,突破芯片在系统中的散热瓶颈,同时提升能效,降低数据中心PUE。

联想陈振宽:异构智算 释放AI基础设施新动能

联想AI基础设施持续聚焦三大领域

为解决上述用户面临的挑战,陈振宽强调,联想AI基础设施持续聚焦三大领域,实现科技创新。首先是超强算力,智能匹配:为用户匹配经过验证优化的最佳算力;其次是核心算法,极致提效:以核心算法挖掘算力潜力,提升计算效率。第三,液冷创新,算力绿化:以先进的液冷技术帮助用户节能增效,并突破芯片散热的瓶颈。

公布五大技术创新,首发万全异构智算平台

“联想在这三大领域里面长期耕耘,积累了八项核心能力。”陈振宽重点介绍了联想为AI 2.0时代带来的五大技术创新:

第一,用户智能匹配算力的算力匹配魔方。基于海量的硬件评测和AI算子算法集成工作,联想构建了AI场景与算法与集群硬件三者匹配关系的算力魔方知识库,来标识AI场景、算法、集群配置这三者的匹配关系。用户只需输入场景和数据,算力魔方即可自动加载最优算法,并调度最佳集群配置。

联想陈振宽:异构智算 释放AI基础设施新动能

陈振宽介绍联想五大技术创新

第二,逼近GPU算力极限的GPU内核态虚拟化。联想研究院开发了在GPU驱动层的内核态虚拟化算法,新算法可以将虚拟化造成的GPU算力损耗降到5%以下,极致情况可以降到1%以下,大幅提升GPU利用率。

第三,提升网络通信效率的联想集合通信算法库。可实现对多类型网络拓扑的实时感知,并以先进算法使数据在拓扑中以最佳路径进行传输。以千卡规模集群为例,采用集成了联想集合通信库的联想异构智算平台做管理调度,可使网络通信效率提升超10%,并且集群规模越大,效果越显著。

第四,减少AI训练中断时间的AI高效断点续训技术。联想异构智算平台对大量的AI训练故障进行了特征采样,开发了预测AI训练故障的AI模型,实现“用AI来预测AI”。在断点前提前优化备份,由此能将断点续训恢复时间缩减到分钟级,大幅提升了训练效率,以千卡集群为例,每月可节约上百万元算力费用支出,让宝贵的AI算力持续可用。

第五,AI与HPC集群超级调度器。这是针对混合集群做资源共享的前沿技术。联想AI与HPC超级调度器架构于AI和HPC调度之上,能够切换AI和HPC的调度沟通,能全局监控任务和动态共享资源,使得用户可以充分利用基础设施的每一分算力。

除了公布以上五大技术创新,陈振宽还在大会上正式发布了“联想万全异构智算平台”。他表示,联想万全异构智算平台是AI 2.0时代联想中国基础设施战略框架的核心,它融合了联想的五大技术创新,是AI 2.0时代大模型训练和推理的基础设施底座。

对于未来的研究方向,陈振宽透露,联想将挑战超过万卡规模集群的通讯算法优化,挑战秒级的断点续训,深入研究相变式液冷技术,布局模块化液冷数据中心。这些技术帮助AI算力朝着更强大、更稳定、更高效和更绿色的方向,高质量发展。

“人工智能技术给我们带来的新时代是百花齐放,百舸争流的时代,也将是英雄辈出的时代。”陈振宽表示,联想将持续投入,坚持创新,持续升级万全之力,为英雄助力,成就英雄。加速中国智能化转型,释放社会进步新动能。

延伸阅读:

  • 本文素材来自互联网,如有侵权,请联系将及时删除!
© 版权声明
THE END
喜欢就支持一下吧
点赞14
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称

    暂无评论内容

随即推荐
小游戏纸牌21点HTML源码-铁虎资源网

小游戏纸牌21点HTML源码

21点游戏简介21点,一个广受欢迎的扑克牌游戏,深受各年龄层玩家的喜爱。在游戏中,玩家需巧妙地将手中的扑克牌点数凑至尽可能接近但又不超过21点,以此与庄家比拼大小。现在,您可以在高手游H5...
test13254783的头像-铁虎资源网test1325478325天前
03612
二开粉红色精致模板苹果CMSV10模版-铁虎资源网

二开粉红色精致模板苹果CMSV10模版

苹果cmsV10粉红色精致模板 – 强大的网站模板 在网络上广为流传的苹果cmsV10二开网站模板中,有一款粉红色精致模板备受瞩目。这款模板以其独特的风格和强大的功能,在市场上享有很高的价值...
MelvinCer的头像-铁虎资源网MelvinCer24天前
02613
直播间录屏工具。免费好用,可以实时监控开播即录,下播就自动停止-铁虎资源网

直播间录屏工具。免费好用,可以实时监控开播即录,下播就自动停止

直播间录屏工具。主播直播复盘工具/免费好用,可以实时监控开播即录,下播就自动停止
bradfordpatteson的头像-铁虎资源网bradfordpatteson26天前
02511
视频号0粉好物分享带货,突破低流量枷锁,实现月入4000+-铁虎资源网

视频号0粉好物分享带货,突破低流量枷锁,实现月入4000+

视频号0粉好物分享带货,突破低流量枷锁,实现月入4000+本期视频号0粉带货的核心玩法;突破低流量的枷锁是非常重要的一件事;一般来讲这个是很少很知道的一件事,我们按照常规思维去起号大概率...
casinoqoel的头像-铁虎资源网casinoqoel22天前
02313
答案解析网涵盖小学、中学、大学各学科各年级学习资料,包括语文、数学、英语等多个学科,提供高考、中考等各类考试题型的试题及答案解析-铁虎资源网

答案解析网涵盖小学、中学、大学各学科各年级学习资料,包括语文、数学、英语等多个学科,提供高考、中考等各类考试题型的试题及答案解析

【资源名称】答案解析网【资源版本】6.2【资源大小】47.84M【资源介绍】安卓用户专属神器,一键起飞!
uborka_hxmn的头像-铁虎资源网uborka_hxmn20天前
03515
2025款高仿新版假飞机假TG源码/以及搭建教程-铁虎资源网

2025款高仿新版假飞机假TG源码/以及搭建教程

2025款高仿新版假飞机假TG源码/以及搭建教程源码仅供学习交流使用,具体未测。感兴趣自行下载研究
test22003302的头像-铁虎资源网test2200330224天前
05114
蓝天数据采集发布系统源码v2.9-铁虎资源网

蓝天数据采集发布系统源码v2.9

蓝天采集器是一款数据采集发布软件,可部署在云端服务器,几乎能采集所有类型的网页,无缝对接各类CMS建站程序,免登陆实时发布数据,软件实现定时定量全自动采集发布,无需人工干预!是大数据...
test722079的头像-铁虎资源网test7220799天前
02011
小红书卖虚拟资料2.0,制作发布上架指导,简单玩法细水长流-铁虎资源网

小红书卖虚拟资料2.0,制作发布上架指导,简单玩法细水长流

我来说明一下我们这个小红书虚拟店铺项目:首先,这个项目不是做私域变现的,而是在小红书上挂车卖货的,卖的是虚拟资料,有模板、资料、素材、软件工具、PPT等虚拟产品。如果你想做私域,那么...
test7295367的头像-铁虎资源网test729536719天前
04814
KaiGe粉色二次元个人主页源码-铁虎资源网

KaiGe粉色二次元个人主页源码

一个精美的粉色二次元风格个人主页,采用现代化的玻璃拟态设计和丰富的动画效果。
test722079的头像-铁虎资源网test7220795天前
0296
Android 网盘搜索器 v1.3.1 解锁高级版-铁虎资源网

Android 网盘搜索器 v1.3.1 解锁高级版

一款资源搜索神器给大家!也可以是蓝奏云搜索神器,也可以是网盘搜索神器!因为里面内置了很多第三方接口,比如小纸条、阿里盘搜、蓝奏搜、夸克搜等等,基本上你要搜索什么资源都能一网打尽!
ErnestoROM的头像-铁虎资源网ErnestoROM23天前
04512