|
 |
|
头衔:金融岛总管理员 |
昵称:花脸 |
发帖数:71495 |
回帖数:2176 |
可用积分数:17771986 |
注册日期:2011-01-06 |
最后登陆:2025-08-25 |
|
主题:华为云CTO张宇昕:大模型时代需要全新的网络互联技术
2024-02-26财联社 华为云CTO张宇昕在巴塞罗那华为云峰会表示,大模型时代对算力有着全新的要求:1、联算比。未来需要全新的网络互联技术来解决运算量和GPU算力之间的巨大差距。2、容算比。当前在模型训练过程中为获取足够显存容量,存在不必要的GPU算力闲置。3、存算比。当前在模型训练过程中,大量的时间消耗在GPU数据加载,造成算力的进一步浪费。基于此,云的系统架构将从“以CPU为中心的主从架构”向“多元算力对等架构” 跃迁,突破算力、存储和网络的边界,实现多元算力的对等全互联。
【免责声明】上海大牛网络科技有限公司仅合法经营金融岛网络平台,从未开展任何咨询、委托理财业务。任何人的文章、言论仅代表其本人观点,与金融岛无关。金融岛对任何陈述、观点、判断保持中立,不对其准确性、可靠性或完整性提供任何明确或暗示的保证。股市有风险,请读者仅作参考,并请自行承担相应责任。
|