娱乐

NVIDIA:GPU磨炼AI大模子可飞腾96%老本

字号+ 作者:万花骞魁网 来源:百科 2024-11-19 20:27:00 我要评论(0)

克日新闻,在适才召开的2023年台北电脑展上,NVIDIA首席实施官黄仁勋妨碍了演讲。在演讲中,黄仁勋向传统的CPU效率器集群建议“挑战”,以为在家养智能以及减速合计这一未来倾向上,GPU效率器有着加

克日新闻 ,磨模在适才召开的炼A老本2023年台北电脑展上 ,NVIDIA首席实施官黄仁勋妨碍了演讲。飞腾

在演讲中,磨模黄仁勋向传统的炼A老本CPU效率器集群建议“挑战”,以为在家养智能以及减速合计这一未来倾向上 ,飞腾GPU效率器有着加倍强盛的磨模优势。

凭证黄仁勋在演讲上揭示的炼A老本典型 ,磨炼一个LLM狂语言模子,飞腾将需要960个CPU组成的磨模效率器集群,这将破费约莫1000万美元(约合国夷易近币7070万元),炼A老本并破费11千兆瓦时的飞腾电力。

比照之下  ,磨模同样以1000万美元的炼A老本老本去组建GPU效率器集群,将以仅3.2千兆瓦时的飞腾电力破费 ,磨炼44个LLM大模子 。

假如同样破费11千兆瓦时的电量 ,那末GPU效率器集群可能实现150倍的减速,磨炼150个LLM大模子 ,且占地面积更小 。

而当用户仅仅想磨炼一个LLM大模子时 ,则惟独要一个40万美元摆布 ,破费0.13千兆瓦时电力的GPU效率器即可。

换言之 ,比照CPU效率器,GPU效率器可能以4%的老本以及1.2%的电力破费来磨炼一个LLM ,这将带来重大的老本节约 。

自 快科技

1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。

相关文章
  • 壹点日历12.10|做自己的太阳,温暖而有力量!早安北京这一夜,被周涛的优雅从容惊艳,55岁美成这样真不愧央视国脸

    壹点日历12.10|做自己的太阳,温暖而有力量!早安北京这一夜,被周涛的优雅从容惊艳,55岁美成这样真不愧央视国脸

    2024-11-19 20:02

  • 掘金123-101大胜公牛,重回西部第一,但损失了队内第二巨头!

    掘金123-101大胜公牛,重回西部第一,但损失了队内第二巨头!

    2024-11-19 18:39

  • 赛季最后一支“破蛋”球队 灰熊逆转开拓者拿下首胜这一次,47岁的李小冉,终于走到了这一步

    赛季最后一支“破蛋”球队 灰熊逆转开拓者拿下首胜这一次,47岁的李小冉,终于走到了这一步

    2024-11-19 18:19

  • 35岁前国脚邹正退役,广州恒大2015巅峰之年亚冠决赛首发阵容已退役4人,主帅斯科拉里也已退休江苏一姑娘“女身男相”,网友奔现一见钟情:没见过这么好看的人

    35岁前国脚邹正退役,广州恒大2015巅峰之年亚冠决赛首发阵容已退役4人,主帅斯科拉里也已退休江苏一姑娘“女身男相”,网友奔现一见钟情:没见过这么好看的人

    2024-11-19 17:49

网友点评