英伟达AI芯片H200开始供货,性能相比H100提升60%-90%

hjh_h2024-03-28 20:11:37IT之家

IT之家 3 月 28 日消息,据日本经济新闻今日报道,英伟达的尖端图像处理半导体(GPU)H200 现已开始供货。H200 为面向 AI 领域的半导体,性能超过当前主打的 H100。

根据英伟达方面公布的性能评测结果,以 Meta 公司旗下大语言模型 Llama 2 处理速度为例,H200 相比于 H100,生成式 AI 导出答案的处理速度最高提高了 45%。

市场调研机构 Omdia 曾表示,2022 年英伟达在 AI 半导体市场约占 8 成的份额,与此同时 AMD 等竞争对手也在开发对抗英伟达的产品,竞争愈演愈烈。

英伟达当地时间 3 月 18 日在开发者大会上宣布,年内将推出新一代 AI 半导体“B200”,B200 和 CPU(中央运算处理装置)组合的新产品用于最新的 LLM 上。“最强 AI 加速卡”GB200 包含了两个 B200 Blackwell GPU 和一个基于 Arm 的 Grace CPU ,推理大语言模型性能比 H100 提升 30 倍,成本和能耗降至 25 分之一。

GB200 采用新一代 AI 图形处理器架构 Blackwell,黄仁勋在 GTC 大会上表示:“Hopper 固然已经非常出色了,但我们需要更强大的 GPU”。

据IT之家此前报道,英伟达 H200 于去年 11 月发布,其为基于英伟达的“Hopper”架构的 HGX H200 GPU,是 H100 GPU 的继任者,也是该公司第一款使用 HBM3e 内存的芯片,这种内存速度更快,容量更大,因此更适合大型语言模型。较前任霸主 H100,H200 的性能直接提升了 60% 到 90%。英伟达称:“借助 HBM3e,英伟达 H200 以每秒 4.8 TB 的速度提供 141GB 的内存,与 A100 相比,容量几乎是其两倍,带宽增加了 2.4 倍。”

百度放弃YY,意在AI电商?

一场斥资36亿美元的豪娶,终是迎来了BE结局。新年第一天,百度发布公告称,“其关联公司MoonSPVLimited按照此前签署的协议,终止对YYLive的股权收购协议。”当晚,YY直播母公司欢聚集团发布公告称,“YY直播向百度的...

马斯克拟打造xAI “算力超级工厂” 以支持下代聊天机器人Grok

5月25日消息,据媒体报道,马斯克本月告诉投资者,旗下AI初创公司xAI正计划打造超级计算机,以支持下一版本的聊天机器人Grok。xAI将需要多达10万个专用芯片。马斯克对投资者表示,将这些专用芯片串联到一台巨型的超...

微软招揽前Meta高管,增强其人工智能超级计算团队实力

4月23日消息,微软正通过招募行业人才来加强其人工智能超级计算团队的实力。周一,微软首席技术官KevinScott在领英上发帖宣布,前Meta高管JasonTaylor将加入微软,担任企业副总裁兼CTO副手,帮助公司“构建下一代系...

估值达900亿美元!传OpenAI拟出售数亿美元股票

9月27日消息,据知情人士透露,人工智能初创公司OpenAI正在与投资者商讨出售股票事宜,估值约为800亿至900亿美元,几乎是今年年初的三倍。知情人士表示,该初创公司向投资者表示,预计今年的收入将达到10亿美元,并...

TikTok要求创作者使用AI必须披露 否则内容可能会被删

IT之家9月20日消息,TikTok正在为创作者引入一种新方式来标记使用人工智能工具制作的内容。该功能于上个月首次被用户发现,今天TikTok在一篇博客文章中正式宣布。TikTok的用户指南已经要求创作者在使用人工智能工具...

上一篇:Google 2023年移除超55亿条不良广告 9成由AI发现
下一篇:人工智能的尽头还真是发电