023-68610113

023-68610193

重庆市高新区科园一路73号渝高大厦F座5-1、6-5
18新利
不断追求技术的进步,提供具有自主知识产权的产品及完善的解决方案,实现与客户的共同发展
vIDEO MAGIC SCIENCE
专致于数字电视编码及插播系统研发与生产
根据市场需求不断勇于创新,提供在数字电视网络中的各种文字及图片、音视频信息投放的完善解决方案
您的当前位置:
18新利Rambus通过GDDR7内存IP推动AI 20发
来源:18新利luck | 作者:18新利luck在线娱乐网 | 发布时间: 2024-04-26 12:13:32 | 59 次浏览 | 分享到:

  作为 Rambus 行业领先的接口和安全数字 IP 产品组合的最新成员,GDDR7 内存将为下一波AI推理浪潮中的服务器和客户端提供所需的突破性内存吞吐量。

  AI 2.0代表着生成式AI性世界的到来。AI 2.0借助大语言模型(LLM)及其衍生模型的巨大增长创建新的多模态内容。多模态意味着可以将文本、图像、语音、音乐、视频等混合输入到模型中,从而创建出这些以及其他媒体格式的输出,例如根据图像创建3D模型或根据文本提示创建视频等。

  LLM的参数规模已超过万亿,数据集样本规模也已达到数十亿。训练LLM需要巨大的算力,这离不开最新高性能内存解决方案的支持。

  AI 2.0训练流程的输出结果是一个推理模型,该模型可根据用户提示创建新的多模态内容。由于准确性和保真度会随着模型规模的扩大而提高,因此推理模型的规模也在不断扩大。随着AI推理变得越来越普遍,并从数据中心向边缘和终端移动,这就促使整个计算领域需要更加强大的处理引擎和量身定制的高性能内存解决方案。

  GPU一直是推理引擎的首选,在服务器和台式机等边缘和终端应用中,GPU一直使用的是GDDR6内存。但GDDR6的数据传输速率已达到标准NRZ信号的实际极限——24Gbps。为了满足未来GPU的带宽需求,需要使用新信号机制的新一代GDDR。而使用PAM3信号的GDDR7内存可将数据传输速率提高至40 Gbps或以上。

  作为AI 2.0的首选半导体IP供应商,Rambus提供业界领先的 HBM、PCIe和 CXL IP,现在更提供业界首个GDDR7内存IP。Rambus GDDR7为GDDR7存储器的实现提供了功能齐全且具有高带宽效率的解决方案。它支持40 Gbps的运行速度,为GDDR7存储器设备提供160 GB/s的吞吐量,较业界吞吐量最高的GDDR6(同样来自Rambus)提高了67%。Rambus GDDR7实现了适用于最先进AI加速器、图形和高性能计算(HPC)应用的GDDR内存部署。

  Rambus半导体IP总经理Neeraj Paliwal表示:“AI 2.0工作负载对带宽提出了前所未有的高要求,因此提供更高的内存性能变得至关重要。借助我们开创性的GDDR7IP解决方案,设计人员可以快速利用最新一代GDDR存储器的优势,实现业界领先的吞吐量。”

  IDC内存半导体副总裁Soo-Kyoum Kim表示:“GDDR7内存的性能较GDDR6大幅提升。对任何希望充分利用GDDR7优化的速率和延迟特性的人来说, Rambus GDDR7IP将成为重要的工具。”

   可靠性、可用性和可维护性(RAS)功能,例如端到端数据路径奇偶校验、存储寄存器奇偶校验保护等

  Rambus GDDR7内存IP现已上市。如需了解更多Rambus GDDR7有关信息,敬请点击此处访问。

  本站部分文章为转载或网友发布,目的在于传递和分享信息,并不代表本网赞同其观点和对其真实性负责;文章版权归原作者及原出处所有,如涉及作品内容、版权和问题,我们将根据著作权人的要求,第一时间更正或删除。

  NVIDIA 发布 Triton 推理服务器重大更新,全球超过 25000 余家公司部署 NVIDIA AI 推理平台


18新利

18新利
news information
   


邮箱:sales@syxhjs.com

电话:023-68610113

18新利:023-86120027

地址:重庆市高新区科园一路73号渝            高大厦F座5-1、6-5