OpenAI(图片来源:Shutterstock)

OpenAI当地时间6月24日宣布,已与Broadcom联合开发AI推理芯片Jalapeno。这是OpenAI推进自有硬件布局、降低对NVIDIA GPU依赖的最新动作。

据SiliconANGLE报道,OpenAI计划在今年年底部署首批搭载Jalapeno的服务器,并在后续逐步扩大该芯片的应用范围。

与兼顾训练和推理的NVIDIA主力GPU不同,Jalapeno是一款专门面向推理场景的芯片。OpenAI表示,在早期测试中,Jalapeno的每瓦性能明显优于当前领先产品。

OpenAI尚未披露Jalapeno的更多设计细节,仅表示其底层架构重点在于减少数据搬移。

在网络侧,基于Jalapeno的推理集群还将采用Broadcom的Tomahawk系列技术。Tomahawk系列属于以太网交换芯片,可用于机架内服务器互联以及跨机架数据传输。

其中,最新一代Tomahawk 6最高可处理每秒1.6太比特流量,并可借助内置拥塞管理引擎,缓解网络拥塞带来的性能瓶颈。

此外,OpenAI还在开发与之配套的定制服务器机架,整合Jalapeno芯片和Broadcom网络设备。为此,OpenAI正与位于多伦多的数据中心设备设计公司Celestica合作。

关键词

#OpenAI #Broadcom #Jalapeno #AI推理芯片 #推理服务器 #NVIDIA #GPU #Tomahawk 6 #以太网交换芯片 #数据中心网络
版权所有 © DigitalToday。未经授权禁止转载或传播。