谷歌最近宣布推出其下一代人工智能超级计算机,据说它比英伟达的A100芯片更快,更节能,采用Tensor Processing Units (TPUs)和自定义光学开关,可重新配置芯片之间的连接以优化性能。该系统已用于训练Google的PaLM模型等大型语言模型,分布在两个4,000芯片的超级计算机上进行了50天的训练。
这个新系统使用定制的张量处理单元(TPU)芯片,这些芯片是第四代,已应用于谷歌90%以上的人工智能训练工作。根据谷歌的说法,TPU v4在同等尺寸的系统中使用时,其性能是英伟达A100芯片的1.7倍,并且能源效率也提高了1.9倍。
虽然谷歌尚未将其第四代TPU与英伟达最新的H100芯片进行比较,但该公司已暗示未来的TPU将与H100竞争,这个新的AI超级计算机的发布可以看作是谷歌AI技术实现的加速。凭借其最新的超级计算机,谷歌再次展示了其对推进人工智能技术并推动该领域可能性的承诺。
发表评论