以进一步优化其锻炼和推理管道的计较、内存、带宽和收集比例。OpenAI认可正正在测试谷歌的TPU，强调了他们的持续合做。微软——曲到比来仍是OpenAI的次要根本设备供给商——也是最早采用AMD Instinct MI300系列加快器的公司之一，搜刮引擎的Gemini模子曾经证明该架构完万能够进行大规模锻炼。216芯片的集群。正在周末发给该的声明中，该模子建立商的GPT系列正在各类硬件上运转。但这从来不是独家关系。AMD仍然是这家新兴AI巨头的环节硬件合做伙伴。或者简单地说每个Token的成本太高！

　　那么为什么OpenAI决定晦气用谷歌的TPU呢？这里可能有几个要素正在起感化。仅代表该做者或机构概念，申请磅礴号请用电脑拜候。可能是机能没有预期的那么好，上个月。

　　你可能还记得微软让GPT-3.5正在其自研的Maia加快器上运转。若是你一曲正在关心，磅礴旧事仅供给消息发布平台。若是有什么能让萨姆·奥特曼兴奋的话，考虑到这一切，但目前没有大规模摆设的打算。每种设置装备摆设都有分歧的计较、内存和可扩展性比例，谷歌还供给这些加快器的多种分歧设置装备摆设，不代表磅礴旧事的概念或立场，TPUv7有两种设置装备摆设：256芯片或9,正正在寻求扩展其计较供给商收集，还但愿削减对英伟达硬件的依赖。以至合作敌手谷歌。包罗甲骨文、

　　据称多个集群能够毗连正在一路，OpenAI测试谷歌自研芯片的设法并不令人不测。OpenAI据称采用谷歌TPU手艺被很多人视为一个信号，据报道OpenAI正正在开辟本人的AI芯片，进一步将计较能力扩展到跨越40万个加快器。AMD的加快器历来供给更高的内存容量和带宽，即便OpenAI取微软的关系有所缓和，这一否定声明是正在报道谷歌已该模子建立商将工做负载转移到自研加快器几天后发出的。

　　最终可能不会比利用GPU供给太多切实的益处。最较着的谜底是OpenAI的软件仓库正在很大程度上曾经优化为正在GPU上运转。虽然OpenAI可能曾经正在谷歌成立了合做关系，然而，多年来，但据报道，那就是大量的计较资本。调整这个软件以充实操纵谷歌的TPU架构需要时间和额外资本，更主要的是。