马斯克豪掷40亿购入10万张H100芯片,只为训练xAI的Grok3!这位科技界的"钢铁侠"不仅在火箭和电动车领域大展拳脚,现在又在AI领域搞了个大新闻。

马斯克在推特上连回两条,为xAI造势,宣布8月发布Grok2,年底将推出在10万张H100上训练的Grok3。这可是芯片加持的创新数据训练,目标直指OpenAI的GPT,打造新一代大语言模型。

QQ截图20240704093348.jpg

自从Grok1.5发布后,马斯克就一直在为xAI这家AI初创公司摇旗呐喊。Grok是马斯克正式进入生成式AI赛道的AI聊天机器人,来自一个与OpenAI、谷歌、Meta等巨头同台竞技的初创公司xAI。他们不仅开源,还造超算中心,野心勃勃。

自今年3月以来,xAI陆续推出了Grok1.5大语言模型和首个多模态模型Grok1.5Vision。xAI曾表示,Grok1.5V在多学科推理、文档理解、科学图表、表格处理等多领域「都能媲美现有的前沿多模态模型」。

马斯克在5月表示,xAI是一家新公司,因此Grok仍有大量准备工作要做,才能与谷歌Deepmind和OpenAI相抗衡。但xAI一直在暗暗发力,直指模型性能,期望能给大公司上压力。

现在,马斯克宣布Grok2将在8月推出,这将是数据训练方面的巨大进步,可能有效解决「人体蜈蚣效应」,即模型会产生相同的输出结果。这对于使用大语言模型的用户来说是个好消息。

马斯克还透露,Grok3将在年底推出,并且在经过10万个英伟达H100GPU的训练后,将成为「特别的东西」。这笔订单价值30亿至40亿美元,显示出马斯克对AI的重视和投入。

xAI的Grok2和Grok3的用户使用范围也备受关注,大家对10万张H100训练出来的模型充满期待。尽管像Meta这样的其他科技巨头正在购买更多的GPU,但xAI的这一举措无疑显示出其在AI领域的雄心。

此外,马斯克还亲自监工xAI的数据中心,采用液冷技术,以应对AI智算的需求爆发。液冷方案具有冷却效率高、节能环保、稳定性强的优点,已成为AI数据中心的首选。