马斯克:将使用大量英伟达H100 GPU来训练xAI聊天机器人Grok
鞭牛士报道,7月3日消息,据外电报道,特斯拉公司首席执行官兼xAI创始人埃隆·马斯克分享了他在开发AI 聊天机器人Grok 方面投入的资源。
马斯克最近透露,他的即将推出的 AI 聊天机器人 Grok 3 版本将在 100,000 个Nvidia H100芯片上进行训练。
H100芯片,也称为Hopper,对于处理大型语言模型(LLM)的数据至关重要,在硅谷备受追捧。
每个 Nvidia H100 GPU 芯片的成本估计约为 30,000 美元,有些估计甚至高达 40,000 美元。
这意味着 Grok 3 的训练可能在价值 30 亿至 40 亿美元的 AI 芯片上进行,这几乎是马克·扎克伯格的 Meta Platforms Inc.押注金额的三到四倍。
目前尚不清楚这些芯片是马斯克的公司直接购买的还是从云服务提供商那里租用的。
在之前的采访中,马斯克提到 Grok 2 需要大约 20,000 台 H100 进行训练。
马斯克的人工智能初创公司 xAI 已经发布了 Grok-1 和 Grok-1.5,Grok 2 将于 8 月推出。马斯克暗示 Grok 3 将于今年年底发布。
人工智能在各个行业的应用正在迅速增长,导致对人工智能芯片的需求很高。
这导致科技公司之间竞相购买这些芯片,例如马斯克的 xAI 和 Meta,它们也堆积了大量 GPU。
这也加剧了对顶尖人工智能人才的激烈竞争,人工智能初创公司Perplexity创始人兼首席执行官Aravind Srinivas强调道。
人工智能技术的发展和投入的资源对于各个行业的未来都至关重要,包括汽车和太空探索,而马斯克的公司是这些行业的主要参与者。