【小哈划重点:目前已公开的数据显示,Meta公司是拥有H100 GPU最多的企业,数量约为35万颗。根据马斯克在X平台上最新发表的评论,他认为,特斯拉可能排名第二,xAI排名第三。】
训练Grok-2大模型需要大约2万颗英伟达H100 GPU芯片;而Grok-3模型及更高版本大模型将需要多达10万颗英伟达H100芯片。
当地时间4月8日,特斯拉CEO埃隆·马斯克(Elon Musk)在X Space的访谈中预测,到明年或2026年,人工智能的智慧可能会超过世界上最聪明的人类。
马斯克当天与挪威财富基金CEO尼古拉·坦根(Nicolai Tangen)进行了对谈。当被问及通用人工智能(AGI)的发展时间表时,马斯克表示:“如果你将AGI定义为比最聪明的人类更聪明,我认为可能是明年,或者是两年内。”
马斯克表示,他的人工智能公司xAI训练的聊天机器人Grok的下一个版本,预计将于5月前完成训练。
上个月,xAI推出了聊天机器人Grok增强版Grok-1.5,该机器人与OpenAI的ChatGPT竞争,并将向X的部分注册用户开放。马斯克早些时候表示,xAI将开源Grok。
在最新的访谈中,马斯克谈到训练下一个版本的Grok聊天机器人背后需要的算力。他说道,训练Grok-2大模型需要大约2万颗英伟达H100 GPU芯片;而Grok-3模型及更高版本大模型将需要多达10万颗英伟达H100芯片。
马斯克认为,Grok-2模型训练面临的最大阻碍是先进芯片的缺乏,除此之外,未来一两年内,用于大模型训练的电力供应也变得至关重要。
英伟达的H100 GPU是用于大模型训练的“算力标配”。目前已公开的数据显示,Meta公司是拥有H100 GPU最多的企业,数量约为35万颗。根据马斯克在X平台上最新发表的评论,他认为,特斯拉可能排名第二,xAI排名第三。
据称,xAI于2023年购买了约1万颗英伟达H100 GPU,这使得该公司拥有H100的数量达到2.6万至3万颗;而特斯拉拥有H100 GPU的数量将超过3万颗。特斯拉今年1月又追加了5亿美元新投资,购买约1万颗H100 GPU。
上个月,英伟达发布了基于下一代Blackwell架构的AI芯片,英伟达创始人CEO黄仁勋透露,新一代芯片的价格可能在3万至4万美元。这意味着人工智能企业将不得不为获得更先进的算力支付更高的费用。
马斯克今年年初表示,特斯拉每年在包括英伟达硬件在内的人工智能基础设施上的投资将至少达到数十亿美元。特斯拉正在加大对自动驾驶出租车的研发投入。
在谈到电动汽车时,马斯克重申中国汽车制造商是“世界上最具竞争力的”,并对特斯拉构成“最严峻的竞争挑战”。马斯克近日表示,特斯拉将于8月8日发布一款Robotaxi。
马斯克没有回应关于xAI的融资进展。上周有消息称,xAI正寻求在新一轮融资中筹集30亿美元资金,该公司估值将达到180亿美元。去年有消息称,OpenAI也在寻求新一轮融资,估值有望接近千亿美元。
ChatGPT推出以来,全球资本正在疯狂涌入人工智能领域。根据CB Insights的数据,去年风投资本在2500笔融资中总共向人工智能初创公司投资了425亿美元。
对此,DeepMind联合创始人CEO哈萨比斯(Demis Hassabis)近日警告称,人工智能行业正在触发一些类似于虚拟货币的泡沫。他认为,通用人工智能可能会在未来十年内发生,此前仍然需要一两个关键领域的突破。他提倡以更为科学的方法来构建AGI。责编:刘佳