据小易智创xiaoyizc.com(不可错过的AI创业项目)观察:OpenAI的下一代旗舰模型“猎户座”(Orion)近期被曝出其提升幅度远不及预期,令人震惊。据The Information的报道,GPT-4与GPT-3之间的显著进步,似乎在“猎户座”身上并未重现,甚至可能已经进入收益递减的阶段。对此,知名悲观派学者Gary Marcus迅速庆祝,认为这一消息标志着AI行业的一个重大转折。
在他看来,许多AI公司的高估值是基于模型能力不断提升和即将达到通用人工智能(AGI)的期待。然而,若提升速度放缓,行业可能会陷入价格战,收入水平也将维持在低位。更令人担忧的是,随着芯片成本的高昂,这些公司很难维持盈利。Marcus警告说,一旦市场意识到这一点,金融泡沫的破裂将是不可避免的,甚至连英伟达也可能遭到波及。
与此同时,业内其他巨头也面临挑战。Anthropic未能如期发布Claude 3.5 Opus,谷歌的Gemini 2同样被曝出性能提升远低于DeepMind创始人的期待。似乎整个大模型领域都在遭遇瓶颈。
根据长期关注ChatGPT进展的“光头哥”Tibor Blaho透露,参与测试的OpenAI员工表示,“猎户座”在训练20%时便达到了GPT-4的性能,但最终的质量提升却小于从GPT-3到GPT-4的飞跃。这或许意味着传统的Scaling Law因高质量数据的短缺而陷入停滞。“猎户座”的开发成本极其庞大,可能会给OpenAI的数据中心带来更大的运营压力。
不过,从OpenAI CEO及资深员工的言论来看,这一切似乎并不是那么悲观。他们仍在积极进行“猎户座”的安全测试,预计将在明年初发布,而命名是否会继续使用GPT系列也成了一个悬而未决的问题。总而言之,OpenAI正面临着前所未有的挑战与机遇。