1月3日讯，一支来自斯坦福大学和 Meta 的研究团队近日表示，谷歌最新的 Gemini 模型在常识推理任务上并非落后于OpenAI的GPT模型。
该研究团队表示，之前基于有限数据集的评估未能完全捕捉到Gemini真正的常识推理潜力。并在新的测试集中证明Gemini的推理能力比之前强很多。这次的评估更公平，设计了需要跨模态整合常识知识的任务，对Gemini在复杂推理任务中的表现进行深入评估。
研究团队表示，Gemini Pro 的性能和 GPT-3.5 Pro 相当，不过在准确性上落后于 GPT-4 Turbo。 [原文链接]