Gemini 发布遭网友质疑，称测试标准有失偏颇，效果视频疑似剪辑

据量子位 12 月 7 日报道，有网友指出，谷歌发布的 Gemini 60 页技术报告中存在多处不妥之处。MMLU 测试中，Gemini 结果下面标有灰色小字标 CoT@32，代表使用了思维链提示技巧、尝试了 32 次选最好结果。而作为对比的 GPT-4，却是无提示词技巧给 5 个示例，测试标准有失偏颇。 此外，针对谷歌 Gemini 的精彩演示视频，机器学习讲师 Santiago Valdarrama 认为该段视频的文字免责声明可能暗示了展示的是精心挑选的好结果，而且不是实时录制而是剪辑的。谷歌也在一篇博客文章中解释了多模态交互过程，几乎承认了使用静态图片和多段提示词拼凑，才能达成视频中的效果。