GPT-4o成为全领域SOTA！基准测试远超Gemini和Claude，多模态功能远超GPT-4

文章摘要

【关 键 词】 OpenAI、GPT-4o、实力惊艳、内存突破、逆缩放克服

在OpenAI发布GPT-4o后，外界评价从最初失望迅速转变为惊艳。在多项基准测试中，GPT-4o展现出了SOTA（当前最佳）的实力。在LMSys聊天机器人竞技场中，GPT-4o以1310的ELO分数位居榜首，与第二名GPT-4-turbo的1253分相比，取得了显著的领先。此外，在多模态领域的Reka Vibe-Eval基准测试中，GPT-4o不仅以高分数荣登第一，还克服了大模型常见的“逆缩放”问题。

特别值得一提的是，GPT-4o在内存处理上取得了重要突破。在新的“针里寻针”基准测试中，该模型表现卓越，其上下文记忆能力显著超越先前模型，每个token位置的正确率不低于80%，接近完美表现。

这些结果显示，GPT-4o的能力被初步评估严重低估。它的实际表现不仅在各项测试中稳居首位，还展现出发布会未曾提及的卓越功能，为人工智能领域带来了新的突破和可能。

原文和模型

【原文链接】 阅读原文 [ 3320字 | 14分钟 ]
【原文作者】 新智元
【摘要模型】 glm-4
【摘要评分】 ★★★☆☆

智谱AI

智谱AI是由清华大学计算机系技术成果转化而来的公司，致力于打造新一代认知智能通用模型。公司合作研发了双语千亿级超大规模预训练模型GLM-130B，并构建了高精度通用知识图谱，形成数据与知识双轮驱动的认知引擎，基于此模型打造了ChatGLM（chatglm.cn）。此外，智谱AI还推出了认知大模型平台Bigmodel.ai，包括CodeGeeX和CogView等产品，提供智能API服务，链接物理世界的亿级用户、赋能元宇宙数字人、成为具身机器人的基座，赋予机器像人一样“思考”的能力。