o3智商高达157？网友质疑用编码分数衡量AI智商的有效性，认为该方法忽略了AI与人类的本质区别。
原文标题：o3智商高达157？每13333人中才有一个这么高，网友：编码分数无意义
原文作者：机器之心
冷月清谈：
近日，有网友根据Codeforces编码评级估算出OpenAI o3的智商高达157，引发热议。该网友假设参赛程序员排名前15%，并以此推算出o3的智商以及在人类中的排名。对比之下，GPT-4o的智商为115，o1 preview为123，o1为135，o1 pro为139，o3 mini为141。
虽然有人找到了o1在挪威门萨智商测试中的结果（133），与表格中估计的135相差不大，一定程度上验证了估算方法的可靠性，但该方法仍受到质疑。
许多网友认为，用编码表现的z分数代表智商毫无意义，尤其对于LLM来说，它们拥有对互联网上代码的完美记忆。如果LLM针对编码测试进行训练，那么用编码分数衡量智商就更加不靠谱。
也有人指出，智商测试本身是用于评估人类的指标，而该方法通过考虑AI擅长的单一指标来假设广义智能，甚至没有使用标准智商测试，其结论的有效性值得商榷。
虽然有人找到了o1在挪威门萨智商测试中的结果（133），与表格中估计的135相差不大，一定程度上验证了估算方法的可靠性，但该方法仍受到质疑。
许多网友认为，用编码表现的z分数代表智商毫无意义，尤其对于LLM来说，它们拥有对互联网上代码的完美记忆。如果LLM针对编码测试进行训练，那么用编码分数衡量智商就更加不靠谱。
也有人指出，智商测试本身是用于评估人类的指标，而该方法通过考虑AI擅长的单一指标来假设广义智能，甚至没有使用标准智商测试，其结论的有效性值得商榷。
怜星夜思：
1、如果编码能力不能代表AI的智商，那什么指标更合适呢？
2、AI的快速发展是否意味着它最终会超越人类的智能？
3、如果o3的智商真的达到了157，它在现实生活中能做些什么？
2、AI的快速发展是否意味着它最终会超越人类的智能？
3、如果o3的智商真的达到了157，它在现实生活中能做些什么？
原文内容
机器之心报道
机器之心编辑部
从韦氏智商测试来看，如果 o3 的 IQ 真这么高，则称得上非常优秀。
OpenAI o3 的智商（IQ）竟然已经这么高了吗
今天，Reddit 上一则热帖宣称「OpenAI o3 的 IQ 估计为 157」，并放出了一张数据图。
这意味着什么呢？人类中的 0.0075% 才能达到这个智商水平。更具体地说，每 13,333 个人中才出来一个这么高智商的。
对比之下，GPT-4o 的 IQ 为 115、o1 preview 为 123、o1 为 135、o1 pro 为 139、o3 mini 为 141。
同样更具体地讲，GPT-4o 每 6 人中有一个、o1 preview 是每 16 人、o1 是每 93 人、o1 pro 是每 200 人、o3 mini 是每 333 人。
这些 IQ 是如何计算出来的呢？疑似原作者表示，他根据 Codeforces 编码评级来粗略地估计 IQ，并假设报名时竞争程序员排名前 15％，最后得出 GPT-4o、o1 preview、o1、o1 pro、o3 mini 和 o3 的 IQ 以及在人类中的排名。
此前还有人整理了 GPT-4o 与 o1 preview、o1、o3 在 2024 年 AIME 数学竞赛题目测试（AIME 2024）中的结果，从 13.4 到如今的 96.7，七个月的时间，数学能力实现了飞跃式提升。
仅从以上数据来看，AI 大模型的进步速度着实令人震惊。不过，毕竟开局一张图，o3 的 IQ 真的如表格中那么高吗？
有人找到了「Tracking AI」中 o1 在挪威门萨智商测试（Mensa Norway）IQ 测试中的结果（为 133，与上面表格中估计的 135 相差不大），一定程度上验证了 o3 估计智商的可靠性。
因此，未来等 o3 正式发布以后，它的挪威门萨智商测试结果将更加值得期待。
o3 IQ 如此之高，瞬间引爆了大家伙的评论热情。
网友热评
有网友直呼：「这张图是我见过最愚蠢的东西之一，这些数据根本不能代表智商。他们用编码表现的 z 分数代表智商。但编码不是智商测试，尤其是对于参加编码测试的 LLM 来说，它们对所有在互联网上分享的代码具有完美的数字记忆。o3 甚至无法解答我 6 岁和 8 岁的孩子可以解答的问题。」
也就是说，如果 LLM 针对编码测试进行训练，那么用编码表现分数代表智商是毫无意义的。
但另一位网友表示：「并非如此，这是一种基于相关性的『转换』，但首先相关性有点弱，其次它转化为机器智能的效果尚不明确，即人工智能模型可能擅长编码，但在其他领域却不行。」
网友指出：「IQ 本身就是用来评估人类的指标。它评估与智力相关的特定技能，并理所当然地认为人类应该拥有许多其他特征。而这张图通过考虑人工智能可以擅长的单一指标来假设广义智能，他们甚至没有使用智商测试来得出这个结论，而是根据与智商相关的指标来推断。」
总的来说，人们对于所谓的「o3 智商高达 157」并不认可。或许，这又是一场炒作吧。
参考链接：https://www.reddit.com/r/singularity/comments/1hkxmi6/o3s_estimated_iq_is_157/
© THE END
转载请联系本公众号获得授权
投稿或寻求报道：[email protected]