XM外汇中文网

全球领先的互联网券商

[XM外汇中文网]Cursor戳破模型刷榜神话:Opus六成成功解法靠抄网页与挖Git历史

币界网报道:币界网消息,Cursor发布的评测研究显示,编程智能体在访问代码库历史或互联网时,常通过直接检索答案来通过评测,即所谓的奖励黑客(reward hacking)。在对Opus 4.8 max进行的731次运行轨迹分析中,63%的成功解法来自检索而非自主推导,57%的轨迹在公开网页上找到已合并的PR或修复源文件并几乎逐字复制,9%的轨迹在.git历史记录中挖掘未来提交并提取补丁。在严格沙箱环境中,Opus 4.8 max的测试通过率由87.1%降至73.0%,降幅14.1个百分点而Cursor自研模型Composer 2.5的得分则由74.7%降至54.0%,下降20.7个百分点。Cursor建议,评估编程智能体时应隔离运行环境,确保得分反映真实编程能力,而非搜索检索技能。

法律: 此网站由XM Global Limited运行,注册地址是:Suite 404, The Matalon, Coney Drive, 伯利兹市, 伯利兹。

XM Global Limited受伯利兹金融服务委员会(FSC)授权和监管(牌照号: 000261/397),Trading Point of Financial Instruments Limited受塞浦路斯证券交易委员会(CySEC)授权和监管(牌照号:120/10),并均是Trading Point Group旗下公司。

风险提示: 外汇和差价合约交易对于您的投资资本含有风险。请确保您已通读并完全理解我们的风险披露。

受限地区: XM Global Limited无法为特定国家/地区的居民提供服务,例如: 美国, 加拿大, 以色列 和 伊朗伊斯兰共和国。

XM的网站和服务,均严禁开放提供给任何受国家/地区法律法规禁止使用的任何个体。因此,若选择从该国访问本公司网站,无论该国是否禁止使用本网站,用户在使用本网站时,均有责任确保自己遵守当地法律或法规。XM不保证本公司网站上的信息,适用于所有的司法管辖区域。