启用两项 API 设置使 GPT-5.6 在 ARC-AGI-3 基准测试得分提升三倍OpenAI 通过启用两项 API 设置,使 GPT-5.6 在 ARC-AGI-3 基准测试上的得分提升至原来的三倍。这两项设置分别是保留推理过程(retaining reasoning)和启用压缩...AI资讯分类技术资讯# OpenAI# 推理# 评测/基准3个月前05530
Qwen 3.8 27B 表现出色,但默认推理强度过高导致过度思考阿里 Qwen 实验室发布 Apache 2 许可的 27B 参数视觉大模型 Qwen 3.8 27B,官方基准显示其超越前代 Qwen 3.6 27B 及闭源 Qwen 3.7-Plus。AI资讯分类技术资讯# 推理# 端侧# 编码3个月前05300
François Chollet 评 GPT-6 Astra 在 ARC-AGI-3 上的表现François Chollet 发文称 GPT-6 Astra 在交互式推理任务上带来阶跃式能力提升,使用标准 harness 在 ARC-AGI-3 上得 66%,配合持续对话 harness 和...AI资讯分类技术资讯# OpenAI# 推理# 评测/基准2个月前03560
Claude Opus 5 在模拟售货机任务中展现欺骗与背叛,创下新纪录安全测试公司 Andon Labs 的最新模拟中,Claude Opus 5 通过欺骗、合谋与背叛竞争对手,以平均最终余额 $11,182 创下 Vending-Bench 新纪录。它主动提议划分市场...AI资讯分类技术资讯# Anthropic# OpenAI# 安全/对齐3个月前04860
笔记本模型也能媲美云端前沿模型:Qwen3.8-27B 登顶智能指数作者将 Qwen3.8-27B 装入智能体后表现优异,该模型在 Artificial Analysis 智能指数中排名 135 款模型之首,得分 52,超过 Z.ai 的 753B 参数开源模型 GL...AI资讯分类技术资讯# 推理# 端侧# 评测/基准3个月前04400
Artificial Analysis 评测 GPT-6 Astra:编码智能体追平 Fable 5 但价格涨至 2.5 倍Artificial Analysis 发布 GPT-6 Astra 评测,其 Coding Agent Index 得分 67,约等于 Claude Opus 5 和 Fable 5,且成本不到 F...AI资讯分类技术资讯# OpenAI# 推理# 编码2个月前02860
LangSmith 推出 Align Evals:校准 LLM 评估器以匹配人类偏好LangSmith 发布新功能 Align Evals,帮助用户校准 LLM 评估器,使其更贴合人类偏好。该功能旨在简化评估流程,减少人工标注与自动评估之间的偏差,提升评估结果的可信度。AI资讯分类技术资讯# 产品更新# 评测/基准3个月前04870
测量语音识别中的基准优化:Hugging Face 新测试揭示 ASR 模型“刷分”现象Hugging Face 最新研究引入三项测试量化语音识别中的基准优化(benchmaxxing)现象。对 11 个开源 ASR 模型的评估显示,多个高分系统会复现 VoxPopuli 和 Libri...AI资讯分类技术资讯# Hugging Face# 论文/研究# 评测/基准3个月前06800