实测GPT-6 Astra:速度、前端与代码能力对比GPT-5.6 Sol的全面升级GPT-6 Astra正式向所有订阅用户推送,作者实测后认为其综合能力追平Claude Fable 5,且额度100%可用。相比GPT-5.6 Sol,速度明显提升,大型系统审查从数小时缩短到约10分...AI资讯分类技术资讯# OpenAI# 智能体# 编码2个月前04220
OpenRouter 推出 Ori Eval 简化评估流程推出 Ori Eval:编写首个评估的最简单方式。 没有绝对最好的模型,只有最适合每项任务的模型。Ori Eval 利用 OpenRouter 的 API 处理代码库中的每项任务,然后评估结果。 cu...AI资讯分类技术资讯# 产品更新# 评测/基准3个月前04160
Databricks 发布 OfficeQA Pro V2:面向企业落地推理的新基准Databricks 发布 OfficeQA Pro V2,一个用于评估企业落地推理能力的新基准。该基准旨在检验模型在真实办公场景中基于给定资料进行推理的准确性与可靠性,为企业级 AI 应用选型提供参...AI资讯分类技术资讯# 推理# 评测/基准3个月前03880
在本地运行 Qwen3.8 27B:来自我的 Mac Studio 的实际数据Qwen3.8 27B(27.3B 参数,混合注意力架构,262,144 token 上下文窗口,Apache 2.0 开源)在 Mac Studio M3 Ultra 上经 Ollama 以 Q4...AI资讯分类技术资讯# 端侧# 评测/基准# 部署/工程2个月前03620
François Chollet 评 GPT-6 Astra 在 ARC-AGI-3 上的表现François Chollet 发文称 GPT-6 Astra 在交互式推理任务上带来阶跃式能力提升,使用标准 harness 在 ARC-AGI-3 上得 66%,配合持续对话 harness 和...AI资讯分类技术资讯# OpenAI# 推理# 评测/基准2个月前03560
LangChain 评测 CSV 数据问答系统:智能体、检索与 LLM 评估LangChain 发布针对 CSV 数据问答系统的基准评测,涵盖智能体、检索与 LLM 评估方法。文章提供基准测试结果、调试洞察及开源代码,帮助开发者构建更优的 CSV 数据问答系统。评测聚焦于实际...AI资讯分类技术资讯# 智能体# 评测/基准2个月前03540
Open ASR 排行榜新增首个全球南方语言:印地语与印度英语评测集Voice Arena 与 Hugging Face 合作,为 Open ASR 排行榜引入 Monsoon en-IN 和 Monsoon hi-IN 两个评测集,覆盖印地语与印度英语,其中印地语是...AI资讯分类技术资讯# Hugging Face# 数据/训练# 评测/基准2个月前03300
Artificial Analysis 评测 GPT-6 Astra:编码智能体追平 Fable 5 但价格涨至 2.5 倍Artificial Analysis 发布 GPT-6 Astra 评测,其 Coding Agent Index 得分 67,约等于 Claude Opus 5 和 Fable 5,且成本不到 F...AI资讯分类技术资讯# OpenAI# 推理# 编码2个月前02860