Databricks 发布 OfficeQA Pro V2:面向企业落地推理的新基准Databricks 发布 OfficeQA Pro V2,一个用于评估企业落地推理能力的新基准。该基准旨在检验模型在真实办公场景中基于给定资料进行推理的准确性与可靠性,为企业级 AI 应用选型提供参...AI资讯分类技术资讯# 推理# 评测/基准3个月前03880
在本地运行 Qwen3.8 27B:来自我的 Mac Studio 的实际数据Qwen3.8 27B(27.3B 参数,混合注意力架构,262,144 token 上下文窗口,Apache 2.0 开源)在 Mac Studio M3 Ultra 上经 Ollama 以 Q4...AI资讯分类技术资讯# 端侧# 评测/基准# 部署/工程2个月前03620
乐天用 Claude Fable 5 构建可自主运行数小时的智能体乐天AI业务总经理Yusuke Kaji测试Claude Fable 5后表示,该模型能自主运行更长时间,首次实现夜间无人值守完成复杂任务。与之前模型不同,Fable 5在运行中持续自我验证和纠错,避...AI资讯分类技术资讯# Anthropic# 智能体# 评测/基准4个月前07390
我花了54个小时,做了一个可能更公平的AI大模型排行榜。作者耗时54小时开发并免费开放了一个聚合多家可信榜单的AI大模型综合排行榜LatentRank。该榜单采用Bradley-Terry成对比较算法,并加入先验限制小样本结果,以解决不同榜单规模、领先幅度...AI资讯分类技术资讯# 产品更新# 评测/基准3个月前04320
Claude Fable 5.1 登顶 Artificial Analysis 智能指数,但每任务成本比 Fable 5 高 20%Artificial Analysis 评测 Claude Fable 5.1,其在 max effort 下得 66 分登顶 Artificial Analysis Intelligence Ind...AI资讯分类技术资讯# Anthropic# 推理# 智能体2个月前04520
Apple 提出 GH-ESD:面向实例级视觉任务的假设驱动错误切片发现方法Apple 机器学习研究团队提出 GH-ESD(Grounded Hypothesis-Driven Error Slice Discovery),一种针对目标检测与分割等实例级视觉任务的错误切片发现...AI资讯分类技术资讯# 论文/研究# 评测/基准3个月前04700
编写智能体时,哪种编程语言最合适?针对“动态语言比静态语言更省 LLM token”的流行说法,作者用 GPT-5.6 Sol 让智能体实现 zstd 解码器进行实测。结果显示,medium 努力度下动态语言表现更好,ultra 下静...AI资讯分类技术资讯# 现象/趋势# 编码# 评测/基准3个月前04620
Meta Muse Spark 1.3 在 Artificial Analysis 编码智能体指数中与 Claude 组合对比评测结果公布Artificial Analysis 编码智能体指数显示,Meta Muse Spark 1.3 (max) 在 Muse Code 下得 68 分,仅次于 Claude Code + Opus 5...AI资讯分类技术资讯# Meta# 编码# 评测/基准2个月前04980
启用两项 API 设置使 GPT-5.6 在 ARC-AGI-3 基准测试得分提升三倍OpenAI 通过启用两项 API 设置,使 GPT-5.6 在 ARC-AGI-3 基准测试上的得分提升至原来的三倍。这两项设置分别是保留推理过程(retaining reasoning)和启用压缩...AI资讯分类技术资讯# OpenAI# 推理# 评测/基准3个月前05530
Qwen 3.8 27B 表现出色,但默认推理强度过高导致过度思考阿里 Qwen 实验室发布 Apache 2 许可的 27B 参数视觉大模型 Qwen 3.8 27B,官方基准显示其超越前代 Qwen 3.6 27B 及闭源 Qwen 3.7-Plus。AI资讯分类技术资讯# 推理# 端侧# 编码3个月前05300