Hugging Face 发布 LFM2.5 系列 DSpark 草稿模型,推理速度最高提升 3.18 倍Hugging Face 发布 LFM2.5 系列三款模型的 DSpark 草稿模型检查点,通过投机解码在不改变输出质量的前提下,GPU 吞吐最高提升 3.18 倍,端侧最高 2.87 倍。草稿模型约...AI资讯分类技术资讯# 推理# 模型发布# 部署/工程3个月前05560
Mooncake 如何为 Miles 强化学习系统实现高效批量 Rollout 数据传输大规模 LLM 强化学习采用解耦架构后,rollout 数据从推理侧到训练侧的传输成为瓶颈。Mooncake 针对 Miles 系统中异构、碎片化的 rollout 数据(如 list[np.ndar...AI资讯分类技术资讯# 开源/仓库# 数据/训练# 部署/工程3个月前03560
LangSmith 预览构建:如何在合并前测试智能体变更LangSmith 预览构建让团队在合并智能体变更前,于临时的、类生产环境的部署中测试拉取请求分支。该功能旨在降低变更上线风险,使智能体改动验证更贴近真实运行条件。AI资讯分类技术资讯# 产品更新# 智能体# 部署/工程3个月前03780
OpenRouter 宣布加入 StripeOpenRouter 宣布与 Stripe 合并,以加速推动全球经济增长。OpenRouter 目前每日处理来自 400 多个 AI 模型的 10+ 万亿 token,服务超 1000 万开发者与公司...AI资讯分类技术资讯# 行业动态# 部署/工程3个月前07000
突破 DeepSeek-V4-Pro 服务极限:H20 上的多场景优化方法LMSYS 团队针对 1.6 万亿参数的 MoE 模型 DeepSeek-V4-Pro,在 H20 GPU 上通过场景化服务配置逼近 B300 性能。单节点 H20-141GB 参考实现达 271 o...AI资讯分类技术资讯# DeepSeek# 推理# 论文/研究3个月前04320
Mojo 语言正式开源,编译器与工具链全面开放Mojo🔥 语言现已正式开源,采用 Apache 2.0 许可证(含 LLVM 例外),编译器、工具链及全部源码已发布至 modular GitHub 仓库。Mojo 上周刚达成 1.0 版本(源码稳...AI资讯分类技术资讯# 开源/仓库# 开源生态# 部署/工程3个月前04720
Git 大规模托管为何如此困难Git 的分布式设计使其大规模托管面临固有挑战:packfile 作为存储和网络传输的基础单元,在服务器端成为可用性与扩展性的瓶颈。业界曾尝试三种方案——分布式文件系统、分布式 packfile、分布...AI资讯分类技术资讯# 产品更新# 智能体# 编码3个月前06080
Claude Science 产品指南:面向生命科学研究的 AI 工作台Anthropic 发布 Claude Science(测试版),一个覆盖生命科学数字化流程的 AI 工作台,支持数据分析、图表生成与结果产出,并可通过本地守护进程将重任务调度至自有 GPU、SLUR...AI资讯分类技术资讯# Anthropic# 产品更新# 部署/工程3个月前06020
智能体记忆并非越多越好:八款模型评测显示剂量需按能力校准智能体记忆并非可随意开启的功能,而是需按模型能力校准的剂量。强模型适合注入完整指南集,DeepSeek-V3.2(671B MoE)任务完成率提升+9.5个百分点;较弱模型采用精选检索效果最佳,gpt...AI资讯分类技术资讯# 智能体# 论文/研究# 部署/工程3个月前05080
Claude Tag 如何担任 Anthropic CI/CD 故障的一线响应者Anthropic 的 CI 工程师用 Claude Tag 构建了值班智能体,作为 CI/CD 故障的一线响应者。Claude 在事故发生后中位 14 分钟发布首份基于证据的分析,最快案例中 3 分...AI资讯分类技术资讯# Anthropic# MCP/工具# 教程/实践3个月前08380