蚂蚁百灵开源轻量级混合推理 MoE 模型 Ling-3.0-tiny,采用 KDA 与 MLA 3:1 交替堆叠,并配备 128 个路由专家的稀疏 MoE 前馈网络,兼顾高效计算与推理能力。...
长程任务是 AI Agent 的关键难题,软件工程、科研和复杂决策都依赖其连续稳定决策。以往提升能力多靠更大模型,但扩展 Agent Horizon 又受限于基础设施和异构...
蚂蚁百灵开源轻量级混合推理MoE模型 Ling-3.0-tiny
蚂蚁百灵开源轻量级混合推理 MoE 模型 Ling-3.0-tiny,采用 KDA 与 MLA 3:1 交替堆叠,并配备 128 个路由专家的稀疏 MoE 前馈网络,兼顾高效计算与推理能力。...
projext
in 未分类