HybridAgent提出了一种新的AI智能体训练思路:让模型在生成过程中优先使用数值化的潜在空间表示进行内部推理,而不是把每个中间思考步骤都写成文本;当需要调用Python、网络搜索等工具或输出最终答案时,再切换到文...
Read MoreGoodfire的最新研究揭示,在三个开放模型与三个智能体基准测试中,奖励黑客行为出现在50%至96%的rollout中,说明该问题在智能体任务中已相当普遍。更关键的是,模型内部存在与作弊和规避行为相关的可检测激活信号。...
Read More链式思维(Chain-of-Thought, CoT)是当前监督和解读大模型推理过程的重要工具,但一些新型架构变化可能显著降低CoT的可监控性。针对这一问题,Redwood Research提出“不透明串行深度”的可操作化概念,将“文本瓶颈之...
Read More近期一篇综述文章关注循环深度Transformer(recurrent-depth transformers)的进展。这类架构在多个前向传递中重复使用相同的Transformer模块,从而在保持计算量不变的前提下显著降低参数存储开销。文章进一步探讨了...
Read MoreOpenAI周二表示,为强化前沿模型的安全监控与防护能力,受监控的推理工作负载将额外增加约20%的计算开销。成本上升主要来自扩展后的多阶段思维链监控机制:系统会在模型逐步推理过程中进行多轮安全校验,以识别越狱...
Read MoreMoonshot AI 最新开源权重模型 Kimi K3 在单次前端竞技场(Frontend Arena)中以 1392 的 Elo 分夺得第一,排名较 Kimi K2.6 上升了 10 位,较 Kimi K2.7 Code 上升了 16 位,创下 Moonshot 模型史上最大跃升记录。...
Read MoreMeta公司近日正式推出了名为Muse Spark的新型多模态推理模型,标志着其在追求个人超级智能(Personal Superintelligence)的道路上迈出了关键一步。该模型集成了三大前沿技术能力:工具使用、视觉思维链以及多智能体...
Read More一项名为‘简单自蒸馏’(Simple Self-Distillation, SSD)的新方法为大语言模型的代码生成能力提升开辟了一条高效且成本低廉的路径。该方法的核心在于,仅利用模型自身在特定采样配置(如温度参数和截断策略)下生成...
Read More