Amazon 发布开源工具 Turnstile 以优化智能体强化学习训练
Amazon 发布了开源代理工具 Turnstile,旨在解决智能体在强化学习(RL)训练中因文本重构导致的“重标记漂移”问题。该工具通过在生成瞬间捕获精确的 token ID、路由轨迹及多模态数据,确保训练数据与模型实际推理过程完全一致,且无需修改现有的智能体框架。
推荐理由:该工具通过在推理后端与智能体框架间拦截请求,解决了强化学习中因文本重构导致的训练数据漂移问题,为智能体训练提供了更精准的轨迹记录方案。
技术方向
开放权重、能下载下来自己部署的模型,开源框架与 GitHub 上爆火的 AI 项目。
84 条精选近 30 天 76 条共收录 672 条
Amazon 发布了开源代理工具 Turnstile,旨在解决智能体在强化学习(RL)训练中因文本重构导致的“重标记漂移”问题。该工具通过在生成瞬间捕获精确的 token ID、路由轨迹及多模态数据,确保训练数据与模型实际推理过程完全一致,且无需修改现有的智能体框架。
推荐理由:该工具通过在推理后端与智能体框架间拦截请求,解决了强化学习中因文本重构导致的训练数据漂移问题,为智能体训练提供了更精准的轨迹记录方案。
Together AI 在 ICML 2026 展示了九项研究成果,覆盖从智能体框架(如 DSGym、ThunderAgent)、模型推理优化(如 RARO、V1、Aurora)到系统与内核优化(如 Untied Ulysses、OEA、ParallelKernelBench)的全栈技术。
推荐理由:Together AI 在 ICML 2026 发布了九项涵盖从智能体到 GPU 内核的全栈研究,这些成果展示了如何通过跨层优化提升模型推理效率与性能。
Together AI 发布了 ParallelKernelBench (PKB),这是一个专门用于评估多 GPU 内核生成能力的基准测试框架,包含 87 个源自真实代码库的分布式计算问题。测试显示,即使是 GPT-5.5 和 Gemini 3 Pro 等前沿模型,在零样本设置下也难以生成优于 PyTorch + NCCL 基准的内核,且在处理 rank 协调和通信机制选择时表现出明显的推理短板。
推荐理由:该研究通过 ParallelKernelBench 评估了前沿模型在多 GPU 环境下编写高性能 CUDA 内核的能力,揭示了模型在处理复杂分布式通信与硬件协同方面的局限性。
Amazon Science 发布论文并开源 Simple Strands Agent (SSA) 框架,旨在解决智能体在模型意图与工具执行之间的不匹配问题。研究指出,通过优化文件编辑工具、引入执行反馈机制以及根据不同模型家族调整推理与工具调用的平衡,可显著提升智能体在 SWE-Bench 和 Terminal-Bench-2 等基准测试中的表现。
推荐理由:该研究通过定义智能体意图与执行之间的鸿沟,提出了模型与执行框架协同设计的原则,并开源了 SSA 框架以提升智能体在各类基准测试中的表现。