跳到正文
  1. 量子位76

    字节Seed团队发现DeepSeek模型存在相位敏感性问题

    字节Seed团队研究发现,DeepSeek-V4系列模型在处理长上下文时,检索准确率会随信息在输入中的位置呈现周期性波动,这种现象被称为相位敏感性。研究指出该问题源于分块KV Cache压缩技术,不同位置的信息在压缩过程中会产生系统性差异,导致模型表现不稳定。研究建议在评估此类模型时,需关注不同压缩相位下的检索表现,而非仅依赖整体平均分。

    发布时间:

    推荐理由:研究揭示了分块KV Cache压缩技术会导致模型检索能力随输入位置呈现周期性波动,为评估长上下文模型提供了新的维度。

  1. Together AI78

    GLM-5.3 与 Claude Fable 5 在 DeepSWE 编码基准上的对比分析

    在 DeepSWE 编码基准测试中,GLM-5.3 与 Claude Fable 5 的首轮通过率(pass@1)分别为 69.0% 和 69.7%,表现几乎持平。

    发布时间:

    推荐理由:通过对比 GLM-5.3 与 Claude Fable 5 在 DeepSWE 上的表现,揭示了两者在编码任务中相似的准确率与显著的成本差异,为开发者选择模型提供了性价比参考。

  2. Together AI82

    GLM-5.3 与 GPT-5.6 Sol 在 DeepSWE 上的编码能力与成本对比

    Together AI 在 DeepSWE 基准上对比了 GLM-5.3 与 GPT-5.6 Sol 的表现。GPT-5.6 Sol 在单次尝试中保持领先,而 GLM-5.3 在多次尝试下表现更优且成本仅为前者的一半。分析建议采用级联路由策略,即优先使用 GLM-5.3,在测试失败时再调用 GPT-5.6 Sol,以实现更优的成本效益与任务覆盖率。

    发布时间:

    推荐理由:通过对比 GLM-5.3 与 GPT-5.6 Sol 在 DeepSWE 上的表现,展示了不同模型在成本、速度与任务覆盖率上的权衡,并提出了基于验证器的级联路由策略。

  1. Together AI76

    DeepSeek V4 Pro 0813 与 Claude Fable 5 在 DeepSWE 上的性能与成本对比

    Together AI 在 DeepSWE 基准上对比了 DeepSeek V4 Pro 0813 与 Claude Fable 5 的编码能力。结果显示,Claude Fable 5 在单次尝试中准确率略高,但 DeepSeek V4 Pro 0813 在多次尝试下表现更优且成本仅为前者的 1/90。

    发布时间:

    推荐理由:通过对比 DeepSeek V4 Pro 0813 与 Claude Fable 5 在软件工程任务中的表现,展示了低成本模型在多次尝试下的高性价比,并验证了通过级联路由优化成本与准确率的可行性。

已经到底了