跳到正文
10月20日周二
  1. AWS Machine Learning Blog64

    TwelveLabs Pegasus 1.5 视频语言模型现已登陆 Amazon Bedrock

    TwelveLabs 的视频语言模型 Pegasus 1.5 现已在 Amazon Bedrock 上线。该模型支持最长 2 小时的视频分析,提供时间戳元数据生成、多模态参考图像提示和免预索引的即时处理能力,可从 Amazon S3 URI 直接加载并返回结构化 JSON 结果。

    发布时间:

    推荐理由:TwelveLabs 的 Pegasus 1.5 视频语言模型上线 Amazon Bedrock,支持时长达两小时的视频长文本分析、时间戳元数据生成和多模态参考图像提示,为开发者处理长视频数据提供了官方托管方案。

  2. AWS Machine Learning Blog64

    AWS 推出 vLLM 双向 KV 缓存传输功能以降低多轮智能体首字延迟

    AWS 团队在 vLLM 中引入了双向 KV 缓存传输机制,允许解码节点将此前计算的 KV 缓存返回给预填充节点,从而避免多轮对话中的重复计算。在 Amazon EC2 P5en 实例集群的基准测试中,该功能在长提示词下将 Qwen3-32B 和 GLM-5-FP8 的首字延迟(TTFT)分别降低了最多 1.6 倍和 3.3 倍。

    发布时间:

    推荐理由:文章详细介绍了 vLLM 中双向 KV 缓存传输的架构与基准测试数据,帮助开发者评估其在减少多轮智能体工作负载首字延迟方面的实际效果。

  3. AWS Machine Learning Blog65

    AWS 推出 vLLM 推送式 KV 缓存传输机制以改善推理延迟

    AWS 推出了 vLLM 的推送式 NIXL 连接器,通过将解码侧的块注册和传输设置移至后台线程,与预填充计算进行重叠。在 Qwen3-32B 模型基准测试中,该模式相比拉取模式可将首字延迟(TTFT)降低最多 3 倍,并将每输出 token 耗时(TPOT)降低 30%。

    发布时间:

    推荐理由:文章介绍了 vLLM 的推送式 KV 缓存传输方案,读者可以了解它如何通过重叠预处理与解码设置来降低首字延迟。

10月19日周一
  1. LangChain:Blog52

    Numan 如何用 LangGraph 和 LangSmith 构建评测优先的 AI 健康教练 Nu

    英国数字健康公司 Numan 介绍了其基于 LangGraph 和 LangSmith 构建的 AI 健康教练 Nu 的评测体系与合规实践。文章指出,单轮静态评测和脚本对话在多轮对话中存在局限,团队因此采用静态数据集加模拟对话层的组合,并通过临床专家审核标准来守住医疗监管边界。

    发布时间:
  2. Meta Engineering Blog64

    Meta 详解 Thin Orchestrator 模式:让路由少干活提升 AI 智能体可靠性

    Meta 详细介绍了 Thin Orchestrator 架构模式,通过将核心调度层精简为仅负责路由和可靠性检查的确定性路由器,并将领域推理交由 14 个隔离的专用子智能体,有效解决了单智能体上下文污染和幻觉问题。该系统构建了 1,300 行的调度器,通过工作流模板和按需加载的知识文件,将数据列配置准备时间从数天缩短至一小时以内。

    发布时间:
  3. 量子位65

    AI 开始挑战最复杂的系统:生命

    量子位报道了 AI 生命科学从单点分子模型向生命世界模型的转向。文章指出,尽管 AI 制药在分子层面取得了进展,但新药研发的真正难点在于理解复杂的系统性生命过程;中美两地目前正加速布局生物数据、多尺度建模与实验验证等基础设施,推动 AI 进入理解生命系统的新阶段。

    发布时间:
  4. 量子位64

    国产互连芯片企业众星微发布12款量产芯片及三大新品

    量子位报道,国产高性能互连芯片企业众星微近日举行发布会,推出12款量产芯片、三款高性能互连芯片新品(含PCIe 6.0 Switch、800G多协议AI NIC及多模RAID芯片)及一整套核心IP。目前该公司全栈产品出货量已达80万颗,并已全面进入多家主流整机与解决方案厂商。

    发布时间:
  5. NVIDIA Blog31

    NVIDIA 与 EBU、Adobe 推进媒体行业智能体安全

    EBU 正在与 NVIDIA 合作扩展其主权框架,引入云服务、开源模型和集成伙伴,以帮助欧洲公共服务媒体在部署智能体时保持对数据、基础设施、模型和安全的控制。同时,Adobe 正在利用 NVIDIA 加速计算推进 Frame.io 视频智能体搜索能力,实现约 5 倍的嵌入向量生成速度提升、最高 4 倍的吞吐量增加以及高达 5 倍的搜索处理延迟降低。

    发布时间:
  6. Modal 官方工程博客41

    Modal 实测 NVIDIA Vera CPU:高负载下沙箱吞吐翻倍

    Modal 团队实测 NVIDIA 推出的大 Arm 兼容 CPU Vera,发现在高负载下沙箱吞吐量实现翻倍。该测试采用包含 50 个终端基准任务的 Agentless Agent Bench,模拟智能体与强化学习中的并发和异构工作负载。测试表明,该芯片在应对容器资源争抢等高压场景时表现出色的性能。

    发布时间:
  7. Hacker News-首页65

    Google Research 开源 Harness2:面向开放世界的递归智能体 harness 框架

    Google Research 开源了 Harness2,这是一个用于开放世界中递归智能体 harness 优化的即插即用框架。它在保持模型权重不变的情况下连接了任务级和 harness 级两层递归,支持并行与串行递归模式,并在多个专业基准测试中提升了模型表现。

    发布时间:
  8. Hacker News-首页66

    Harness Engineering 101: LLM 是大脑,harness 是身体

    开源项目 Harness Engineering 101 提供了一个从第一性原理构建 AI 智能体的 16 章开源图书与教程系列,用纯 Python 从零实现一个约 300 行的 toy agent。内容涵盖从基础 JSON 数组交互、工具调用、上下文管理到子智能体、守护进程及架构模式的完整演进过程。

    发布时间:
  9. Hacker News-首页63

    175 款 AI 工具服务条款复查发现 60% 在 15 周内发生变更

    作者对 175 款 AI 工具的服务条款进行了两次复查,发现在 15 周内有 60% 的工具修改了影响免费层商业化输出的条款,其中多数变更为收紧商业权益。文章列举了 Lexica、PicLumen、Suno 等工具条款收紧的具体案例,指出营销文案和实际合同可能存在差异,并建议创作者在生成内容时截图保留当时的条款。

    发布时间:
  10. O'Reilly Radar28

    实验项目 ContextCue:用 AI 保留跨团队协作中的上下文

    实习生 Dhruv Deshpande 开发了名为 ContextCue 的实验项目,旨在通过 AI 技术解决分布式团队在协作中容易丢失会议背景与共享上下文的问题。该项目探讨了如何利用人工智能工具保留跨团队交流中的核心意义,以改善软件工程与日常办公中的团队协作效率。

    发布时间:
  11. 公众号:小红书技术31

    小红书世界杯音画质保障实战:4K 直播与回放的画质增强、转码与多端适配

    小红书技术团队分享世界杯赛事音画质保障实践,通过直播采用轻量实时分支、回放采用离线模型,使直播码率降低约 15%、4K 增强档回放码率降低 13.3%。超高清档位增强转码速度提升 57 倍以上,可见性档转码速度提升约 79.4%。回放同时通过自研 Upmix 上变换以杜比全景声输出并按终端渲染能力选择音轨。

    发布时间:
  12. Hacker News-首页63

    Strot:编译大模型意图以实现本地零成本持续决策的项目发布

    开源项目 Strot 允许用户通过大模型在编译时将意图转换为本地决策模型,从而在生产环境中以零边际成本和约 60 毫秒延迟对海量记录进行分类、评分与路由。该工具支持通过 pip install strot-ai 安装,在运行时生成包含概率与置信度的类型安全 JSON 结果,并支持低置信度记录自动放弃决策。

    发布时间:
  13. Hacker News-首页31

    为什么你需要运行自己的 LLM 代理

    开发者 Jared Siegel 探讨了运行自建 LLM 代理的必要性,指出主流服务商提供的统计数据不足以满足工程决策需求。自建代理能带来多提供商与多模型集成、统一端点日志、虚拟 API 密钥管理以及快速切换模型等核心优势。掌握自己的基础设施和数据路径,有助于实现更好的应用可见性与自定义功能。

    发布时间:
  14. Hacker News-首页21

    A new way to think about borrow checking (in reverse) 如何反向思考借用检查

    介绍了 Valen 编程语言中一种采用逆向扫描进行内存安全检查的全新借用检查器。该编译器包含解析、静态类型、静态分组以及逆向安全检查等四个阶段,从函数末尾向上执行以实现内存安全性验证。实验性的 Valen 预计在二月发布 v0.1 版本。

    发布时间:
  15. Simon Willison24

    llm-echo 0.5 发布

    调试插件 llm-echo 0.5 版本发布,更新了模拟 token 使用量计算方式,以支持工具调用、系统提示词和 reasoning tokens。新版本可在不调用真实大语言模型的情况下回显输入的提示词,并提供相应的用法示例。

    发布时间:
  16. Hacker News-首页21

    Netflix VMAF:基于多方法融合的感知视频质量评估

    Netflix 开源了 VMAF(视频多方法融合评估),这是一个曾获艾美奖的感知视频质量评估算法软件库,包含 C 语言库 libvmaf、Python 库及命令行工具。该软件支持训练和测试自定义模型,集成了 PSNR、SSIM 等多种指标,并已作为滤镜被收录进 FFmpeg 中。

    发布时间:
  17. Hacker News-首页12

    Intel 8087 芯片:浮点加法与减法

    本文通过剖析 Intel 8087 芯片的显微照片与微代码,详细解释了其浮点加法和减法的硬件实现原理。相比 8086 处理器,1980 年推出的 8087 将加法运算速度提升了近 100 倍。文章进一步分析了芯片内部的整数加法器、移位器以及指数转换器等关键电路。

    发布时间:
10月18日周日