跳到正文
热点事件持续更新

vLLM支持Recursive的Flint模型更新

1 篇报道1 个报道来源18 小时前更新

先了解这件事

AI 综述

vLLM从第一天起就支持Recursive的Flint智能体功能。最新报道显示,vLLM的NVFP4和BF16检查点在单个GPU上运行,单个请求在GB200上以约500个token/s的速度解码,即使有100K个token的上下文。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. vLLM Team Blog精选
    vLLM 支持Flint智能体功能

    vLLM从第一天起就支持Recursive的Flint智能体。其NVFP4和BF16检查点在单个GPU上运行,单个请求在GB200上以约500个token/s的速度解码,即使有100K个token的上下文。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。