跳到正文
热点事件持续更新

Vast CTO在Fully Connected 2026讨论AI代理内存管理方案

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Vast CTO在Fully Connected 2026会议上讨论了其AI代理内存管理的分级存储方案。该方案旨在通过将KV cache从GPU内存卸载到CPU内存和持久化存储,以缓解AI智能体在长会话和企业应用中的内存压力,并支持在多台机器间调度会话数据。Vast称,该方案结合了Nvidia的Dynamo软件进行协调,并认为企业级智能体需要持久化存储会话内容用于微调或训练。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月7日
  1. SiliconANGLE
    Vast 使用分级存储缓解 AI 智能体内存需求

    Vast 通过分级存储技术缓解 AI 智能体在长会话和企业级应用中的内存压力,将 KV cache 从 GPU 内存逐步卸载到 CPU 内存和持久化存储中。该方案结合了 Nvidia 的 Dynamo 软件进行协调,支持在多台机器间灵活调度会话数据,减少重复计算。企业级智能体需要持久化存储会话内容以用于微调或训练,这使 AI 智能体内存成为治理与性能的关键资产。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。