跳到正文
热点事件观察中

THUNLP 发布 Latent Compaction KV 缓存压缩方法

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

清华大学 THUNLP 提出 Latent Compaction,通过测试时训练为每篇文档学习紧凑的 KV cache,以压缩缓存占用。据其介绍,训练全程冻结模型权重,且只用文档的通用提示词,不接触下游问题或答案。 该方法已发布论文与代码,代码地址为 https://www.github.com/THUNLP/latent-compaction。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. Hugging Face Daily Papers精选
    THUNLP 提出 Latent Compaction:用测试时训练压缩 KV cache

    清华大学 THUNLP 提出 Latent Compaction,通过测试时训练为每篇文档学习紧凑的 KV cache,模型权重全程冻结,训练只用文档的通用提示词,不接触下游问题或答案。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。