跳到正文
热点事件持续更新

llama.cpp 修复 qwen4exp 层输入以支持 DFlash

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

llama.cpp 发布 b11822,修复了 qwen4exp 目标模型与 DFlash 草稿模型搭配时的层输入不匹配问题。此前 qwen4exp 将 hc-wide 残差以 [n_embd, hc, n_tokens] 形式发布为 t_layer_inp,而 DFlash 编码器按 [n_embd, n_tokens] 读取层输入,导致首个请求在 extract_layer_inputs 中中止。 该修复针对 qwen4exp 与 DFlash 草稿模型的组合,使两者可以搭配使用。

AI 根据报道生成 · 48 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月22日
  1. llama.cpp Releases
    llama.cpp b11822 修复 qwen4exp 层输入以适配 DFlash 草稿模型

    llama.cpp b11822 修复了 qwen4exp 目标模型与 DFlash 草稿模型搭配时的层输入不匹配问题。qwen4exp 将 hc-wide 残差以 [n_embd, hc, n_tokens] 形式发布,而 DFlash 编码器按 [n_embd, n_tokens] 读取,导致首个请求在 extract_layer_inputs 中中止。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。