跳到正文
热点事件持续更新

llama.cpp 为 ggml-cpu 新增 SVE 版量化矩阵向量乘实现

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

llama.cpp 发布 b11974,在 ggml-cpu 中新增 ggml_gemv_q8_0_4x8_q8_0 的 SVE 实现(#30585)。该函数是 q8_0 量化格式的矩阵向量乘内核,SVE 为 ARM 架构的向量指令集。 该提交已在 GitHub 完成签名验证,随版本提供 2 个资源文件。报道未给出该实现相对现有版本的性能或正确性测试结果。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. llama.cpp Releases
    llama.cpp b11974 为 ggml-cpu 新增 SVE 版 ggml_gemv_q8_0_4x8_q8_0

    llama.cpp 发布 b11974,在 ggml-cpu 中新增 ggml_gemv_q8_0_4x8_q8_0 的 SVE 实现(#30585)。该提交已在 GitHub 完成签名验证,随版本提供 2 个资源文件。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。