llama.cpp Releases· github-actions[bot]·· 8 小时前AI 评分28
llama.cpp b11883 修复 4D 张量量化与 MoE 专家张量检测
b11883
AI 导读
llama.cpp 发布 b11883,修复 llama-quant 对 4D 张量的量化错误:此前 nrows_total 取 ne[1]*ne[2],导致只量化前 ne[2] 个切片、其余行被丢弃,现改用 ggml_nrows(tensor) 统计包含 ne[3] 在内的全部行。
来源:llama.cpp Releases · github.com