跳到正文
llama.cpp Releases· github-actions[bot]·· 8 小时前AI 评分18

llama.cpp b11604 为 KleidiAI 新增 SME2 Q4_K 与 Q6_K matmul 支持

b11604

AI 导读

llama.cpp 发布 b11604 版本,为 KleidiAI 后端新增 SME2 架构下的 Q4_K 和 Q6_K 矩阵乘法(matmul)支持,由 Arm 工程师 Charles Xu 提交。该改动面向 macOS Apple Silicon(arm64)等平台,其中 macOS Apple Silicon 的 KleidiAI 构建仍标记为 DISABLED。

来源:llama.cpp Releases · github.com