跳到正文
热点事件持续更新

llama.cpp支持端侧决策模型

1 篇报道1 个报道来源17 小时前更新

先了解这件事

AI 综述

2026年10月2日,Hugging Face CEO Clément Delangue 在 X 发文称,决策模型现在可以通过 llama.cpp 在设备端运行,并强调其“免费、快速、私密”。他同时给出示例命令“llama serve -hf ggml-org/Kev-4B-GGUF”,指向 ggml-org/Kev-4B-GGUF 模型仓库。当前报道仅披露了这一运行方式和相关表述,未提供更多性能、适配范围或发布版本细节。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月2日
  1. X:Clément Delangue(Hugging Face CEO) (@ClementDelangue)
    llama.cpp端侧运行决策模型

    决策模型现在可在 llama.cpp 中在设备端运行。免费、快速、私密! llama serve -hf ggml-org/Kev-4B-GGUF

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。