Bonsai-27B-GGUF
lmstudio-community · 工具包
面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。
一个从 Google 的 gemma-4-E2B 微调而来的小型文本模型,偏向写代码,以 GGUF 文件发布,可在 Ollama、LM Studio、Unsloth 或 Jan 中在自己的笔记本上运行。
Forge-1-Gemma-4-E2B 是一款工具包,属于开发类,由 Mindket 上架。可免费获取。当前为第 1 版,最近更新于 。在本页下载,是一个装着它全部文件的 zip 压缩包。这些文件不会自己运行。
ollama run hf.co/YoSaNoo/Forge-1-E2B:Q4_K_M
Forge-1-Gemma-4-E2B 是 YoSaNoo 发布的小型文本生成模型,从 Google 的 gemma-4-E2B 微调而来,以 GGUF 文件分享。作者把它定位为能在日常笔记本硬件上运行的编程助手。作者还说,这个模型被训练成知道自己的名字。
如果你想要一个小型本地模型来辅助写代码,又不想依赖云端账号,它就适合你。
| 行业 | 谁在用 | 怎么用 | 例子 |
|---|---|---|---|
| 软件开发 | 独立开发者 | 在自己的机器上把模型当作编程助手运行 | 让它起草或解释一个简短的函数 |
| 教育 | 学习编程的学生 | 使用无需注册的本地模型 | 问它一条报错信息是什么意思 |
| 本地 AI 爱好 | 喜欢尝试小模型的人 | 在桌面应用中加载量化文件并和其他模型对比 | 在 LM Studio 或 Jan 里用 Q4_K_M 文件聊天 |
如果你需要公开的基准测试结果(模型卡没有给出),或者需要大模型的深度,可以跳过它。
| 用例 | 谁 | 得到什么 |
|---|---|---|
| 编程辅助 | 开发者 | 来自本地小模型的代码草稿和解释 |
| 离线聊天 | 有笔记本的任何人 | 在你自己的机器上生成的回复 |
| 尝试量化模型 | 本地 AI 爱好者 | 可与其他模型对比的 4 位或 8 位文件 |
你需要先准备:
ollama run hf.co/YoSaNoo/Forge-1-E2B:Q4_K_M
pip install -U huggingface_hub hf download YoSaNoo/Forge-1-Gemma-4-E2B
在运行器里开始聊天,输入你的编程问题。运行命令之后,Ollama 会立刻打开提示符。各个应用在文件加载完成后会打开聊天窗口。
| 工具 | 作用 |
|---|---|
| ollama run | 在 Ollama 中用 Q4_K_M 量化版本开始聊天 |
| Q4_K_M | 4 位量化文件,两者中较小的一个 |
| Q8_0 | 8 位量化文件,文件更大,压缩更少 |
| hf download | 把仓库文件下载到你的电脑 |
你让它写一个反转字符串的小函数,并简单解释原理。模型会给出代码和几行说明。模型卡没有给出结果,所以用之前请先检查代码。
这是一个在你自己电脑上运行的小型 AI 模型,就像运行普通应用一样。第一步可以先安装 Ollama,运行上面的一行命令,再问一个编程问题。
对熟悉这个领域的读者来说,它是 gemma-4-E2B 的微调版本,以 GGUF 量化格式保存,桌面运行器可以直接加载。Hugging Face 统计为 4.6B 参数,而模型卡写的是约 5B。作者说它胜过原版 Gemma 模型,但模型卡没有给出基准测试数字。量化越小,所需内存越少,精度也会有所下降。
一个从 Google 的 gemma-4-E2B 微调而来的小型文本模型,偏向写代码,以 GGUF 文件发布,可在 Ollama、LM Studio、Unsloth 或 Jan 中在自己的笔记本上运行。
由 YoSaNoo 在 Hugging Face 上制作。这些说明是 Mindket 根据它的模型页面和模型卡写的,模型自己的文件和许可证在 Hugging Face 上。
它是什么:Forge-1-Gemma-4-E2B 是 YoSaNoo 发布的小型文本生成模型,从 Google 的 gemma-4-E2B 微调而来,以 GGUF 文件分享。作者把它定位为能在日常笔记本硬件上运行的编程助手。作者还说,这个模型被训练成知道自己的名字。
适合谁:如果你想要一个小型本地模型来辅助写代码,又不想依赖云端账号,它就适合你。
行业 | 谁在用 | 怎么用 | 例子
软件开发 | 独立开发者 | 在自己的机器上把模型当作编程助手运行 | 让它起草或解释一个简短的函数
教育 | 学习编程的学生 | 使用无需注册的本地模型 | 问它一条报错信息是什么意思
本地 AI 爱好 | 喜欢尝试小模型的人 | 在桌面应用中加载量化文件并和其他模型对比 | 在 LM Studio 或 Jan 里用 Q4_K_M 文件聊天
如果你需要公开的基准测试结果(模型卡没有给出),或者需要大模型的深度,可以跳过它。
用在哪里:
用例 | 谁 | 得到什么
编程辅助 | 开发者 | 来自本地小模型的代码草稿和解释
离线聊天 | 有笔记本的任何人 | 在你自己的机器上生成的回复
尝试量化模型 | 本地 AI 爱好者 | 可与其他模型对比的 4 位或 8 位文件
如何设置:
你需要先准备:
ollama run hf.co/YoSaNoo/Forge-1-E2B:Q4_K_M
pip install -U huggingface_hub
hf download YoSaNoo/Forge-1-Gemma-4-E2B
如何使用:在运行器里开始聊天,输入你的编程问题。运行命令之后,Ollama 会立刻打开提示符。各个应用在文件加载完成后会打开聊天窗口。
工具 | 作用
ollama run | 在 Ollama 中用 Q4_K_M 量化版本开始聊天
Q4_K_M | 4 位量化文件,两者中较小的一个
Q8_0 | 8 位量化文件,文件更大,压缩更少
hf download | 把仓库文件下载到你的电脑
示例:你让它写一个反转字符串的小函数,并简单解释原理。模型会给出代码和几行说明。模型卡没有给出结果,所以用之前请先检查代码。
新手与专家:这是一个在你自己电脑上运行的小型 AI 模型,就像运行普通应用一样。第一步可以先安装 Ollama,运行上面的一行命令,再问一个编程问题。
对熟悉这个领域的读者来说,它是 gemma-4-E2B 的微调版本,以 GGUF 量化格式保存,桌面运行器可以直接加载。Hugging Face 统计为 4.6B 参数,而模型卡写的是约 5B。作者说它胜过原版 Gemma 模型,但模型卡没有给出基准测试数字。量化越小,所需内存越少,精度也会有所下降。
选一个运行器,例如 Ollama
选择 Q4_K_M 或 Q8_0 文件
在你自己的机器上加载
输入一个编程问题
阅读回复
注意事项:
用 Hugging Face 的命令行下载它的文件:
pip install -U huggingface_hub
hf download YoSaNoo/Forge-1-Gemma-4-E2B
然后按它的模型卡使用它。这个工具包里没有会自己运行的东西。
README.md 5 KB
同一分类里与本产品共有标签最多的已上架 Hugging Face 模型。
| 产品 | 最近 30 天下载 | 点赞 | 参数量 | 许可证 | 最近更新 |
|---|---|---|---|---|---|
| Forge-1-Gemma-4-E2B 本页 | 6,102 | 27 | 4.6B | apache-2.0 | |
| DeepHat-V1-7B共有 cybersecurity · code · text-generation | 4,315 | 309 | 7.6B | apache-2.0 | |
| KAT-Coder-V2.5-Dev GGUF共有 agent · code · gguf | 234,191 | 148 | 34.7B | apache-2.0 | |
| KAT-Coder-V2.5-Dev共有 agent · code · text-generation | 16,106 | 687 | 34.7B | apache-2.0 | |
| North Mini Code共有 agent · code · text-generation | 8,171 | 587 | 30.5B | apache-2.0 | |
| North-Mini-Code-1.0 GGUF共有 agent · gguf · text-generation | 269 | 10 | 30.5B | apache-2.0 |
lmstudio-community · 工具包
面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。
LibertAIDAI · 工具包
以每权重 2.9 位的 EXL3 量化运行 DeepSeek-V4.1-Flash-1017,这是一份 196 GiB 的副本,适合在自己硬件上部署大模型的人。困惑度与原模型相差不大。
facebook · 工具包
根据文字描述或音频提示生成短音乐片段,是 facebook MusicGen 的 small 检查点。适合想在自己电脑上试用文字生成音乐的开发者和音乐爱好者。
alpindale · 工具包
用一个只有约 984 个权重的小型神经网络,为 C 源代码的每个字符打上语法高亮标签,通过一个小小的 C 程序运行。适合对手工设计的网络好奇的开发者和研究者。
prithivMLmods · 工具包
在浏览器或你自己的电脑上,用一个 Gradio 应用试用 FLUX.2 Klein 图像模型的一组 LoRA。适合制作或测试 AI 图片的人。
Sokheng · 工具包
这个模型从文档、收据和路牌照片里读取高棉语和英语文字,用一个检测器找文本行,再用识别器读每一行。适合需要在 Python 里做高棉语 OCR 的开发者。