Qwen3.8-Flash-Next-GSQ-RCO-Coder-GGUF
ISTA-DASLab · 工具包
Qwen3.8-Flash-Next 的偏编程 GGUF 版本,去掉了一半专家,把 BF16 的 354 GB 缩到 58.4 GB,同时保留图片输入,适合有大机器、想在本地用编程模型的人。
ISTA-DASLab · 工具包
Qwen3.8-Flash-Next 的偏编程 GGUF 版本,去掉了一半专家,把 BF16 的 354 GB 缩到 58.4 GB,同时保留图片输入,适合有大机器、想在本地用编程模型的人。
manuelgscom · 工具包
一个小型 4-bit GGUF 模型,把西班牙语或英语的普通请求变成一条 Linux bash 命令,在 dale 工具里离线用 CPU 运行,适合想要帮忙写 shell 命令的人。
aj9o9 · 工具包
一个 GGUF 草稿模型,通过推测解码在 llama.cpp 里加速 Qwen3.8-27B,在一块 RTX 3090 上处理代码和数学时约每秒 125 个 token,适合在本地运行 Qwen3.8-27B 的人。
ISTA-DASLab · 工具包
Qwen3.8-Flash-Next 的 GGUF 版本,有四种大小,每个张量用各自的精度量化,并带有支持图片输入的视觉投影文件,适合在本地运行大型混合专家模型的人。
ISTA-DASLab · 工具包
ISTA-DASLab 制作的 DeepSeek-V4.1-Flash-1017 专家剪枝加量化的 GGUF 版本,面向代码和智能体工作,transformer 权重为 72.1 GB。适合有大内存机器的开发者。
ISTA-DASLab · 工具包
ISTA-DASLab 制作的 Qwen3.8-27B GGUF 版本,共四种大小,每个张量用各自的精度量化,并带有处理图片的视觉投影文件。适合在 llama.cpp、Ollama 或 LM Studio 里本地运行模型的人。
shambhuraje · 工具包
一个 Gradio 演示,用来试用以 GGUF 形式保存的小型微调 Qwen2.5 0.5B 指令模型。让开发者和学习者无需安装任何东西,就能在浏览器里试这个小模型。
LocalLLaMA · 工具包
展示哪些 GGUF 量化模型适合你的显卡、Mac 或 CPU,适合在自己电脑上运行语言模型、想选一个能跑起来的文件的人。
AdityaMogare · 工具包
在聊天窗口里回答民法问题,使用 GGUF 格式的微调模型 LurisQA。这是一个 Gradio 应用,适合法学生、法律从业者和开发法律问答工具的开发者。
DavidAU · 工具包
在浏览器里运行的静态页面,估算一个 GGUF 模型需要多少显存。适合想选一个能装进自己显卡的量化模型的人。