Bielik-11B-v3.1-DFlash2
speakleash · 工具包
作为草稿模型与 Bielik-11B-v3.1-Instruct 配对,在 SGLang 或 vLLM 中做推测解码。它不是独立的语言模型。
speakleash · 工具包
作为草稿模型与 Bielik-11B-v3.1-Instruct 配对,在 SGLang 或 vLLM 中做推测解码。它不是独立的语言模型。
speakleash · 工具包
作为 DFlash 草稿模型,与 Bielik-11B-v3.1-Instruct 配对,在 SGLang 或 vLLM 里做推测解码。它不是独立的语言模型。适合自己部署 Bielik 的人。
Qwen · 工具包
一个视觉语言模型,能把图片、文档和视频与文字问题一起理解并用文字回答。适合围绕图表、扫描件、屏幕和视频片段开发应用的开发者。
Qwen · 工具包
一个 14.8B 参数、按指令调优的代码模型,能根据简单请求编写、解释和修复代码,通过 transformers 库运行。适合想自己托管模型的开发者。
Qwen · 工具包
这是一个 7.6B 参数的指令微调模型,能聊天、写代码、做数学题并输出结构化 JSON,上下文最长 131,072 个 token。适合需要在单台电脑上运行小型开源模型的开发者。
Qwen · 工具包
Qwen 出品的小型 494M 参数聊天模型,能遵循指令,BF16 权重约 988 MB,通过 Transformers 运行。适合需要轻量模型做测试或简单任务的开发者。
NousResearch · 工具包
一个 3.2B 的聊天助手模型,能遵循指令、调用函数、输出结构化内容并写代码。适合在自己电脑上运行模型的开发者和爱好者。
JamieBradfield · 工具包
几乎没有思考延迟地调用工具并遵循指令,是 Spark-X2.6-4B 的 4.1B 微调模型。适合构建需要快速、直接调用工具的本地智能体的人。
HuggingFaceTB · 工具包
用一个 3.62 亿参数、在普通硬件上就能运行的指令微调模型回答聊天式问题,也能做改写和摘要。适合想要比 135M 更有余量的小型聊天模型的开发者。
DavidAU · 工具包
DavidAU 制作的 Qwen3.8-Flash-Next 的 GGUF 版本,有 27 种推理模式、27 种指令模式和 15 个可在提示词里切换的 AI 角色。适合有大显卡或大内存的人。
DavidAU 对 27B Qwen 模型的 GGUF 微调版,有可切换的指令和推理模式,以及内置的帮助系统。Hugging Face 把它列为图文转文字。供本地运行。
bartowski · 工具包
Meta Llama 3.1 8B Instruct 的量化 GGUF 文件,用于本地聊天,例如 Q4_K_M 为 4.92 GB,Q8_0 为 8.54 GB。由 bartowski 用重要性矩阵制作。涵盖 8 种语言,可在 LM Studio 中运行。
bartowski · 工具包
bartowski 用重要性矩阵为 Meta 的 Llama-3.2-3B-Instruct 制作的 GGUF 量化版本,大小约从 1.8 GB 到 6.4 GB。适合用 llama.cpp 或 LM Studio 在本地运行小型聊天模型。
unsloth · 工具包
在笔记本上聊天、总结和回答文字问题,是 Unsloth 提供的 Meta 小型 Llama 3.2 1B Instruct 的 GGUF 副本,精度从 16 比特到 2 比特。适合开发者和学习者。
unsloth · 工具包
Unsloth 制作的 Google DeepMind Gemma 4 E2B 指令微调模型的 GGUF 文件,接收文本和图像并输出文本,上下文为 128K。适合在笔记本和小型机器上本地运行模型的人。
unsloth · 工具包
在你自己的电脑上回答关于文字和图片的问题,是 Unsloth 打包的 Google Gemma 3 4B 指令模型的 GGUF 副本。适合想用小型本地模型的开发者和用户。
tencent · 工具包
腾讯推出的 30B 混合专家翻译模型,支持 33 种语言互译,并能遵循翻译指令。适合要在自己 GPU 上做大批量机器翻译的团队。
Qwen · 工具包
编写、解释和修复代码,是 Qwen2.5-Coder 系列中最大的指令微调模型,32B 参数。适合想在自己硬件上运行强大开源编程模型的开发者。
Qwen · 工具包
提供 Qwen2.5-Coder 14B 指令模型的 GGUF 文件,有八种量化大小,可用 llama.cpp 辅助写代码。适合有好 GPU 或大内存机器、想要更强本地代码助手的开发者。
Qwen · 工具包
提供 Qwen2.5-Coder 1.5B 指令模型的 GGUF 文件,有八种量化大小,可用 llama.cpp 在笔记本上辅助写代码。适合想要轻量本地代码助手的开发者。