Ornith-1.0-9B-GGUF
ornith-ai · 工具包
一个 9B 开源编码智能体模型的 GGUF 副本,用强化学习训练它写出解决方案和围绕方案的脚手架。适合在本地运行智能体、使用单块 GPU 的开发者。
ornith-ai · 工具包
一个 9B 开源编码智能体模型的 GGUF 副本,用强化学习训练它写出解决方案和围绕方案的脚手架。适合在本地运行智能体、使用单块 GPU 的开发者。
openai · 工具包
按你写的安全策略对文本分类,并展示推理过程。适合信任与安全团队过滤模型输入输出,以及在线或离线给内容打标签。
openai · 工具包
根据你写的安全政策给文本分类,并展示每个决定背后的推理。适合过滤或标注内容的信任与安全团队。
openai-community · 工具包
用 OpenAI 发布的第一个 transformer 语言模型续写你开头的英文文本,参数量 120M。适合研究早期语言模型或学习 transformers 库的人。
omlab · 工具包
通过在候选区域中选择来找到并指出图像中的物体,目标不存在时回答 None。适合无人机、机器人和监控摄像头的视觉工作。
officialmobai · 工具包
一步一步推理数学、物理、科学编程以及波斯语或英语问题,并支持工具调用。基于 Spark-X2.6-4B 的 4.1B 模型,适合想要小型双语推理模型的人。
NousResearch · 工具包
为竞赛编程题写代码的模型,在 Qwen3-14B 基础上用强化学习继续训练,训练题共 24k 道,答案都可以检验。适合想在自己电脑上运行代码模型的开发者。
NousResearch · 工具包
一个 3.2B 的聊天助手模型,能遵循指令、调用函数、输出结构化内容并写代码。适合在自己电脑上运行模型的开发者和爱好者。
mlx-community · 工具包
Qwen3.5-9B 的 4-bit 混合精度 MLX 版本,用于在 Apple Silicon 上本地生成文本,自带多词元预测头。适合在 Mac 上本地运行模型的人。
microsoft · 工具包
一个小型文本生成模型,能回答问题、续写对话并补全代码。适合想用紧凑开放模型做安全研究和实验的研究人员与开发者。
meituan-longcat · 工具包
总参数 69B、每个 token 约激活 3B 的混合专家文本模型,采用稀疏注意力,支持 100 万 token 上下文。适合为编程和工具使用智能体托管长上下文模型的团队。
meituan-longcat · 工具包
面向长链条智能体任务的多模态混合专家模型,用于代码库开发、完整项目构建和创意设计,此为压缩的 W4A4 版本。适合拥有大型 GPU 算力的团队。
maylore-ai · 工具包
42 亿参数的 Rust 编程模型,基于 Qwen3.5-4B,能回答俄语和英语请求。适合想用小型模型处理函数、trait、泛型和线程的 Rust 开发者。
manycore-research · 工具包
读取 3D 点云并写出结构化的场景布局,包含墙、门、窗和带标签的物体框。适合从事机器人、导航和 3D 场景理解的研究人员和开发者。
llm-jp · 工具包
LLM-jp 项目推出的 33.2B 参数英日双语文本生成模型。经过 SFT 和 DPO 后训练,上下文 65,536 词元,权重采用 Apache 2.0,可通过 transformers 加载。
Kwaipilot · 工具包
Kwaipilot 的开放权重编程模型,混合专家结构,总参数 35B,激活 3B,针对智能体编程做了调优,工具调用出错更少。可用于 transformers、vLLM 和 SGLang。
kakoka · 工具包
用一个 27B 编码模型帮你编写和修改 PostgreSQL 源代码,8 位量化,可通过 oMLX 在 Apple Silicon Mac 上本地运行。适合想要本地助手的 PostgreSQL 开发者。
kaitchup · 工具包
用自定义的统计无损量化,把 Qwen3.8-27B 压成三个体积和保真度各不相同的 GGUF 文件。适合在 llama.cpp 里本地运行这个模型的人。
JamieBradfield · 工具包
几乎没有思考延迟地调用工具并遵循指令,是 Spark-X2.6-4B 的 4.1B 微调模型。适合构建需要快速、直接调用工具的本地智能体的人。
Jackrong · 工具包
减少长时间智能体任务里被浪费的推理,是 Qwen3.8-27B 第二版 Flash 微调模型的 GGUF 版本,Python 格式更好。适合在本地跑智能体循环的人。
incoai · 工具包
通过起草一整块 token 让主模型验证,来加速 Qwen3.8-27B,输出保持不变。这是适用于 SGLang 和 vLLM 服务的 1.9B 草稿模型,不是独立的聊天模型。
inclusionAI · 工具包
inclusionAI 的 Ling-3.0-tiny 的 GGUF 副本。这是一个小型混合专家推理模型,总参数 7.9B,激活参数 1.3B,适合低成本本地运行。
IFM · 工具包
给 IFM 的 K2-Horizon-7B 语言模型加上扩散通路的 LoRA 适配器,用于研究更快的文本生成。它只包含适配器,不含基础权重。
IFM · 工具包
IFM 的 K2-Horizon-7B 文本模型的量化 GGUF 副本,可在 llama.cpp 中本地运行,从 BF16 到 4 位都有,上下文窗口为 512K 词元。
ibm-granite · 工具包
回答前先一步步推理,在 IBM 的紧凑 3B 模型中提供工具调用、代码生成和多语言对话。原生支持 128K 上下文,采用 Apache 2.0 开源。
HuggingFaceTB · 工具包
用一个 3.62 亿参数、在普通硬件上就能运行的指令微调模型回答聊天式问题,也能做改写和摘要。适合想要比 135M 更有余量的小型聊天模型的开发者。
HuggingFaceTB · 工具包
用一个 1.35 亿参数、小到能在设备上运行的基础语言模型,根据提示续写英文文本。适合想用微型模型做测试或微调的开发者。
HuggingFaceBio · 工具包
在聊天里读取原始 DNA 并用英文回答,判断变异看起来是良性还是致病,适合想在自己 GPU 上运行 DNA 语言模型的研究人员。
hotocooo · 工具包
编写 Blender 5.x 的 Python 脚本,生成干净的、以四边形为主的网格,比如道具、家具、产品以及人体和动物的基础网格。这是 Spark-X2.6-4B-Base 的 4B 微调版本,适合用脚本操作 Blender 的人。
Greatjedi · 工具包
提供为 Intel Arc GPU 重新调整的 27B Qwen3.8 GGUF 文件,作者的测试里纯解码约每秒 22 个词元。适合在 Arc 显卡上用 llama.cpp 和 SYCL 的人。
ErtasAI · 工具包
在 vLLM 和 NVIDIA Blackwell GPU 上运行面向医疗领域的语言模型,它是压缩后的 Gemma 4 31B。适合需要在考题、编码和答案核查任务上又快又省的医疗 AI 产品。
Divij · 工具包
把反编译器的输出改写成可读的 C 源码,带有有意义的名称和正确的类型。这是在未优化二进制上训练的 Qwen3.5-4B 微调模型,适合安全研究者和逆向工程师。
divagr1925 · 工具包
一个把小型 RISC-V 计算机内置在权重里的 Qwen3.5-4B 模型,用于精确算术和运行一个微型故事模型。这是给研究 transformer 内部程序的研究者做的实验。
divagr1925 · 工具包
一个实验性的 Qwen3.5-4B,把 RISC-V CPU 和一个小型文件系统编译进了权重,所以它不用外部工具就能跨会话记住事实。检查点能放进 24 GB 的 GPU。
deepseek-ai · 工具包
用一个 1.6T 参数的混合专家模型生成文字,每个令牌激活 49B,最多可读入一百万个令牌。这是 DeepSeek 的预览版,适合能放下约 1,599 GB 权重的团队。
deepseek-ai · 工具包
DeepSeek 的 685B 开源推理模型,用稀疏注意力处理长上下文,聊天模板让它能一边思考一边调用工具。适合运行大模型和构建智能体的团队。
deep-principle · 工具包
Hydrogen-1.0 的 4-bit NVFP4 版本,这是 Deep Principle 的 381B 科学与研究助手模型,基于 GLM-5.3。需要多 GPU 的 NVIDIA Blackwell 服务器,上下文为 1M 词元。
deep-principle · 工具包
Deep Principle 的 384B 科学助手 Hydrogen-1.0 的 MXFP4 量化版本,面向 AMD Instinct 硬件。适合想用文本模型处理科学问题和研究规划的实验室。
bartowski · 工具包
Meta Llama 3.1 8B Instruct 的量化 GGUF 文件,用于本地聊天,例如 Q4_K_M 为 4.92 GB,Q8_0 为 8.54 GB。由 bartowski 用重要性矩阵制作。涵盖 8 种语言,可在 LM Studio 中运行。
bartowski · 工具包
bartowski 用重要性矩阵为 Meta 的 Llama-3.2-3B-Instruct 制作的 GGUF 量化版本,大小约从 1.8 GB 到 6.4 GB。适合用 llama.cpp 或 LM Studio 在本地运行小型聊天模型。
bartowski · 工具包
Kwaipilot 的 KAT-Coder-V2.5-Dev 的 imatrix GGUF 量化版本,这是一个 34.7B 文本模型,4 位文件约 19 GB 起。适合在本地运行名字里带 Coder 的大模型的人。
abacusai · 工具包
把 AI 写的文本改写成人类口吻,同时保留事实、数字、名称和排版。这是 Abacus.AI 基于 Gemma 4 微调的 12B 模型,适合写作者和编辑。
zai-org · 工具包
zai-org 推出的 753B 参数开放文本模型,适合编程和智能体这类长链条多步工作,有 1M 词元上下文,采用 MIT 许可证。适合拥有大型 GPU 集群的团队。
YoSaNoo · 工具包
一个从 Google 的 gemma-4-E2B 微调而来的小型文本模型,偏向写代码,以 GGUF 文件发布,可在 Ollama、LM Studio、Unsloth 或 Jan 中在自己的笔记本上运行。
XHToken · 工具包
一个小型草稿模型,通过推测解码加速 Spark-X2.6-1.7B,每步最多猜 7 个 token。适合在支持它的 llama.cpp 构建上本地运行该模型的人。
unsloth · 工具包
在笔记本上聊天、总结和回答文字问题,是 Unsloth 提供的 Meta 小型 Llama 3.2 1B Instruct 的 GGUF 副本,精度从 16 比特到 2 比特。适合开发者和学习者。
unsloth · 工具包
用 9.4B 的 GLM-4-9B-0414 模型的 GGUF 文件生成中文和英文文本,适合想在自己电脑上运行 GLM 模型的人。
tencent · 工具包
腾讯推出的 30B 混合专家翻译模型,支持 33 种语言互译,并能遵循翻译指令。适合要在自己 GPU 上做大批量机器翻译的团队。
taobao-mnn · 工具包
通过 MNN 运行时在手机和边缘设备上运行 0.3B 的中英文对话模型,是约 173 MB 的 4 比特版本。适合给移动应用加入设备端助手的开发者。
ReadyArt · 工具包
这个模型是 ReadyArt 从自家 gemma-4-31B-it-scotoma-2 打包出来的 GGUF 版本,参数量 30.7B,可在本地运行。适合想以 GGUF 形式使用这个模型的人。