DataWorld-35B-A3B
Zhanli-Li · 工具包
用多轮智能体强化学习在 DataWorld 任务上调优的 Qwen3.6-35B-A3B 模型,面向会调用工具的智能体。适合部署大型混合专家模型的团队。
Zhanli-Li · 工具包
用多轮智能体强化学习在 DataWorld 任务上调优的 Qwen3.6-35B-A3B 模型,面向会调用工具的智能体。适合部署大型混合专家模型的团队。
sainez · 工具包
把一个 9B 的编程和工具调用模型做成一个 3.64 GiB 的 GGUF 文件,以约 3.5 比特每权重量化,方便在你自己的机器上运行。
OrdenWills · 工具包
把“关掉电视”这样的日常家居指令变成结构化的工具调用,并先检查设备状态。这是一个 3.5 亿参数的模型,适合智能家居开发者和爱好者。
crucible-labs · 工具包
在 8.78 GiB 的 GGUF 文件里运行经过剪枝和量化的 Qwen3.6-35B-A3B,供 llama.cpp 使用,比第一版更接近未量化的权重。适合内存有限的人。
bartowski · 工具包
MiniCPM5-2B 文本模型的多种大小的量化 GGUF 副本,用 llama.cpp 和重要性矩阵制作。适合在自己电脑上运行小型中英文模型的人。
bartowski · 工具包
IBM 的 granite-4.2-3b 文本模型的量化 GGUF 副本,从完整精度到较小的 3 位文件,尺寸齐全。适合想在自己电脑上运行小型聊天模型的人。
primitive-ai · 工具包
为 Blackwell GPU 提供小米 MiMo-V2.6-Flash-RL 的 NVFP4 版本,专家权重值与官方发布完全一致,在两块 96 GB 显卡上吞吐更高。适合自托管大模型的人。
ProCreations · 工具包
根据工具调用、用户请求和历史,判断编程智能体提出的工具调用是否应该执行,回答批准或拒绝。这是 Auto 里最小的模型,适合内存很少的机器。
jstarks · 工具包
对 Google 的 Gemma 4 E4B-it 直接修改 0.002% 的权重、不做训练,用来解决思考模式下工具调用和多步数学的卡顿。也提供一个小型补丁文件。
JamieBradfield · 工具包
几乎没有思考延迟地调用工具并遵循指令,是 Spark-X2.6-4B 的 4.1B 微调模型。适合构建需要快速、直接调用工具的本地智能体的人。
ibm-granite · 工具包
回答前先一步步推理,在 IBM 的紧凑 3B 模型中提供工具调用、代码生成和多语言对话。原生支持 128K 上下文,采用 Apache 2.0 开源。
jmc0 · 工具包
驱动能对话、能在游戏中执行动作(比如出售物品或叫来守卫)、并在压力下保持角色设定的游戏角色。适合使用 llama.cpp 或 LLMUnity 的游戏开发者。
ibm-granite · 工具包
先分步骤思考再作答,适合数学、代码、工具调用和多语言对话。这是 IBM 最大的稠密 Granite 4.2 模型,采用 Apache 2.0 许可,适合在自己硬件上运行开源模型的团队。
gnani · 工具包
用英语和十种印度语言聊天、答题和推理,上下文长度 128K。这是 Gnani.ai 的 30B 混合专家模型,适合用印度语言构建助手、RAG 和智能体的团队。
flechin · 工具包
一个 27B 推理模型,经过微调后倾向于直接回答而不是含糊其辞,并量化为 MXFP4,让 vLLM 能在单块 32 GB GPU 上提供服务,适合运行本地推理和工具调用模型的开发者。
openbmb · 工具包
提供 MiniCPM5-2B 的 GGUF 文件,这是一个支持中英文的小型稠密文本模型,适合在设备上和本地使用。适合想在普通硬件上用紧凑模型做编程、数学和工具调用的人。
Cactus-Compute · 工具包
一个 45M 参数的开放模型,用于工具调用、设备操作和结构化提取,打包成一个 14 MB 的二进制文件,约 28 MB 内存即可运行。适合需要在手机、开发板和浏览器上做函数调用的开发者。
peculiar-ragdoll · 工具包
替换 Qwen3.5、3.6 和 3.8 模型的聊天模板,让它们回答前少想一些、回复更紧凑。适合在本地运行 Qwen 做编程和知识工作的人。
ibm-granite · 工具包
逐步推理、写代码、调用工具,并用多种语言聊天,上下文最长 128K token,可扩展到 512K。这是 IBM 的稠密 8B 模型,适合构建智能体和助手的开发者。
DRUPEs · 工具包
基于 MiniCPM5-2B 的 2B 编程和聊天模型,在需要多个功能合在一个组件里的网页应用上进步很大。适合想要本地小型代码模型的开发者。