DataWorld-35B-A3B
Zhanli-Li · 工具包
用多轮智能体强化学习在 DataWorld 任务上调优的 Qwen3.6-35B-A3B 模型,面向会调用工具的智能体。适合部署大型混合专家模型的团队。
Zhanli-Li · 工具包
用多轮智能体强化学习在 DataWorld 任务上调优的 Qwen3.6-35B-A3B 模型,面向会调用工具的智能体。适合部署大型混合专家模型的团队。
ukisai · 工具包
以 llama.cpp 用的 GGUF 量化版本运行 Swift 1.5 Ornith 9B,这是一个调校成用更少 token 思考的推理模型。适合在自己机器上运行 9B 推理模型的人。
empero-ai · 工具包
逐步推理数学、代码和一般问题,每个回答都以思考块开头。这是用更大的 Qwen3.8 教师模型的轨迹训练出的 9B Qwen3.5 模型,适合单张 GPU 使用。
ornith-ai · 工具包
能写代码、处理终端智能体任务,是每个 token 约用 3B 参数的混合专家模型,这里是 NVFP4 版本。适合想在自己硬件上部署编程模型的开发者。
AtomicChat · 工具包
Ornith 1.5 9B 的 GGUF 版本,这是一个能读图像和文字的模型,文件大小从 2.81 GB 到 17.9 GB,另有视觉投影文件。选一个适合你显存的文件,在本地运行。
prithivMLmods · 工具包
用早期预览版 Qwen3.5-4B 微调模型的 GGUF 副本写代码,并生成自包含的 Three.js 交互 3D 场景页面。适合在本地做 3D 场景原型的开发者。
JMNI-Labs · 工具包
用压缩的 TrellisMX 包,在两台 NVIDIA DGX Spark 上提供带兼容 OpenAI API 的 DeepSeek V4.1 Flash 服务。适合在自己的 Spark 硬件上运行大模型的团队。
dBenf · 工具包
回答关于卫星图像块的类型化问题,使用 Sentinel-2 的全部 12 个波段,为每个选项返回概率,不生成文字。这是 Qwen3.5-0.8B 的微调版本,适合地球观测研究者。
Waqf-AI · 工具包
读取图片中的阿拉伯语手写文字并以文本形式返回。这是微调过的 PaddleOCR-VL 模型,适合要把阿拉伯语手写内容数字化的人。
unsloth · 工具包
在 NVIDIA 显卡上用 vLLM 运行 Unsloth 制作的快速 NVFP4 版 Qwen3.6 35B A3B。卡片说它的吞吐量是其他 NVFP4 版本的 1.79 倍,并且能放进 32 GB 显卡。
unsloth · 工具包
在本地处理智能体编码和图文任务,是 Unsloth 提供的 Qwen3.6-27B 的 GGUF 文件,支持思考保留和长上下文。适合运行本地编码智能体的开发者。
unsloth · 工具包
Unsloth 制作的带多 token 预测的 Qwen3.5-4B 的 GGUF 文件,让 llama.cpp 使用推测解码,生成速度约快 1.5 到 2 倍。适合在本地运行小型多模态模型的人。
unsloth · 工具包
用 Google 的 Gemma 3 27B 指令微调模型回答关于文本和图像的问题,提供 Unsloth 制作的 GGUF 文件,可在你自己的电脑上运行。支持 128K 词元上下文。
unsloth · 工具包
用 Google Gemma 3 12B 指令模型的 GGUF 文件回答问题、总结文本并读图,适合想在自己电脑上运行它的人。
torchcast-ai · 工具包
基于 Qwen3.5-4B 的 4B 决策模型,一次推理就返回是非概率、选项分布和分数分布,不生成文本。适合英文分类、路由和评分标准检查。
Tongyi-MAI · 工具包
读取截图和指令,决定在手机或电脑屏幕上点哪里、输入什么。它是 MAI-UI 图形界面智能体家族里的 8B 模型,面向构建设备智能体的开发者。
Sherlock-Comms · 工具包
通过 vLLM 和 DFlash2 推测解码来运行 122B 的 Ornith 1.5 模型,输出头保持未量化。适合有 128 GB 内存的 RTX Spark 笔记本。
RX5950XT · 工具包
Unlimited-OCR-2 文档 OCR 模型的 GGUF 文件,提供 BF16、Q8_0 和 Q4_K_M,并附视觉投影器。只能在应用了仓库补丁的 llama.cpp 里运行,适合在本地读取扫描和多页文档的人。
ReadyArt · 工具包
ReadyArt 的 31.3B 参数文本生成模型,基于 Google 的 gemma-4-31b-it,以 Safetensors 存放。页面没有说明用途,适合想研究 Gemma 4 变体的人。
rapid-mlx · 工具包
一个压缩到每个权重 3.5 位的 27B 视觉语言模型,适用于 24 GB 内存的 Apple Silicon Mac,通过 Rapid-MLX 在本地提供服务。适合想要本地模型和智能体后端的 Mac 用户和开发者。
RadixArk · 工具包
Qwen3.8-27B 的预量化 NVFP4 版本,能读取文字、图片和视频并用文字回答,通过 SGLang 在 NVIDIA Blackwell 显卡上提供服务。适合在该硬件上运行智能体、聊天机器人和 RAG 的开发者。
Qwen · 工具包
这个模型同时读图像和文字并用文字回答,是总参数 122B、激活参数 10B 的混合专家模型。适合有大型 GPU 服务器、想用开源视觉语言模型做推理、编程和智能体的团队。
Qwen · 工具包
名为 Q-Judger 的评审模型,对照提示词给 AI 生成的图像打分,涵盖五组标准,并以 JSON 回复。适合测试文生图模型的人。
Qwen · 工具包
基于 Qwen3.5-4B 的驾驶模型,能做 3D 感知、回答道路场景问题并规划车辆未来路径。适合研究自动驾驶的研究者。
QUASAR-QAT · 工具包
以 4-bit NVFP4 运行 Qwen3.8-27B,仅 19.7 GB,用 QUASAR 方法训练,使它接近完整的 BF16 模型。适合在 NVIDIA Blackwell GPU 上用 vLLM 部署的人。
openbmb · 工具包
把中英文文档(包括 PDF)解析成文本、表格和公式,提供给 llama.cpp 使用的 GGUF 文件。适合在自己机器上运行 MiniCPM-OCR 1.0 的人。
openbmb · 工具包
通过起草 token、再让主模型一次性验证,加快 MiniCPM-OCR 1.0 的解码。它是草稿头,不是独立的 OCR 模型,适合自己部署文档解析的人。
nvidia · 工具包
读取文本和图像并输出文本,是 NVIDIA 制作的 DeepSeek-V4.1-Flash 的 NVFP4 精简版本。适合在 NVIDIA Blackwell GPU 上部署智能体、聊天机器人和检索系统的开发者。
numind · 工具包
以文本或图像读取文档,按你要的字段填写 JSON 模板,或把页面转成 Markdown。这是一个 4B 模型,适合处理扫描件、表单和发票的团队。
mlx-community · 工具包
Qwen3.6-35B-A3B 的 4-bit MLX 转换版,可在 Apple Silicon Mac 上回答文本和图片提示词。适合想用 mlx-vlm 在本地运行这个 Qwen 模型的人。
mlx-community · 工具包
DeepSeek-V4.1-Flash-1017 的混合精度 MLX 版本,把 Engram 表保留为 FP8。适合拥有数百 GB 内存、想用 MLX 工具运行该模型的人。
microsoft · 工具包
把图片和一条简短的任务提示词配对,就能给图片写说明、找出物体、读出图中文字。适合用 transformers 在 Python 里跑视觉任务的开发者和研究人员。
Mia-AiLab · 工具包
为 TensorFold 准备的 GLM-5.3-Flash 4 位 EXL3 量化版,在大小相同的情况下 KL 散度低于流行的 TR3-4bpw 量化版。适合在 DGX Spark 机器上部署大模型的人。
meta-models · 工具包
一个 300 亿参数智能体模型的 GGUF 版本,供 llama.cpp 使用,附带可选的图像编码器和推测解码草稿模型。适合在 24 GB 显卡上本地运行模型的人。
lordx64 · 工具包
回答前会在明确的思考块里推理,用约 8k 条 Claude Opus 4.7 的推理轨迹调优。这是 35B 混合专家的 Qwen3.6 变体,适合困难的数学、科学、代码和规划。
local-inference-lab · 工具包
为四卡 GPU 服务准备的 DeepSeek V4.1 Flash 1017 签名 Flare 运行时包,支持文本和图片,提供兼容 OpenAI 的 API。适合在自有 NVIDIA 硬件上运行大模型的人。
lmstudio-community · 工具包
在 Apple Silicon Mac 上运行 8 位 MLX 版本的 27B 图文模型,适合想在本地回答图片问题的人。
Jundot · 工具包
把 Qwen3.8-27B 做成 8 位混合精度的 MLX 检查点,带视觉编码器和 MTP 头,用于苹果硬件上的图文聊天。适合想在本地得到接近完整质量的人。
Jundot · 工具包
在 MLX 上以约 17.5 GB 运行 27B 的 Qwen3.8 视觉语言模型,能读取文字、图片和视频,上下文为 262,144 个 token。这是 Jundot 的混合精度量化版本,适合内存有限的人。
Jundot · 工具包
zai-org 的 GLM-5.3-Flash 多模态混合专家模型的混合精度 MLX 副本,约每个权重 4.6 位,包含视觉编码器和多词元预测头。
Jackrong · 工具包
为长时间的智能体任务缩短推理时间、降低成本,是 Qwen3.8-27B 微调模型的 GGUF 版本。适合在自己机器上跑智能体循环、想让每一轮更快的人。
以 MLX 格式、6 位运行一个只有 0.8B 的推理调优聊天小模型,转换自 Jackrong 的 Qwen3.5 蒸馏模型。适合想在 Mac 上用一个很小本地模型的人。
IteraCompute · 工具包
用 vLLM 在一块 RTX 5090 上以 NVFP4 运行 Qwen3.8-27B,带校验和验证的下载、FP8 KV 缓存、工具调用和推理支持。适合在 Blackwell GPU 上自托管大模型的开发者。
ISTA-DASLab · 工具包
用 GSQ(Gumbel-Softmax 量化)制作的 Qwen3.6-35B-A3B 的 2 位量化副本,用小得多的内存保留大部分推理和编程能力。需配合打过补丁的 vLLM 使用。
InternScience · 工具包
作为一个 35B 开放权重语言模型,负责多步骤智能体工作:规划、搜索、调用工具和科学推理。适合要把模型接入会调用工具的智能体的开发者。
ibm-granite · 工具包
把文档页面图像转换成结构化文本,支持公式、版面和关于页面元素的提问,是 IBM Research 的 258M 模型。适合用 Docling 构建文档转换的人。
HuggingFaceTB · 工具包
同时回答关于视频、图像和文字的问题,用一个 2.2B 模型,视频推理约需 5.2 GB GPU 显存。适合构建设备端视觉助手的开发者。
h2oai · 工具包
回答关于文档、工单、政策或对话及其配图的类型化决策问题,并给每个选项一个概率。适合想用小模型来判断记录的团队。
gordonhu · 工具包
一个 320B 的混合专家智能体模型,只用一个 bash 工具完成较长的终端任务。用 1,170 个环境做强化学习训练,面向研究者,采用非商业许可。
google · 工具包
把 Google 的 Gemma 4 31B 指令微调模型做成 4-bit GGUF 文件来运行,能读取文字和图片并用文字回答。适合有消费级显卡或工作站的开发者和爱好者。