Qwen3.8-9B-Distill
empero-ai · 工具包
逐步推理数学、代码和一般问题,每个回答都以思考块开头。这是用更大的 Qwen3.8 教师模型的轨迹训练出的 9B Qwen3.5 模型,适合单张 GPU 使用。
写代码、审代码用的提示词、编程智能体任务说明和工具包,花更少的 Token。
empero-ai · 工具包
逐步推理数学、代码和一般问题,每个回答都以思考块开头。这是用更大的 Qwen3.8 教师模型的轨迹训练出的 9B Qwen3.5 模型,适合单张 GPU 使用。
z-lab · 工具包
GGUF 格式的草稿模型,通过提出词元块让主模型验证来加速 Qwen3.8-27B。适合在本地用 llama.cpp 运行该模型的人。
trevest · 工具包
把 Cloudflare Clef 的决策头加到 Qwen3.8-27B 聊天模型上,让一台 24 GB GPU 上的 llama.cpp 服务器既能回答带类型的问题,也能聊天。它是 LoRA 适配器,不是独立模型。
Shockem · 工具包
缩短 Qwen3.8-27B 在编程任务上的推理长度,让答案更快出来,以一个小型 LoRA 适配器的形式提供。适合在自己硬件上运行基础模型的人。
rapid-mlx · 工具包
一个压缩到每个权重 3.5 位的 27B 视觉语言模型,适用于 24 GB 内存的 Apple Silicon Mac,通过 Rapid-MLX 在本地提供服务。适合想要本地模型和智能体后端的 Mac 用户和开发者。
RadixArk · 工具包
Qwen3.8-27B 的预量化 NVFP4 版本,能读取文字、图片和视频并用文字回答,通过 SGLang 在 NVIDIA Blackwell 显卡上提供服务。适合在该硬件上运行智能体、聊天机器人和 RAG 的开发者。
QUASAR-QAT · 工具包
以 4-bit NVFP4 运行 Qwen3.8-27B,仅 19.7 GB,用 QUASAR 方法训练,使它接近完整的 BF16 模型。适合在 NVIDIA Blackwell GPU 上用 vLLM 部署的人。
nazeshinjite · 工具包
一个 GGUF 草稿模型,通过推测解码让 llama.cpp 里的 Qwen3.8-Flash-Next 更快,文件有 334 MiB 和 622 MiB 两种。它不是独立模型,适合在本地运行该目标模型的人。
mradermacher · 工具包
一个 27.3B、经过编程蒸馏的 Qwen3.8 模型的 GGUF 量化文件,从 2 位到 8 位,另有可选的多模态补充文件。适合在本地运行编程模型、需要一个放得进内存的尺寸的开发者。
lmstudio-community · 工具包
在 Apple Silicon Mac 上运行 8 位 MLX 版本的 27B 图文模型,适合想在本地回答图片问题的人。
Jundot · 工具包
把 Qwen3.8-27B 做成 8 位混合精度的 MLX 检查点,带视觉编码器和 MTP 头,用于苹果硬件上的图文聊天。适合想在本地得到接近完整质量的人。
Jundot · 工具包
在 MLX 上以约 17.5 GB 运行 27B 的 Qwen3.8 视觉语言模型,能读取文字、图片和视频,上下文为 262,144 个 token。这是 Jundot 的混合精度量化版本,适合内存有限的人。
JoyIndustrial · 工具包
用内置 OCR 的 Qwen3.8-27B 决策系统,针对图像和文字回答选择题式的问题,并给出各选项的概率。适合需要从图片得到结构化选择的开发者。
Jackrong · 工具包
为长时间的智能体任务缩短推理时间、降低成本,是 Qwen3.8-27B 微调模型的 GGUF 版本。适合在自己机器上跑智能体循环、想让每一轮更快的人。
IteraCompute · 工具包
用 vLLM 在一块 RTX 5090 上以 NVFP4 运行 Qwen3.8-27B,带校验和验证的下载、FP8 KV 缓存、工具调用和推理支持。适合在 Blackwell GPU 上自托管大模型的开发者。
IsValorum · 工具包
一个仅支持英文的编程模型,GGUF 格式,42.6B 参数的混合专家量化版,约 21.8 GB,用于在 llama.cpp 或 LM Studio 里做代码补全、重构和智能体工具调用。
Egzakta · 工具包
能处理图像和文字,推理时用的思考 token 比基座 Qwen3.8-27B 更少,据模型卡称,在相近的准确率下回答时间约减半。另有 FP8 和 GGUF 版本。
dmeight · 工具包
在 Apple silicon 的 LM Studio 里,通过 Splash 运行时以 8-bit 运行 Qwen3.8-27B。这是一个非官方的包,比 4-bit 版本更接近原始模型,但速度更慢。
barozp · 工具包
面向 Apple Silicon 的 4 位 MLX 版本,来自从稠密的 Qwen3.8-27B 切出来的混合专家模型,总参数 27B,激活 17.8B。适合用 mlx-lm 运行本地模型的人。
autotrust · 工具包
在 DGX Spark 上把 Qwen3.8-27B NVFP4 的解码速度提高约 3.9 倍,权重不变,只靠调好的推测解码配置。适合在 Blackwell GPU 上用 vLLM 部署它的团队。
amd · 工具包
把 Qwen3.8-27B 运行为用 AMD Quark 和 AWQ 做出的更小的 MXFP4 量化版本,通过 vLLM 提供服务。适合想要压缩版 27B 视觉语言模型、并看重公开 GSM8K 分数的开发者。
agentionai · 工具包
把 Qwen3.8-27B 打包成适用于 llama.cpp 的 GGUF 文件,有八种大小,从 8.95 到 16.35 GiB,另附视觉投影器。作者称在每个大小上,它与 BF16 模型的偏离都比其他量化版本小。
0xKitkat · 工具包
把 Qwen3.8-Flash-Next 混合专家模型压缩成约 37 GiB 的纯文本 GGUF 文件,供实验使用。它需要发布包里附带的补丁版 llama.cpp 才能运行。
pentacoxian-dev · 工具包
在一块 24 GB 的 GPU 上,以 262K token 的上下文和图片输入运行带稀疏注意力的 Qwen3.8-27B,是 GGUF 文件,适合有定制版 llama.cpp 引擎的人。
mradermacher · 工具包
Qwen3.8-27B-CodeForge-3xMerge 模型的重要性矩阵 GGUF 量化版,大小约 11 GB 到 22.5 GB,用于本地运行。适合在自己电脑上运行 27B 模型的人。
lododoai · 工具包
一个可在本地运行的文本模型,是 Qwen3.6-35B-A3B 的微调版本,用 Qwen3.8-27B 生成的数据训练,打包成适用于 llama.cpp 的单个 GGUF 文件。适合在自己机器上跑模型做代码和工具调用的人。
khazarai · 工具包
在提出修复方案前先检查真实文件,来调试和评审代码。这是 Qwen3.8-27B 的微调版,用 195M 词元的推理轨迹训练。适合构建编程智能体的开发者。
kaitchup · 工具包
用自定义的统计无损量化,把 Qwen3.8-27B 压成三个体积和保真度各不相同的 GGUF 文件。适合在 llama.cpp 里本地运行这个模型的人。
Jundot · 工具包
Qwen3.8-27B 的混合精度 MLX 副本,约每个权重 6.9 位,包含视觉编码器和多词元预测头,可在 Apple 芯片上本地运行。
jarrodwatts · 工具包
给 Qwen3.8-27B 的一个小型权重修改,附带应用它的脚本,只改动一个矩阵、不需要训练,就能缩短模型在开放式任务上的思考长度。
Jackrong · 工具包
减少长时间智能体任务里被浪费的推理,是 Qwen3.8-27B 第二版 Flash 微调模型的 GGUF 版本,Python 格式更好。适合在本地跑智能体循环的人。
Jackrong · 工具包
写代码、调用工具,作为编码智能体处理软件任务。这是 Jackrong 基于 Qwen3.8-27B 的 27.8B 微调模型,用约 200,000 条代码和推理样例训练,适合有强力 GPU 的开发者。
incoai · 工具包
通过起草一整块 token 让主模型验证,来加速 Qwen3.8-27B,输出保持不变。这是适用于 SGLang 和 vLLM 服务的 1.9B 草稿模型,不是独立的聊天模型。
Hcompany · 工具包
查看截图并决定下一步的点击、按键、代码运行或工具调用,基于 Qwen3.8-27B。这是面向网页、桌面和手机智能体的电脑操作模型,采用非商业许可。
Greatjedi · 工具包
提供为 Intel Arc GPU 重新调整的 27B Qwen3.8 GGUF 文件,作者的测试里纯解码约每秒 22 个词元。适合在 Arc 显卡上用 llama.cpp 和 SYCL 的人。
DavidAU · 工具包
DavidAU 制作的 Qwen3.8-Flash-Next 的 GGUF 版本,有 27 种推理模式、27 种指令模式和 15 个可在提示词里切换的 AI 角色。适合有大显卡或大内存的人。
DavidAU 对 27B Qwen 模型的 GGUF 微调版,有可切换的指令和推理模式,以及内置的帮助系统。Hugging Face 把它列为图文转文字。供本地运行。
回答问题并读取图像,思考过程短得多。这是 DavidAU 对 27B 的 Qwen 3.8 的调优版 GGUF,目标是在保持准确度的同时减少推理 token,适合在本地运行模型的人。
cyankiwi · 工具包
cyankiwi 制作的 Qwen3.8-27B 4-bit AWQ 量化版本,一个带思考控制的 27B 视觉语言模型。权重为 21.02 GB,可在 Transformers、vLLM 或 SGLang 中加载。
cdiamond · 工具包
Qwen3.8-27B 的 17.1 GB 混合精度 GGUF,保留了多词元预测层,为 24 GB GPU 上的 256K 上下文和视觉功能调优。适合在 llama.cpp 里本地运行大模型的人。
bespokelabs · 工具包
传入上下文和带类型的问题(选择题、是非题或有序评分),为每个答案选项给出概率。这是 Qwen3.8-27B 的微调版本,适合构建分类器和决策步骤的开发者。
agentionai · 工具包
比 Qwen3.8-27B 回答更简短直接,使用更少的回答和思考 token,因此回复结束得更早。这是一次轻量微调,可以直接用在与基础模型相同的工具里。
xtools-at · 工具包
用三个 Qwen3.8-27B 微调版本加权合并而成的模型,可编写和解释代码,也能处理推理问题。适合想用一个通用模型做编程和聊天的开发者。
incoai · 工具包
通过 Inco AI 的 Splash 引擎在 Apple 芯片 Mac 上运行 Qwen3.8-27B,一个包里含 4-bit 模型、DFlash 2 草稿模型和视觉编码器。只能在 Splash 里使用。
flechin · 工具包
一个 27B 推理模型,经过微调后倾向于直接回答而不是含糊其辞,并量化为 MXFP4,让 vLLM 能在单块 32 GB GPU 上提供服务,适合运行本地推理和工具调用模型的开发者。
empero-ai · 工具包
把 Qwen3.8-27B 压缩成每权重 3.7 位的 GGUF 文件来运行,适合 16 GB 的 GPU,还可选图像输入。适合用 llama.cpp、Ollama 或 LM Studio 在本地跑模型的人。
oguzeldereli · 工具包
用一个 40.4 GB 的 GGUF 文件运行被压成三值权重的 180B 混合专家模型 Qwen3.8-Flash-Next,比 FP8 版本小 4.6 倍。适合配合打过补丁的 llama.cpp 在本地使用。
oguzeldereli · 工具包
把 Qwen3.8-27B 压缩成三值权重的 GGUF 文件,可在 12 GB 显卡上运行,有 8.2 GB 和 6.74 GB 两个版本。适合想在普通硬件上跑大型本地模型的人。
LiquidAI 的 LFM2.5-2.6B 的 GGUF 版本,加入 DavidAU 的 Turbo Brilliance 系统,有 12 种推理模式和 12 种指令模式,在提示词里切换。2.7B 测试版,供本地运行。
bartowski · 工具包
bartowski 制作的 Qwen3.8-27B 的一组 GGUF 量化版本,从 Q8_0 到 3-bit,用重要性矩阵生成。适合在本地用 llama.cpp 运行 27B 视觉语言模型的人。
turboderp · 工具包
Qwen3.8-27B 的 EXL3 量化版本,提供从 1.40 到 6.00 的多种每权重比特数。适合在显存有限的 GPU 上用 ExLlamaV3 本地运行 27B 模型的人。
sweetand · 工具包
帮助 1C:Enterprise 平台上的开发者读取和修改 BSL 代码,并在 XML 导出里查找对象。这是以俄语为主的 Qwen3.8-27B 微调版本,这里提供 GGUF 格式。
StillDeadcode · 工具包
把 Qwen3.8-27B 压缩成十五种大小,每个权重约 2.5 到 8 位,面向 AMD RDNA4 GPU 上的 radiance 引擎,内含图片读取和提速草稿器。
mlx-community · 工具包
Qwen3.8-27B 的 4 位 MLX 转换版,能读文字和图像并用文字回答,用 mlx-vlm 工具运行。适合想在本地运行视觉语言模型的开发者。
lmstudio-community · 工具包
Qwen 的 Qwen3.8-27B 的 GGUF 量化版本,由 LM Studio 团队用 llama.cpp 制作,适合在自己电脑上运行 27B 模型的人。
higa2515 · 工具包
在 Qwen3.8-27B 上加了学习型稀疏注意力索引器的 BF16 源权重,附带参考用的 Transformers 加载器,适合研究或部署 Qwen Sparse Attention 的人。
empero-ai · 工具包
在手机、笔记本和单板计算机上运行小型 2B 推理模型,提供五种量化等级的 GGUF 文件。由 Empero 打包,是大型 Qwen3.8 模型的蒸馏版本,适用于 llama.cpp。
bytkim · 工具包
为 Pi 智能体框架调优的 27B 编程模型,训练它读取代码仓库、编辑文件、运行工具并利用工具的反馈,推理强度可调。适合运行编程智能体的开发者。
z-lab · 工具包
一个草稿模型,通过提出一整块词元让主模型检查,来加快 Qwen3.8-27B 的生成。不能单独使用。适合用 SGLang 或 vLLM 部署 Qwen3.8-27B 的人。
JoyIndustrial · 工具包
以选项和概率回答关于文本和图像的结构化问题,是京东工业推出的决策系统,基于 Qwen3.8-27B 并内置 OCR。适合需要分派或分类请求的团队。
incoai · 工具包
一次起草多个 token 让主模型去核对,以此加快 Qwen3.8-Flash-Next,适合用 SGLang 部署该模型、想更快出结果又不改动它的工程师。
ggml-org · 工具包
以 GGUF 文件形式运行 Qwen3.8-27B,这是一个 26.9B 的模型,能读图片和文字并用文字回复,通过 llama 工具在本机使用,适合想把它放在自己电脑上的你。
empero-ai · 工具包
在笔记本或中端显卡上运行 4B 推理模型,提供五种量化等级的 GGUF 文件。由 Empero 打包,是大型 Qwen3.8 模型的蒸馏版本,适用于 llama.cpp 等应用。
empero-ai · 工具包
回答前先一步步推理,使用 35B 的混合专家模型,每个词元只激活约 3B 参数。由 Qwen3.8 教师推理轨迹蒸馏而来,侧重数学和代码。
unsloth · 工具包
Unsloth 制作的 Qwen3.8 27B 视觉语言模型的 4-bit NVFP4 副本,用 vLLM 提供服务。适合想要能读图像和视频、能在智能体工具里工作的稠密模型的开发者。
sabicap · 工具包
基于 Qwen3.8-27B、用开源强化学习环境训练的 27B 智能体文本模型,报告了更高的终端和编程智能体得分,适合构建编程和调用工具智能体的开发者。
peonist-ai · 工具包
存放 halogen-flash-server 所用的模型权重,这个引擎能在 AMD Strix Halo 机器上运行 Qwen3.8-Flash-Next,适合想在本机运行该模型的这类硬件的主人。
empero-ai · 工具包
Empero 的 Qwen3.8-9B 的 GGUF 量化版本,一个由更大的 Qwen3.8 蒸馏到 Qwen3.5-9B 架构里的推理模型,适用于 llama.cpp、Ollama、LM Studio 等工具。
nvidia · 工具包
NVIDIA 把阿里巴巴 Qwen3.8-27B 压缩成 4 位 NVFP4 的版本,用 Model Optimizer 制作,面向 Blackwell GPU,输入文字、图片和视频,输出文字。
empero-ai · 工具包
用十种尺寸的 GGUF 文件运行一个 35B 混合专家模型,每个 token 约 3B 参数在工作,另附视觉投影文件。适合 llama.cpp、Ollama、LM Studio、Jan 和 KoboldCpp 用户。
kusuriya-labs · 工具包
一个把 Qwen3.8-27B 剪掉一半层数再重新训练的实验,得到一个 14.7B 的日英模型,作者称它目前还不实用。
Jackrong · 工具包
作为 Qwen3.8-27B 的 GGUF 微调版,帮你写代码并胜任会调用工具的智能体任务,用约 20 万条代码、智能体和推理样例训练。适合在自己电脑上运行模型的开发者。
higa2515 · 工具包
用 GGUF 文件运行带稀疏注意力的 Qwen3.8-27B,提供 Q8_0 和 Unsloth 的 Q4、Q5、Q6 混合版本,支持文字、图片和视频输入。适合使用 NVIDIA 显卡的 Linux 用户。
AtomicChat · 工具包
用六种尺寸的 GGUF 文件运行 Nous Research 的 Arete 27B,这是 Qwen3.8-27B 的微调版,能读文字和图像,并附有实测的质量损失。适合在自己 GPU 上运行大模型的人。
Teriminal-RSI · 工具包
处理多步骤的终端任务,比如检查仓库、编辑代码和修复依赖。这是一个基于 Qwen3.8-27B 的 27.8B 参数智能体模型,面向研究者和智能体构建者。
Qwen · 工具包
用 Qwen3.8-27B 的 FP8 量化权重处理文字、图片和视频,它是带可调思考模式的 27B 稠密模型。适合用 transformers、vLLM 或 SGLang 部署它的开发者。
DavidAU · 工具包
以 GGUF 形式运行 Qwen3.8-27B,带有一组可在提示词里切换的推理和指令模式。适合运行本地模型、喜欢调整模型工作方式的人。
byteshape · 工具包
用 ByteShape 的 ShapeLearn 量化出的 Qwen3.8-27B GGUF 文件,提供五种适合不同显卡的版本,在 llama.cpp 里支持图片输入和 MTP 推测解码。适合在自己的显卡上运行它的人。
Sparset · 工具包
Qwen3.8-27B 的一个变体,推理用的 token 少得多,高强度下最终答案约快一倍,适合运行推理模型并希望等待更短的人。
ISTA-DASLab · 工具包
Qwen3.8-Flash-Next 的偏编程 GGUF 版本,去掉了一半专家,把 BF16 的 354 GB 缩到 58.4 GB,同时保留图片输入,适合有大机器、想在本地用编程模型的人。
aj9o9 · 工具包
一个 GGUF 草稿模型,通过推测解码在 llama.cpp 里加速 Qwen3.8-27B,在一块 RTX 3090 上处理代码和数学时约每秒 125 个 token,适合在本地运行 Qwen3.8-27B 的人。
ISTA-DASLab · 工具包
Qwen3.8-Flash-Next 的 GGUF 版本,有四种大小,每个张量用各自的精度量化,并带有支持图片输入的视觉投影文件,适合在本地运行大型混合专家模型的人。
ISTA-DASLab · 工具包
ISTA-DASLab 制作的 Qwen3.8-27B GGUF 版本,共四种大小,每个张量用各自的精度量化,并带有处理图片的视觉投影文件。适合在 llama.cpp、Ollama 或 LM Studio 里本地运行模型的人。
tencent · 工具包
五层草稿模型,为 Qwen3.8-27B 并行猜测 16 个 token,再由大模型一并检查。适合部署该模型的团队。
Qwen · 工具包
能读懂文字、图片和视频并用文字回复的 27B 开源模型,面向编程、研究和多步骤智能体任务,适合自己部署模型的开发者。