Bonsai-27B-GGUF
lmstudio-community · 工具包
面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。
离线转写 25 种欧洲语言的录音,使用 Moondream 的 parakeet-ultra 的 GGUF 版本,配合 transcribe.cpp。适合想要带标点、可选的 token 时间戳的本地语音转文字的人。
parakeet-ultra-gguf 是一款工具包,属于效率类,由 Mindket 上架。可免费获取。当前为第 1 版,最近更新于 。在本页下载,是一个装着它全部文件的 zip 压缩包。这些文件不会自己运行。
cd transcribe.cpp cmake -B build && cmake --build build
parakeet-ultra-gguf 收录了 Moondream 的 parakeet-ultra 语音识别模型的 GGUF 转换版,由 handy-computer 为 transcribe.cpp 程序准备。这个模型把音频转成带标点、有大小写的文字,支持 25 种欧洲语言,还可以给每个 token 附上时间戳。它可以直接替换基础模型 parakeet-tdt-0.6b-v3,大小、语言和接口都相同。
适合想在自己电脑上离线转写的人,也适合围绕 transcribe.cpp 构建本地语音工具的开发者。文件采用从基础模型继承来的 CC-BY-4.0 许可证。
| Industry | Who uses it | How they use it | Example |
|---|---|---|---|
| 媒体 | 播客作者和剪辑师 | 不借助云服务转写访谈和节目 | 把一段访谈录音转成有大小写的文字稿 |
| 软件 | 开发者 | 通过 transcribe.cpp 给工具加上本地语音转文字 | 对保存好的音频调用命令行程序 |
| 研究 | 语音研究人员 | 把量化版本与全精度版本作比较 | 检查 Q4_K_M 相对 F32 的错误率 |
如果你需要对正在进行的音频流做实时转写,或者翻译成另一种语言,可以跳过它,因为模型卡把这两点都排除了。
| Use case | Who | What they get back |
|---|---|---|
| 文件转写 | 有音频的任何人 | 带标点、有大小写的文字 |
| 带时间的文字稿 | 剪辑师和开发者 | 需要时给出 token 级时间戳 |
| 长录音 | 研究人员 | 在停顿处切开、每段不超过半分钟的文字 |
cd transcribe.cpp cmake -B build && cmake --build build
pip install -U huggingface_hub hf download handy-computer/parakeet-ultra-gguf
你运行 transcribe-cli 程序,带上一个模型文件和一个 16 kHz 单声道 WAV。如果你的音频是其他格式,先用 ffmpeg 转换。
build/bin/transcribe-cli \ -m parakeet-ultra-Q8_0.gguf \ input.wav
ffmpeg -i input.mp3 -ar 16000 -ac 1 output.wav
模型卡列出了六种量化,错误率是在 LibriSpeech test-clean 数据集上测得的。
| Type | Size | Word error rate |
|---|---|---|
| F32 | 2.51 GB | 1.80% |
| F16 | 1.26 GB | 1.80% |
| Q8_0 | 740 MB | 1.80% |
| Q6_K | 611 MB | 1.81% |
| Q5_K_M | 550 MB | 1.81% |
| Q4_K_M | 486 MB | 1.82% |
你用 ffmpeg 把一段录音转成 16 kHz 单声道 WAV,再用 Q8_0 文件运行 transcribe-cli。你会得到带标点、大小写正常的文字,也就是录音里说的话。
第一件可以试的小事,是构建 transcribe.cpp,并用处在大小范围中间的 Q8_0 文件转写一段短 WAV。这样能走完从音频到文字的整个流程。
在内部,FastConformer 编码器把结果交给 TDT 转换器解码器,一个小巧的语音检测头会标出切分长音频的停顿位置。解码采用贪心方式,不用外部语言模型。模型卡说,它的 C++ F32 构建与参考运行环境的分数一致,每种量化也都很接近。
离线转写 25 种欧洲语言的录音,使用 Moondream 的 parakeet-ultra 的 GGUF 版本,配合 transcribe.cpp。适合想要带标点、可选的 token 时间戳的本地语音转文字的人。
由 handy-computer 在 Hugging Face 上制作。这些说明是 Mindket 根据它的模型页面和模型卡写的,模型自己的文件和许可证在 Hugging Face 上。
它是什么:parakeet-ultra-gguf 收录了 Moondream 的 parakeet-ultra 语音识别模型的 GGUF 转换版,由 handy-computer 为 transcribe.cpp 程序准备。这个模型把音频转成带标点、有大小写的文字,支持 25 种欧洲语言,还可以给每个 token 附上时间戳。它可以直接替换基础模型 parakeet-tdt-0.6b-v3,大小、语言和接口都相同。
适合谁:适合想在自己电脑上离线转写的人,也适合围绕 transcribe.cpp 构建本地语音工具的开发者。文件采用从基础模型继承来的 CC-BY-4.0 许可证。
Industry | Who uses it | How they use it | Example
媒体 | 播客作者和剪辑师 | 不借助云服务转写访谈和节目 | 把一段访谈录音转成有大小写的文字稿
软件 | 开发者 | 通过 transcribe.cpp 给工具加上本地语音转文字 | 对保存好的音频调用命令行程序
研究 | 语音研究人员 | 把量化版本与全精度版本作比较 | 检查 Q4_K_M 相对 F32 的错误率
如果你需要对正在进行的音频流做实时转写,或者翻译成另一种语言,可以跳过它,因为模型卡把这两点都排除了。
用在哪里:
Use case | Who | What they get back
文件转写 | 有音频的任何人 | 带标点、有大小写的文字
带时间的文字稿 | 剪辑师和开发者 | 需要时给出 token 级时间戳
长录音 | 研究人员 | 在停顿处切开、每段不超过半分钟的文字
如何设置:
cd transcribe.cpp
cmake -B build && cmake --build build
pip install -U huggingface_hub
hf download handy-computer/parakeet-ultra-gguf
如何使用:你运行 transcribe-cli 程序,带上一个模型文件和一个 16 kHz 单声道 WAV。如果你的音频是其他格式,先用 ffmpeg 转换。
build/bin/transcribe-cli \
-m parakeet-ultra-Q8_0.gguf \
input.wav
ffmpeg -i input.mp3 -ar 16000 -ac 1 output.wav
模型卡列出了六种量化,错误率是在 LibriSpeech test-clean 数据集上测得的。
Title: 量化选项
Type | Size | Word error rate
F32 | 2.51 GB | 1.80%
F16 | 1.26 GB | 1.80%
Q8_0 | 740 MB | 1.80%
Q6_K | 611 MB | 1.81%
Q5_K_M | 550 MB | 1.81%
Q4_K_M | 486 MB | 1.82%
示例:你用 ffmpeg 把一段录音转成 16 kHz 单声道 WAV,再用 Q8_0 文件运行 transcribe-cli。你会得到带标点、大小写正常的文字,也就是录音里说的话。
新手与专家:第一件可以试的小事,是构建 transcribe.cpp,并用处在大小范围中间的 Q8_0 文件转写一段短 WAV。这样能走完从音频到文字的整个流程。
在内部,FastConformer 编码器把结果交给 TDT 转换器解码器,一个小巧的语音检测头会标出切分长音频的停顿位置。解码采用贪心方式,不用外部语言模型。模型卡说,它的 C++ F32 构建与参考运行环境的分数一致,每种量化也都很接近。
把音频转成 16 kHz 单声道 WAV
用 GGUF 文件运行 transcribe-cli
语音检测头切分长音频
模型解码每个片段
得到带标点的文字
Title: 25 种语言的 FLEURS 词错误率,单位百分比
parakeet-tdt-0.6b-v3: 11.62 %
parakeet-ultra: 9.55 %
注意事项:
用 Hugging Face 的命令行下载它的文件:
pip install -U huggingface_hub
hf download handy-computer/parakeet-ultra-gguf
然后按它的模型卡使用它。这个工具包里没有会自己运行的东西。
README.md 6 KB
同一分类里与本产品共有标签最多的已上架 Hugging Face 模型。
| 产品 | 最近 30 天下载 | 点赞 | 参数量 | 许可证 | 最近更新 |
|---|---|---|---|---|---|
| parakeet-ultra-gguf 本页 | 1,375,499 | 8 | 627M | cc-by-4.0 | |
| Orukeet共有 parakeet · multilingual · gguf | 35,262 | 110 | 627M | cc-by-sa-4.0 | |
| Phonon-2.5共有 speech-to-text · multilingual · automatic-speech-recognition | 1,697 | 51 | — | cc-by-4.0 | |
| Haas-ja-v1.0共有 conformer · automatic-speech-recognition | 3,665 | 77 | — | apache-2.0 | |
| VibeVoice-ASR共有 speech-to-text · automatic-speech-recognition | 715,654 | 1,328 | 8.7B | mit | |
| GigaChat3.1-10B-A1.8B-GGUF共有 multilingual · gguf | 19,408 | 95 | 10.7B | mit |
lmstudio-community · 工具包
面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。
LibertAIDAI · 工具包
以每权重 2.9 位的 EXL3 量化运行 DeepSeek-V4.1-Flash-1017,这是一份 196 GiB 的副本,适合在自己硬件上部署大模型的人。困惑度与原模型相差不大。
facebook · 工具包
根据文字描述或音频提示生成短音乐片段,是 facebook MusicGen 的 small 检查点。适合想在自己电脑上试用文字生成音乐的开发者和音乐爱好者。
ACE-Step · 工具包
用 4B 扩散解码器根据文字生成音乐,50 步并带引导控制,音频质量高于基础版。适合拥有 12 GB 或更多显存 GPU 的创作者。
op7418 · 技能
能生成单文件 HTML 幻灯片、幻灯片配图和多平台封面的技能,有两套视觉风格,还带演讲者模式用于排练。适合使用 Claude Code 或 Codex 的演讲者。
zarazhangrui · 技能
从零开始或从 PowerPoint 文件生成 HTML 演示文稿,并展示几种视觉风格预览供你挑选,适合不懂 CSS 和 JavaScript、又想做网页幻灯片的人。