Nanosaur2-670M
well9472 · 工具包
用一个 670M 参数的小型扩散模型,根据文字提示生成插画,在 ComfyUI 中运行。这是一个低预算的研究模型,适合想试用或训练自己 LoRA 的人。
清理多语言的嘈杂语音录音,同时保留笑声。这是一个 9.6M 参数的语音增强模型,适合修音频的创作者和准备语音数据集的研究人员。
NVIDIA NemotronLabs RE-USE-laughter 是一款工具包,属于效率类,由 Mindket 上架。可免费获取。当前为第 1 版,最近更新于 。在本页下载,是一个装着它全部文件的 zip 压缩包。这些文件不会自己运行。
pip install resampy
这是 NVIDIA 推出的小型语音增强模型,只有 9.6 百万参数。它能修复多种语言的语音录音质量,并且会保留笑声。它能处理噪声、回声、削波、编解码损伤、丢包和低质量麦克风。
想让录音更干净的内容创作者,以及在训练语音模型前清理语音数据集的研究人员。
| Industry | Who uses it | How they use it | Example |
|---|---|---|---|
| 媒体 | 内容创作者 | 改善口语录音的音质 | 剪辑前先清理嘈杂的采访录音 |
| 语音研究 | 研究人员 | 增强用于训练文字转语音模型的数据集 | 为 TTS 训练集准备嘈杂的片段 |
| 语音研究 | 研究人员 | 为语音大模型增强数据 | 训练语音 LLM 之前清理录音 |
如果你的音频本来就很干净,可以跳过它。
| Use case | Who | What they get back |
|---|---|---|
| 清理一段录音 | 创作者 | 每个语音文件的清理后版本 |
| 准备数据集 | 研究人员 | 可直接用于训练的增强片段 |
| 处理长文件 | 任何人 | 分块处理长录音后得到的清理音频 |
pip install resampy
huggingface-cli download nvidia/NVIDIA-NemotronLabs-RE-USE-laughter --local-dir ./NemotronLabs_REUSE_laughter --local-dir-use-symlinks False cd ./NemotronLabs_REUSE_laughter
把嘈杂的录音放进 noisy_audio,运行推理脚本,再从 enhanced_audio 取走清理后的版本。带宽扩展通过脚本里的 BWE 参数打开。
sh inference.sh
如果文件超过约 30 秒,或者 GPU 显存不足,就用分块脚本。把长文件放进 long_noisy_audio,结果会出现在 Long_enhanced_audio。
sh inference_chunk.sh
| Tool | What it does |
|---|---|
| inference.sh | 增强 noisy_audio 里的文件 |
| inference_chunk.sh | 分块增强长文件 |
| BWE argument | 设置带宽扩展的目标带宽 |
你把一段嘈杂的电话录音复制进 noisy_audio,然后运行推理脚本。清理后的文件会出现在 enhanced_audio 里,笑声被保留。
如果你是新手,先试试模型卡指向的 Gradio 演示。上传一段嘈杂的音频,听听清理后的效果,再决定要不要在自己电脑上安装。
如果你是专家,它接受七种输入采样率,从 8 kHz 到 48 kHz,包括 22.05 和 44.1。它用不到 10 秒的片段训练,所以长文件要走分块脚本。遇到重叠说话时,它会保留主要说话人。
在模型卡的对比中,这个模型的语音识别字符准确率是 89.21,高于列出的两个更大的模型。
清理多语言的嘈杂语音录音,同时保留笑声。这是一个 9.6M 参数的语音增强模型,适合修音频的创作者和准备语音数据集的研究人员。
由 nvidia 在 Hugging Face 上制作。这些说明是 Mindket 根据它的模型页面和模型卡写的,模型自己的文件和许可证在 Hugging Face 上。
它是什么:这是 NVIDIA 推出的小型语音增强模型,只有 9.6 百万参数。它能修复多种语言的语音录音质量,并且会保留笑声。它能处理噪声、回声、削波、编解码损伤、丢包和低质量麦克风。
适合谁:想让录音更干净的内容创作者,以及在训练语音模型前清理语音数据集的研究人员。
Industry | Who uses it | How they use it | Example
媒体 | 内容创作者 | 改善口语录音的音质 | 剪辑前先清理嘈杂的采访录音
语音研究 | 研究人员 | 增强用于训练文字转语音模型的数据集 | 为 TTS 训练集准备嘈杂的片段
语音研究 | 研究人员 | 为语音大模型增强数据 | 训练语音 LLM 之前清理录音
如果你的音频本来就很干净,可以跳过它。
用在哪里:
Use case | Who | What they get back
清理一段录音 | 创作者 | 每个语音文件的清理后版本
准备数据集 | 研究人员 | 可直接用于训练的增强片段
处理长文件 | 任何人 | 分块处理长录音后得到的清理音频
如何设置:
pip install resampy
huggingface-cli download nvidia/NVIDIA-NemotronLabs-RE-USE-laughter --local-dir ./NemotronLabs_REUSE_laughter --local-dir-use-symlinks False
cd ./NemotronLabs_REUSE_laughter
如何使用:把嘈杂的录音放进 noisy_audio,运行推理脚本,再从 enhanced_audio 取走清理后的版本。带宽扩展通过脚本里的 BWE 参数打开。
sh inference.sh
如果文件超过约 30 秒,或者 GPU 显存不足,就用分块脚本。把长文件放进 long_noisy_audio,结果会出现在 Long_enhanced_audio。
sh inference_chunk.sh
Tool | What it does
inference.sh | 增强 noisy_audio 里的文件
inference_chunk.sh | 分块增强长文件
BWE argument | 设置带宽扩展的目标带宽
示例:你把一段嘈杂的电话录音复制进 noisy_audio,然后运行推理脚本。清理后的文件会出现在 enhanced_audio 里,笑声被保留。
新手与专家:如果你是新手,先试试模型卡指向的 Gradio 演示。上传一段嘈杂的音频,听听清理后的效果,再决定要不要在自己电脑上安装。
如果你是专家,它接受七种输入采样率,从 8 kHz 到 48 kHz,包括 22.05 和 44.1。它用不到 10 秒的片段训练,所以长文件要走分块脚本。遇到重叠说话时,它会保留主要说话人。
你把嘈杂文件放进 noisy_audio
脚本运行增强模型
带宽扩展是可选的
清理后的文件出现在 enhanced_audio
注意事项:在模型卡的对比中,这个模型的语音识别字符准确率是 89.21,高于列出的两个更大的模型。
Title: 模型卡测试集上的 ASR 字符准确率
嘈杂输入: 81.29 分
Sidon 250M: 84.68 分
UniPASE 500M: 87.28 分
RE-USE-laughter 9.6M: 89.21 分
用 Hugging Face 的命令行下载它的文件:
pip install -U huggingface_hub
hf download nvidia/NVIDIA-NemotronLabs-RE-USE-laughter
然后按它的模型卡使用它。这个工具包里没有会自己运行的东西。
README.md 5 KB
同一分类里与本产品共有标签最多的已上架 Hugging Face 模型。
| 产品 | 最近 30 天下载 | 点赞 | 参数量 | 许可证 | 最近更新 |
|---|---|---|---|---|---|
| NVIDIA NemotronLabs RE-USE-laughter 本页 | 2,845 | 17 | 9.6M | openmdw-1.1 | |
| SimulS2ST-Omni共有 audio-to-audio · safetensors | 0 | 2 | — | apache-2.0 | |
| DaFeiYu RVC v2 40k共有 audio-to-audio | 571 | 10 | — | mit | |
| Applio共有 audio-to-audio | 334 | 229 | — | mit | |
| whisper-large-v3共有 safetensors | 3,489,398 | 6,802 | 1.5B | apache-2.0 | |
| Chandra OCR 2共有 safetensors | 1,356,074 | 606 | 5.3B | openrail |
well9472 · 工具包
用一个 670M 参数的小型扩散模型,根据文字提示生成插画,在 ComfyUI 中运行。这是一个低预算的研究模型,适合想试用或训练自己 LoRA 的人。
Waqf-AI · 工具包
读取图片中的阿拉伯语手写文字并以文本形式返回。这是微调过的 PaddleOCR-VL 模型,适合要把阿拉伯语手写内容数字化的人。
Wan-AI · 工具包
根据文本提示或图像加文字生成视频片段,最高 720P、每秒 24 帧,Diffusers 格式,适合单块消费级 GPU。
Wan-AI · 工具包
用小型的 1.3B Wan2.1 模型根据文字提示词生成短的 480P 视频,已打包成 diffusers 库可用的形式。在约 8.19 GB 显存的消费级显卡上就能运行。
serendipitylabs · 工具包
在 CPU 或 CUDA GPU 上把马拉雅拉姆语语音转成文字,是 Serendipity Labs 的早期研究版本。适合想为简短清晰的录音生成转写草稿的人。
OrdenWills · 工具包
把“关掉电视”这样的日常家居指令变成结构化的工具调用,并先检查设备状态。这是一个 3.5 亿参数的模型,适合智能家居开发者和爱好者。