Mindket

DuplexJev-4B-Para

新上架第 1 版 · 更新于

概览

接收语音和文字,用文字作答,并判断说话的人是否已经说完。适合想要小型音频模型的语音智能体开发者,它还能识别情绪和重音。

DuplexJev-4B-Para 是一款工具包,属于开发类,由 Mindket 上架。可免费获取。当前为第 1 版,最近更新于 。在本页下载,是一个装着它全部文件的 zip 压缩包。这些文件不会自己运行。

速览

用在
  • vLLM,作为本地服务器
  • Pipecat 语音智能体,通过 pipecat-duplexjev 插件
  • LiveKit 语音智能体,通过 livekit-plugins-duplexjev 插件
  • 约有 10 GB 显存的 GPU 机器
先运行
pip install "vllm[audio]>=0.29" "duplexjev-vllm>=0.4"
vllm serve adventists-ai/DuplexJev-4B-Para --max-model-len 4096

平台

服务器可在其上运行

关于

它是什么

这是一个 4.2B 参数的音频模型,接收语音和文字,用文字回复。它的主要长处是实时轮流发言,也就是能判断说话的人是否已经说完。它还能处理情绪、重音、停顿、咳嗽、叹气和笑声,支持包括中文、英文和日文在内的大约八种语言。

适合谁

它适合开发语音智能体或语音工具的开发者,他们想要一个不只做转写、还会倾听的小模型。

IndustryWho uses itHow they use itExample
语音智能体语音助手开发者判断来电者是否已经停止说话发送音频和助手上一条消息,再读取是否说完的判断
语音研究音频研究者在语音片段上测试情绪和重音识别询问句子里哪个词被重读
客户通话通话工具开发者检测对话中的停顿、笑声或咳嗽标出一段中文录音里的笑声
产品团队原型开发者在转向 32B 模型之前先试用小型语音模型对同一段音频比较回答

如果你需要商用,或需要日语、韩语、越南语、泰语、阿拉伯语的高质量转写,可以跳过它。

用在哪里

它在你自己的机器上以 vLLM 服务器的形式运行,语音智能体框架通过插件连接它。

  • vLLM,作为本地服务器
  • Pipecat 语音智能体,通过 pipecat-duplexjev 插件
  • LiveKit 语音智能体,通过 livekit-plugins-duplexjev 插件
  • 约有 10 GB 显存的 GPU 机器
Use caseWhoWhat they get back
轮次结束检测语音智能体开发者用户是否已说完的判断
情绪和重音检查语音研究者情绪、重读的词和停顿的标签
声音检测音频工具开发者关于片段中咳嗽、叹气和笑声的回答

如何设置

你需要带 pip 的 Python,以及约有 10 GB 显存的 GPU。1.4 版需要 0.4 或更高版本的 duplexjev-vllm 插件,或 0.7 或更高版本的 duplexjev。

  1. 安装带音频支持的 vLLM 和 DuplexJev 插件。
  2. 用模型名称启动服务器。
  3. 想用旧版本时,加上 revision 参数和版本名,例如 v1.3。
  4. 也可以先用 Hugging Face 工具把文件下载到本地。
pip install "vllm[audio]>=0.29" "duplexjev-vllm>=0.4"
vllm serve adventists-ai/DuplexJev-4B-Para --max-model-len 4096

如何使用

你把用户的音频作为用户回合发送,使用音频占位符,并附上普通的聊天历史,然后照常采样。决策提示词与 DuplexJev-4B-Turn 相同。对于重音和非语言类问题,请始终提供一个 none 选项。

<|audio|>
ToolWhat it does
vllm serve把模型作为本地服务器启动
pipecat-duplexjev给 Pipecat 语音智能体加上实时轮次结束检测
livekit-plugins-duplexjev给 LiveKit 语音智能体加上实时轮次结束检测

示例

语音智能体刚说完一句话,来电者停顿了,应用就把来电者的音频和智能体上一条消息一起发送。模型回答来电者是否说完,智能体据此知道该马上回复还是继续听。

新手与专家

大多数语音工具把音频变成文字就结束了。这个模型会听声音本身,所以能分辨一句话说完了还是只是停顿。第一件小事可以是启动服务,再用一段短音频向它提问。

它的设计把 Qwen3-ASR-0.6B 编码器、连接器和 Qwen3-4B 组合在一起。1.4 版能听完整段音频,是一次性重新训练的,并通过合并的 LoRA 加入了轮流发言阶段。模型卡报告,在 Smart Turn v3.2 测试集上,轮次结束的准确率从 71.0 升到 92.9%。

  1. 来电者音频和上一条消息输入
  2. 编码器把音频变成 token
  3. Qwen3-4B 读取音频和文字
  4. 模型用文字回复
  5. 你的应用根据判断行动

注意事项

模型卡在自己的测试上对比了 1.3 和 1.4 版,新版在它列出的每一组里得分都更高。

Smart Turn v3.2 测试集上的轮次结束准确率
1.3 版71.0 percent
1.4 版92.9 percent
  • Limits: 对日语、韩语、越南语、泰语和阿拉伯语的转写,32B 模型强得多。
  • Self-description: 你问它自己的情况时,它可能说出自己并不具备的能力,比如视觉或声音。
  • 说话人判断比较粗略。不要用它们来识别或验证人,也不要据此对个人做决定。
  • License: CC BY-NC 4.0,所以使用范围仅限非商业工作。
  • Cost to run: 未提及。它需要约 10 GB 显存。
  • Data it reaches: 你发送到自己服务器的音频和文字。
  • Not for: 商业用途、识别人员,或对个人做决定。

README 和文件

README

DuplexJev-4B-Para

接收语音和文字,用文字作答,并判断说话的人是否已经说完。适合想要小型音频模型的语音智能体开发者,它还能识别情绪和重音。

由 adventists-ai 在 Hugging Face 上制作。这些说明是 Mindket 根据它的模型页面和模型卡写的,模型自己的文件和许可证在 Hugging Face 上。

简介

它是什么:这是一个 4.2B 参数的音频模型,接收语音和文字,用文字回复。它的主要长处是实时轮流发言,也就是能判断说话的人是否已经说完。它还能处理情绪、重音、停顿、咳嗽、叹气和笑声,支持包括中文、英文和日文在内的大约八种语言。

适合谁:它适合开发语音智能体或语音工具的开发者,他们想要一个不只做转写、还会倾听的小模型。

Industry | Who uses it | How they use it | Example
语音智能体 | 语音助手开发者 | 判断来电者是否已经停止说话 | 发送音频和助手上一条消息,再读取是否说完的判断
语音研究 | 音频研究者 | 在语音片段上测试情绪和重音识别 | 询问句子里哪个词被重读
客户通话 | 通话工具开发者 | 检测对话中的停顿、笑声或咳嗽 | 标出一段中文录音里的笑声
产品团队 | 原型开发者 | 在转向 32B 模型之前先试用小型语音模型 | 对同一段音频比较回答

如果你需要商用,或需要日语、韩语、越南语、泰语、阿拉伯语的高质量转写,可以跳过它。

用在哪里:它在你自己的机器上以 vLLM 服务器的形式运行,语音智能体框架通过插件连接它。

  • vLLM,作为本地服务器
  • Pipecat 语音智能体,通过 pipecat-duplexjev 插件
  • LiveKit 语音智能体,通过 livekit-plugins-duplexjev 插件
  • 约有 10 GB 显存的 GPU 机器
Use case | Who | What they get back
轮次结束检测 | 语音智能体开发者 | 用户是否已说完的判断
情绪和重音检查 | 语音研究者 | 情绪、重读的词和停顿的标签
声音检测 | 音频工具开发者 | 关于片段中咳嗽、叹气和笑声的回答

如何设置:你需要带 pip 的 Python,以及约有 10 GB 显存的 GPU。1.4 版需要 0.4 或更高版本的 duplexjev-vllm 插件,或 0.7 或更高版本的 duplexjev。

  1. 安装带音频支持的 vLLM 和 DuplexJev 插件。
  2. 用模型名称启动服务器。
  3. 想用旧版本时,加上 revision 参数和版本名,例如 v1.3。
  4. 也可以先用 Hugging Face 工具把文件下载到本地。
pip install "vllm[audio]>=0.29" "duplexjev-vllm>=0.4"
vllm serve adventists-ai/DuplexJev-4B-Para --max-model-len 4096

如何使用:你把用户的音频作为用户回合发送,使用音频占位符,并附上普通的聊天历史,然后照常采样。决策提示词与 DuplexJev-4B-Turn 相同。对于重音和非语言类问题,请始终提供一个 none 选项。

<|audio|>
Tool | What it does
vllm serve | 把模型作为本地服务器启动
pipecat-duplexjev | 给 Pipecat 语音智能体加上实时轮次结束检测
livekit-plugins-duplexjev | 给 LiveKit 语音智能体加上实时轮次结束检测

示例:语音智能体刚说完一句话,来电者停顿了,应用就把来电者的音频和智能体上一条消息一起发送。模型回答来电者是否说完,智能体据此知道该马上回复还是继续听。

新手与专家:大多数语音工具把音频变成文字就结束了。这个模型会听声音本身,所以能分辨一句话说完了还是只是停顿。第一件小事可以是启动服务,再用一段短音频向它提问。

它的设计把 Qwen3-ASR-0.6B 编码器、连接器和 Qwen3-4B 组合在一起。1.4 版能听完整段音频,是一次性重新训练的,并通过合并的 LoRA 加入了轮流发言阶段。模型卡报告,在 Smart Turn v3.2 测试集上,轮次结束的准确率从 71.0 升到 92.9%。

来电者音频和上一条消息输入
编码器把音频变成 token
Qwen3-4B 读取音频和文字
模型用文字回复
你的应用根据判断行动

注意事项:模型卡在自己的测试上对比了 1.3 和 1.4 版,新版在它列出的每一组里得分都更高。

Title: Smart Turn v3.2 测试集上的轮次结束准确率
1.3 版: 71.0 percent
1.4 版: 92.9 percent
  • Limits: 对日语、韩语、越南语、泰语和阿拉伯语的转写,32B 模型强得多。
  • Self-description: 你问它自己的情况时,它可能说出自己并不具备的能力,比如视觉或声音。
  • 说话人判断比较粗略。不要用它们来识别或验证人,也不要据此对个人做决定。
  • License: CC BY-NC 4.0,所以使用范围仅限非商业工作。
  • Cost to run: 未提及。它需要约 10 GB 显存。
  • Data it reaches: 你发送到自己服务器的音频和文字。
  • Not for: 商业用途、识别人员,或对个人做决定。

Hugging Face 上的数据(2026年11月13日)

  • 任务:audio text to text
  • 框架:vllm
  • 参数量:4.2B
  • Weights: about 8.4 GB in BF16; about 2.1 GB at 4-bit (estimate)
  • Formats: Safetensors
  • 最近 30 天下载:363
  • 点赞:6
  • 许可证:cc-by-nc-4.0
  • 语言:zh, en, ja, ko, vi, th, ar, ru
  • 基于:adventists-ai/DuplexJev-4B-Turn
  • 标签:vllm, safetensors, ultravox, duplexjev, speech-to-decision, spoken-dialogue, full-duplex, turn-taking, end-of-turn, paralinguistics, nonverbal, speech-llm

链接

  • 模型:https://huggingface.co/adventists-ai/DuplexJev-4B-Para
  • 文件:https://huggingface.co/adventists-ai/DuplexJev-4B-Para/tree/main

获取模型

用 Hugging Face 的命令行下载它的文件:

pip install -U huggingface_hub
hf download adventists-ai/DuplexJev-4B-Para

然后按它的模型卡使用它。这个工具包里没有会自己运行的东西。

文件
README.md  6 KB

1 个文件,共 6 KB,以 zip 压缩包下载。

更新内容

  • 第 1 版 · 2026-11-13

同类产品对比

同一分类里与本产品共有标签最多的已上架 Hugging Face 模型。

产品最近 30 天下载点赞参数量许可证最近更新
DuplexJev-4B-Para 本页36364.2Bcc-by-nc-4.0
turn-1-mini共有 end-of-turn · turn-taking2,7336—apache-2.0
MiniCPM-o 4.5共有 full-duplex · safetensors170,7931,5719.4Bapache-2.0
Realtime-Venus共有 full-duplex · safetensors2,101135—apache-2.0
Indic Multilingual Turn Detector共有 end-of-turn · safetensors813494Mapache-2.0
Pipecat backchannel detector共有 turn-taking · safetensors017961Kbsd-2-clause
数据为 Mindket 在 2026-11-12 至 2026-11-13 期间读取的数值。

评价

还没有评分

写评价

还没有评价。

Mindket 的更多商品

查看 Mindket 的全部商品

anaksor-ocr

Sokheng · 工具包

这个模型从文档、收据和路牌照片里读取高棉语和英语文字,用一个检测器找文本行,再用识别器读每一行。适合需要在 Python 里做高棉语 OCR 的开发者。

新上架

Qwen2.5-7B-Instruct-GGUF

Qwen · 工具包

Qwen2.5-7B-Instruct 的 GGUF 文件,提供八种量化大小,可通过 llama.cpp 在本地聊天。适合想在自己电脑上用 7.6B 强力模型、又不想搭 Python 环境的人。

新上架

ACE-Step 1.5 XL SFT

ACE-Step · 工具包

用 4B 扩散解码器根据文字生成音乐,50 步并带引导控制,音频质量高于基础版。适合拥有 12 GB 或更多显存 GPU 的创作者。

新上架

开发类的相似商品

查看开发类的全部商品

Claude Code Skills & Plugins

alirezarezvani · 技能

为 Claude Code 和其他编程智能体提供 411 个现成技能,按角色分组,从工程、产品到营销、财务和合规。以插件方式安装。适合开发者和业务团队。

新上架29.8k

buzz

block · 工具包

可自行托管的工作空间,人和 AI 智能体在同样的房间里协作,基于 Nostr 中继,把每个动作记录为签名事件。适合想自己运行中继的团队。

新上架37.3k

plannotator

backnotprop · 工具包

把你的 AI 编程智能体的计划、规格和代码改动在浏览器里打开,让你加批注或评论,并把反馈直接发回给智能体。

新上架10.5k