beiyege-01/dsh-voice-ai-girlfriend-plugin

DeepSeek Harness 的浏览器语音插件：麦克风语音输入、回复朗读（TTS）、AI 女友动画窗、QQ 双向对话。

✅ 已适配 DSH rc.8 与 dsh 0.1.3（最近实测 2026-09-14，v0.3.0）：dsh.bundle manifest + conversation.input.dock/left 槽位按 rc.8 协议实现；2026-09-05 已在 dsh v0.1.3-alpha.1（profile web-v013）实测通过 —— 聊天节点读取用 0.1.3 的 useChat 视图（assistant-step 节点）、桥接 /api/tts（语音朗读）与 /api/dh/speak（数字人）均正常触发；build.mjs 同时产出服务端入口 lib/index.js 与内联 <style> 的浏览器包，修复 dsh plugin add 安装与样式注入。含数字人（DUIX）控制、DeepSeek 余额 badge（stats 行）、五态麦克风。dsh plugin add 即可安装。

🎥 成品展示（抖音）：

• 口播视频效果 ①
• 口播视频效果 ②

⚠️ 本插件是完整方案的一部分：语音识别/合成依赖配套的 voice bridge（Python 服务，FunASR + OmniVoice TTS（WSL2 + FlashInfer）），QQ 对话依赖 NapCatQQ。请配合完整仓库使用：beiyege-01/dsh-voice-ai-girlfriend（含桥接代码、模型准备、一键启动脚本、安装文档）。

适配版本

组件	适配版本	状态
DSH（主用）	dsh 0.1.3-alpha.1 / profile web-v013（端口 3080）	✅ 2026-09-14 实测通过
DSH（兼容）	rc.8（E:\DSH\deepseek-harness master 141eb6fef）/ profile web	✅ 仍可加载
本插件	@beiyege-01/dsh-voice-ai-girlfriend v0.3.0	构建：node build.mjs → lib/client.js
语音桥接	voice_bridge.py（FastAPI/uvicorn :8765，Python 3.14 venv）	配套主仓库
TTS 引擎	OmniVoice（WSL2 + FlashInfer :9877）	音色全部为 OmniVoice 克隆
数字人	DUIX guiji2025/duix.avatar-5090:trt10.9（宿主 :9000）	冷启动 1-3 分钟

v0.3.0 新增：数字人开关下沉到桥接（关掉＝桥接停止预热/提交，并可联动 docker stop 释放显存；打开＝docker start + 就绪后预热）、生成中按钮周期性绿光、卡片左下角分段进度（第 N/M 段）与语音总开关提示。

维护节奏（2026-09）

作者本月正在筹备婚礼，DSH 新版本的适配与兼容性跟进顺延到国庆之后（10 月上旬）。这段时间欢迎继续提 issue / PR，但响应可能会慢一些；上表所列版本功能完整、可正常使用。

安装

dsh plugin --profile web add github:beiyege-01/dsh-voice-ai-girlfriend-plugin

pnpm ≥10 对 git 依赖的构建脚本有 allowBuilds 限制：按安装时 pnpm 打印的提示，在 profile 的 pnpm-workspace.yaml 的 allowBuilds 里加一行允许 esbuild 后重跑。

功能

• 🎙️ 语音输入：麦克风 → 桥接 FunASR 中文识别 → 注入对话（连续聆听、自动端点）
• 🔊 语音回复：回复流式 TTS 朗读（OmniVoice 声音克隆，跑在 WSL2 + FlashInfer 加速，音色由参考音频决定，支持 600+ 语言）
• ⚡ 插话/排队：亮=说话打断回复；灭=回复读完句子排队接上
• 👧 数字人窗口：右侧动画窗（空闲/说话视频，素材自备），自动贴右侧插件边缘不被遮挡
• 💬 QQ 双向：QQ 消息注入对话 + 回复文本/语音/图片推送（NapCat）
• 🎭 三类预设一键切换：工具行三个按钮分别循环切换 TTS 音色 / 数字人形象 / 待机动画，选择自动记忆（localStorage）。音色（voices/<名字>/）、待机（assets/bg-images/<名字>/）、形象（共享卷 temp 放 mp4）均可自行添加，无需改代码

使用前提

1. 克隆主仓库并按其 README 装好 voice bridge（start-all.cmd 一键）
2. 本插件的桥接地址默认 http://127.0.0.1:8765（localStorage s2s.voice.bridge 可改）

构建

npm install
node build.mjs   # 产物 lib/client.js（browser bundle）