视觉桥:贴图先经 deepseek-v4-flash-vision-exp 转写为文字,再交给纯文本的 deepseek-v4-pro 回答,零第三方依赖。
安装
# npm 包(预构建)
dsh plugin --profile web add dsh-vision-pro-bridge
# GitHub 源码(首次需按提示配置 allowBuilds 构建授权后重试)
dsh plugin --profile web add github:ShaineDemo/dsh-vision-pro-bridge
装任何插件都等于在你的机器上跑第三方代码,权限和你本人一样大——能读你的文件、用你的凭据、访问网络,工具审批管不到它。GitHub 来源的插件还会在安装时执行构建脚本——pnpm 默认拦截,所以安装可能停在 ERR_PNPM_GIT_DEP_PREPARE_NOT_ALLOWED 或 ERR_PNPM_IGNORED_BUILDS;dsh 会打印出需要添加的确切键名,把它加进该 profile 的 pnpm-workspace.yaml 的 allowBuilds 下,重跑一次即可装上。放行构建本身就是一次信任判断:请只安装可信来源,并尽量锁定 commit(github:owner/repo#sha)。
README
让纯文本的 DeepSeek-V4-Pro 真正“看见”图片 —— 不用切换模型、不用 Ollama、不用第二个 key。
解决的问题
deepseek-v4-pro(以及 deepseek-v4-flash)是纯文本模型:DeepSeek API 不接受图片字节。在 DeepSeek Harness 里,往 Pro 会话里贴图会报“不支持图片”。官方唯一的选择,是把整个会话切到(编码能力较弱的 Flash 档)deepseek-v4-flash-vision-exp。
这个插件做什么
它注册一条孪生路由 deepseek-vision-pro(模型 deepseek-v4-pro-vision)并声明支持图片。你贴图后,插件先用 deepseek-v4-flash-vision-exp 把图片转成文字(复用你已有的 DEEPSEEK_API_KEY),再把文字 + 本地路径交给 deepseek-v4-pro。DeepSeek 的对话路由永远收不到图片,V4-Pro 保留编码能力、同时“看得见”。
贴图 → [图片块被放行]
→ deepseek-v4-flash-vision-exp 转写为文字
→ 文字 + 本地路径 → deepseek-v4-pro 回答
为什么选这个(优势)
- 零第三方依赖:只复用 Harness 自带的
@deepseek-ai/dsh-llm与@deepseek-ai/dsh-llm-deepseek。没有openai、没有sharp、没有schemastery、没有 Ollama。 - DeepSeek 专属、单一供应商:图片只发给 DeepSeek(
deepseek-v4-flash-vision-exp),走同一个DEEPSEEK_API_KEY。没有第二个 VLM 厂商、没有本地模型、没有匿名免费端点。 - 官方图片管线、逐字节一致:继承官方
DeepSeekAdapter,图片规范化、Files API 上传、inline-base64 回退都与官方行为完全一致,不手写 HTTP。 - 极简、可审计:单文件、约 250 行,易读、易验、易 fork。
- 内容寻址落盘:图片存到
~/.dsh/vision-pro-bridge/images/,稳定本地路径会传给模型,V4-Pro 可继续引用。 - Pro 专精:只暴露一个模型
deepseek-v4-pro-vision—— 保留 V4-Pro 编码能力,外加视觉。
安装
dsh plugin --profile web add dsh-vision-pro-bridge
# 重启 dsh web
使用
- 模型选择器里选 DeepSeek-V4-Pro (视觉桥)。
- 粘贴/拖入截图,正常提问。
设为新会话默认(~/.dsh/settings.yaml):
agent-default-model:
provider: deepseek-vision-pro
model: deepseek-v4-pro-vision
配置(环境变量)
| 变量 | 默认 | 作用 |
|---|---|---|
DEEPSEEK_API_KEY |
credentials 服务 | DeepSeek key(与官方路由同源) |
DEEPSEEK_BASE_URL |
https://api.deepseek.com | 端点(与官方路由同源) |
DSH_VISION_PRO_BRIDGE_PROMPT |
内置英文转写提示词 | 覆盖转写提示词(例如改为中文 UI 分析) |
已知限制
- 转写是有损的:布局/OCR 足够,精确像素坐标不如真视觉。
- 转写模型固定为
deepseek-v4-flash-vision-exp。 - 端点从
DEEPSEEK_BASE_URL解析,不读设置页里llm-deepseek的自定义项。 - 无降级链:转写失败时图片变成占位文本,对话继续。
备选
需要更完整功能(VLM 降级链、本地 Ollama、设置页、图片降采样)请看 dsh-vision-proxy。本插件是同一思路的极简、纯 DeepSeek、零依赖版本。
License
MIT
链接
同类插件
liustack/modlens★ 4341
为纯文本模型架起视觉桥梁:粘贴图片,输出结构化 JSON 证据(OCR、版面、语义)。
ysr666/dsh-vision-router★ 1156
为纯文本 Agent 提供视觉能力:内置免 Key 视觉链 + 像素级视觉工具(看图问答、定位、裁剪、像素对比、取色、OCR、矢量化、抠图、截图);粘贴图片即可用。
Anionex/dsh-vision-toolkit★ 903
让纯文本模型处理视觉任务:粘贴图片后自动切换到 Vision Toolkit 变体,支持图片问答、多图比较、长截图 OCR、截图还原前端 UI、元素定位与像素对比。默认无需 API Key——图片经作者自建的免费服务处理,每台机器每天 100 张;也可改为指向自己的服务商。
dickpy/dsh-imagegen★ 125
面向 DSH Web GUI 的 AI 生图插件:通过可配置的 OpenAI 兼容端点(gpt-image-2 / gpt-image-1 / dall-e-3)实现文生图与图生图,提供 api_url/api_key 设置卡片与侧边栏分栏生图工作台。
fandc520/dsh-comfyui★ 119
让 DeepSeek Harness 的 Agent 直接驱动本地或远程 ComfyUI:comfyui_run / comfyui_object_info / comfyui_workflow 工具生成与编辑图像、视频,附带工作流库(图工作流提取:按分量 / 主流程 / 整体)、加载区分辨率自动匹配、实时队列、SDXL 与 Wan 2.1 模板、配套 skill 与同源媒体代理。
sunxin-ai/dsh-design-qa★ 44
给纯文本模型的设计稿保真判定:`deepseek_vision` 工具从任意 OpenAI 兼容视觉路由借来一只眼,让模型判断实现与设计稿是否一致——并附上支撑该判定的基准(4 组夹具、23 处注入缺陷、逐格原始输出)与其依赖的提问纪律。
社区评论
评论公开保存在 GitHub Discussions。加载评论会连接 GitHub 和 Giscus;发表内容需要 GitHub 账号。