DeepSHPlugins
dsh-plugin-multimodal 项目预览
GITHUB / COMMUNITY PROJECT

dsh-plugin-multimodal

视觉与多模态TypeScriptMIT

在纯文本 DeepSeek 线路上开放贴图准入,用视觉 sidecar 把附件转成文字,原生视觉模型不改写。

3 Starsshinjiyu 更新时间 2026-08-16
访问 GitHub 仓库
dsh-plugin-multimodal 项目预览

项目介绍

中文

在纯文本 DeepSeek 线路上开放贴图准入,用视觉 sidecar 把附件转成文字,原生视觉模型不改写。

English

Advertise image paste on text-only DeepSeek routes, describe attachments with a vision sidecar, and leave native vision models untouched.

项目信息与收录信号

快照 2026-09-11
作者 / 组织
shinjiyu
仓库
shinjiyu/dsh-plugin-multimodal
GitHub Stars
3
Forks
0
开发语言
TypeScript
许可证
MIT
最近推送
2026-08-16
Manifest
数据中检测到声明

公开仓库不自动等于可商用;许可证与当前兼容性以原项目文档为准。Manifest 和数据评分不构成安装安全认证。

数据评分

54/ 100
维护活跃
82
文档与实用信息
85
生态关注度
17
安装便捷信号
55
项目声明信号
100

README 含完整安装与使用说明;关注度尚低(3)。

评分来自已有数据快照的五维模型,仅作浏览参考,不是实际使用评测或安全检测结论。

安装与使用

所有项目资料与许可均以对应 GitHub 仓库为准。

dsh plugin --profile web add github:shinjiyu/dsh-plugin-multimodal

复制命令不会自动执行。请先阅读仓库文档,确认环境要求与许可证。

项目截图

仓库 README

GitHub 原文

已保存的仓库文档快照;文档抓取时间未记录,可能与上方目录介绍处于不同版本。安装前请核对当前仓库说明。

dsh-plugin-multimodal

Awesome DSH Plugin

DeepSeek Harness 官方线路是纯文本。Web 里贴图会被拒:当前模型不支持图片。

这个插件补的是贴图准入,不是视觉工具箱。

  1. 主模型本身收图(Claude / GPT / 自建视觉网关)→ 原样把图交给模型,不转文字
  2. 主模型是纯文本(官方 DeepSeek)→ GUI 先收下图,sidecar 转成文字再发给主模型
  3. see_image 给磁盘上的截图用

官方 PI adapter 已经会做第 1 步,不会做第 2 步:不支持就 UNSUPPORTED_CONTENT。Anionex 的 dsh-vision-toolkit 是另一条路:给 agent 一堆 vision_* 工具,要模型自己去调。本插件让粘贴不被拒。

对应需求:Discussions #588 · 介绍帖:Show and tell #1709

安装

dsh plugin --profile web add github:shinjiyu/dsh-plugin-multimodal

本地路径:

dsh plugin --profile web add D:\tempWorkspace\dsh-plugin-multimodal

然后重启 dsh web。旧会话的工具表不会更新。

GitHub topic:dsh-plugin

配置

环境变量(不要把 key 写进仓库):

变量作用
DSH_VISION_BASE_URL视觉接口,例如 https://api.example/v1
DSH_VISION_API_KEY该接口的 key
DSH_VISION_MODEL必须是真能看图的模型,例如 glm-4.5v
DSH_VISION_PROMPT可选。默认 OCR + 描述界面

没设 DSH_VISION_* 时回退 OPENAI_BASE_URL / OPENAI_API_KEY。GLM-5.2-FP8 这类文本模型不能当 sidecar。

也可以在 profile 的 cordis.patch.yml 里写:

- id: dsh-plugin-multimodal
  name: dsh-plugin-multimodal
  inject: [llm, tools, attachments, systemPrompt]
  config:
    model: glm-4.5v
    apiKeyEnv: DSH_VISION_API_KEY

30 秒验收

  1. 主模型仍用官方纯文本(或 PocketCity 文本模型)
  2. 配好一个真能看图的 sidecar
  3. 在 Web 里粘贴一张报错截图,问「红字说了什么」
  4. 过关:不再弹「当前模型不支持图片」,主模型能引用图上的字

磁盘文件:让它调 see_image。

不要做

  • 不要改 runtime/ 或官方 DeepSeek adapter
  • 不要把 sidecar 指到 deepseek-v4-flash / 其它纯文本模型
  • 不要把它宣传成「视觉工具箱」——那是 toolkit 的词

社区

微信群:deepseek harness 讨论群(2群)

扫码进群,用来分享和讨论插件。不是官方群。

微信群二维码

微信群码大约 7 天过期(本张到 2026-08-23)。过期后把新码覆盖 docs/community/wechat-group-2.jpg 即可。

宣发稿(Discussions / V2EX / 群公告)在 docs/PROMO.md。

License

MIT

使用前核对

安装步骤、兼容版本与授权范围以原项目当前文档为准。Stars 和评分是快照中的导航信号。

安装与排错 · 项目问题反馈

同类项目