@anionex/dsh-vision-toolkit

@Anionex · 视觉与多模态
检测有风险提示无安装脚本来源一致

让 DSH 中的纯文本模型具备看图能力,粘贴图片即可完成问答、OCR、UI还原等视觉任务。

v0.1.38版本
npm 预构建包安装方式
2026-08-21最近更新
806 · 21.0kStar · 周下载
dsh plugin --profile web add @anionex/dsh-vision-toolkit查看仓库

插件介绍

根据仓库资料整理 · commit 5a33bf6

主要功能

  • 粘贴图片后自动切换为 Vision Toolkit 模型变体,无需手动切换模型或复制文件路径。
  • 安装后即可使用内置免费的 Gemini 3.7 Flash 视觉服务,默认无需配置 API Key。
  • 支持图片问答、多图比较、长截图 OCR、截图还原前端 UI、元素定位与像素级对比等视觉任务。
  • 针对具体任务提取关键证据(如错误位置、按钮位置),而非生成泛泛的图片描述。
  • 内置经过长期实践打磨的视觉任务方法论 Skill,指导 agent 选择工具、执行步骤并验证结果。
  • 可将默认免费视觉服务替换为自定义模型服务商,突破每日额度限制。

适合什么时候用

  • 需要让纯文本模型理解截图、错误提示图或界面设计稿的内容时。
  • 需要把设计稿截图还原成前端代码,或对比两张图片的像素差异时。
  • 处理长截图文字提取(OCR)或多张图片间的比较分析时。

安装后会多出什么

界面输入区粘贴图片后自动出现的 "(Vision Toolkit)" 模型变体选项 · 设置页中的视觉服务配置项与获取 API Key 的操作指引 · Web 端支持预览生成的视觉任务 Artifacts(如还原的 UI)
Agent 工具read_image

使用前需要

  • 默认无需 API Key,使用作者自建的免费视觉服务,每台机器每日限额 100 张图片。
  • 如需更高额度或自定义模型,需自行提供并配置对应服务商的 API Key。
  • 需在 DSH Web 或 Headless Profile 中通过 npm 安装并启用。

仓库资料较少,介绍可能不完整。 在 GitHub 阅读完整 README

权限与能力

安装后它能碰到什么
不覆盖任何 dsh-base 宿主行:不接管沙箱、审批、凭据等能力。
宿主能力
Agent 控制浏览器 UI凭据环境变量文件系统外部网络会话数据宿主子进程遥测
能力是范围不是结论:很多能力是功能所需。

基本信息

仓库Anionex/dsh-vision-toolkitnpm@anionex/dsh-vision-toolkit@0.1.38安装方式npm 预构建包收录日期2026-08-13固定 commit5a33bf6e9ff3 · 2026-08-21
dsh plugin --profile web add @anionex/dsh-vision-toolkit