dsh-guide-dog

@AtropinolTT · 视觉与多模态
检测未发现问题无安装脚本

基于 MiniMax 的多模态插件,为无视觉能力的模型提供图像识别、媒体生成与实时语音通话能力。

v0.1.0版本
GitHub 源码安装安装方式
2026-08-17最近更新
5Star
dsh plugin --profile web add github:AtropinolTT/dsh-guide-dog查看仓库

插件介绍

根据仓库资料整理 · commit fbd3a05

主要功能

  • 提供图像/视频/语音/音乐/文本等多模态生成工具,基于 MiniMax 各模型(image-01、MiniMax-H3、music-3.0 等)。
  • 通过 guide_dog_vision / guide_dog_inspect 为无原生视觉能力的模型(如 DeepSeek)提供图像识别与结构化审查(前端设计、图表、截图、OCR)。
  • 生成的媒体文件同源托管并在对话工具卡片中内嵌预览(图片/音频/视频)。
  • 内置系统提示片段,指导 Agent 在需要视觉核查的任务中自动调用检查工具。
  • 支持实时语音通话模式:VAD/按键说话轮流机制、流式分句 TTS 与打断(barge-in)、写操作前的共识确认、悬浮双胶囊 UI。
  • 内置网页搜索工具 guide_dog_search。

适合什么时候用

  • 使用无原生视觉能力的模型(如 DeepSeek)时,需要审查前端设计、截图、图表或生成的图片。
  • 在 DSH 工作流中需要直接生成图像、视频、音乐或语音等媒体内容。
  • 希望在网页端与 Agent 进行免手动操作的实时语音对话。

安装后会多出什么

界面Guide Dog 设置页(显示鉴权状态与语音测试器) · 对话中嵌入的媒体预览卡片(图片/音频/视频) · 输入框旁的悬浮双胶囊语音通话 UI
Agent 工具guide_dog_speakguide_dog_imageguide_dog_videoguide_dog_visionguide_dog_inspectguide_dog_voicesguide_dog_musicguide_dog_textguide_dog_search

使用前需要

  • 需要 MiniMax 账号/API 鉴权(通过 mmx CLI),并具备网络访问权限。
  • 通过 github-source 方式安装(未发布到 npm),需使用 dsh plugin --profile web add 命令。
  • 部署/更新静态 web-profile bundle 后需要重启 DSH(dsh web)才能生效。

在 GitHub 阅读完整 README

权限与能力

安装后它能碰到什么
不覆盖任何 dsh-base 宿主行:不接管沙箱、审批、凭据等能力。
宿主能力
Agent 控制浏览器 UI凭据环境变量文件系统外部网络会话数据宿主子进程
能力是范围不是结论:很多能力是功能所需。

基本信息

仓库AtropinolTT/dsh-guide-dog安装方式GitHub 源码安装(需 allowBuilds)安装提示源码安装会在你的机器上执行 prepare 构建,需要 allowBuilds 授权;建议用 github:AtropinolTT/dsh-guide-dog#fbd3a05 锁定本次检测的 commit。收录日期2026-08-17固定 commitfbd3a0584609 · 2026-08-17
dsh plugin --profile web add github:AtropinolTT/dsh-guide-dog