Skills Plugins MCP Prompt Model 导航 博客 资讯 我的中心
工具与能力 #adb#agent-tools#android#dsh-plugin#scrcpy#uiautomator

dsh-android-pane

在 DSH 对话旁打开 Android 设备实时画面面板:scrcpy-server H.264 串流(WebCodecs 硬解 30-60fps),agent 可点按/滑动/输入并自动回截图验证,uiautomator 控件树带点按坐标,host 托管录屏+logcat 调试会话;FLAG_SECURE 安全页面自动识别、缓解链与控件树文本降级。模拟器与 USB 真机通吃,人机共屏,会话隔离,仅限本机回环。

hoyyang @hoyyang ⬇ 2 ★ 0 main

安装

dsh plugin --profile web add github:hoyyang/dsh-android-pane
下载安装清单

需要可复现安装时,可在仓库后追加 #commit 固定提交。

在 DSH 对话旁打开 Android 设备实时画面面板:scrcpy-server H.264 串流(WebCodecs 硬解 30-60fps),agent 可点按/滑动/输入并自动回截图验证,uiautomator 控件树带点按坐标,host 托管录屏+logcat 调试会话;FLAG_SECURE 安全页面自动识别、缓解链与控件树文本降级。模拟器与 USB 真机通吃,人机共屏,会话隔离,仅限本机回环。

该插件未提供要点说明,请参考仓库 README。

adbagent-toolsandroiddsh-pluginscrcpyuiautomator
  1. 安装并启动 DeepSeek Harness:npx @deepseek-ai/dsh web
  2. 在终端执行上面的安装命令(CLI 会解析插件并核验来源)
  3. 用 dsh plugins list 确认已安装,必要时重启 Harness 生效

插件以当前 dsh 进程的权限运行,安装时可能执行代码。请先通读仓库源码与许可证,确认无破坏性命令与越权访问;本站只做索引,不对第三方插件安全性作担保。

代码仓库github.com/hoyyang/dsh-android-pane
许可证MIT
主要语言main
下载量2
GitHub 星标0
最近推送2026-09-16
收录日期2026-09-19
分类工具与能力

事实信息来自公开插件目录快照(2026-10-01),介绍文案由本站再加工。

以下为插件仓库 README 全文(原始内容,由公开目录抓取整理)。

# dsh-android-pane

![banner](assets/banner.svg)

在 DeepSeek Harness(DSH)对话旁打开一块 **Android 实时画面面板**:模拟器和 USB 真机通吃,agent 能点按操作并用截图 + 控件树自证改动,你也能随时上手共操作。

[English](README.en.md) · [Releases](https://github.com/hoyyang/dsh-android-pane/releases) · [更新日志](CHANGELOG.md)

  [图片: License: MIT]

  [图片: Release]

  [图片: Platform]

## 安装

```sh
dsh plugin add github:hoyyang/dsh-android-pane
```

零配置:不需要 API Key、不需要改 DSH 配置。需要 `adb` 在 PATH(Android SDK),一台开了 USB 调试的设备或任一模拟器;macOS/Linux + DSH web profile。

## 有啥用

- **实时画面**:scrcpy-server H.264 直推 DSH 网页端,WebCodecs 硬解(本机回环 30–60fps);scrcpy 起不来(老设备/强化安全系统)自动降级截图轮播。
- **agent 自己会验证**:10 个上下文经济工具——点按/滑动/文本/按键/滚动/旋转(每次操作自动回截图)、uiautomator 控件树带点按坐标、mp4 录屏、host 托管调试会话(录屏 + logcat + 动作时间线)。
- **FLAG_SECURE 黑屏自愈**:银行/密码类应用自动识别,横幅提示 + 缓解链(`adb root` → root 框架启用指引 → SECURE 位复查终局判定),仍被系统拦截时降级为可点按的控件树文本视图,每步结果明示,绝不静默。
- **人机共屏**:面板里点=点按、拖=滑动;agent 操作时亮红色徽标(面板手势暂被拒绝),谁在开车一目了然。
- **会话隔离**:一台设备同时只归一个会话;闲置 10 分钟自动释放(模拟器关机、真机仅断开)。
- **仅本机**:所有流只允许 127.0.0.1 访问(其余一律 403),面板变更做同源校验。

## 30 秒上手

1. 手机开 USB 调试连电脑(或启动任一模拟器);
2. 对 agent 说「连接我的安卓设备」;
3. DSH 网页端出现设备实时画面;
4. 说「点一下设置图标」——围观 agent 操作,每步自动回截图;
5. 你也可以直接在画面上点按、拖动,人机共屏。

## 进阶用法

- **中文输入**:`android_pane_install_ime`(一次性装 ADBKeyboard 输入法,中文经剪贴板粘贴)。
- **元素级操作**:`android_pane_ui` 按 find/click/setText,文本模糊匹配控件,替代盲点坐标。
- **安全页面检测开关**:config `flagSecureCheck`(默认 true)。
- **MIUI/HyperOS**:注入点击需打开「USB 调试(安全设置)」,否则面板自动降为只看。

## 工作原理

attach 时把 scrcpy-server 推上设备、以 app_process 跑 H.264 编码,视频流经 adb 端口转发到本机回环,网页端 WebCodecs 硬解渲染;注入指令经 adb 下发,控件树来自 uiautomator dump。debug 模式由 host 托管:分段 mp4 录屏 + 全量 logcat + 结构化动作时间线,供事后逐动作回放分析。

## 可靠性与验收

按 dsh-plugin-build 生产线交付:隔离 staging 验证、卸载重装幂等、冷启动三故障静态检测、十门审查;模拟器与多品牌真机实测(H.264 串流、注入、中文输入、FLAG_SECURE 降级链、多设备并发)。样式层自愈(v0.1.1):头部按钮/面板样式被意外移除或失效时毫秒级自动恢复,热重载后新样式免整页刷新即生效。

## 常见问题

- **画面全黑?** 多为 FLAG_SECURE 页面(银行/密码管理器),面板会出横幅并给缓解链;普通页面黑屏先确认 `adb devices` 在线。
- **点按没反应?** MIUI/HyperOS 需开「USB 调试(安全设置)」。
- **帧率低?** 多设备同时串流会分带宽,先 detach 不用的设备。

## 本地构建

```sh
git clone https://github.com/hoyyang/dsh-android-pane && cd dsh-android-pane
npm install && npm run build && npm run build:client
```

## 卸载

```sh
dsh plugin remove @dsh-external/dsh-android-pane
```

卸载即停流、回收 adb 子进程;状态在 `/dsh-android-pane/`(截图、state.json),可整目录删除。

## 隐私

agent 对设备的截屏会发送给所配置的模型。勿在受控设备上登录真实账号。

## 许可证

MIT — 见 [LICENSE](./LICENSE)。随包分发的 `scrcpy-server`(Apache-2.0)与 `ADBKeyboard.apk`(Apache-2.0)见 [THIRD_PARTY_NOTICES.md](./THIRD_PARTY_NOTICES.md)。

数据来源:公开的 DeepSeek Harness 插件目录与各插件 GitHub 仓库。本站为独立第三方目录,与 DeepSeek、幻方(High-Flyer)及插件作者均无隶属或背书关系。

每日精选 Skill 推荐,免费送到你邮箱

输入邮箱,每天接收一个精选 AI Agent 技能推荐。完全免费,持续更新。

提交后我们会发送一封确认邮件,点击邮件里的链接才会开始收信。

完全免费,取消任意时间。我们不会发送垃圾邮件。