说清楚。
剩下的,让它点。
打开应用、点击、长按、滑动、输入文字。每一步操作之后重新观察页面,再继续下一步。
了解逐步控屏屏幕与流程概念示意,非运行截图
01 / PHONE USE
前台操作与后台执行,各有自己的工具入口。
不用换一个聊天应用,直接在小爱里发起任务。
打开应用、点击、长按、滑动、输入文字。每一步操作之后重新观察页面,再继续下一步。
了解逐步控屏在独立虚拟屏执行任务。显示焦点与输入隔离,后台操作不必占住你眼前这块屏幕。
需 root 与 ROM 隔离能力支持;同一应用可能存在冲突。
检查目标区域。目标移动或被替换时先返回新观察,交给模型重新规划。
虚拟屏宽高与密度可配置,也能填入本机分辨率。新任务使用保存后的尺寸。
自定义画布已实现;不同尺寸的实机表现仍待验证。灵动岛显示进度并提供停止入口。任务完成后,点击通知回到发起任务的原对话。
02 / YOUR MODEL, YOUR CHOICE
用熟悉的界面,选适合自己的模型。
日常聊天与手机操作,可以各有所长。
控屏规划保持「小爱当前模型」,API 配置全部留空。先用已有的小爱,再决定要不要接入外部服务。
Chat Completions / Responses
保存、切换自己的服务与模型。
支持的思考档位,直接在小爱里选。
模型能力与思考档位因服务而异;控屏模型需支持图片与工具调用。语音识别、语音合成及米家等服务仍走原链路。
支持 1–1440 分钟,或关闭自动新建。只有再次唤醒时才判断,不会突然打断当前对话。
最多可设 200 步,默认 30 步。预算、取消、超时和错误终止仍然有效。
移除指定聊天 Agent 的硬轮次门槛与第 101 个历史话题的创建限制。服务端限制、上下文容量与任务边界仍然存在。
04 / YOU'RE IN CONTROL
前台敏感操作通过灵动岛确认。拒绝、取消或超时就停止;后台敏感动作交给你接管。
隔离校验或后台执行失败即停止。需要使用主屏当前应用时,遵循明确的前台交接规则。
屏幕观察会发送给所选模型;外接模式也会发送相应对话与工具上下文。模块不是离线运行。
05 / GET STARTED
支持 API 102 的 LSPosed;控屏需无障碍权限。
其他版本不启用 Hook。
需要独立焦点与输入隔离能力,兼容性因设备而异。
在 LSPosed 启用 MiAIPlus,保持默认作用域。
默认使用小爱当前模型,无需填写 API。
例如「打开计算器,清空当前结果」。后台任务请明确说「在后台操作」。
项目持续开发中。此页展示当前源码能力,安装包以 Release 说明为准。自动操作可能出错,请关注执行过程。
验证记录 ↗默认不需要。模块可以直接使用小爱当前模型。接入外部模型是可选项,费用与服务条款由所选服务商决定。
不是。它是独立执行屏幕,不能保证同一应用在两个屏幕同时独立运行。首次目标为主屏当前应用时会转前台;任务中途遇到应用冲突时会征求同意,拒绝或超时则暂停。
后台固定画布执行、主屏键盘隔离、原生菜单与对话续接已有指定设备的验证记录。自定义画布目前完成本地测试,未完成不同尺寸实机验收。协议 mock 和确定动作测试不代表真实模型自主任务成功率;其他 ROM 与输入法仍需验证。
完整步骤、后台限制、权限说明和模型设置请看 项目 README ↗。建议使用 Release 提供的安装包;持续集成构建位于 GitHub Actions。