详细介绍
blurr(项目代号 Panda)是一个在 Android 设备上运行的开源个人 AI 操作员,目标是将大模型驱动的能力直接带到手机端。Panda 能“看”到屏幕并理解界面元素,通过无障碍服务执行点击、滑动、输入等操作,从而完成多步骤任务(如自动回复、表单填报或跨应用流程)。项目前端演示与安装说明见官网与项目 README( 官网 )。
主要特性
- 智能 UI 自动化:结合屏幕解析与自然语言理解,自动执行触控操作以完成任务。
- 离线/本地优先设计:以可持续的设备端交互为目标,强调隐私与响应性(部分功能依赖外部模型或密钥)。
- 多模态能力:集成声音与文本交互,支持高质量语音输出与持久化本地记忆(可选)。
- 社区驱动:开源仓库提供示例、演示与贡献指南,便于扩展与定制。
使用场景
- 自动化日常手机任务:如自动发送欢迎消息、日程管理或表单自动填充。
- 无障碍辅助:帮助行动不便用户以语音或简洁指令控制手机应用。
- 研究与开发:作为移动端智能体(智能体)原型用于多步骤任务与工具调用研究。
技术特点
- Kotlin 实现的多智能体架构,使用 Android Accessibility Service 作为“手眼”接口。
- 高级推理依赖外部或云端的大语言模型(可配置),并提供示例配置与快速上手指南。
- 项目以 Gradle 管理,提供在 Android Studio 中构建与调试的流程,README 中包含安装与权限配置说明。