佛山做外贸网站代理商,企业网络的组网方案,网络品牌营销工作总结,wordpress 在线安装插件智谱AI-OpenAutoGLM-开源的手机智能体 针对智谱AI-AutoGLM-开源的手机智能体#xff0c;整理部署步骤 1-思路整理
1#xff09;先把手机和电脑的连接软件安装上【ADB(电脑安装)】【ADBKeyboard(手机安装)】2#xff09;然后手机打开调试模式-这个电脑的应用就可以直接操…智谱AI-OpenAutoGLM-开源的手机智能体针对智谱AI-AutoGLM-开源的手机智能体整理部署步骤1-思路整理1先把手机和电脑的连接软件安装上【ADB(电脑安装)】【ADBKeyboard(手机安装)】2然后手机打开调试模式-这个电脑的应用就可以直接操作手机3配置智谱AI-AutoGLM-开源的手机智能体的模型(模型地址/模型)4运行智谱AI-AutoGLM-开源的手机智能体代码-直接操作手机2-参考网址智谱AI-AutoGLM-开源的手机智能体代码https://gitee.com/enzoism/Open-AutoGLM智谱AI-AutoGLM-开源的手机智能体模型-Phone-9Bhttps://ai.gitcode.com/zai-org/AutoGLM-Phone-9BAutoGLM: Autonomous Foundation Agents for GUIs论文https://arxiv.org/pdf/2411.00820Android手机桥接软件ADB(电脑安装-已验证)https://dl.google.com/android/repository/platform-tools-latest-darwin.zipAndroid手机桥接软件ADBKeyboard(手机安装-已验证)https://gitee.com/enzoism/ADBKeyBoardGoogle 提供官方的adb/fastboot独立工具包[Win/macOS/Linux]https://blog.csdn.net/OpenStack_/article/details/87368289adb下载安装及使用教程https://blog.csdn.net/mowang_hongci/article/details/1363586313-动手实操1-安装ADB# 1-进行代码clone(base)MacBook-Pro:20251216_1_GLM_Phone rong$gitclone https://gitee.com/enzoism/Open-AutoGLM.git Cloning intoOpen-AutoGLM... remote: Enumerating objects:299, done. remote: Counting objects:100%(299/299), done. remote: Compressing objects:100%(147/147), done. remote: Total299(delta152), reused299(delta152), pack-reused0(from0)Receiving objects:100%(299/299),2.58MiB|1008.00KiB/s, done. Resolving deltas:100%(152/152), done.# 2-安装ADB(配置环境变量)(base)MacBook-Pro:20251216_1_GLM_Phone rong$exportPATH${PATH}:~/Downloads/platform-tools(base)MacBook-Pro:20251216_1_GLM_Phone rong$ adb --version Android Debug Bridge version1.0.41 Version33.0.2-8557947 Installed as /usr/local/bin/adb# 3-查看ADB上连接的设备(当前未连接)(base)MacBook-Pro:20251216_1_GLM_Phone rong$ adb devices * daemon not running;starting now at tcp:5037 * daemon started successfully List of devices attached 2KE5T19B23025905 unauthorized# 4-查看ADB上连接的设备(当前已连接)(base)MacBook-Pro:20251216_1_GLM_Phone rong$ adb devices List of devices attached 2KE5T19B23025905 device2-项目运行原项目没有使用UV个人开发的时候把项目改造为了UV环境管理1-依赖安装# 1-Python管理pipinstall-r requirements.txt pipinstall-e.# 2-UV环境管理uv python pin3.11.4 uv venvsource.venv/bin/activate uv pipinstall-r requirements.txt uv pipinstall-e.2-执行任务执行任务python main.py打开QQ音乐,播放【30岁的女人】执行结果打印(Open-AutoGLM)(base)MacBook-Pro:Open-AutoGLM rong$ python main.py打开QQ音乐,播放【30岁的女人】 检查系统要求... --------------------------------------------------1. 检查ADB安装... ✅ 成功(Android Debug Bridge version1.0.41)2. 检查已连接的设备... ✅ 成功(1个设备: 2KE5T19B23025905)3. 检查ADB键盘... ✅ 成功 -------------------------------------------------- ✅ 所有系统检查通过 检查模型API... --------------------------------------------------1. 检查API连通性(https://open.bigmodel.cn/api/paas/v4)... ✅ 成功 -------------------------------------------------- ✅ 模型API检查通过Phone Agent - AI-powered phone automation模型: autoglm-phone 基础URL: https://open.bigmodel.cn/api/paas/v4 最大步骤:100语言: cn 设备: 2KE5T19B23025905任务: 打开QQ音乐,播放【30岁的女人】 思考过程: -------------------------------------------------- 用户想要打开QQ音乐并播放《30岁的女人》这首歌。当前屏幕显示的是Android系统设置界面有一个USB连接方式的对话框弹出。 我需要1. 先关闭当前的USB连接方式对话框点击取消按钮2. 然后打开QQ音乐应用3. 在QQ音乐中搜索并播放《30岁的女人》 首先我需要点击取消按钮关闭当前的USB连接方式对话框。⏱️ 性能指标: -------------------------------------------------- 首 Token 延迟(TTFT):3.093s 思考完成延迟:3.772s 总推理时间:3.988s-------------------------------------------------- 执行动作:{_metadata:do,action:Tap,element:[499,926]} 思考过程: -------------------------------------------------- 好的USB对话框已经关闭现在我在系统桌面。我可以看到各种应用图标但我没有看到QQ音乐的图标。我需要滑动屏幕来查找QQ音乐或者直接使用Launch功能打开QQ音乐。 根据指南使用Launch功能更直接。我应该使用Launch action来打开QQ音乐。⏱️ 性能指标: -------------------------------------------------- 首 Token 延迟(TTFT):3.749s 思考完成延迟:4.216s 总推理时间:4.420s-------------------------------------------------- 执行动作:{_metadata:do,action:Launch,app:QQ音乐} 思考过程: -------------------------------------------------- 好的QQ音乐已经成功打开了。我现在看到的是QQ音乐的首页显示了推荐、乐馆、儿童、听书、bubble、金币等标签。页面显示了一些推荐内容和歌单。 现在我需要搜索《30岁的女人》这首歌。我需要找到搜索功能。通常在顶部会有搜索框或搜索图标。让我看看屏幕上是否有搜索功能。 我看到顶部有一个搜索框显示你看你看月亮的脸 本周热搜。我应该点击这个搜索框来输入《30岁的女人》。⏱️ 性能指标: -------------------------------------------------- 首 Token 延迟(TTFT):3.127s 思考完成延迟:3.988s 总推理时间:4.187s-------------------------------------------------- 执行动作:{_metadata:do,action:Tap,element:[499,134]} 思考过程: -------------------------------------------------- 太好了搜索页面已经打开。我可以看到 - 顶部有一个搜索框显示趁黎明来临前说爱吧- 有歌手、排行、扑淘商城、听书热播等标签 - 显示了搜索历史包括30岁的女人、风月何用、走不出了这座大山- 还有搜索发现和热门搜索列表 我注意到在搜索历史中已经有30岁的女人了我可以直接点击这个搜索历史项或者我也可以在搜索框中输入30岁的女人。 让我直接点击搜索历史中的30岁的女人。⏱️ 性能指标: -------------------------------------------------- 首 Token 延迟(TTFT):4.540s 思考完成延迟:5.521s 总推理时间:5.713s-------------------------------------------------- 执行动作:{_metadata:do,action:Tap,element:[159,245]} 思考过程: -------------------------------------------------- 完美搜索结果已经显示出来了。我可以看到 - 搜索框中显示30岁的女人- 有综合、歌曲、歌单、节目、专辑、歌手、视频等标签 - 显示了歌手赵雷- 单曲部分显示了多个版本的《三十岁的女人》1. 赵雷 - 吉姆餐厅最多人播温柔舒缓旋律2. 谭维维 - 三十岁的女人《剩者为王》电影宣传曲3. 赵雷 - 歌手 第6期4. 谭维维 - 蒙面歌王 第4期 第一个单曲三十岁的女人是赵雷演唱的看起来是最受欢迎的版本最多人播。我应该点击这首歌来播放它。我可以直接点击歌曲名称或者点击右边的播放按钮。 让我点击第一首歌曲三十岁的女人来播放它。⏱️ 性能指标: -------------------------------------------------- 首 Token 延迟(TTFT):2.949s 思考完成延迟:4.900s 总推理时间:5.098s-------------------------------------------------- 执行动作:{_metadata:do,action:Tap,element:[141,532]} 思考过程: -------------------------------------------------- 太好了歌曲《三十岁的女人》已经开始播放了。我可以看到 - 播放界面显示了一个黑胶唱片的动画效果 - 歌曲名称显示为三十岁的女人- 歌手是赵雷- 有一个提示当前音量过低请调大音量后播放- 底部有播放控制按钮包括循环、上一首、暂停/播放、下一首、播放列表等 - 播放进度条显示歌曲正在播放 歌曲已经成功开始播放了任务完成。⏱️ 性能指标: -------------------------------------------------- 首 Token 延迟(TTFT):4.386s 思考完成延迟:5.630s 总推理时间:6.215s-------------------------------------------------- 执行动作:{_metadata:finish,message:任务完成我已经成功打开QQ音乐并播放了《三十岁的女人》这首歌。这是赵雷演唱的版本目前正在播放中。播放界面显示了黑胶唱片的动画效果底部有完整的播放控制功能。}✅ 任务完成: 任务完成我已经成功打开QQ音乐并播放了《三十岁的女人》这首歌。这是赵雷演唱的版本目前正在播放中。播放界面显示了黑胶唱片的动画效果底部有完整的播放控制功能。结果: 任务完成我已经成功打开QQ音乐并播放了《三十岁的女人》这首歌。这是赵雷演唱的版本目前正在播放中。播放界面显示了黑胶唱片的动画效果底部有完整的播放控制功能。(Open-AutoGLM)(base)MacBook-Pro:Open-AutoGLM rong$