通过屏幕控制操作 Android 设备玩一局手游
发帖人表示，Gemini 在 Android 上的 computer use 功能通过读取屏幕并移动角色进行战斗，完成了一局《火焰纹章：英雄》（Fire Emblem Heroes）。任务：建议落地方案：在 AI Studio 中构建 Android 应用，赋予 Gemini 打开应用、点击、滑动及与 XML UI 元素交互的工具权限。配置 Gemini 3.7 Flash 读取《火焰纹章：英雄》屏幕，识别回合制状态并移动角色。人工角色：监控执行过程，确保移动有效并防止陷入菜单循环。；工具：Gemini。人工角色：原始材料未说明；局限：前提条件包括 AI Studio 访问权限和 Android 设备设置。预期限制：执行速度慢（简单任务需 1-2 分钟）且 computer-use 行为不一致。源可靠性低，因原帖无法访问。任何真实设备交互前需人工批准。。
工具
Agent Work Atlas 发布日期:
概述
发帖人表示，Gemini 在 Android 上的 computer use 功能通过读取屏幕并移动角色进行战斗，完成了一局《火焰纹章：英雄》（Fire Emblem Heroes）。
工作流程
建议落地方案：在 AI Studio 中构建 Android 应用，赋予 Gemini 打开应用、点击、滑动及与 XML UI 元素交互的工具权限。配置 Gemini 3.7 Flash 读取《火焰纹章：英雄》屏幕，识别回合制状态并移动角色。人工角色：监控执行过程，确保移动有效并防止陷入菜单循环。
原文报告的结果
由于源链接访问失败（HTTP 403），实际结果未知。建议验收检查：验证 Gemini 3.7 Flash 是否能完成一局游戏而不陷入菜单，对比之前随机点击导致失败的案例。测量每回合耗时及移动执行成功率。
人工角色
原始材料未说明
局限
前提条件包括 AI Studio 访问权限和 Android 设备设置。预期限制：执行速度慢（简单任务需 1-2 分钟）且 computer-use 行为不一致。源可靠性低，因原帖无法访问。任何真实设备交互前需人工批准。
试一试
扮演 Android 自动化工程师。我需要测试 Gemini 3.7 Flash 在手游中的 computer-use 能力。 背景：我们正在评估 AI 代理在回合制策略游戏中的表现。 输入：[可替换：Android 设备 ID]，[可替换：游戏 APK 或已安装应用名称]，[可替换：AI Studio 项目 ID]。 步骤： 1. 在 AI Studio 中搭建 Android 自动化环境，赋予 Gemini 点击、滑动和 XML UI 访问工具。 2. 启动 [可替换：游戏名称] 并导航至战斗界面。 3. 指示 Gemini 识别当前回合状态并执行一个有效的移动序列。 4. 记录耗时及遇到的错误。 交付物：操作日志 JSON、游戏状态前后截图、成功/失败摘要。 质量检查：代理不得陷入菜单循环。成功定义为在 3 分钟内完成一个回合。 保障措施：先运行模拟测试。在执行真实设备点击前需我的明确确认。如果缺少输入，请询问具体的 Android 设备配置细节。
来源报告未经独立核验。发布日期为本站案例发布日期，并非原始文章日期。