自动点击总是点歪?先测画面坐标换算

提供自己测试页的截图尺寸与窗口尺寸,整理坐标换算及已知按钮测试表,不操作正式网站。

执行环境与使用方式

AI/软件

Gemini

在哪里操作

浏览器中的 Gemini 对话输入框;本版本只要求文字草稿。

如何开始

  1. 打开你已有权使用的 gemini.google.com;新建对话,不连接外部账户。
  2. 使用自己控制的无副作用测试页,记录视窗与截图尺寸。
  3. 发送起草/检查要求,将结果与原始材料逐项核对;不要把建议当成已执行。

准备与方案条件

输入准备:使用自己控制的无副作用测试页,记录视窗与截图尺寸。 需使用可读取这些资料格式的工具,并先核对解析结果、内容长度与使用资格。

提示词移植限制

可将这份文字要求移到能处理同类输入的聊天工具;不会同时获得来源示范的代理、插件或电脑权限。

使用限制

提供窗口与截图尺寸、缩放比例和坐标定义;只写测试计划,不点击或生成实测结果。 本次仅审查本地案例,未重新核实原始来源或实测功能。

环境资料来源

適用情境 / When to use

提供自己测试页的截图尺寸与窗口尺寸,整理坐标换算及已知按钮测试表,不操作正式网站。 提供窗口与截图尺寸、缩放比例和坐标定义;只写测试计划,不点击或生成实测结果。 原案例:作者报告游戏分数符合指定点击次数。

步驟 / Steps

  1. 使用自己控制的无副作用测试页,记录视窗与截图尺寸。
  2. 规划座标转换及已知位置的测试,逐次观察点击后状态。
  3. 比较实际目标与预期,尺寸变更后重新检查。

提示詞 / Prompt

为[自有测试页]规划点击座标测试,明列[视窗/截图尺寸]、缩放与座标系。依[测试范围]选择位置和次数,逐次核对页面结果,尺寸改变要重测。只出计划,不自动点击正式网站或略过确认。

留意事項 / Cautions

  • 保留安全确认,不沿用示范自动确认的做法。
  • 不要在付款或正式表单上校准。

來源限制 / Evidence limits

单一示范不足以验证不同荧幕缩放或网站;本站未执行。

流程說明 / Workflow note

以下步骤与提示词为本站原创、未实测的练习设计,并非原作者逐字流程;来源结果不代表练习保证成功。

原始工具組合 / Original tool stack

Gemini Computer Use; Java; Playwright

来源发表日期:2025-11-03

来源查核日期:2026-10-20

Driving a web browser with Gemini’s Computer Use model in Java