截圖裁切後點歪?先算偏移再縮放
用 Gemini 網頁檢查截圖座標到測試畫面的換算,輸出算式和邊界條件;只做紙上驗算,不控制真實網站。 提示詞未實測,效果待人工核對。
執行環境與使用方式
AI/軟體
Gemini
在哪裡操作
Gemini 消費者網頁版 gemini.google.com 的一般文字對話;本卡只做人工提供文字的練習。
如何開始
- 建議用成人個人 Google 帳戶,先核對所在地及帳戶資格;不要為本練習購買方案。
- 把本卡虛構資料貼入普通對話,或以有權使用的去識別短文字替換參數;不連接外部服務。
- 把輸出與人工驗收規則逐項比較;錯誤、缺漏與未知保留待查。
準備與方案條件
2026-11-12 官方網頁清單包括香港、澳門、台灣及繁體/簡體/香港中文、英文。本練習建議使用成人個人 Google 帳戶;兒童、學校及工作帳戶的資格、管理員與方案條件須另核,不代表所有帳戶均可用。
提示詞移植限制
免費標準使用量可作起點,本卡不需要訂閱。台灣公開頁列免費 NT$0/月;港澳付費當地售價未核實,不列保證價格。使用量依模型、複雜度、內容長度等改變,可能碰到五小時及每週限制,不保證固定次數;達上限先等候,不必升級。手機 App、API、CLI 與來源自動化所需帳戶、費用、地區資格均須另查。
使用限制
官方文件查核不等於三地實測;本卡提示詞、帳戶、模型結果及來源完整流程均未實測。只用虛構或去識別資料,勿輸入機密;Google 可能人工審查部分資料。關閉活動紀錄不等於零保留,相關對話仍可能保留 72 小時並有安全審查。人須核對結果,不把文字建議當已執行。
環境資料來源
- https://support.google.com/gemini/answer/13575153?hl=en · 2026-11-12
- https://support.google.com/gemini/answer/13278668?hl=en · 2026-11-12
- https://support.google.com/gemini/answer/16275805?hl=en · 2026-11-12
- https://gemini.google/tw/subscriptions/?hl=zh-TW · 2026-11-12
- https://support.google.com/gemini/answer/13594961?hl=en · 2026-11-12
- https://hkfrees.com/ai/case/reported-browser-coordinate-calibration/ · 2026-11-12
- https://glaforge.dev/posts/2025/11/03/driving-a-web-browser-with-gemini-computer-use-model-in-java/ · 2026-11-12
適用情境 / When to use
用 Gemini 網頁檢查截圖座標到測試畫面的換算,輸出算式和邊界條件;只做紙上驗算,不控制真實網站。 提示詞未實測,效果待人工核對。 虛構測試資料(非真實使用紀錄):完整截圖1600×1000像素,對應CSS視窗800×500;裁切圖從完整截圖(200,100)起,大小800×600;目標中心在裁切圖(400,300)。假設無捲動、無瀏覽器外框、無額外變形。
步驟 / Steps
- 先保留輸入條件與已有標記,再把下列虛構範例與參數化提示送到文字對話。
- 人工驗收:完整圖座標(600,400),各軸比例0.5,CSS座標(300,200)。忽略裁切偏移會錯成(200,150)。若目標移到裁切圖(900,300),超出寬800,應拒絕換算而不是夾到邊界。
- 若結果不符,記錄錯誤並改寫要求,再由人覆核;不把預期答案冒充模型輸出。
提示詞 / Prompt
使用[完整圖片尺寸]、[CSS視窗尺寸]、[裁切原點及尺寸]和[裁切內座標],先驗證範圍,再加裁切偏移,最後按各軸比例換算。列單位、假設、結果。缺少偏移、座標基準或縮放資訊時停止猜測;不執行點擊。
虛構測試資料(非真實使用紀錄):完整截圖1600×1000像素,對應CSS視窗800×500;裁切圖從完整截圖(200,100)起,大小800×600;目標中心在裁切圖(400,300)。假設無捲動、無瀏覽器外框、無額外變形。
另驗證同一範例將裁切內目標改為(900,300)時是否超出範圍,說明應否計算。
留意事項 / Cautions
- 平台與地區:本卡用 Gemini 網頁一般文字對話。官方清單含香港/澳門/台灣及繁體/簡體中文、英文;2026-11-12 查核,未實測各地連線。
- 方案與資格:建議成人個人帳戶;免費標準用量可起步,無須訂閱,仍受動態用量限制。台灣免費頁列 NT$0/月;港澳付費售價未核,不保證特定模型或次數。工作/學校/未成年帳戶另查。
- 不連接來源工具鏈,不代表 API、手機、CLI 或原自動化可在三地使用。勿輸入機密;關閉活動紀錄仍可能保留 72 小時並接受安全審查。
- 公式只適用於已列假設;不代表瀏覽器自動化可用或安全。不要用在付款、刪除或未授權點擊。
- 原來源用模型正規化座標;本卡改用明示的截圖像素與CSS座標,兩者不可混用。
來源限制 / Evidence limits
原始來源可作流程靈感,不是本練習的有效性驗證。原工具組合、各地服務與方案尚未逐項重現;本卡僅使用上列 Gemini 網頁文字環境。 原來源作者介紹Java瀏覽器控制及把模型正規化座標縮放至視窗;本卡的裁切偏移和截圖像素/CSS例子為新增,不是原來源的正規化1000格。來源頁顯示11月2日,雖網址為11月3日,本卡採可見發布日期。 原來源發布日:2025-11-02;本次查核:2026-11-12。
流程說明 / Workflow note
編輯改編練習;不是新發現的使用案例,不是原作者逐字流程。來源所述成果不保證本練習成功;提示詞未實測。改編自本站原案:https://hkfrees.com/ai/case/reported-browser-coordinate-calibration/?lang=zh-Hant 用 Gemini 網頁檢查截圖座標到測試畫面的換算,輸出算式和邊界條件;只做紙上驗算,不控制真實網站。 點選本卡標題,到案例詳頁查看官方環境依據連結與人工驗收步驟。
原始工具組合 / Original tool stack
Gemini Computer Use; Java; Playwright
來源發表日期:2025-11-02
來源查核日期:2026-11-12
Driving a web browser with Gemini’s Computer Use model in Java