第 1 期的 8 則都來自本機迷你模型。這期換成大模型:Claude 桌面版用內建瀏覽器,在練習用的假書店網站 books.toscrape.com 做 2 個任務時犯的 3 個錯。素材全部來自 瀏覽器 Agent 比價篇的「補充測試」段,引文一字不改。
先說結果:兩個任務它都答對了,任務 2 的紀錄寫的是「最後答案正確」。紀錄也寫到:「和上面的小模型相比,這次的大模型可靠很多,也沒有謊稱成功」,「差別在於它會自己發現並修正」。但過程中還是錯了 3 次。
每張卡片分三段:發生什麼事、為什麼會這樣、怎麼避免。「為什麼」寫的是這類錯誤常見的一般原因,不是這個模型內部的確切機制。
1. 只讀到第一本書
出處:瀏覽器 Agent 比價篇的補充測試(測試者:Claude 桌面版內建瀏覽器,非 Claude in Chrome 擴充、非本站雲端電腦實測;2026-10-16,2 個任務的過程中)
發生什麼事:測試紀錄原文:「讀網頁的工具只回傳第一本書」。
為什麼會這樣:讀網頁的工具常常只抓頁面的一部分(例如第一個項目,或畫面上看得到的範圍)。如果 AI 沒發現資料不完整,就會拿殘缺的資料下結論。
怎麼避免:要「比最便宜」「列全部」這類需要完整資料的任務,請它先回報一共看到幾項,再跟網頁上的數量對一下。
2. 自己猜網址,結果 404
出處:瀏覽器 Agent 比價篇的補充測試(測試者:Claude 桌面版內建瀏覽器,非 Claude in Chrome 擴充、非本站雲端電腦實測;2026-10-16,2 個任務的過程中)
發生什麼事:測試紀錄原文:「自己組了一個網址,結果是 404 找不到頁面」。
為什麼會這樣:AI 會依照網址的常見規則「猜」出一個看起來合理的網址,但網站不一定照那個規則。這和小模型編出 /price?guider=I 是同一類錯。
怎麼避免:請它從頁面上的連結點進去,不要自己組網址。它給你的連結,自己點開確認。
3. 點擊落空
出處:瀏覽器 Agent 比價篇的補充測試(測試者:Claude 桌面版內建瀏覽器,非 Claude in Chrome 擴充、非本站雲端電腦實測;2026-10-16,2 個任務的過程中)
發生什麼事:測試紀錄原文:「有個連結在畫面外,點擊沒點到,它從截圖發現後自己修正」。
為什麼會這樣:瀏覽器 Agent 要靠座標或畫面判斷該點哪裡。按鈕或連結不在畫面內、被別的東西擋住時,點擊就可能落空。
怎麼避免:看它的操作紀錄或截圖,確認每一步真的點到了。不要只看它最後說「完成」。
大模型和小模型,錯的是同一類
同一個網站,本機 0.5B 小模型的紀錄是:「之後五步都在重複開這個網址,卻每一步都回報「成功找到價格」」。Claude 也自己組過網址、碰到 404;紀錄寫它和小模型的差別「在於它會自己發現並修正」。差別不在會不會錯,而在會不會發現自己錯。
紀錄最後也提醒:「這只是 2 個任務的測試,不是產品評測」。
共通的三個習慣
- 需要完整資料的任務,先問它看到了幾項。
- 連結和價格自己點開確認。
- 看操作過程,不要只看最後一句「完成」。