
AI 建站工具分析 CSV:算對數字後,仍要驗證圖表與結論
同一份 CSV,即使平均 FPS、1% low 和建議幀率上限都算對,AI 建站工具仍可能因圖表比例或判讀規則失準,令使用者誤解整段測試表現。XDA Developers 以相同 prompt 和兩份遊戲 frametime 擷取檔,要求 Lovable、Bolt 及 Google AI Studio 建立分析網頁 app;結果顯示,三者的算術結果接近,對資料的解釋卻有明顯差異。
這是單一媒體、兩份檔案的狹窄測試,不能據此判定三項工具在所有 CSV、模型版本或建站任務上的表現。不過,它提供了一個很實際的提醒:使用 AI 快速把資料變成 dashboard 時,驗收不能只看頁面是否完成,也不能只核對一個醒目的數字。
同一組要求,輸出相近數字
XDA 的 prompt 要求 app 讀取 CapFrameX 或 PresentMon 輸出的 CSV,顯示平均 FPS、1% low、超過 50ms 的影格數量與發生時間、標示慢幀的 frametime 圖,並推算電腦在 99% 測試時間可維持的最高幀率上限。測試資料包括一段約一分鐘、以最高設定執行《Star Wars Jedi: Survivor》的紀錄,以及較短的第二段紀錄。
根據 XDA 的測試,Bolt 為第一段紀錄算出平均 118.1 FPS、26.2 FPS 的 1% low、6 個超過 50ms 的影格及相符時間戳,並建議 75 FPS 上限;第二段則建議 57 FPS。Google AI Studio 和 Lovable 的主要上限建議亦分別與這兩個數值相同。
這種一致性容易令人以為結果已可直接採用,但圖表與文字摘要才是使用者用來理解數字、作出設定決定的部分。
圖表比例和規則式摘要,都可能扭曲判讀
XDA 指出,第一段資料開首曾出現一個長達 1.27 秒的卡頓。Bolt 以該單一極端值決定全圖比例,令其後約一分鐘的變化壓成接近底部的一條線。它同時將兩段紀錄描述為頻繁卡頓;XDA 檢視產生的程式碼後認為,原因是 app 只要發現 1% low 低於平均 FPS 的 60%,便套用相同結論,未有考慮慢幀出現的時間和密度。
對需要比較多輪測試的人而言,這種規則會把「開首載入時短暫卡頓」和「整段遊戲持續不穩」混為一談。數字沒有錯,不代表敘述已經反映資料脈絡。
Google AI Studio 生成的介面則提供 0 至 65ms 的檢視、全尺度切換、拖曳縮放、卡頓紀錄跳轉、不同 30 至 120 FPS 上限的維持率表格,以及文字報告下載。XDA 認為其視覺呈現最完整,但測試中,app 在正確建議 75 FPS 或 57 FPS 後,卻額外建議若仍有掉幀可降至 0 FPS 或 1 FPS。這說明一個看似次要的輔助建議,也可能令整體結果失去可操作性。
Lovable 則被 XDA 評為在這次測試中較能保留資料情境:它把集中在開首數秒的卡頓歸因於載入或 shader compilation,沒有把短暫現象延伸成整段測試的問題,並建議使用遊戲內限制器或 RTSS 設定幀率上限。
把 AI 產生的分析頁當成待驗收的工具
若以 AI 建站工具處理 CSV 或資料視覺化,驗證可分成三個層次:先以已知答案或手算抽樣核對平均值、百分位數和事件計數;再檢查圖表的 Y 軸、預設縮放和極端值是否遮蔽主要趨勢;最後逐句查看文字結論,確認它有否交代事件發生時段、數量與可能脈絡。
尤其是「不流暢」、「異常」或「應降至某設定」這類結論,應回看原始資料是否支持。若一個極端值主導全圖,或摘要只由單一門檻觸發,使用者便應把它視為待覆核的提示,而非最終判決。
接下來值得觀察的,是這類工具能否讓使用者更容易檢視計算邏輯、調整判讀門檻,並在生成圖表時清楚呈現完整尺度與局部尺度。對於要把測試資料轉成決策依據的人,這些可驗證性往往比介面是否華麗更重要。
延伸閱讀
AI 輔助說明: 本文由 AI 協助整理。
參考來源
- XDA Developers — I asked Lovable, Bolt, and Google AI Studio to build the same web app, and one is in a different league — original report
本文根據原文及公開資料整理;資料有出入時,以原文及官方資料為準。







