CrazyJev Lab
Reaction 測試方法:每個毫秒數字究竟測了什麼
Reaction 對照頁 以同一個應用訊號開始玩家反應計時與 Jev 請求。第三條線是假設延遲,並未呼叫聊天模型。
每個數字的意義
玩家時間從應用安排變綠到接受首次輸入,包含顯示、感知與輸入延遲。Jev 時間從瀏覽器送出請求到解析回應,包含網路、伺服器、模型呼叫及重試。服務端到模型的耗時也包含傳輸,並非純推論時間。
變色與請求在同一回呼啟動,但沒有像素實際顯示的硬體時間戳。這是互動示範,不是人與 AI 的公平基準。原版遊戲的 ÷2、÷4、÷8 是難度規則,對照圖不套用除數。
如何重測
固定設備、瀏覽器及網路,保持頁面在前景,等綠色後點擊或按空白鍵一次。提早輸入算搶跑。保留慢請求和失敗,勿只挑最佳成績。
頁面保留最近十個結束回合,搶跑按整個頁面會話另計。未點擊與請求失敗保持可見。成功請求用最近秩算法計算中位數和 p95;十個樣本時 p95 是最大值。失敗保留在回合分母,不捏造耗時。模型回應卻選擇不按,不算成功反應。
真正的模型比較需公開提供方、模型、等價輸入輸出、地區、超時、重試、並發、日期與原始樣本。滑桿僅演示某個假定耗時,不代表任何聊天模型的實測效能。