是什麼

上下文視窗(Context Window)指一個大模型在單次呼叫中能同時處理的最大 token 數量,涵蓋你輸入的提示詞與它生成的回答之和。它以 token 計量——1 個 token 大致對應 0.5~1 個漢字,或約 0.75 個英文單詞。視窗越大,模型一次能「讀進去」的內容越多,例如整本書、長篇合同或大型程式碼庫。

為什麼重要

上下文視窗決定了模型能不能在一次對話裡「記住」足夠多的資訊。視窗太小,長文件要拆分處理、容易丟失前後關聯;視窗夠大,則能讓模型基於完整材料作答,是長文分析、程式碼理解、檢索增強等場景的前提。但更大的視窗並非全是好處:輸入越長,按 token 計費的 API 費用越高、推理延遲也越大;研究還發現模型對超長上下文「中間部分」的資訊利用率會下降(俗稱 lost in the middle),因此標稱視窗與實際可用質量未必一致。

在 AI 產業鏈中的位置

上下文視窗是 AI 產業鏈模型層的核心規格之一。它直接放大對基礎設施層與晶片層的算力與視訊記憶體消耗——視窗越大,單次推理要快取的中間狀態越多、佔用視訊記憶體越高。向上,它決定了應用層能構建多複雜的長文件、長對話產品。

在大模型庫查

各模型的上下文視窗大小可在本站大模型庫逐項對比;視窗在 256K token 及以上的可看長上下文大模型切片。