上下文與記憶
Context Window 上下文容量是什麼?AI 一次能記住多少內容
Context Window 上下文容量是什麼?AI 一次能記住多少內容
跟 AI 聊到一半,它突然忘記你前面說過的話,多半不是它變笨了,而是內容量已經超過它的上下文容量。
你將學到什麼
定義
AI 一次對話能理解與處理的文字總量上限,超過就會遺忘更早的內容。
白話比喻
像 AI 大腦裡的一塊工作記憶空間,空間越大能記住的內容越多。
跟誰容易搞混
跟長脈絡不同,長脈絡指的是容量本身很大的模型;容量再大,一樣有它的天花板。
定義
Context Window(上下文容量或窗口)是 AI 模型在一次對話中能理解和處理的文字資料總量上限,這個總量包含你輸入的問題與文件,也包含 AI 已經回覆過的內容。
當累計的 Token 代幣 數超過這個上限,AI 就會看不到更早之前的內容,也就是俗稱的遺忘。
白話比喻
想像 AI 的大腦在一次對話中有一塊工作記憶空間,這塊空間的大小就是 Context Window。你輸入的問題、指令、文件,加上 AI 已經回覆的內容,一旦超過這個容量,AI 就無法再看見更早之前的資訊。
Context Window 越大,AI 能記住的內容越多,理解也越完整,但空間再大,也不是無限大。
常見模型的容量對照
| 模型 | Context Window(約) |
|---|---|
| GPT 4o mini | 128K tokens |
| GPT 4o/GPT 4 Turbo | 128K tokens |
| Claude 3 Haiku | 200K tokens |
| Claude 3 Opus | 200K tokens |
| Gemini 1.5 Pro | 一百萬 tokens |
| Gemini 1.5 Pro 最新版 | 兩百萬 tokens |
實際用例
有效利用 Context Window 的方法包括精簡輸入、去除不必要的內容、只給完成任務所需的關鍵資訊,並善用摘要把長內容先摘要再放入對話。
長文件建議分段處理、逐步整合結果,並適時管理對話長度,避免過長累積影響效果,這樣才能讓有限的 Context Window 發揮最大效果。
延伸學習
ChatGPT 很強,但真正讓你下班的是 Google
六小時完整實錄。從「AI 很厲害,為什麼你還是每天加班」這個問題出發,把 Google Workspace 當成真正的工作平台重新設計一次流程 ── Sheets 的資料結構、Drive 與 Docs 的文件流、Gmail 與 Calendar 的通知系統,再用 Apps Script 讓它自己跑起來,最後收斂成一張屬於你自己的 AI 工作能力地圖。
NT$ 4,599
HE301|Harness Engineering Architecture(12 小時)
兩天十二小時的架構課,處理的是「第一百次仍然成功」。從能力設計出發,逐層拆解知識、脈絡、記憶、規則、工具、工作流、評估與多代理八種架構,每一種都給治理方式與真實案例。12 章 114 課圖文講義、52 張對照表,附兩天的學員講義與投影片 PDF。課程於 2026 年 8 月 30 日實體開課,完整錄影將於課後上傳。
NT$ 12,999

