一句话答案
第一次处理长上下文别改太多设置:用默认参数跑一遍,再逐项调整。 长上下文不是免费午餐:成本/延迟/注意力都会下降。
为什么重要
一次只改一个变量,才能知道哪项设置有用。
检索+摘要通常更划算。
具体怎么做
- 先确认模型上下文和输出预算。
- 粘贴提示词/文档,估算 tokens 与占用。
- 超过 80–90% 就拆分、摘要或检索。
- 系统提示/工具 schema 也要计入。
- 计费/硬限制用官方 tokenizer 复核。
常见错误
- 把字符数当 token 数。
- 忽略输出/系统提示占用。
- 以为所有模型 tokenizer 一样。
- 长文档整段塞入,不检索/摘要。
检查清单
- 模型上下文已确认。
- 输出预算已预留。
- 系统提示/工具已计入。
- 长文已检索/分段。
- 关键场景用官方 tokenizer 复核。
关键事实
- 检索+摘要通常更划算。
- 关键信息放前面/结构化。
常见问题
第一次处理长上下文怎么开始?
第一次处理长上下文别改太多设置:用默认参数跑一遍,再逐项调整。 长上下文不是免费午餐:成本/延迟/注意力都会下降。
检测要多久?
通常 1–3 分钟;如果问题间歇出现,连续测 30 秒并换环境复测。
会上传数据吗?
本页在浏览器本地运行,不上传画面/声音;扩展仍可能读取页面。