泰思雅信 · TESSERVICE.CN 互联网技术深度付费资讯
人工智能与大模型

上下文工程:长文本时代被低估的系统能力

泰思雅信编辑部 ·2026年09月26日 付费阅读精选
上下文工程:长文本时代被低估的系统能力

模型上下文窗口从几千 token 一路涨到百万级,很多团队于是天真地以为:把资料一股脑塞进提示词就行了。但很快发现,长上下文会带来"迷失在中间"、成本飙升与响应变慢。真正决定效果的,是一门新学问——上下文工程。

一、上下文是稀缺资源,不是垃圾场

窗口再大,注意力也是有限的。每一段无关内容都在稀释模型对关键信息的聚焦,同时按 token 计费的成本线性上涨。上下文工程的第一原则是:精心编排"放什么、放多少、放在哪"。

二、四个核心手法

  • 选择:只放与当前任务强相关的片段,靠检索而非堆砌。
  • 压缩:把长文档摘要、把历史对话做结构化记忆。
  • 分区:重要指令放开头与结尾,规避中间信息被忽略。
  • 缓存:复用稳定的前缀(系统提示、常用知识),降低重复成本。

三、记忆与工具是长任务的续命符

面对跨越数万 token 的长任务,靠单次上下文硬撑不现实。把外部记忆(向量库、文件、数据库)与工具调用纳入上下文管理,让模型"按需取用、用完即弃",才能既保持连贯又控制成本。

长窗口给了 AI 一张更大的书桌,但把书桌整理成高效工作台的,是上下文工程。未来的竞争,一半在模型,一半在这张书桌。
本文为付费阅读内容
解锁完整文章,支持作者持续创作
点击付费阅读
支付完成后请刷新页面,或联系客服开通阅读权限
×
扫码完成支付
使用微信 / 支付宝扫一扫下方二维码
支付二维码
阅读费用:¥ 9.90
支付完成后联系客服开通 · 工作日 9:00-18:00