现在 1M 对于 AI 来说都算是很大的上下文了,在现有技术阶段,上下文很大程度上限制了 AI 的能力,即便我们为 Agent 加入了越来越多的上下文但是随着上下文越来越长,压缩的次数越来越多,信息损失也会越来越大。所以现阶段上下文可能不是越多越好,而是越精越好,把与方向相同的,高价值的上下文总结在一起,这样才能更好的应对相对应领域的业务需求。这也是为什么在很多地方,人类比 AI 更有 judgement 和 taste,因为人类本身就带着十几年的上下文,其中有大量的与自身领域相关的信息,所以人类才能做出一些更有意义的决断。