雨天小六

读懂 Codex(6.18):输出 Token 截断、Head/Tail 截断与遥测预览

· 更新于 2026-08-02 · 专栏:读懂 Codex

#Codex#Agent Runtime#Tool Calling#Sandbox#软件架构

模型上下文截断、终端 Head/Tail 缓冲和 Telemetry 预览是三套不同预算;不能用日志看见的文本推断模型收到的完整内容。

这里负责把 Runtime 的内部结果投影成模型能继续消费的协议项。编码、截断和调用配对都必须在进入下一次采样前完成。 本节只追踪“模型输入、进程缓冲与遥测三个输出面”以内的机制;相邻工具的业务行为不在这里混写。

启用条件与所有权

维度当前实现不满足时
门控对应 Feature/配置开启,且环境、模式或模型模态满足工具要求不建立候选、从模型工具面移除,或转成模型可读拒绝
输入工具专属 Function Payload在进入状态所有者前拒绝错误 Payload/参数
状态所有者具体 Handler 与 Session/Turn 中的等待器或状态服务不允许临时 Handler 私自复制长期状态
输出类型化 FunctionCallOutput 与专属 Event/TurnItem必须保持调用关联后才能进入 History

这里最容易出现的误解,是把“规格里写了什么”当作 Runtime 已经强制了什么。description、Schema 和自然语言提示只帮助模型生成更好的调用;真正的名称查找、类型校验、审批、资源约束和取消收尾仍由客户端完成。

机制调用链

采集原始输出
→ HeadTailBuffer 有界保存
→ 按模型策略截断
→ 生成遥测预览
→ 编码省略标记
输出 Token 截断、Head/Tail 截断与遥测预览从输入、门控、状态所有者到输出回灌的机制流程图
图 6.18-1:采集原始输出 → HeadTailBuffer 有界保存 → 按模型策略截断 → 生成遥测预览 → 编码省略标记。

图中的箭头代表控制权转移,不只是数据复制。每越过一步,下一层只接收已经满足上一层合同的数据;若该层拥有异步状态,它还必须保留原 Step、call_id 或环境身份,避免晚到结果被新一轮配置解释。

源码机制拆解

Head/Tail 保留两端

长命令输出丢弃中段并累计 omitted bytes,保留开头诊断和末尾错误。

这条约束位于“HeadTailBuffer 有界保存”附近。把它前移会缺少必要状态,把它后移则可能让错误数据或副作用先穿过边界。

模型预算按 Token 策略

MCP 输出先附加耗时并清理图片 detail,再按约 1.2 倍策略处理内容项。

这条约束位于“按模型策略截断”附近。把它前移会缺少必要状态,把它后移则可能让错误数据或副作用先穿过边界。

Telemetry 另有字节/行上限

日志预览即使更短也要加截断提示,避免观察者误认完整结果。

这条约束位于“生成遥测预览”附近。把它前移会缺少必要状态,把它后移则可能让错误数据或副作用先穿过边界。

Python 风格伪代码

伪代码保留会改变结果的门控、状态读取、异步等待和协议编码;省略 Rust 所有权样板、日志字段以及与本机制无关的 Provider 适配。它不是源码翻译,也不能替代平台级安全实现。

def encode_output_truncation_preview(runtime_result, call):
    # 1. 采集原始输出
    # 2. HeadTailBuffer 有界保存
    # 3. 按模型策略截断
    # 4. 生成遥测预览
    # 5. 编码省略标记
    bounded = apply_model_truncation(runtime_result, call.model_policy)
    item = encode_typed_output(call.payload_kind, call.id, bounded)
    assert item.call_id == call.id
    return item

逐行理解时要抓住三个不变量:输入先验证,状态由明确对象持有,输出用原调用身份编码。任何“先执行,之后再补关联”的简化都会在并发、取消或 Step 更新时产生悬空结果。

失败、取消与恢复

输出 Token 截断、Head/Tail 截断与遥测预览的失败分支、责任边界和恢复路径图
图 6.18-2:失败不会自动跨过“模型输入、进程缓冲与遥测三个输出面”这条边界;恢复动作必须由对应状态所有者完成。
故障点已发生的状态或副作用对模型/调用方的结果恢复动作
多字节边界截断文本可能切到字符中间使用安全边界/替代编码测试 Unicode 长输出
媒体项过大文本预算无法表达保留支持的图片内容项并清理 detail按模型能力降级
Turn 取消可能已经注册等待者、启动任务或提交部分副作用生成 Aborted/Failed 终态,不能留下无结果调用由 具体 Handler 与 Session/Turn 中的等待器或状态服务 注销等待者、终止资源并保持 Call/Output 配对

取消不是删除历史。模型已经发出的调用先进入转录;Runtime 必须补上可编码的终态。若副作用已经提交,Aborted 也不表示回滚。需要事务性的功能必须在自己的写入协议里实现原子提交或补偿。

设计思路与代价

当前设计保护的核心不变量是:各层独立施加预算并显式标记省略,MCP 模型截断可乘安全系数。它让模型合同、执行状态和安全边界能够分别演进,却增加了快照、适配器和终态处理代码。更短的实现可以少一层对象,但会把“可见”“可执行”“获准”“已完成”压成同一个布尔值,无法解释延迟工具、审批拒绝、沙箱失败或晚到结果。

本节的设计动机有一部分是从类型边界和测试行为推断出来的;源码没有把所有取舍写成设计文档。可以直接证明的是字段、分支、状态所有者和失败结果,不能从这些证据外推服务端内部实现。

测试与复现实验

可验证契约复现方式预期结果
codex-rs/core/src/tools/handlers构造正常值、边界值和拒绝值结果与调用 ID/状态所有者保持一致

本地复核应同时搜索生产符号和相邻测试,不能只跑快乐路径。推荐先对源码执行 rg -n 查找本节索引中的类型/函数,再构造一个合法调用、一个类型错误和一个取消或拒绝场景。当前环境没有 Cargo,因此本轮以锁定提交下的源码—测试静态对读、博客构建和图形渲染为验证边界,不伪报 Rust 测试执行。

Mini Codex 对照

Mini Codex 可以复刻本节的纯协议或状态机不变量,例如名称去重、调用配对、Head/Tail 缓冲与单次升级;不能用 Python 模拟结果证明 Seatbelt、seccomp、Restricted Token、远程 Exec Server 或 Provider Hosted Tool 的真实安全性质。

本节边界

本节已经证明 各层独立施加预算并显式标记省略,MCP 模型截断可乘安全系数。它没有把相邻机制折叠进来:模型输入、进程缓冲与遥测三个输出面 之外的判断仍由其各自单元负责。

阅读导航

上一节:6.17 ToolOutput 到 ResponseInputItem 的编码 · 下一节:6.19 取消、Aborted Output 和 Call/Output 配对

评论


← 返回文章列表