从一条模型请求开始建立工程契约:原文明确提供了什么,允许输出什么,哪些内容要继续确认?以订单表单预填为例,依次处理任务定义、缺失值、结构约束和业务验证。取得合法 JSON 之后,仍要证明字段有来源、状态允许使用。
提示描述目标、输入和边界
“你是专家,请准确提取”没有定义准确的含义。一个可验证任务至少说明输入是什么、需要哪些字段、允许推断到什么程度、缺失或冲突如何处理、最终结果供谁使用。提示工程也需要先有成功标准,才能比较改动是否有效。Prompt engineering overview
例如输入“想买 A1,数量稍后确认”,任务若只要求 sku 与 quantity,模型可能猜 1;明确规定未知数量为 null,并标记 needs_input,才让没有答案成为合法结果。
| 原始歧义 | 应明确的约定 |
| 数量没写,是否默认一件 | 不猜测,返回 null |
| 提到多个商品但字段只支持一个 | 标记歧义或改用数组,不随意选一个 |
| “下周”是哪段时间 | 指明参考日期与时区,或保留原文 |
| 来源中内容互相冲突 | 保留冲突与来源,不自选权威 |
| 输出会直接触发订单 | 提取只是候选,不自动授权执行 |
稳定规则可以放在相应的可信指令层,当前材料以来源清楚的数据提供。消息角色和内容块是接口结构,不应只把它们理解为随意拼接的文本。XML 标签、标题或分隔符有助于区分内容,但不是安全隔离;外部材料中的“忽略此前规则”仍应按数据处理。
一个教学提示可以这样组织:
任务:从用户原文提取一个商品 SKU 和数量,供人工确认前的表单预填使用。
规则:只使用原文明确给出的信息;缺失字段为 null。
状态:两个字段都明确且无冲突时为 complete,否则为 needs_input。
范围:不要创建订单、查询个人资料或推断支付信息。
输出:遵守提供的 schema;不在结果前后添加说明。
用户原文:想买 A1,数量稍后确认。
提示中的“范围”说明模型应做什么,实际工具权限仍由执行端落实。把操作权限写成一句话,不能替代 Agent 循环 中的执行前核验。
用示例消除真实歧义
few-shot 示例用具体输入和输出说明约定。它适合解释 null、枚举、单位和冲突等抽象规则容易误读的地方;并非示例越多越好,也并非正例总能替代边界说明。
| 输入 | 期望核心结果 | 说明的规则 |
| 买 A1,共 3 件 | A1、3、complete | 正常提取 |
| 想买 A1,数量稍后确认 | A1、null、needs_input | 缺失不能猜 |
| A1 要 3 件,等等改成 2 件 | 需按明确的更正规则处理 | 时间顺序和改口语义 |
| 买 A1 或 B2,还未决定 | 不能随意选 SKU | 歧义需要表达 |
如果 schema 没有表达歧义的空间,示例再好也难以避免强行填值;先调整数据模型,再调整措辞。不要把开发集中的所有测试答案写进示例后,把同一批题的提升当作泛化能力。
需要多样方案时可以明确要求各方案在约束或取舍上不同;需要简短输出时直接规定篇幅与字段。temperature、effort 和篇幅要求各管不同问题,不能写成 temperature=0 → effort=low 的迁移公式。具体机制见 Token 与采样 与 推理与 thinking。
结构约束的作用范围
仅在 prompt 中要求 JSON,是让模型遵循文字约定;受约束解码则在生成时限制合法的输出延续,使完整的成功输出符合支持的 schema。客户端校验是生成之后的检查,可以补充服务不支持的约束,但不会倒过来改变已经生成的 token。
| 机制 | 约束对象 | 仍需应用检查 |
| JSON 格式要求或模式 | 可解析的 JSON 语法,能力依接口而异 | 字段、类型、语义 |
| schema 约束响应 | 最终输出的规定结构 | 完整响应、证据与业务条件 |
| 严格工具参数 | 工具选择及参数的允许结构 | 权限、资源状态、动作语义 |
| 客户端类型/业务验证 | 接收到的对象 | 后续执行时的状态变化 |
Claude 的 output_config.format 用于 JSON 响应,工具上的 strict: true 用于严格工具调用;两者可以组合,但可用 schema 子集和功能兼容范围需要按目标模型与 SDK 核对。Structured outputs
JSON Schema 本身的几个边界
properties 描述字段,不表示这些字段必须出现;必填由 required 声明。additionalProperties: false 拒绝未定义字段,也不会自动把已定义字段变成必填。null 是一个值,与字段不存在不同。JSON Schema object
比如希望 quantity 字段总出现、但未知时为 null,就同时需要 required 和可空类型。把它只定义为 integer 并设为 required,会让“原文没有数量”无法得到符合预期的表达。
供应商的结构化输出可能只支持 JSON Schema 子集。某些 SDK 会将完整 schema 转成服务支持的简化形式,再在客户端按原始约束验证;这与直接发送不支持字段的原始 JSON 请求不同。不能把“SDK 能接受”解释成“服务端生成时强制了全部约束”。SDK schema 转换说明
合法 JSON 到可用结果,还差几关?
把 quantity 从 3 改成 5,JSON 与类型仍可通过,原文支持却失败;保持 3 而降低库存,失败又发生在业务层。图中显示每个独立判据,帮助确定应该修提示、数据模型、证据核对还是执行前条件。
正在呈现知识画面
合法 JSON 到可用结果,还差几关?语法、schema、原文支持和业务条件是不同检查;前一层通过不会替后面作保证。
{"id":"ai-output-contract","title":"合法 JSON 到可用结果,还差几关?","summary":"语法、schema、原文支持和业务条件是不同检查;前一层通过不会替后面作保证。","height":1000,"html":"<h2 data-i18n=\"heading\"></h2><p class=\"intro\" data-i18n=\"intro\"></p><div class=\"presets\" role=\"group\" data-i18n-label=\"mode\"><button data-mode=\"valid\" data-i18n=\"valid\"></button><button data-mode=\"invent\" data-i18n=\"invent\"></button><button data-mode=\"missing\" data-i18n=\"missing\"></button><button data-mode=\"truncated\" data-i18n=\"truncated\"></button></div><div class=\"control\"><label for=\"stock\" data-i18n=\"stock\"></label><output for=\"stock\" id=\"stock-value\"></output><input id=\"stock\" type=\"range\" min=\"0\" max=\"8\" value=\"2\" step=\"1\"></div><section class=\"panel\"><h3 data-i18n=\"json\"></h3><div id=\"json\"></div></section><section class=\"panel\"><h3 data-i18n=\"layers\"></h3><div id=\"layers\"></div></section><div class=\"copy\"><p id=\"explanation\" role=\"status\"></p><p class=\"reserve\" aria-hidden=\"true\" data-i18n=\"explain\"></p></div><details class=\"scope\"><summary data-i18n=\"scopeLabel\"></summary><p data-i18n=\"scope\"></p></details>","css":".intro{margin:8px 0 18px;color:var(--muted);font-size:14px}.control{display:grid;grid-template-columns:minmax(0,1fr) auto;gap:6px 12px;align-items:center;margin:14px 0;font-size:13px}.control output{color:var(--accent);text-align:right;font-variant-numeric:tabular-nums;min-width:4em}.control input{grid-column:1/-1;width:100%;margin:0}.presets{display:flex;gap:4px;align-items:stretch}.presets button{flex:1;min-width:0;overflow-wrap:anywhere;font-size:13px;min-height:44px}.actions{display:grid;grid-template-columns:repeat(2,minmax(0,1fr));gap:8px;margin:16px 0}.actions button{min-width:0;min-height:44px;font-size:13px;overflow-wrap:anywhere}.copy{display:grid;font-size:14px;margin:16px 0}.copy>*{grid-area:1/1;margin:0;overflow-wrap:anywhere}.reserve{visibility:hidden}.scope{margin-top:14px;color:var(--muted);font-size:12px}.scope summary{padding:8px 0;cursor:pointer}.scope p{margin-top:10px;overflow-wrap:anywhere}.metrics{display:grid;grid-template-columns:repeat(2,minmax(0,1fr));gap:14px;margin:18px 0}.metrics>div{border-left:2px solid var(--accent);padding:0 6px 0 10px;min-width:0}.metrics span{display:block;min-height:3.6em;color:var(--muted);font-size:12px;overflow-wrap:anywhere}.metrics strong{font-size:21px;display:block;min-height:2em;font-weight:550;overflow-wrap:anywhere;font-variant-numeric:tabular-nums}.check{display:flex;align-items:center;gap:9px;font-size:13px;margin:14px 0}.check input{width:18px;height:18px;flex-shrink:0;accent-color:var(--accent)}select,input[type=text],input[type=number]{background:var(--paper);color:var(--ink);font:inherit;font-size:14px;padding:10px;border:1px solid var(--rule);border-radius:7px;max-width:100%;min-width:0}select{width:100%;min-height:44px}.panel{padding:14px;border:1px solid var(--rule);border-radius:9px;margin:16px 0;min-width:0}.panel>header{font-size:13px;font-weight:600;margin-bottom:12px;color:var(--muted)}.panel>div{overflow-wrap:anywhere}.track-row{margin:16px 0}.track-row>span{display:block;font-size:12px;color:var(--muted);margin-bottom:8px}.track{display:flex;gap:5px;min-width:0}.cell{flex:1;min-width:0;min-height:56px;border:1px solid var(--rule);border-radius:5px;background:var(--surface);display:flex;align-items:center;justify-content:center;text-align:center;padding:6px 3px;font-size:12px;overflow-wrap:anywhere}.cell.on{background:var(--accent-soft);border-color:var(--accent)}.cell.gold{background:var(--second-soft);border-color:var(--second)}.cell.empty{border-style:dashed;color:var(--muted)}.cell.error{border-color:var(--second);text-decoration:line-through}.table{display:grid;gap:5px;font-size:12px}.tr{display:grid;gap:5px}.tr>div{background:var(--surface);border-radius:4px;padding:9px 6px;min-width:0;min-height:5em;overflow-wrap:anywhere;display:flex;align-items:center}.tr>.gold{background:var(--second-soft)}.tr>.on{background:var(--accent-soft)}.formula,.source{font:13px/1.8 ui-monospace,monospace;white-space:pre-wrap;overflow-wrap:anywhere;margin:16px 0}.formula{border-top:1px solid var(--rule);padding-top:12px;min-height:7.2em}.source{min-height:8em;background:var(--surface);padding:12px;border-radius:8px}.intervals{margin:16px 0}.interval{position:relative;height:38px;background:var(--surface);margin:6px 0;border-radius:4px;overflow:hidden}.interval i{position:absolute;height:100%;background:var(--accent-soft);border-left:2px solid var(--accent)}.interval i.gold{background:var(--second-soft);border-color:var(--second)}.interval span{position:relative;z-index:1;font:12px/38px ui-monospace,monospace;padding-left:7px}.bars{display:grid;gap:10px;margin:16px 0}.bar-row{display:grid;grid-template-columns:44px minmax(0,1fr) 62px;gap:8px;align-items:center;font:12px ui-monospace,monospace}.bar-track{height:24px;background:var(--surface);border-radius:4px;overflow:hidden}.bar-track i{display:block;height:100%;background:var(--accent);transition:width .2s}.bar-track i.gold{background:var(--second)}.bar-track i.empty{opacity:.2}.bar-row output{text-align:right}.diagram{display:block;width:100%;height:auto;margin:18px 0}.diagram text{font:13px ui-monospace,monospace;fill:var(--ink)}.node{fill:var(--surface);stroke:var(--rule)}.node.on{fill:var(--accent-soft);stroke:var(--accent)}.node.gold{fill:var(--second-soft);stroke:var(--second)}.edge{stroke:var(--rule);stroke-width:2;fill:none}.edge.on{stroke:var(--accent)}.matrix{display:grid;grid-template-columns:repeat(3,minmax(0,1fr));gap:6px;margin:16px 0}.matrix button{min-width:0;min-height:44px;font:13px ui-monospace,monospace}.matrix button[aria-pressed=true]{background:var(--accent-soft);border-color:var(--accent)}.matrix button.masked{opacity:.35}.legend{font-size:12px;color:var(--muted);min-height:3.6em;overflow-wrap:anywhere}.numeric{font-variant-numeric:tabular-nums}.scope p{line-break:strict}@media(max-width:480px){.presets button,.actions button{font-size:12px}.panel{padding:12px}.metrics{gap:10px}.metrics strong{font-size:19px}.bar-row{grid-template-columns:34px minmax(0,1fr) 58px;gap:6px}}@media(prefers-reduced-motion:reduce){*,*::before,*::after{transition:none!important;animation:none!important}}\n\n.panel>h3{font-size:13px;font-weight:600;margin:0 0 12px;color:var(--muted)}\n\n.bar-row{grid-template-columns:44px minmax(0,1fr) 82px}.bar-row output{white-space:nowrap}@media(max-width:480px){.bar-row{grid-template-columns:34px minmax(0,1fr) 76px}}\n\n#json{min-height:7.2em;font:13px/1.8 ui-monospace,monospace;white-space:pre-wrap}.table .tr>div{min-height:4em}","js":"const $=s=>document.querySelector(s);const set=(id,v)=>$('#'+id).textContent=v;const t=k=>viz.t(k);function cells(id,values){$('#'+id).replaceChildren(...values.map(v=>{const e=document.createElement('div');e.className='cell '+(v.cls||'');e.textContent=v.text;e.title=v.title||v.text;return e;}));}function pressed(mode){document.querySelectorAll('[data-mode]').forEach(e=>e.setAttribute('aria-pressed',String(e.dataset.mode===mode)));}const esc=s=>String(s).replace(/[&<>\"']/g,c=>({'&':'&','<':'<','>':'>','\"':'"',\"'\":'''}[c]));const fmt=s=>'{'+[...s].sort().join(', ')+'}';function graph(id,nodes,edges){const el=$('#'+id);el.setAttribute('viewBox','0 0 360 200');el.innerHTML='<defs><marker id=\"arrow-'+id+'\" viewBox=\"0 0 10 10\" refX=\"8\" refY=\"5\" markerWidth=\"5\" markerHeight=\"5\" orient=\"auto-start-reverse\"><path d=\"M 0 0 L 10 5 L 0 10 z\" fill=\"var(--muted)\"/></marker></defs>'+edges.map(e=>{const a=nodes[e[0]],b=nodes[e[1]],dx=b.x-a.x,dy=b.y-a.y,d=Math.hypot(dx,dy)||1;if(edges.some(r=>r[0]===e[1]&&r[1]===e[0])){const nx=-dy/d,ny=dx/d;return '<path class=\"edge '+(e[2]?'on':'')+'\" d=\"M '+(a.x+dx/d*22+nx*12)+' '+(a.y+dy/d*22+ny*12)+' Q '+((a.x+b.x)/2+nx*38)+' '+((a.y+b.y)/2+ny*38)+' '+(b.x-dx/d*25+nx*12)+' '+(b.y-dy/d*25+ny*12)+'\" marker-end=\"url(#arrow-'+id+')\"/>';}return '<line class=\"edge '+(e[2]?'on':'')+'\" x1=\"'+(a.x+dx/d*25)+'\" y1=\"'+(a.y+dy/d*25)+'\" x2=\"'+(b.x-dx/d*28)+'\" y2=\"'+(b.y-dy/d*28)+'\" marker-end=\"url(#arrow-'+id+')\"/>';}).join('')+nodes.map(n=>'<g><circle class=\"node '+(n.cls||'')+'\" cx=\"'+n.x+'\" cy=\"'+n.y+'\" r=\"25\"/><text x=\"'+n.x+'\" y=\"'+(n.y+4)+'\" text-anchor=\"middle\">'+esc(n.name)+'</text>'+(n.sub?'<text x=\"'+n.x+'\" y=\"'+(n.y+43)+'\" text-anchor=\"middle\">'+esc(n.sub)+'</text>':'')+'</g>').join('');}function table(id,rows){$('#'+id).classList.add('table');$('#'+id).replaceChildren(...rows.map(r=>{const row=document.createElement('div');row.className='tr';row.style.gridTemplateColumns='repeat('+r.length+',minmax(0,1fr))';r.forEach(x=>{const c=document.createElement('div');if(typeof x==='object'){c.textContent=x.text;c.className=x.cls||'';}else c.textContent=x;row.append(c)});return row;}));}function band(id,parts,total){$('#'+id).replaceChildren(...parts.map((p,i)=>{const e=document.createElement('i');e.style.width=(100*p.value/total)+'%';e.className=i%2?'gold':'on';e.title=p.name+': '+p.value;return e}));}function intervals(id,items,total){$('#'+id).replaceChildren(...items.map(p=>{const row=document.createElement('div');row.className='interval';const bar=document.createElement('i');bar.style.left=(100*p.start/total)+'%';bar.style.width=(100*(p.end-p.start)/total)+'%';bar.className=p.cls||'';const label=document.createElement('span');label.textContent=p.label;row.append(bar,label);return row;}));}function plot(id,series,xr,yr,opts={}){const e=$('#'+id),X=x=>42+(x-xr[0])/(xr[1]-xr[0])*298,Y=y=>175-(y-yr[0])/(yr[1]-yr[0])*148;let out='<defs><clipPath id=\"clip-'+id+'\"><rect x=\"42\" y=\"27\" width=\"298\" height=\"148\"/></clipPath></defs>';for(let i=0;i<3;i++){let x=xr[0]+i*(xr[1]-xr[0])/2,y=yr[0]+i*(yr[1]-yr[0])/2;out+='<path class=\"gridline\" d=\"M '+X(x)+' 27V175M42 '+Y(y)+'H340\"/><text x=\"'+X(x)+'\" y=\"194\" text-anchor=\"middle\">'+esc(opts.xfmt?opts.xfmt(x):Number(x.toFixed(2)))+'</text><text x=\"36\" y=\"'+(Y(y)+4)+'\" text-anchor=\"end\">'+esc(opts.yfmt?opts.yfmt(y):Number(y.toFixed(2)))+'</text>';}out+='<g clip-path=\"url(#clip-'+id+')\">';for(const s of series){out+='<path fill=\"none\" stroke=\"'+(s.color||'var(--accent)')+'\" stroke-width=\"2.5\" '+(s.dash?'stroke-dasharray=\"5 4\"':'')+' d=\"'+s.pts.map((p,i)=>(i?'L':'M')+X(p[0]).toFixed(2)+','+Y(p[1]).toFixed(2)).join(' ')+'\"/>';}for(const p of opts.points||[])out+='<circle cx=\"'+X(p[0])+'\" cy=\"'+Y(p[1])+'\" r=\"4\" fill=\"var(--second)\" stroke=\"var(--paper)\" stroke-width=\"1.5\"/>';if(opts.cursor!==undefined)out+='<path d=\"M'+X(opts.cursor)+' 27V175\" stroke=\"var(--muted)\" stroke-dasharray=\"3 3\"/>';e.innerHTML=out+'</g>';e.dataset.curves=JSON.stringify(series.map(s=>s.pts));}const curve=(fn,lo,hi,n=120)=>Array.from({length:n+1},(_,i)=>{const x=lo+(hi-lo)*i/n;return[x,fn(x)]});function inputs(draw){document.querySelectorAll('input,select').forEach(e=>{e.addEventListener('input',draw);e.addEventListener('change',draw)});draw()}const n=id=>+$('#'+id).value;const show=(id,v,d=3)=>set(id,Number(v.toFixed(d)));function bars(id,values,max=1){$('#'+id).className='bars';$('#'+id).innerHTML=values.map(v=>'<div class=\"bar-row\"><span>'+esc(v.label)+'</span><div class=\"bar-track\"><i class=\"'+(v.cls||'')+'\" style=\"width:'+Math.max(0,Math.min(100,v.value/max*100))+'%\"></i></div><output>'+esc(v.text??(v.value*100).toFixed(1)+'%')+'</output></div>').join('')}function softmax(z,T=1){let max=Math.max(...z),w=z.map(x=>Math.exp((x-max)/T)),sum=w.reduce((a,b)=>a+b,0);return w.map(x=>x/sum)}let mode='valid';function draw(){pressed(mode);let src={valid:'{\"sku\":\"A1\",\"quantity\":3}',invent:'{\"sku\":\"A1\",\"quantity\":5}',missing:'{\"sku\":\"A1\"}',truncated:'{\"sku\":\"A1\",\"quantity\":'}[mode],parsed;try{parsed=JSON.parse(src)}catch{}let syntax=!!parsed,schema=syntax&&parsed.sku==='A1'&&Number.isInteger(parsed.quantity),source=schema&&parsed.quantity===3,business=schema&&parsed.quantity<=n('stock');set('stock-value',n('stock'));set('json',src);table('layers',[[t('syntax'),syntax?'✓':'×'],[t('schema'),syntax?(schema?'✓':'×'):'—'],[t('source'),schema?(source?'✓':'×'):'—'],[t('business'),schema?(business?'✓':'×'):'—']]);set('explanation',t('explain'));document.body.dataset.accepted=source&&business;}document.querySelectorAll('[data-mode]').forEach(e=>e.onclick=()=>{mode=e.dataset.mode;draw()});inputs(draw);","audio":false,"strings":{"business":"库存足够","explain":"原文一致且库存足够,才满足这里的候选校验;即使全通过,也没有替用户执行或授权创建订单。","heading":"合法 JSON 到可用结果,还差几关?","intro":"选择一个候选输出,并改变库存,逐层观察验证。","invent":"猜成 5 件","json":"候选 JSON","layers":"各层验证","missing":"缺数量字段","mode":"候选输出","reset":"重置","schema":"结构有效","scope":"固定原文“买 A1,共 3 件”,教学 schema 要求 sku、quantity;库存可变。不发模型请求或订单。","scopeLabel":"模型范围与约定","source":"原文支持","stock":"当前库存","syntax":"可解析","truncated":"半截 JSON","valid":"原文一致"}}
为非成功路径设计输出
结构化输出的保证要限定在接口支持且响应完整的路径。截断、拒绝、传输错误和取消需要独立处理,不能一律取第一个 text 块然后写进数据库。
| 情况 | 应用处理 |
| 正常完成 | 解析、schema 校验,再做业务核验 |
| 输出截断 | 标记未完成,保留原因;不执行半截参数 |
| 信息缺失 | 接受 schema 中的未知状态,按任务继续读取或询问 |
| 原文冲突 | 返回可定位的冲突,不自动编造一致结论 |
| 模型拒绝 | 按接口读取拒绝状态,不能伪造成正常业务数据 |
| 网络断流或超时 | 区分生成未完成与外部操作结果未知 |
客户端可以有限重试或要求修正具体字段,但每次重试都要有上限并记入成本。如果失败源于缺失信息,重复同一输入不会凭空补出事实;若此前已经执行了工具副作用,不能因为解析失败就重放整个任务。
为结构化报告保留来源,可以在自己的 schema 中携带文档 ID、证据位置和版本,再由应用验证。供应商内建 citations 是否能与某种结构输出同时使用属于具体功能兼容问题,不等于“JSON 与可追溯性不能共存”。检索证据的完整性见 RAG。
一个完整的本地校验例子
以下 schema 用于应用侧完整校验,不承诺目标服务能原样支持其中所有关键字。例子依赖 Python 的 jsonschema 包,校验正常结果、缺失结果、额外字段、错误类型和跨字段矛盾;它不调用模型,也不创建订单。
from jsonschema import Draft202012Validator, ValidationError
schema = {
"type": "object",
"properties": {
"sku": {"type": ["string", "null"], "minLength": 1},
"quantity": {"type": ["integer", "null"], "minimum": 1},
"status": {"type": "string", "enum": ["complete", "needs_input"]},
},
"required": ["sku", "quantity", "status"],
"additionalProperties": False,
}
Draft202012Validator.check_schema(schema)
validator = Draft202012Validator(schema)
def check(data):
validator.validate(data)
fields_present = data["sku"] is not None and data["quantity"] is not None
if (data["status"] == "complete") != fields_present:
raise ValueError("状态与字段完整性不一致")
return data
assert check({"sku": "A1", "quantity": 3, "status": "complete"})["quantity"] == 3
assert check({"sku": "A1", "quantity": None,
"status": "needs_input"})["quantity"] is None
bad = [
{"sku": "A1", "quantity": True, "status": "complete"},
{"sku": "A1", "quantity": 0, "status": "complete"},
{"sku": "A1", "quantity": None, "status": "complete"},
{"sku": "A1", "status": "needs_input"},
{"sku": "A1", "quantity": 3, "status": "complete", "extra": 1},
]
for item in bad:
try:
check(item)
except (ValidationError, ValueError):
pass
else:
raise AssertionError(f"错误结果被接受:{item}")
print("正常/缺失结果通过,5 类无效结果被拒绝")
这个简化数据模型只表达缺失,不表达多商品或冲突。如果真实任务需要这些状态,应增加相应字段和规则,而不能继续沿用 fields_present 作为完整性判据。例子也没有验证 SKU 是否存在、数量是否来自原文、库存是否足够;这些属于来源与业务校验。
执行动作时还要再次核验实时状态。例如提取时库存充足,提交时已经售罄,schema 不可能解决这个竞争。参数校验、业务约束与事务处理必须在对应系统里完成。
把提示与 schema 一起做版本管理
记录提示、schema、模型、SDK 和验证逻辑的版本。字段由可空改为必填、枚举增加新值、数组取代单对象,都可能改变下游行为;不仅要看模型输出,还要验证旧消费者如何处理新版结果。
评估集应覆盖正常输入、缺失、冲突、噪声、长输入、恶意材料和截断。分别统计结构有效率、字段准确率、未知处理是否正确,以及真正的任务成功率。若 JSON 全部合法但事实错了,继续加结构限制未必有效,应回到证据、提示与模型能力定位问题。
保留有意义的少量示例和清楚的约定,删掉相互冲突的重复要求;每次改动都用 评估与可观测 中的任务级比较验证。
继续阅读:上下文工程。