前瞻判断校准框架：低效度反馈环境中的判断外置、结果结算与时间校准

PJC Research Note · v0.6 · 2026-08-25
状态：公开研究预览，尚未经过外部同行评议。

摘要

PJC Framework 是一套面向低效度人–AI Agent 协作环境的判断校准方法。它将结果揭晓前的判断外置为带时间戳、不可覆盖的记录，预先指定观察窗口、结果来源与反证条件，并在结果出现后进行结构化结算。PJC 的目标不是证明单次决策正确，而是为跨时间检查置信程度与结果之间的关系提供可审查材料。

本文提出方法结构及其机制解释；不声称 PJC 已经提高正确率、效率或团队绩效。

1. 问题定义

在人与生成式 Agent 协作时，系统输出通常比真实反馈更快、更流畅。由此产生三个风险：

输出流畅度被误当作判断质量；
结果出现后，原始判断被记忆和叙述重新塑造；
单次成功被当作方法有效性的证据。

这类环境的共同特征是：反馈延迟、样本稀疏、结果归因困难，且执行者同时参与解释结果。

2. 关键术语

前瞻判断：在相关结果尚不可知时形成、能够被未来观察支持或反驳的命题。

前瞻记录：在结果揭晓前固定判断、依据、置信程度和结算条件。

结果结算：按预先指定的来源和规则，将记录标为支持、反驳、不可判定或失效。

时间校准：跨一组可比较记录，检查置信程度、判断类型与实际结果之间的关系。

低效度环境：可用线索与结果之间关系弱、不稳定或难以及时学习的任务环境。PJC 使用这一术语描述应用条件，不把所有 Agent 工作流都预设为低效度。

3. 方法结构

PJC 由三个必要机制组成：

前瞻记录保存结果前状态；
结果结算将评价权交给预先指定的外部结果；
时间校准阻止单次案例承担超出其能力的结论。

缺少任一机制都不是完整 PJC：只有记录会退化为日志；只有结果会失去原始基线；只有统计会隐藏记录质量问题。

4. 机制依据

4.1 事后偏差

Fischhoff 的经典研究显示，人们在知道结果后会高估自己原先能够预见该结果的程度。PJC 的工程应对不是消除偏差，而是在结果出现前保存一个不可被记忆改写的比较点。

4.2 概率校准

判断校准研究关注表达的置信程度与对应结果频率是否一致。PJC 借用这一评估思想，但 v0.6 不规定跨领域通用评分；只有足够相似的判断才适合聚合。

4.3 预承诺

预先写明阈值、结果来源和停止条件，能够减少结果后修改规则的空间。这是一项记录结构带来的约束，不等同于已经证明行为或绩效得到改善。

5. 人–AI Agent 协作映射

在 PJC 中：

人是判断主体，负责承诺命题与置信程度；
Agent 可以检索、整理、执行和检查；
确定性系统负责时间戳、权限和状态转换；
外部数据或预先指定的裁决者负责结果来源；
人与系统共同完成结算审查。

Agent 不应同时生成原始判断、选择结果来源并独立裁定自己是否成功。

6. 方法主张与研究假设

结构性主张

以下结论直接来自记录设计：

冻结的前瞻记录保留了一个结果前基线；
预先指定的结算条件减少事后换标准的空间；
保存失败与不可判定记录能够暴露选择性汇报。

待验证假设

以下结论尚需数据：

PJC 能改善置信度校准；
PJC 能提高错误发现率；
PJC 能改善团队决策质量；
PJC 带来的收益大于记录成本；
PJC 在不同业务场景中具有可迁移性。

7. 已知限制

诚实输入问题

PJC 无法保证参与者如实写下原判断。它只能提高修改和遗漏的可见性。

结果定义问题

许多复杂项目没有单一、独立的结果指标。过度简化结果会产生新的失真。

选择效应

团队可能只记录容易结算或政治风险较低的判断，从而高估方法表现。

行为反应

当记录用于考核时，参与者会优化可见指标。PJC 默认用于学习，不用于个人排名。

样本与可比性

少量、异质判断不足以支持稳定的概率校准结论。

8. 可证伪条件

PJC 的方法价值应被降低或否定，如果持续试点发现：

大部分提交记录无法按预设条件结算；
参与者系统性地在结果泄露后提交；
字段约束没有减少事后修改；
相比轻量基线流程，记录质量没有改善；
长期使用成本显著高于可观察收益。

9. 研究计划

v0.6 的评估顺序是：

验证字段是否可理解；
统计提交完整率与不可结算率；
检查冻结和追加机制是否有效；
建立一组可比较判断；
再评估校准与决策质量；
最后讨论效率和跨场景迁移。

10. 参考文献

Fischhoff, B. (1975). Hindsight ≠ foresight: The effect of outcome knowledge on judgment under uncertainty. Journal of Experimental Psychology: Human Perception and Performance, 1(3), 288–299. https://doi.org/10.1037/0096-1523.1.3.288
Lichtenstein, S., Fischhoff, B., & Phillips, L. D. (1982). Calibration of probabilities: The state of the art to 1980. In Judgment under Uncertainty: Heuristics and Biases. Cambridge University Press.
Koriat, A., Lichtenstein, S., & Fischhoff, B. (1980). Reasons for confidence. Journal of Experimental Psychology: Human Learning and Memory, 6(2), 107–118. https://doi.org/10.1037/0278-7393.6.2.107
Kahneman, D., & Klein, G. (2009). Conditions for intuitive expertise: A failure to disagree. American Psychologist, 64(6), 515–526. https://doi.org/10.1037/a0016755

11. 建议引用

金俊旭. 前瞻判断校准框架（PJC Framework），Research Preview v0.6. Sedes Mentis, 2026.

引用 PJC 不表示作者或赛明思认可引用者的实现、结论或产品。