概率、条件概率与贝叶斯
为什么需要
Agent 的工具可能失败,分类器可能误报,检索结果可能相关。概率不是“主观含糊”,而是用 0 到 1 描述不确定事件的模型。
事件与基本规则
样本空间 是所有可能结果,事件 是其中一部分。概率满足 、。补集规则:
若两事件互斥,;一般情况需减去重复部分:
例:100 次工具调用有 12 次超时,经验超时率为 。这是样本估计,不是永恒真值。
条件概率与独立
知道 已发生后, 的概率为:
若 ,才称 与 独立。不同请求来自同一用户、同一服务故障窗口或同一文档时,往往不独立;把它们当独立样本会低估不确定性。
例:监控显示总体失败率 5%,高峰时段失败率 15%。你在高峰已知条件下应使用 15%,不能仍用总体 5%。
贝叶斯公式
是假设, 是证据。 是先验, 是证据在假设成立时出现的概率, 是更新后的后验。
假设线上只有 1% 请求真正异常;告警器对异常的召回率 90%,对正常请求误报率 5%。告警后真正异常概率:
即约 15.4%,不是 90%。低基率让误报占多数。这对安全检测、幻觉告警和异常监控非常重要。
ML、检索与评测中的用途
- 分类模型输出的“概率”需校准后才可按频率解释;softmax 数值不自动保证可信。
- RAG 中“检索到相关文档”会改变回答正确的条件概率,但两者不是同一事件。
- 离线评测按任务类别分层,是在不同条件下比较成功率。
- 多步 Agent 成功率不能盲目相乘,除非步骤失败近似独立。
常见误区
- 把 当成 。
- 把不相关当成独立;协方差为零也不总能推出独立。
- 用训练集频率直接代表线上概率,忽略分布变化。
- 看到相关性就宣称因果关系。
练习与自测
- 一个工具单次成功率 0.8,若两次独立,至少一次成功概率是多少?答:。说明独立假设何时不成立。
- 画 1000 个请求的 2×2 表:真实异常/正常 × 告警/未告警,复算贝叶斯例子。
- 我能用频数解释条件概率。
- 我会检查独立假设,而非默认成立。
- 我能解释基率如何影响告警可信度。
资料
NIST Probability Distributions,核验日期:2026-07-14。上一节:描述统计与数据质量|下一节:随机变量与常见分布。