新证据来了,为何区间反而移动?历史置信交集与审计冲突状态
将同一时间一致覆盖事件下的六路历史区间逐坐标求交,解释先交后投影、空交集停用、协议绑定和可重放状态,给出完整 Python 最小实现。
上一篇补全分支与保守选流让有限分钟优先换取有用证据。执行后,新发出名单改变了分母,样本成功比例也会移动。报表昨天显示 [0.20,0.60],今天却显示 [0.35,0.70]:为什么样本更多,右端点反而更大?直接用新结果覆盖旧结果,会把昨天已经排除的参数重新放进来。
本篇只讲运行交集(Running Intersection):对同一固定参数、同一时间一致覆盖事件下的历史置信盒逐坐标求交,再投影到差距。三个环节是包含证明、历史状态、冲突停用。前文已提到交集可以使区间嵌套;这里把这一操作补成能检查和重放的数据接口。所有手填数字都是教学范围,封面为装饰隐喻。
01 当前区间为何可以移动,历史交集为何仍有覆盖?#
固定六参数 ,仍表示两组参考正类比例、敏感度与特异度。 是时刻 的六路盒,形状 [6,2]。每个端点在 [0,1],单位为无量纲比例。 是接收快照的逻辑顺序,区别于每路已发出人数 。
这里每路底层来源、模型、标签协议和真参数固定,原定抽样条件成立。定义累计区域
其中 分别为当前区间的下、上端点。在 上,所有历史区域都含同一个真实参数,故其交集也含它;于是 。已经为全部时刻付过的错误预算,不必因取交集再付一次。
若每次只是各自固定样本 95% 区间,则没有事件 。两个恰好独立且各有 95% 覆盖的区间,共同覆盖仅为 90.25%;持续求交可能不断丢掉真值。有效性来自共同覆盖依据,不能仅看界面上都写着“95%”。
当前 可因样本均值移动而不嵌套。累计 则必然嵌套:下端点不降,上端点不升。只补未知而固定分母时,前文的当前区间本来就嵌套;新发出案例后,运行交集才更明显地保留旧信息。
02 三次手算:交集宽度、参数身份和空集#
先只看第一路,其余五路都取 [0,1]。下表数值用于集合运算,不赋予置信水平。
| 快照 | 当前第一路范围 | 累计范围 | 宽度 | 对应操作 |
|---|---|---|---|---|
| 1 | 0.40 | 初始化 | ||
| 2 | 0.25 | 保留两个时刻的限制 | ||
| 3 | 空集 | 无定义 | 下界 0.65 大于上界 0.60 |
第三行不能把端点排序成 [0.60,0.65],也不能截成某个单点:那会创造没有被推导出来的区域。空集表示这些约束无法共同成立。即使共同覆盖定理有效,也可能以不超过总预算的概率发生统计失覆盖;实际系统还需检查标签修订、目标漂移、版本错配或计数错误。
如果第三行来自换过版本的分类器,参数已经换了含义,数学上便不该相交。应在更新前拒绝版本不符,而不是先求交再解释冲突。版本字符串需要绑定实际不可变配置;仅仅把 UI 标题改成 v2 不会自动定义一个新统计实验。
两个端点相等,也需要报冲突吗?
闭区间 [0.6,0.6] 是合法单点,不是空集;严格下界大于上界才为空。但浮点临界比较需要经过验证的数值处理。不要为了消除空集而任意加一个会改变统计含义的容差。
03 先交六参数盒,再投影到差距#
目标仍为 ,通过 连接到六参数。令 是这些错分机制约束与概率范围。累计后差距区域写成
在共同覆盖事件及正确机制下,真实差距属于每个 。实际可以报告其最小和最大值形成区间;前文独立通道解析投影器对强通道盒给出精确端点,其余状态保留保守回退。
为什么不只交历史差距区间?一般集合映射 满足
右边允许每个时刻用不同参数世界解释同一个差距,左边要求一套共同世界。二者都可保守,但先交参数能保留更多约束。一个二维示意:第一盒 ,第二盒 ,目标 。各自投影都是 [0,1.1],交后仍然如此;先交参数得到 [0,0.1]^2,投影只有 [0,0.2]。这些只是逻辑范围,说明共同世界为什么重要。
六参数盒只是原区域的矩形结构。如果已加入跨组共享错误率或差异容差,也要原样带进机制集合 ;不能在历史累积过程中忽然把它们忘掉。新增结构约束须有科学依据,不能为了缩窄结果随数据挑选。
04 Python:将有效、空交集和输入错误分开#
下面完整程序保存为 history.py,运行 python3 history.py。只使用标准库;已核对官方 math.isfinite ↗。EvidenceHistory 接收六路区间,不重新拟合模型,也不重新计算错误预算。调用方负责从前文 pending_interval 等有效构造产生输入。
binding 是包含目标来源、模型、参考规则、流顺序、总预算和区间构造版本的不可变配置标识。示例用短字符串展示;实际应绑定配置摘要,并把日志截点写入每份持久事件。seq 为正整数,要求连续递增;重复最后一份快照可幂等重投,同序异载荷和跳号均拒绝。这里只保留最后一次投递用于重试去重,完整历史由外部追加日志保存。
校验协议绑定、六路端点和连续逻辑序号
相同最后快照重投:返回原状态
计算每路 max(旧下界, 新下界)、min(旧上界, 新上界)
任一路下界大于上界:记录冲突并锁存停用状态
六路均非空:原子接受新累计盒,交给差距投影器
重新启动:按原始日志顺序重放,不只加载最终计数textfrom math import isfinite
def checked_box(box):
if not isinstance(box, (list, tuple)) or len(box) != 6:
raise ValueError("expected six intervals")
result = []
for pair in box:
if not isinstance(pair, (list, tuple)) or len(pair) != 2:
raise ValueError("expected two endpoints")
lo, hi = pair
if any(type(x) not in (int, float) or not isfinite(x) for x in pair):
raise ValueError("endpoints must be finite numbers")
if not 0 <= lo <= hi <= 1:
raise ValueError("expected 0 <= lower <= upper <= 1")
result.append((lo, hi))
return tuple(result)
class EvidenceHistory:
def __init__(self, binding):
if type(binding) is not str or not binding:
raise ValueError("need immutable configuration identity")
self.binding = binding
self.seq = 0
self.last = None
self.box = ((0.0, 1.0),) * 6
self.conflicts = ()
self.halted = False
def snapshot(self):
return dict(seq=self.seq, status="conflict" if self.halted else "active",
box=None if self.halted else self.box,
conflicts=self.conflicts)
def accept(self, seq, box, binding):
if type(binding) is not str or binding != self.binding:
raise ValueError("configuration mismatch")
if type(seq) is not int or seq < 1:
raise ValueError("sequence must be a positive integer")
box = checked_box(box)
payload = (seq, box)
if payload == self.last:
return self.snapshot()
if self.halted:
raise ValueError("conflict is latched; investigate before new analysis")
if seq != self.seq + 1:
raise ValueError("require next sequence or exact last retry")
candidate = tuple((max(a, c), min(b, d))
for (a, b), (c, d) in zip(self.box, box))
conflicts = tuple(j for j, (lo, hi) in enumerate(candidate) if lo > hi)
self.seq, self.last = seq, payload
if conflicts:
self.halted, self.conflicts = True, conflicts
else:
self.box = candidate
return self.snapshot()
if __name__ == "__main__":
history = EvidenceHistory("target-model-label-alpha-v1")
for seq, pair in enumerate([(0.2, 0.6), (0.35, 0.7), (0.65, 0.8)], 1):
box = (pair,) + ((0.0, 1.0),) * 5
state = history.accept(seq, box, history.binding)
print(seq, state["status"], None if state["box"] is None else state["box"][0])
assert history.accept(seq, box, history.binding) == state
assert history.snapshot()["conflicts"] == (0,)
try:
history.accept(4, ((0.0, 1.0),) * 6, history.binding)
except ValueError as error:
print(error)python前三行输出为 1 active (0.2, 0.6)、2 active (0.35, 0.6)、3 conflict None。第四次新更新被锁存状态拒绝。checked_box 的输入错误在修改状态前抛出;数学上为空则接受为一条冲突事件、对外停止提供盒。历史内部保留上一次非空盒仅供排查,snapshot 在停用时始终返回 box=None,调用方必须按状态分支。
将联合置信盒文章的 fixed.py 放在同目录,再把真实六路快照接入如下接口。current_box 由前文六个 pending_interval 按固定顺序生成,seq 来自追加日志,history 是持续保存的实例。
from fixed import project_gap
def report(history, seq, current_box, binding):
state = history.accept(seq, current_box, binding)
if state["status"] != "active":
return dict(status="audit_conflict", interval=None)
box = state["box"]
return project_gap((box[:3], box[3:]))python调用方还需区别 project_gap 的 uninformative 与本模块的 audit_conflict:前者表示解析方法弱通道或机制不兼容,返回 [-1,1];后者表示历史参数盒已空,返回没有区间。二者都应保持“未决”,并保留原始原因;空集不能通过“所有候选都大于阈值”这种对空集真空成立的判断自动过关。
05 重放为什么需要历史,而不只是最终计数?#
当前计数能恢复当前区间,却无法恢复途中出现过的最大下界、最小上界。两条路径可以到达同样最终计数,历史交集却不同。把日志截点、序号、参数身份和区间版本一起保存,重启后按顺序重放。重复历史中的旧事件可由持久事件索引识别;示例内存类只支持最后一次重试,不应宣传为完整生产消息系统。
正常更新只存六对端点,时间与状态空间为 。为审计保留 次事件的日志为 ,从头重放时间也为 。单进程示例在所有输入检查后才提交;生产系统需要事务同时保存事件与新状态,并序列化并发更新。
| 现象或方法 | 解释 | 下一步 |
|---|---|---|
| 当前盒移动,累计盒嵌套 | 新分母、新比例改变当前界 | 保留两份盒及各自用途 |
| 合法快照产生空交集 | 约束彼此不相容 | 停用结论,定位冲突路与原始事件 |
| binding 不匹配 | 参数或构造身份不同 | 更新前拒绝,按新目标设计分析 |
| 末次重投完全一致 | 同一统计事实重复到达 | 幂等返回,不增加样本或预算 |
| 滚动窗口(Rolling Window) | 丢弃旧数据以跟踪变化目标 | 适用目标不同,需自己的推断证明 |
| 贝叶斯更新(Bayesian Updating) | 用先验和似然更新后验 | 不是频率覆盖集合的逐次求交 |
| 只交差距端点 | 允许每次不同参数世界 | 保守但可能比先交参数更宽 |
先用手填范围枚举包含真值的输入,检查每次交集仍含真值;再对随机端点检查非空累计盒逐坐标嵌套。插入末次重试、同序异载荷、跳号、布尔端点、非有限端点、错协议,核对状态未先被污染。最后将相同事件序列喂给两个全新实例,逐截点快照应相同。
真实分布漂移后,旧数据和新数据不再约束同一个 ,历史交集可能过时或冲突。若标签协议被修正,应停用受影响旧结论,设计新的推断范围与跨分析错误预算。把每次冲突后重启的分析各自称为 95%,并挑成功的那次报告,会引入跨重启的选择问题。时间一致性控制的是既定分析内的时刻,不能替任意重启付款。
空交集是否证明发生了漂移?
它提供了值得检查的矛盾。统计失覆盖、计数错误、标签改写、来源变化都可能造成它;要把空交集作为正式漂移检验,还需明确原假设、规则和相应错误控制。系统先报告冲突,定位依据,再决定新的统计设计。
思考练习#
- 将第三次范围改为
[0.60,0.80],为什么交集是合法单点?分别写出边界相等与越界时的状态。 - 对二维 例子复核两种运算顺序;再构造一个两者相等的例子,说明“先交更紧”并不总是严格不等。
- 保存十次合法快照并重放,在中间插入一次协议变更和末次重投。哪些操作应拒绝、哪些应幂等?如果只保留最终计数,还缺少什么信息?
相关工作#
- Darling & Robbins (1967), Confidence Sequences for Mean, Variance, and Median ↗:置信序列的早期基础。
- Howard, Ramdas, McAuliffe & Sekhon (2021), Time-Uniform, Nonparametric, Nonasymptotic Confidence Sequences ↗:覆盖全部时刻的核心构造与理论。
- Rogan & Gladen (1978), Estimating Prevalence from the Results of a Screening Test ↗:本文差距投影沿用的错分反演关系。
下一篇预告#
历史交集把“同一个参数”这个前提变成了工程契约。下一步讨论来源确实变化时如何区分累计审计与变化检测:定义要检测的变化、设置可反复查看的报警依据,再决定何时建立新版本的审计目标。