k12.yongle.school · 审计结果

1626 条「必须先掌握」的边,抽审 57 条

审的是那些会对学生说「你还不能学这个」的边—— strength: hard 且真正参与推理。全量 1626 条里 1625 条从未经人工确认。

这是机器复核,不是人工审核。 被审的边由 LLM 生成,审它的也是 LLM——同类判断的自我确认, 不能替代这个项目真正缺的那个人工基线。 下面把两类判断分开呈现:拆分类接近客观、可机器验证;常规类是有争议的教研意见, 可能被真正的老师推翻。

结果

18成立
32有关系,但不是「必须」
7不成立
32%成立率

分类拆开看

前三类的判定接近客观——「这是不是同一句话的拆分」可以由语句包含关系验证; 最后一类是教研意见。混在一个总数里,会让客观的部分给有争议的部分背书。

类别判定性质抽样成立不是「必须」不成立成立率
MATRIX 轨硬边接近客观1201200%
疑似同一表述拆分接近客观1211018%
价值判断类接近客观30300%
常规教研意见30177657%

主要失败模式:把复合句拆开当成学习依赖

26 条抽样里,最集中的一类是:课标的并列复合句被从顿号处机械拆开, 碎片被宣称是整句的硬前置。机器自己的理由里每次都写着「是母条的一个子动作」—— 它知道这是句子拆分,仍然标成了必须先掌握。

要学能说出九一八事变发生的时间、发动者及其影响
↑ 系统判定:必须先掌握 ↑
前置能说出九一八事变的发动者
机器给的理由:「能说出九一八事变的发动者」是母条「能说出九一八事变发生的时间、发动者及其影」的一个子动作

全量 1626 条上可机器验证的问题

这部分不含判断,只含事实——由语句包含关系与字段值直接算出。

问题条数占 1626说明
MATRIX 轨硬边1257.7%螺旋能力轨,本不该有硬性先后;它们逃过了 strengthCappedBy 封顶
复合句拆分694.2%前置语句嵌在源语句中,由构造为真,行为数据推不翻
跨学科硬前置40.2%跨学科的必须先掌握,需要确认是否真的成立
合计(去重)1549.5%——

另外七条是编造的依赖

不属于拆分,也不属于「过强」,而是关系本身不存在,理由是顺着句式编出来的:

该怎么用这份结果。

「有关系,但不是『必须』」是最大的一档,它对应的处置是把 strength 从 hard 降成 soft——不是删边。 关系是真的,错的是「必须」这个强度。降成 soft 之后它就退出归因链路, 不再拦学生,但仍然可以用于推荐学习顺序。

复合句拆分那一类还有个更彻底的处置:把母条拆成几个独立锚点, 而不是保留母条再连一堆碎片边。课标里的并列句本来就是几件事。