READING & INQUIRY · PDF 369页

附录七 三条判据的操作定义、重测设计与候选阈值

一、保留判据的形状,不伪造已经验证的数值

本附录保持大纲修订二稿的三条候选判据:自比变化、撤去AI后的个人归属、同一粒种子的专属效应。这里补充的是未来研究必须说明的操作问题,不是把候选安排提升为测量定律。所有阈值、权重和统计规则,均须先预研,再在确认性观察开始前冻结;不能看完结果以后挑选最容易获得成功的版本。

“同一人”指研究对象在各时点具有可追踪的连续记录,而不意味着其生活条件完全不变。“同一任务族”指任务共享预先说明的核心组织要求,材料可不同,但应检查先修知识、复杂度和支持条件的可比性。“新任务族”则需要改变足以检验迁移的组织情境,不能只换姓名、图案或数字。

二、判据一:同一人的侧重变化超过本人重测波动

最低时间安排继续采用至少三个时点、相邻时点间隔不少于两周。每个时点应保存实际日期、任务版本、支持条件和编码材料。三个时点并不自动提供充分统计信息,更不能用三次连续完成同一练习替代这项安排。若预研显示波动估计不稳定,应增加观察,而不是把最低次数当作充分依据。

重测波动应尽可能来自干预前或另行界定的基线观察,避免把干预造成的变化混进噪声估计。任务学习、日常条件变化和编码者不一致应分别记录。若无法分离,应说明不确定性,不能把较小的编码波动当作一个人全部的自然波动。

画像比较可以预研不同候选方式,例如稳定的位次关系、在明确尺度上的权重变化,或者多个任务中相同组织转折的重复出现。采用哪一种,取决于测量是否支持相应解释。位次相同不等于所有程度相同,程度变化也不一定导致位次改变;研究须提前说明本次主要检验哪一种主张。

候选阈值可以由基线波动的范围、最低可解释变化与估计不确定性共同约束。这里不直接规定“变化百分之十”或“提高两分”,因为本书尚无能够支持这些数值的预研材料。预注册中应填写计算方法、支持理由、对并列位次的处理和所需精度;暂未确定时应明确写成待预研,而不能假装已有标准。

三、判据二:完整撤去AI四周后,在新任务族上不回旧侧重

计时起点应是最后一次与目标学习支持有关的AI接触,研究须定义哪些功能属于被撤去的支持。仅在测试当天关闭聊天窗口,不代表此前已经撤去四周;更换设备、账号或模型,如果仍提供相同目标支持,也不满足撤去条件。实际日期应核算满四周,不能只依据周次名称判断。

必要的无障碍支持和正常生活参与条件不应为了研究而取消。若它们与目标AI功能无法合理分离,本次严格撤去检验可能不可实施,应记录为“未检验”或“归属证据不足”。这不是失败者的身份判断,也不能被改写成默认通过。研究可以继续报告复合体作用,但须保留个人归属的限制。

“不回落”需要预先说明旧画像的波动范围与允许的不确定性,并用新任务族材料观察,而不只询问本人是否觉得自己成长。若新任务的先修知识明显不足、理解负担大幅增加或支持条件不公平,应先检查可比性,不能把所有较差表现都归因于旧侧重恢复。

完整撤去期间若发生相关接触,应如实登记时间、功能和程度。确认性研究应预先规定重新计时、退出该项分析或作为偏离条件报告的规则,不得因结果好坏临时选择。研究无法获知接触情况时,证据状态应保留不确定,不能把未报告当作已证明没有接触。

四、判据三:同一粒种子换给另一块土壤,效果显著降低

交换前应冻结种子的核心问题、关键路径与反馈逻辑,预先规定可调整的语言、媒介与必要支持。超过这些范围的修改,需要另立版本;否则比较的已经不是同一粒种子。另一位参与者必须具备合理的进入条件,不能通过使用完全陌生材料故意制造低效果。

效果以每个人相对于自身基线的变化界定,不用两人的绝对分数直接比较高低。需要记录实际投入、教师支持、任务熟悉、实施顺序和期待条件。学习通常可能留下后续影响,因此不能假定换一粒种子或休息几天就清除了先前学习;交换顺序与延续作用必须进入设计。

“显著降低”的统计解释与最低有意义差异,应在预研后明确。未发现显著差异,不自动等于两者效果相同;估计不精确时,结论可能是专属性尚未获得支持。若有充分精度的比较显示效果相当,则应撤回相应专属主张。两个人之间的结果也不能直接外推到所有其他土壤。

五、三条判据怎样合起来,又怎样分别失败

三条判据分别约束变化是否可辨、改变是否能按本书严格要求归属于人、种子是否具有专属效应。它们不是可以相互补分的三个项目。作品非常好,不能抵消重测判据失败;复合效果很强,不能替代撤去检验;个人确有改变,也不能独自证明这粒种子不能成为通用资源。

应分别报告每一条为“获得相应证据”“未获得相应证据”“与主张相反”或“尚未检验”,并说明判定依据。类别是报告约定,不替代具体估计。缺测不填零,退出不视为不愿成长,多个任务与多个指标也不能任意挑选其中最好的一项作为全书结论。

侧重改变与层级提升还须分开。前者满足,不自动取得后者的名称;后者的候选证据应另列组织单位、问题范围、方法关系、条件设计及迁移,并分别报告理念界、现实界、自我界。第44章与附录五用于限定这种新增判断。

六、确认性研究开始前的核对页

研究问题与主要主张:____。参与者进入条件和保护安排:____。任务族、等值方式与新任务族:____。基线时点和间隔:____。编码方案、权重依据与重测方法:____。主要指标、最低有意义差异与不确定性处理:____。

种子冻结版本与允许调整范围:____。工具支持与撤去功能的定义:____。满四周的日期核算与接触记录规则:____。必要支持无法撤去时的处理:____。交换顺序及学习延续影响的安排:____。缺测、退出、执行偏差与多项比较的处理:____。

本人核对、独立编码与访问权限:____。停止和修订条件:____。结果如何对应正文主张的保留或撤回:____。尚未解决的预研问题:____。只有当最后一项不再影响确认性判断的核心规则时,才适合将探索性试用与正式检验区分开来。判据的价值不在看上去严格,而在无论结果怎样,都能限制研究者事后解释的自由。