第三十九章 如何证明发生并识别假发生
研究问题与对照条件
前三种研究若各自只展示顺利案例,便不足以检验出版总纲的转移。共同的研究问题应当明确:在何种作品、读者和组织条件下,三合一比其他支持方式更有助于形成可靠判断、可迁移能力或有作品根据的审美理解,其代价是什么,作用能持续到哪里?这里比较的是可观察结果,不是研究者认为过程有多符合理论语言。即使参与者的记录充满追问、反例和回写,只要独立表现没有改善,仍不能据此宣布升维。
总纲分类必须先于结果。拟依据研究前的承诺、预算、责任流程和完成标准,由两名评阅者独立编码:以交付作品、识别和掌握既有内容作为充分完成条件的安排,列入发现总纲类别;事先将问题形成、持续反馈及其对读者、文本和作者的后续影响纳入职责,配置资源,并要求阶段成果进入下一轮的安排,列入发生总纲类别。分类分歧及主要责任或完成标准混合的项目保留为混合或未定,不为凑成二分强行归类。两份编码、分歧理由及最终分类依据须先封存,再查看结果;不能依据后来效果改名。
支持条件则拟包括纯阅读、阅读加学习、阅读学习智能问对三合一,以及原文可用但仅提供一般聊天的安排。它们用于辨认支持方式,不直接等同于两种总纲。纸本读书会可能具有发生总纲的责任结构,配备聊天窗口的产品也可能仍以交付标准答案为完成条件。因此,研究应分别登记组织原则与支持形式,避免把技术形式当作典范身份。条件定义还须说明可见材料、记录是否共享、反馈是否到达实际作者,不能只用产品名称作分类。
投入差异需要两类比较共同处理。一类在相近时间、材料与人员支持下比较结果,以检验贯通方式的增量;另一类允许各方案按真实使用习惯投入,考察完整服务带来的收益和负担。前者若过度限制时间,可能破坏某种方式的正常运行;后者若忽视成本,又容易把更多劳动误认成机制优势。两类结果应分别报告。进一步的删减比较可以移除共享记录或作者反馈环节,检验何处起作用,但每一项改变都应有具体问题,不能无限扩充实验。
读者愿意接受不同支持时,拟按起点经验分层随机分配;协作任务以团队为单位。这仅估计项目内支持方式的增量。自行选择路径者另作观察,停止和转换须保留理由,不与随机结果混作同等因果证据。
典范比较则须以事前分类的出版项目或组织为单位,在作品类型、读者起点、资源和承诺范围可比的条件下另行设计,不能用读者层随机化代替组织层比较。无法随机分配项目或组织时,所得只能作为有条件的机制或关联证据,并说明未能排除的差异。没有跨项目或组织证据,单个项目的支持试验不能独自确证典范优劣,更不能证明强死亡命题。组织再生产还需要与维护周期相称的持续观察。
研究规模和评价阈值应通过预试确定。预试首先检查任务是否过难或过易、评价者能否一致理解标准,以及退出是否集中在某一安排。正式研究所需参与规模应根据这些信息及希望辨认的差异另作论证。本书不提供未经检验的成功率,也不把任意人数写成足以证明典范转移的标准。小规模研究可以揭示机制和失败路径,却应承认其对效果范围的估计有限。
问题质量及证据判断
问题质量不能以新奇程度衡量。一个措辞陌生的问题可能没有对象,一个朴素追问却可能准确触及论证缺口。拟议评价首先检查问题指向何处:是否准确理解当前主张,能否区分已回答与未回答部分,是否提出可能改变判断的材料,以及回答后能否说明后续问题如何变化。对思想专著,这些要求落实在论证关系上;对实践图书,落实在行动条件上;对文学,落实在解释依据及形式细部上。共同标准不应抹平不同对象。
证据判断还要考察抵抗错误支持的能力。研究可以在明确的研究安排下提供包含遗漏条件、模糊来源或不相关例证的材料,让参与者决定是否采用,并说明理由。材料在任务之后需要得到清楚辨认和说明,避免留下未纠正的误导。目的不是证明读者容易犯错,而是比较支持方式是否使他们更能检查依据。若三合一让人更快接受流畅回答,却降低了对原文的核对,便构成与其主张相反的证据。
评价者应尽可能不知道材料来自哪种条件,并在看到正式结果之前确定判断说明。完全隐藏条件未必可行,因为对话记录本身可能暴露支持方式;可以先评价不含界面信息的独立作品,再对过程材料进行机制分析。两种工作分开,有助于避免评价者因喜欢某种设计而给结果加分。发生概念在解释阶段可以帮助组织材料,却不应成为独立任务必须采用的语言。
还有必要检查文本长度和表达风格的影响。得到系统帮助的参与者可能提交更长、更整齐的回答,但篇幅不等于理由更充分。研究可以要求所有人完成相同长度范围的核心陈述,同时保留自由补充;也可以让评价者单独判断关键推理是否成立。对于口头表达困难或不愿长篇写作的人,应提供等价的表达方式。否则测到的可能是某一界面适合谁,而非某一种出版组织使谁形成了判断。
延迟迁移和实际回写
持续发生的证据必须超出一次活动的即时结束点。拟议研究在后续阶段安排不同于训练材料的新任务,并观察参与者能否独立辨认条件、调整方法和承认未知。延迟多久、改变多大,要与作品的预期价值相联系,不能统一规定所有书籍都在同一间隔完成同一种测验。思想与实践可以更多依赖独立任务,文学则需要结合自愿重读与解释材料。后续记录不完整时,应说明哪些人没有返回及已知原因,不能只报告留下者的变化。
退出尤其可能改变结论。负担较大的参与者提前离开,留下者表现良好,不能证明安排适合所有读者。拟按原有分配报告已获结果,单列退出率、失访原因及未知部分,再分析实际参与程度;后者不能直接当作分组效果。正式方案还应预设合理的缺失结果情境,例如失访者与相近起点的返回者相仿,或表现较差,并检查主要结论是否随情境改变。情境依据及范围须事先说明,不能挑选有利设定。未知不自动记为失败,也不按返回者结果直接补齐。
作者回写需要独立证据链。拟议材料包括读者问题原记录、编辑整理说明、实际作者回应,以及经确认的版本或创作判断变化。作者可以拒绝修改,但拒绝理由也应与问题相对应。没有实际作者参与的条件,只能评价读者解释、作者形象和文本使用方式,不能在结论中悄悄补出作者本人的发生。对于修订,应请新的阅读者判断它是否改善论证或使用条件,以免回写只满足参与者被看见的需要。
读者产物进入公共材料还需经过选择。研究不能把所有个人笔记上传为“共同创造”,再用材料增长量说明出版网络扩大。只有经过贡献者同意、编辑审阅并保留出处关系的成果,才适合进入后续版本或共享注释。评价应检查这些材料是否被后来的读者实际使用,能否减少误解或提出有价值的异议。即使使用量很小,一项关键纠正也可能重要;即使访问量很大,重复摘要也可能没有形成新的公共条件。
迎合依赖和虚假熟悉
假发生的一种形式,是系统不断赞同读者,使对话看上去充满自我发现。读者提出任何解释都得到赞赏,前后矛盾也被包装成“多元视角”,于是记录增长而判断不受约束。研究拟比较参与者面对明确反证时能否修订观点,面对系统的错误赞同时能否坚持核查。这里需要保护合理分歧:抵抗迎合不意味着研究者预先指定唯一结论,而是要求参与者能够说明自己的证据边界,并承认什么会改变判断。
另一种形式是依赖被误写为能力。参与者在工具陪同下完成复杂任务,却无法在没有提示时判断最基本的条件。研究应分别报告独立表现与协同表现,并观察支持退出后发生什么。如果工具承担的是原本需要专业协助的工作,协同成功仍可有价值;但出版社就应承担可靠支持的持续成本,不能同时宣传读者已完全掌握方法。能力与服务的区别直接关系到新出版单元的价值承诺和经济安排。
虚假熟悉则表现为语言越来越顺,实际区分越来越少。重复看到流畅解释,会使人觉得自己已经懂得,却未必能辨认一个相近但不同的例子。拟议任务需要让参与者说明为什么某个原则在新情境中适用或不适用,并允许回答“现有材料不足”。对文学而言,也要检查解释是否越来越像统一摘要,读者原有的细部注意和差异表达是否反而减少。三合一若加速同质化,便触及本书最初要回应的危机。
这些风险不能只在结束访谈中询问。研究拟在过程记录、独立任务和自述之间互相核对:感觉自主的人是否实际能够拒绝建议,感觉学会的人是否能够迁移,声称受到启发的人是否重新进入原文。不同证据冲突时,应把冲突本身列入结果,而不是选取最支持方案的一个。也要观察沉默和停止是否被尊重;若系统靠不断提醒迫使人留下,持续使用量便失去作为自主关系的解释基础。
负结果与修订标准
研究开始之前,应写明哪些结果将要求修改主张。若三合一在相近投入下没有带来独立任务的改善,却增加负担,就不能声称它普遍优于其他方式;若只有高基础读者获益,就应缩小适用人群并重做进入设计;若即时效果消失于延迟任务,就应限制关于持续能力的承诺;若作者反馈长期无法维持,就应承认完整复合体回路尚未建立。这些修订应针对具体证据,不能仅将失败归于使用者没有真正投入。
实施不充分与理论不成立需要区分,但不能由研究者随意划线。正式研究应先规定必要条件及检查方法,之后如实报告是否实现。某项共享记录因故无法使用,确实会影响机制判断;但如果规定的完整安排已经落实,结果仍然无效,就不能再发明一个未写明的“真正发生”条件,把失败移出理论范围。不断改变理论的准入标准,会使它失去接受反驳的可能,也使实践者无法知道该按什么设计。
同样,预先归入发现总纲的出版安排若持续产生可靠判断、新关系和可负担的经营基础,应被保留为强死亡命题的反例,或至少限制该命题的适用范围。不能因为结果良好便事后把它改称发生总纲。反过来,预先归入发生总纲的安排若失败,也应保留原分类,分析资源、机制或理论判断为何不足。这样,总纲的研究才从术语归属转向真正的竞争性解释,成功和失败都具有改变主张的力量。
负结果不必导致全盘放弃。它可以表明某类作品只需要稳定文本,某类读者只需要短期支持,某些回写应集中由编辑完成,而不必持续开放。修订的正当性在于它留下清楚的范围变化和新的可检验承诺,而不是让中心命题永远保持原样。最终,研究报告应把有效、无明显差异、可能损害和证据不足分别呈现。下一章将在这些限制中讨论典范成立,使出版的新生和升维成为有条件、有代价并可继续争论的结论。