← 专著首页目录专著栏目

第 5 章 持有位:撤除损失由支持的类型解释,不由频率取代

英语教学的智慧 · 课堂上没人记下来的十件事 · 张丹丹 著 · 德麦国际专著第 119 号

——把一条旧区分接到一个旧因变量上,以及这件事可能失败的三种方式

摘要

一个学生写一段英文时必然面对一批不确定。问题是:在他写的这一小时里,这份不确定由谁拿着。关于“外部依据一旦提供,判断就不再留在学生身上”,本章不是第一个到场的:真理可以授予、程序只能培育,是一九四九年的句子;我们知道的比能说出的多,是一九五八年的;构想与执行的分离,是一九七四年的;自动化的反讽,是一九八三年的;而预设标准无法把教师的质量概念移交给学生,一九八九年就写在教育评价的核心文献里,同一位作者二〇〇九年又用“预设标准的不可确定性”说得更准。关于“撤除后表现下降”,一九五九年已有撤除实验。关于“可核验 vs 只能接受”这条区分,认识论的证言问题辩论了四十年,人机信任研究把它写成了“恰当依赖”。本章因此不主张这三件。本章主张的只有一个耦合:在控制提供频率、先备水平与加工努力之后,撤除后损失的大小仍由支持的类型占比解释,并与路径余量按事先指定的方向交互。 运动学习那一路四十年来按频率预测撤除损失,本章加进类型这条轴;两者可以同时起作用,但类型不能被频率取代,而这是可以分离检验的。推翻共同假定的材料取自保险自己:道德风险说的正是安排本身改变被安排者的行为,因而改变风险的总量——持有安排不是中性的搬运。本章同时写明这个耦合可能失败的三种方式,每一种都有一个可做的对照实验。

关键词

持有位 不可自核支持占比 撤除损失 类型与频率 名义可查证 恰当依赖

一 引言:那份必须有人拿着的东西

一个学生要写一段英文。某个词他不确定是不是这个场合该用的;某个句子他觉得别扭但说不出哪里别扭。这些不是可以被消除的噪声,它们是这项任务本身的构成部分。

问题在于:在他写作的这一个小时里,这份不确定由谁拿着?

如果他手上有一份详细的评分细则、两篇范文、一个句型模板,那么绝大部分不确定已经不在他手上——它在那份细则里被事先处理掉了。他要做的不是判断,是对照。如果他手上什么都没有,只有一个任务和一个截止时间,那么全部不确定都压在他身上。

本章必须在开头交代:第一版稿的三条主张,这一轮检索之后一条不剩。

第一条,“外部依据一旦提供,判断就不再留在学生身上”。一九四九年:真理可以被授予,程序只能被培育。一九五八年:我们知道的比我们能说出的多,而一切明言知识都扎根于默会知识。一九七四年:构想与执行的分离——管理方构想,劳动者仅执行,于是劳动者失去整合性的技能。一九八三年:自动化的反讽。而最要命的一位就在教育评价内部:一九八九年有人论证,教师的质量概念是默会的,仅仅把它陈述成预设标准不足以完成移交,学生需要“直接的、真实的评价经验”;同一位作者二〇〇九年把这件事说得更准——预设标准在使用中是不可确定的,它不能在缺少先行默会质量概念的情况下被应用。

第二条,“撤掉外部支持后表现下降”。一九五九年就有专门的撤除实验,标题是“在练习早期与晚期引入与撤除结果知识的若干效应”。这一条第一版稿已声明不主张,这是对的。

第三条,“可核验的支持与只能接受的支持是两类不同的东西”。这条区分在认识论里是证言问题的分界线本身:一派要求听者持有独立于证言的理由(即可核验),另一派授予一种可被推翻的、默认的相信权(即只能接受),而这场辩论已经四十年,每一个可能的立场都已被命名。在人机信任研究里它是“恰当依赖”:正因为无法完整理解与核验,才需要信任。

第三节会把这些先到者逐一请进来。做完之后,本章剩下的只有一个耦合:

在控制提供频率、先备水平与加工努力之后,撤除后损失的大小仍由支持的类型占比解释,并与路径余量按事先指定的方向交互。

区分是旧的,因变量是旧的,把它们接起来并主张类型在控制频率之后仍有独立贡献、且与余量交互,这一步没有人做过。统稿时撤回了第二版稿“类型排他地决定损失”的表述,理由见第七节。而且它与一个立了四十年的假说给出互不相容的预测——那个假说按频率预测撤除损失。

路线图:第二节交代这个决定为什么不能折中;第三节请进先到者;第四、五节介绍三家并说出它们共同假定了什么;第六节给出推翻材料;第七节给出耦合与它可能失败的三种方式;第八至十节给出三分类型学、判据与读数;第十一至十三节做分界;第十四至十六节交代押注、证伪与一个当场可做的最小实验;第十七至二十节交代削弱、反噬、边界与自我定位;第二十一节给结论与赌注。

二 一个从未被明说的决定

每一项教学改进都隐含地对持有位做了处置,而处置方向并不一致。

把不确定拿走:把模糊的任务要求变成明确的评分细则,把开放的写作变成有范文可依的模仿,把需要斟酌的表达变成可套用的句型。每一步单独看都是负责的教学准备。

把不确定分摊:小组活动、同伴互评、集体讨论——一个人不确定,四个人一起不确定,谁也不必独自承担判断失败的后果。

把不确定交还:自主学习、项目式任务、“你自己决定怎么写”。

这三种处置在同一间教室、同一个星期、甚至同一节课里同时存在,而且通常没有人注意到它们在往相反方向拉。

为什么这不是一个可以折中的问题,有三条理由。其一,三者的长期后果不同向:拿走、分摊、交还各自训练出的是对照的能力、协商的能力、独自承担判断的能力,它们不是同一种能力的不同剂量。其二,三者之间存在挤占:一节课的时间固定,一份任务的不确定量给定,拿走了的那部分就不能再被分摊或交还。其三,也是最要紧的一条:拿走这条路的后果是延迟的且不可见的——分摊与交还的效果当堂就能看到,拿走的后果要到撤除外部支持的那一刻才显形,而在正常教学流程里那一刻往往不出现。

这三种处置在教学话语里还共用同一套褒义词,这是它们的分歧不被察觉的直接原因:拿走叫“降低难度、明确要求”,分摊叫“合作学习、同伴互助”,交还叫“培养自主性”。三个词在任何一份教案模板里都是正面的,而且可以写在同一页上互不打架。一份教案能同时宣称这三件事而不自相矛盾,恰恰证明这个维度没有被度量——凡是被度量的东西,都会立刻暴露此消彼长。

在现行的任何一本教学账本上,没有一个字段记录这节课的不确定是谁在扛。 备课本记的是教学目标与步骤,作业记录记的是完成与得分,听课评价表记的是教师行为与学生参与度,质量监测记的是达成率。四本账都在记“做了什么”和“做得怎样”,没有一本记“这一处的判断是谁做的”。 这不是一个被记错的量,是一个从未被设为字段的量。

三 已经到过附近的先到者

本章第一版稿的主张可拆成四个构件:①外部依据一旦提供,判断的位置就转移到外部;②撤掉之后表现下降;③下降的幅度只随“已规定型”支持的占比变化,不随“可查证型”的多少变化;④因此这是类型问题,不是剂量问题。

3.1 构件①:被五位在一九四九至一九八九年间占满

一九四九年:真理可以被授予,程序只能被培育。把一份说明交给某人,不等于把能力交给他——因为若每个智能操作都需要先执行一个理论操作,则无人能行动。

一九五八年:一切明言知识都扎根于默会知识;我们知道的比我们能说出的多。注意本章“已规定型”这个术语本身就是这一路的词——可规定与不可规定,是它切的那条轴。

一九七四年:构想与执行的分离。判断被系统性地从执行者身上移走并安置到别处,执行者失去整合性的技能与全面的知识。这是构件①与④的社会学版本,而且它的变量是纯粹的类型/位置变量,不是剂量变量。

一九八三年:自动化的反讽。该文摘要的第一句是:本章讨论工业过程的自动化如何扩大而非消除操作者方面的问题。它的变量是“哪些功能被接管了”——同样是类型/范围变量。“这不是剂量问题而是类型问题”这句话,一九八三年已经以更强的形式说过。

一九八九年:教师的质量概念是默会的;要把它移交给学生,学生必须持有优质作品的概念、能把自己的作品与之对照、并有改动的策略知识;仅仅把标准陈述出来不足以完成移交。这一位在教育评价内部、面对本章所举的同一批对象(评分细则、预设标准、范文)、回答本章的同一个问题。

3.2 构件②:一九五九年已完成

第一版稿已声明不主张这一条,这是对的。撤除实验的经典结论是:撤除后表现回落到无外部信息的基线,即外部信息期间产生的是表现而非学习。

3.3 构件③的区分:在两个领域各有一套成熟版本

认识论侧:这条轴就是证言问题里还原论与反还原论的分界线。一派要求听者持有独立于证言的、关于说话者可靠性的正面理由(可核验);另一派授予一种可被推翻的、默认的相信权(只能接受)。还有人论证追求非证言性确证会陷入恶性循环或无穷回归——即“可核验”在实践中往往不可得;还有混合方案精确地在这条轴上取中间值。

人机信任侧:一篇二〇〇四年的综述的副标题就是“为恰当的依赖而设计”,其核心句把“无法完整理解与核验”设为信任发挥作用的前提条件——当复杂性与未预期情形使完整理解不切实际时,信任引导依赖。“该不该信”在那个领域正是以“能不能核验”为分界画出来的。

还有第三处必须交代:这条轴在教育技术内部也已经有了一个名字。 关于人与智能系统在学习中的分工,有一条按“哪些认知任务由谁承担”排的层级框架,它与人因工程的自动化层级同构,并且明确把“由谁做判断”设为分层的依据。它离本章只差一步:它排的是分工的层级,没有把“撤除后剩下什么”接上去。本章承认这一步很短。

判决:构件③的区分本身,本章没有任何新东西。 本章若把这条二分当作自己的创新,会被有认识论背景的读者当场识破。

3.4 构件④:未被占满,但方向相反

运动学习里有一个立了四十年的假说,它与本章同问题、同因变量:外部提供的结果信息在提供期间提升表现、在撤除后表现崩落。它的机制陈述是:高频外部反馈使学习者不再加工自己的内在误差信息,形成对外部源的有害依赖。

这个机制里就有本章那条轴——内在反馈是学习者自己能生成的,外在反馈只能由外部给予;“能不能自己产出”就是“能不能核验”在运动学习里的既成版本。构件①因此在机制层面也被占满。

但它的自变量是频率,不是类型。 一九五八年那篇的标题是“结果知识的可变频率”;一九九〇年那篇的标题是“降低结果知识的频率反而促进运动技能学习”。该文献的通行结论是:降低相对频率提升学习。这是一个纯剂量命题,而它的政策结论正是本章主张会失准的那个做法。

所以本章与它的差别只剩一条:预测变量。 它按频率预测,本章按类型预测,并主张频率在类型占比固定时不解释损失。本章的全部新意压在“类型与数量可经验分离”这一点上;若该分离不成立,本章退化为这个假说在外语教学里的一次换皮。

一处对本章有利的读数:这个假说基本没有被教育与二语收编——按教育文献库检索,以它命名的条目只有个位数,且分布在体育教育、医学模拟与多媒体学习。它是竞争者,但不是外语教学内部的在位者。

3.5 一处必须正面处理的冲突

本章的分类与本领域的主流结论相反。 二〇一八年一篇关于“评价性判断”的论文把评分细则与范文明确列为发展学生评价性判断的教学手段之一——在那个传统里,范文经由对比、讨论、用它去评判他人作品,正是把判断交回学生的主要工具。

而本章把范文与评分细则一律划为“只能接受”。 这不是一个定义,是一个与该领域主流相反的断言,必须作为有争议命题来辩护。第十一节给出了分开两者的实验:范文条件分两式——“给范文并要求接受”对“给范文并要求用它评判同伴作品”。

必须说在前面的一句:上述先到者没有一位有疏忽。证言问题要回答的是“接受一份自己无法核验的断言何时是正当的”,那是辩护问题,不是能力问题;恰当依赖要回答的是“这次依赖是否得当”,它不问撤掉之后这个人剩下多少;运动学习要回答的是反馈该怎么排程,在那个问题里类型是机制而不是待操纵的自变量。一个领域看不见什么,通常不是它的缺陷,是它的问题结构的影子。

四 三家:概率预报、功能分配、风险汇集

气象学的概率预报:立场是不确定应当被显露为一个概率数值。这一家有一套成熟的验证装置——一九五〇年就有的评分规则,以及可靠性图。

这一家有一处必须交代的核验状态,而且它改掉了第一版稿的引法。 第一版稿把“预报员之所以校准良好,是因为他自己持有判断并长期收到核验反馈”这句因果解释挂在一九七七年那篇实证可靠性报告名下。本章核不到这句话在那篇里。 那是一篇七页的实证报告;这条因果解释在文献中通常挂在另外两处(同一作者一九八四年那篇,以及二〇〇九年关于直觉专长成立条件的那篇)。本章据此改引,并明写原句未能取得。

人因工程的功能分配与自动化层级:立场是看这项功能分给了人还是机器就够了。

同样有一处核验状态:第一版稿要引的那句核心悖论——自动化拿走最容易的部分、把最难的留给人——本章核不到逐字原文。可引的是该文摘要首句:本章讨论工业过程的自动化如何扩大而非消除操作者方面的问题。语义弱一档,但它本身就是这一家的自曝:知道功能分给了谁,不足以推出人这边的负担;分配动作本身制造新问题。

保险经济学的风险汇集:立场是不确定应当被定价并在群体中分摊。

这一家是三家里核验状态最弱的一家。 其奠基文献的原刊卷期页本章核不到(该年份该刊未分配数字标识,书目库无原刊记录);本章改引其开放获取的重印本。其核心概念“道德风险”的论述原句同样核不到。本章对这一家的陈述依据通行表述,读者引用须自行核对。

为什么是这三家,而不是另外三家。 挑选的判据只有一条:这三家都必须已经把“不确定由谁持有”当作一个要处理的正式问题,并各自造出了处理它的制度装置——概率预报造了评分规则与可靠性图,人因工程造了功能分配表与自动化层级,保险造了免赔额、共付与再保险。教育心理学、认知负荷、脚手架这一路虽然离本章更近,却不满足这条判据:它们处理的是“支持该给多少、该怎么撤”,持有位在那里是背景而不是被制度化的对象。一个领域只有在它必须为持有位付钱、担责或出报告时,才会把它变成字段。 这也是本章只能从外部借读数的原因——外语教学从不为持有位付钱。

三家的互不相容:概率预报主张把不确定显露成一个数交给判断者;功能分配主张把它分给系统或人;风险汇集主张把它摊到群体。而汇集在功能分配的眼里正是一种外包,外包的后果是持有者的能力退化;功能分配主张人必须持续持有一部分才能保持能力,而汇集不关心被分摊者的能力,只关心池子的偿付能力。

五 三家共同假定了什么

概率预报把不确定当作一个待显露的量;功能分配把它当作一个待分工的任务负荷;风险汇集把它当作一个待分配的损失分布。三者的对象不同,但三者都在做同一个动作:

三家共同假定:不确定是一个外生的给定量,持有安排只改变它的位置,不改变它的总量。

念给三家听,三家都会说“这还用说吗”——一场车祸的损失是给定的,无论保险怎么设计;一个控制回路的复杂度是给定的,无论自动化怎么分工;明天下雨的概率是给定的,无论预报员怎么表述。

在学习里它失效:一个学生持有不确定的过程本身会改变不确定的总量——他自己斟酌过一次选词,下一次同类选择的不确定就小了。持有不是保管,持有是消化。

为什么三家都可以不看见这一条。 不是疏忽,是各自的时间尺度决定的。保险的结算周期是保单年度,在一个年度内被保险人的风险禀赋近似恒定;气象预报的结算周期是一次天气过程,大气的不确定在预报员表述它的那几个小时里当然不会变;人因工程的对象是一个班次内的控制回路,操作者在这一个班次里的能力也是给定的。三家的持有安排都短于被持有物改变自身的时间常数,于是外生性在它们那里是一个良好的近似。 学习恰好是反过来的:持有安排持续一个学期甚至四年,而被持有的那份不确定在这段时间里正是被它自己的持有过程重塑的。换句话说,本章与三家的差别不在事实,在时间窗口。 这也给出一个可检验的推论:在足够短的时间窗内,本章的主张应当退化为三家的主张——一节课之内,类型占比不该预测任何东西。若在单节课内就观察到类型效应,本章的机制陈述(持有即消化)就有问题,尽管它的经验预测可能仍然成立。

六 推翻它的那件材料,来自保险自己

推翻一个共同假定,从外部搬理由来是没有用的。有用的材料必须是持有这个假定的某一家自己已经掌握、只是没往这个方向用的事实。

本章使用的那件来自保险,而且它就是这一家的核心概念之一:道德风险。

道德风险的内容恰恰是:保险安排改变了被保险者的行为,从而改变了风险本身的分布。 也就是说,保险自己早就知道,持有安排不是中性的搬运——把风险从个体挪到池子里,会改变个体的行为,进而改变总的风险量。与之配对的逆向选择说的是同一件事的另一面:安排改变了谁进入这个系统,从而改变池子里的风险构成。

这件材料在保险自己的领域里回答的是另一个问题:为什么保险产品必须设计免赔额与共付比例。没有人把它当作“持有安排改变总量”的一般证据。但它恰好是这个证据。

把这一笔搬回课堂:给学生一份完备的评分细则,不只是把不确定从他手上挪到细则里,它还改变了他的行为——他从“斟酌怎么写”切换到“对照怎么改”,而这个切换本身减少了他下一次能自己处理的不确定量。免赔额在保险里的功能,正是本章要在教学里寻找的那个东西:保留一部分必须由当事人自己承担的份额,以免行为被安排本身改变。

这一步必须交代它的限度。 道德风险是关于动机的:被保险者因为损失不再由自己承担而降低了防损的努力。本章要的却是关于能力的:学生因为判断不再由自己做出而失去了做判断的能力。两者不是同一个机制,动机变化是可逆的,能力流失不是。 本章借用的只是它的结构——“安排改变被安排者,从而改变总量”这个形式,而不是它的内容。若读者认为形式相同而内容不同就不构成证据,本章接受这个反对,并把它记为一处未闭合:本章没有找到一个在能力意义上、由三家自己掌握的同形事实。这也是本章只能说“共同假定被松动”而不能说“被推翻”的原因。

这一家自己还给了一条对本章有用的限制:不是所有不确定都能被汇集——汇集要求损失事件在个体之间相对独立;当风险高度相关,风险池失效。搬回课堂:当全班学生在同一处卡住时,小组分摊不起作用,因为不确定是相关的。

七 本章的主张:一个耦合,与它可能失败的三种方式

一位学生在撤掉外部依据之后表现下降:

不是 Y₁:因为外部依据取代了他自己的判断——这是一九四九、一九五八、一九七四、一九八三、一九八九年各自说过的;

也不是 Y₂:因为撤除本身会造成下降——一九五九年就做完了;

也不是 Y₃:因为可核验的支持与只能接受的支持是两类不同的东西——这条区分在认识论里辩论了四十年,在人机信任研究里叫恰当依赖;

而是 Z:在控制提供频率、先备水平与加工努力之后,撤除后损失的大小仍由支持的类型占比解释,并与路径余量按事先指定的方向交互。

7.1 这个耦合与那个立了四十年的假说可以分离

统稿修正:撤回排他表述。 第二版稿写“由类型决定、不由频率决定”,并把“固定类型后发现频率效应”定为全文作废。评审甲指出:类型和频率完全可能同时起作用,甚至存在交互;证明类型有独立贡献,无需证明频率贡献为零;排他断言会让一个有价值的类型变量被不必要的命题拖垮。本章接受这条批评,把承重命题改为上面那句控制之后的独立贡献与交互,并相应改写第十四节第一条与第十五节条件一。这不是让步换取安全:二乘二的四种结果各自对应一种处置,都写死了,可证伪性没有降低。另一处顺带写明:本章引用的 Bastani 等(2025)比较了不同的人工智能教学支持并显示撤用后的结果因设计而异,它支持“支持如何被设计”这个问题的必要性,不能被读作对本章类型划分的证实,更不证明频率无效。

运动学习那一路按频率预测撤除损失,并据此给出处方:降低外部反馈的相对频率。本章按类型预测,并主张在类型占比固定时,频率不解释损失。

两者给出一个干净、便宜、致命的判决实验:把类型固定为已规定型(只给评分细则),只操纵提供频率——每次都给,对三分之一的任务给。 那个假说预测撤除后损失随频率单调变化;本章预测没有效应。只要在单一类型内部出现频率效应,本章当场作废。

7.2 这个耦合可能失败的三种方式

本章把三处塌缝写在正文,不写在局限性一节,因为它们不是局限,是本章成立与否的条件。

第一种失败:与“省下的努力”共线。 本章第一版稿自己交出了把柄——它写道另一类支持“只是替他省了力气”。若已规定型比可查证型省下更多努力(评分细则一看就用,语料库要查要比对要判读),那么一个单一的剂量变量(省下的认知努力量)就完全解释了本章的全部数据,而不需要“可核验性”这条轴。本章的类型轴与努力量在设计上共线。

解开它需要一个等努力对照:一份不可核验但需要大量加工的支持(冗长晦涩的评分细则,读懂它很费劲),对一份可核验但极省力的支持(一键弹出的词典释义)。努力量假说预测词典的损失大于细则;本章预测相反。在做出这一格之前,本章与努力量假说不可区分。

第二种失败:与专长水平交互。 认知负荷那一路的成熟结论是:对新手必需的指导,对较高水平学习者不仅无效而且有害;而技能获得模型的结论是:过度依赖有意识地套用规则,会使学习者停滞。两者都预测类型效应随学习者水平变号。本章的表述是排他的(“只随…不随…”),它预测类型效应跨水平同号。按水平分层就能看出来,而第一版稿没有做这个分层。

第三种失败:“原则上可核验”与“实际去核验”脱钩。 人机交互研究里有一条成熟的发现:人在可以核验的情况下实际上往往不核验,而且这种自满无论用户的专长、训练或指导如何都会发生。若学生拿到语料库却不去查,那份支持在行为上就是“只能接受”。 本章以可能性定义类型,却以行为机制(判断是否被执行)解释效应。

这一条本章正面处理了:第八节的三分类型学专门加了第三类——名义可查证型:原则上可核而实际从不核。而第十四节的第三条检验要求测量学生在提供期内实际核验行为的频次,并检验类型标签在控制实际核验率后是否仍有独立贡献。若没有,本章的类型标签就是实际核验率的一个粗糙代理,应当被后者取代。

7.3 一个对本章有利的实测

有一项二〇二五年发表的研究,其题名是《没有护栏的生成式人工智能会损害学习:来自高中数学的证据》。它在一所大型高中的约五十个班级、近一千名学生上做了三臂设计:对照组、可自由使用的通用人工智能组、加了教学护栏的辅导型人工智能组;练习后做无辅助的闭卷纸笔考。

结果是:辅助期,通用组比对照组高约四成八,辅导组高约一成二七——辅导组的辅助期收益远大于通用组。而撤除后,通用组的考试成绩比对照组低约一成七(点估计约负零点零五四),辅导组与对照组在统计上无法区分(点估计约负零点零零四,标准误约零点零一三,不显著)。

这正是本章要的形状:支持的“量”相当甚至辅导组更多,而撤除后的落差只随类型变。

三处必须写明的限制。 其一,该研究的措辞是“在很大程度上被减轻”,不是“无损”;本章引用时用点估计与不显著陈述,不用“无损”二字。其二,它是高中数学、土耳其、纸笔考;与外语教学的代理关系是“有标准答案的程序性任务”对“产出性语言任务”,不可直接外推——尤其那个护栏是数学解题脚手架,不是语言产出脚手架。其三,它操纵的类型维度是“有没有教学护栏”,不是本章的“可不可核验”;两者相关而不同一。

7.4 本章做的是操作化,不是发现

区分是旧的,因变量是旧的,本章做的是把它们接起来,并给出一个可清点的读数与三个可做的对照。因此本章做的是操作化。 这件工作有价值,但它的价值上限由“耦合两个既有物”这个性质决定。

八 三类支持

本章的分辨装置是一个三分类型学。之所以不用二维格,是因为二维格会把第三类藏起来,而第三类正是本章最可能翻车的地方。

类型 判据 例 撤除后本章的预测
甲 · 可自核型 学生原则上能核,且实际去核 查语料库确认搭配并比对例句;查词典释义后自行判断是否合用 损失小
乙 · 名义可查证型 原则上能核,实际从不核 一键弹出的释义、自动翻译的建议、被直接采纳的批改软件修改 损失与丙类相当
丙 · 已规定型 学生只能接受,无法自行核验 评分细则中“熟练运用衔接手段”一类的描述语;教师的现场裁定;范文中的写法 损失大

乙类是本章相对第一版稿的关键补充。 第一版稿只有甲丙两类,并以“原则上可核验”定义甲类——而那个定义会把一键弹出的释义归入甲类,从而做出一个本章不相信的预测。加上乙类之后,本章的读数从“类型标签”变成“类型标签加实际核验率”,而这恰好是第十四节第三条检验要测的东西。

三类在成品上完全不可分。 一份写得好的作文,无法从成品看出哪些判断是学生自己核过的、哪些是照着细则对的、哪些是软件给的。区分它们所需的信息不在产出里,而在产出的依据里——这一处判断,学生是照着什么做出的。而这个信息在现行的一切评价流程里都不被采集:作业本上只有结果,课堂观察记录的是行为,测评记录的是分数。

两个必须写明的边界例。 其一,教师的口头解释。教师当场说“这里用 however 更自然”,学生无法核验这句裁定——按判据是丙类。但若教师同时给出理由并且这个理由本身可查(“因为前后是转折而不是递进,你可以在语料库里看这两个词后面跟的句式”),它就变成了指向甲类的丙类:裁定不可核,理由可核。本章把它计入丙类,但承认这是一个粗糙的处理,且第十一节“理由复现”那一格正是冲着它去的。其二,同伴的意见。同伴的判断在可靠性上不如教师,但它可被追问、可被反驳、可被要求举证——追问本身就是核验动作。本章把“学生接受了同伴意见且未追问”计为乙类,把“追问并据答复自行决定”计为甲类。这两条边界例说明本章的类型轴实际上不是支持的属性,而是支持所允许的动作的属性——这一点在附录第二个洞里被列为本章解释不了的东西。

这解释了一个长期的经验困惑:为什么“这批学生基础不错但一到真实场合就不行”这句话如此普遍,却始终没有一个可操作的诊断。不是缺乏理论,是缺乏那个变量的记录。

九 一个不含程度词的判据

这节课里,学生做出的语言判断中,有几个是在没有任何可核对的外部标准的情况下做出、并被保留到最终成品里的?

这句话里没有“充分”“恰当”“真正”“有效”。它问的是一个可以清点的数,且有两个限定:做出时手边没有可依据的东西;被保留到最终成品(不是“想过但被改掉了”)。

五个场景:

配有详细评分细则与两篇范文的应用文写作:接近零。学生的每一个选择都能在细则或范文里找到依据;他做的是匹配,不是判断。

同一任务,撤掉范文只留细则:上升但仍不高——细则规定了结构与要点,未规定措辞,于是措辞层面的判断被交还了。

给外教写一封真实的邮件(会被真的读、真的回):很高。这一条揭示了一件本章最初没有预料到的事:真实后果本身就是一种外部标准的替代品——它不告诉你怎么写对,但它会告诉你写错了。这反过来改了本章:持有不确定与得不到反馈是两回事,一个学生可以完全持有判断责任,同时事后获得真实反馈;第一版稿把两者混在一起了。

小组协作完成同一任务:在个体层面下降——不确定被分摊到组内。这一条也是查出来才注意到的,它对“小组活动培养自主性”这一常见假定构成直接质疑:在持有位这个维度上,小组活动与外包同向,而不是与交还同向。

考试:通常是零到极低。这一条给出一个尖锐的推论:考试这种形式在持有位这个维度上是纯粹的外包——它测量的是逼近已知答案的能力,而不是在无答案条件下做判断的能力。

十 不可自核支持占比

不可自核支持占比=(丙类支持所依据的判断数 + 乙类中实际未核验的判断数)÷ 成品中语言判断的总数。

10.1 它在三家里的同形读数

在保险,它是自留比例的补——免赔额与共付之外、由池子承担的那一块;在人因工程,它是自动化承担的控制决策占比;在概率预报,它是预报员直接采用模式输出而未做主观订正的比例。三处量纲互不相同,比率的形状相同。

10.2 正交性

一份在评分细则下获得高分、结构完整、用词准确的作文,其不可自核占比可以是零点九五;而一封写得磕磕绊绊、有若干处不地道的真实邮件,其占比可以是零点二。两个读数不但不相关,方向上还系统性相反——因为提高作业质量最有效的手段正是提供更完备的外部标准。

这个反向关系本身是本章最强的一条间接证据,也是最容易检验的一条:取同一批学生在有细则条件与无细则条件下的作业,分别清点占比与得分,看两者是否系统性相反。这条检验不需要任何干预,只需要现成的作业与一份编码手册。

10.3 清点手册

语言判断的界定:一处存在多于一种可接受选项、而作者选择了其中一个的位置。包括词汇选择、句式选择、语篇组织选择、语域与正式度选择。不包括拼写、基本语法一致性等只有一个正确形式的位置——那些不是判断,是正误。

三类的判定:丙类=做出该判断时,学生手边存在一个规定了该选择应当如何的东西(细则条目、范文对应位置、模板槽位、教师事先说明),而该规定本身无法被学生独立核对其是否正确。甲类=学生手边存在一个事实性资源(词典、语料库、可复算的证据),且过程记录显示他确实调用并比对了它。乙类=存在事实性资源或自动建议,但过程记录显示他直接采纳而未比对。

一个恰好在边界上的例子:学生查词典确认某个词的搭配,然后使用它。若他只看了释义就用——乙类;若他看了两条例句并据此排除了另一个候选词——甲类。这个界线是任意的,但必须写死,因为它正是本章与“努力量”假说的分界所在。

过程记录的采集:需要写作过程的留痕(版本历史、查询日志、屏幕录制任一种)。若没有过程记录,乙类与甲类不可分,本读数退化为第一版稿的二分,且第七节第三种失败方式无法被排除。 这是本读数最大的实施成本,必须如实写出。

编码规则五条:其一,被教师批改后修改的部分,按修改前的状态计入。其二,抄自范文的整句不计入分母(它不是一个判断)。其三,小组协作完成的部分,若该判断由他人做出,不计入分子也不计入分母。其四,反复修改的位置按最终定稿的那一次计。其五,口语任务按转写后同一规则处理,但需单独统计,不与书面合并。

不适用:纯语法操练(无判断,分母为零);零起点阶段(学生尚无足以支撑判断的资源,高自持率只意味着高错误率而无训练价值)。

十一 与最近几种说法的分界

判定形式统一写成:若观察到某项,则本章对而该说法错;若观察到另一项,则反之。

与“预设标准的不可确定性”(1989/2009)——最危险的一位。它的轴是不可确定性(一条标准能不能被确定地应用),本章的轴是可核验性。二者在本章的例子里共变,但可分离。关键分离格:一条可确定但不可核验的规定——例如教师直接裁定“这个搭配错”,学生不去查就只能接受,但它是确定的、且原则上可查。判定:若损失只出现在不可确定的支持上,而这条教师裁定不产生损失,那一位对;若它产生完整损失,本章对。这一格本章必须做,而且很可能没做。

与“评价性判断”这一路(2018)。它把范文与评分细则列为发展评价性判断的手段。判定:范文条件分两式——“给范文并要求接受”对“给范文并要求用它评判同伴作品”。那一路预测后者损失显著更小甚至为负;本章若把两者都算作同等的丙类占比,则预测两者损失相同。一个二因素设计就能分胜负,而本章预测自己会输掉一半——这一格若输,说明本章的类型标签太粗,须把“是否被用于评判他人作品”加为第二维。

与“标准合规”(2007)。它的因变量是学习过程被标准替换(学生做的是合规而非学习),不是撤除后的落差。判定:在不撤除的条件下就能观察到学生行为从“解决问题”转为“对表”。若如此,损失在撤除之前就已存在,撤除只是让它可见——那会使本章的因变量成为一个不必要的绕路。

与“透明化”这一路。它的默认假设是公开标准使学生能自行对照,即把评分细则归入可核验的一侧。判定:用两版细则——抽象描述语对可操作化描述语。若细则的效果随描述语的具体度变化(具体到可自行核对则无损失),那一路对;本章预测细则无论多具体都属丙类。

与指导假说。见 7.1 的判决实验(类型固定、只变频率)。

与“合意困难”这一路。见 7.2 的第一种失败方式与等努力对照。

与专长逆转与技能获得模型。见 7.2 的第二种失败方式与分层检验。

与自满与自动化偏差。见 7.2 的第三种失败方式与实际核验率的控制。

与证言问题里的认知依赖。它给出一条与本章正面对立的预测:依赖不可核验的专家仍可构成知识,依赖是理性的。判定:测撤除后学生能否复现该裁定背后的理由,而不只是复现裁定。若能复现理由,说明传过去的是知识而不是拐杖,本章的“丙类必然造成损失”是未经辩护的前提。

与恰当依赖(2004)。它的因变量是依赖是否恰当,不是撤除后的能力损失。判定:若损失由信任校准误差(学生对该支持可靠性的估计偏差)预测而非由类型占比预测,那一位对——一个可核验但学生高估其可靠性的支持,会产生与丙类相同的损失。这一条与本章的乙类高度接近,本章须说明两者是不是同一件事。

与脚手架的渐进撤除。它的处方是一个剂量/时间表变量(撤多快),没有类型轴。判定:若损失由撤除速率与时机预测,而类型占比无独立贡献,那一位对。

与构想与执行的分离(1974)。它的轴是所有权与控制权。分离格:一份由机构掌控但完全公开可查的标准资源(学校指定并控制的语料库)。它预测仍是去技能化,因为构想权不在学生;本章预测可核验故无损失。

与“真理可以授予、程序只能培育”(1949)。它的预测变量是目标技能的类型,不是支持的类型。判定:对以记忆为目标的任务(术语、固定搭配),任何类型的支持撤除后都应无损失;对以产出为目标的任务,任何类型都应有损失。若损失完全由任务侧预测,本章的支持侧变量是多余的。

与默会知识(1958)。分离格:给一个完全可核验的外部资源(语料库加词典),但任务目标需要默会判断(“哪个更地道”)。它预测撤除后照样有损失,因为默会基底没建立,可核验性救不了。这一条直接反驳本章的排他性表述。

与学习者自主(1981)。它的预测变量是控制权归属(谁定标准、谁定目标)。判定:让学生自己制定一份不可核验的评价标准。它预测损失消失或大幅减小;本章预测仍是丙类、损失照旧。

与模糊容忍度。它是学习者的禀赋,本章是任务安排的属性。判定:控制任务的外部标准完备度后,若容忍度仍能解释撤除后的表现差异,禀赋是主要变量。

与自动化程度元分析(Onnasch, Wickens, Li &** Manzey 2014)——本书统稿时补请的一位。** 那一路把自动化按信息处理的阶段与各阶段的等级合成一个“程度”,十八项实验的元分析给出:程度越高,常规表现越好、失效时的表现与情境意识越差,且负面后果最可能出现在程度跨过某条边界时。这占了“由类型(阶段)而不是由量决定撤除损失”在人因里的量化版本,本章第四节只引了功能分配的框架而没有请这一路。本章的剩余:那一路的类型是机器接管了信息处理的哪一阶段,本章的类型是学习者能否自行核验依据。分离观察:一份处在高自动化阶段但学生能核验的支持——例如同时给出理由与可查语料的自动批改——按那一路撤除损失大,按本章撤除损失小。两家在这一格上预测相反,可以直接测。核验状态:本轮实搜坐实(摘要)。

十二 那块共同的地基

说法 把什么当作给定 因此看不见什么
指导假说 自变量是反馈的频率 类型可以被独立操纵
脚手架渐撤 问题是撤多快 问题也可以是撤什么
恰当依赖 因变量是依赖是否得当 依赖之后还剩多少能力
认知依赖 问题是这个信念是否得到辩护 辩护与能力是两件事
评价性判断 处方是让学生参与评价 参与的形式决定它落在哪一类

判据只有一条:一旦承认右栏那件事,左栏那个说法自己就塌了。指导假说若承认类型可以被独立操纵,“降低频率”这个处方就不再是充分的;恰当依赖若承认要问依赖之后还剩多少能力,它的整套校准框架就需要一个它现在没有的因变量。

五行背后是同一块地:

学术界共同假定,外部支持的研究对象是“这次支持是否恰当”——给得对不对、给多少、什么时候撤;而“给的是哪一类,以及这一类在总量中占多少”不是一个被独立操纵的自变量。

这块地基为什么立得住这么久,有一个制度上的原因。 研究外部支持的人几乎都同时是提供外部支持的人——教师、教学设计者、系统开发者。对提供者而言,“给得恰不恰当”是一个可以由自己回答并且自己能改的问题;“给的是哪一类”则要求他先承认自己给的东西里有一类从原理上就不该多给。 前者产出的是可改进的处方,后者产出的是一条限制。学术生产偏爱前者,不是因为后者不重要,而是因为后者不生成研究项目。本章对此没有优越感:本章自己也只做到了提出这个变量,而没有给出该设在哪里的份额(见第十七节与附录第一个洞)。

这里必须诚实:本章并不认为这块地基是错的。问“给得恰不恰当”是有效且必要的。本章主张的只是:在预测撤除后的能力落差这个特定问题上,这个提法会把一个类型变量当成剂量变量来处理。

十三 与本书其他各章的分界

与《调用半径》:那一章判教师自己的可及范围在收缩,本章判学生的判断位置在外移。两章的对象是同一堂课上的两个人,且可联合预测:一位远场占比低的教师,其课堂的不可自核占比是否更高——本章预测相关但不强。

与《填补即封闭》:那一章判一次正确应答扣减学生的替代路径(量),本章判支持的类型决定撤除后的落差(类)。这是本书内最需要分清的一对:那一章是剂量主张,本章是类型主张,两者可以同时为真而互不蕴含。联合预测:在余量充裕时两类支持的差别很小,在余量只剩一条时两类同样致命——这个交互两章都能被裁决。

与《停点》:那一章判停手判据的取值来自过程内部(同源),本章判支持能不能被学生自己核验(可自核)。两个判别形状极近,必须分清:同源说的是判据与被判定过程的关系,可自核说的是支持与使用者的关系。一个判据可以是不同源的(隔两天的复现),而学生仍然只能接受它的结果。

与《判同清单》:那一章判“讲过了”这笔账只记一方,本章判判断的位置在哪一方。互补:一个是记录问题,一个是能力问题。

与《可问处》:那一章判发起权连续不换人,本章判判断权外移。分离观察:一个发起权轮换良好的课堂,其不可自核占比仍可以很高——学生频频发问,而每一次发问的答案都由教师裁定。

与《抽样框》:那一章判候选集由观察条件生成,本章判支持能不能被自己核验。近似而不同:换条件是采集的独立性,可自核是依据的独立性。

与《代价落在哪里》:那一章追代价的归宿与补偿,本章追不确定的持有位。同一份材料两章给出不同评价:一项减轻学生负担的改进,按那一章是代价转移,按本章是持有位外移。

与《定性早于成熟》:那一章判定性删除了被判定者的成熟态,本章判做判断的依据不在学生手里。联合预测:不可自核占比高的班级,其定性的可复原率也更低——两章合起来说的是同一件事的两端:依据不在他手里,翻案的路也不在他手里。

与《离场之后》:那一章判空档期里未完成的重启,本章判课程期间判断权就没交出去过。这是本书里最强的一条联合预测:毕业时的不可自核占比应当预测离校后的轨迹,且预测力强于任何单次成绩。

十四 本章押在哪里:三条检验

第一条 · 类型有独立贡献。 二乘二:类型占比(可自核/已规定)× 提供频率(每次都给/对三分之一的任务给)。本章预测类型主效应显著且不被频率解释,并预测交互项的方向:高频提供在已规定型下的撤除损失最大。若类型主效应在控制频率后消失,本章作废,退回指导假说;若只有频率效应而无类型效应,同样作废;若两者都有而无交互,本章保留类型轴但撤回交互预测。

第二条 · 类型胜过努力量。 等努力对照——一份费劲的不可核验支持对一份省力的可核验支持。若损失按努力量排序而非按类型排序,本章退回合意困难那一路。

第三条 · 类型标签胜过实际核验率。 测量提供期内学生的实际核验行为,检验类型标签在控制实际核验率后是否仍有独立贡献。若没有,本章的类型标签只是实际核验率的粗糙代理,应当被后者取代。

这三条的次序不能调换,理由是它们的失败后果不同量级。 第一条若不过,本章整个作废,退回一个已有的假说——这是最便宜也最致命的一格,所以放第一。第二条若不过,本章不作废但换归属:类型效应被重新解释为努力量效应,本章的读数仍可用,只是解释权归了别人。第三条若不过,本章的分类学被一个更简单的量(实际核验率)取代,但那个更简单的量恰恰是本章的乙类逼出来的——即使输掉,本章仍留下了一个别人没有的字段。所以这个次序同时是一个从“全输”到“输一半”到“输而留痕”的排序,而任何一条通过都不构成对其余两条的支持。 第一版稿的毛病正是把三条混成一条笼统的“需要实证检验”。

这三条目前一条都没有数据。 而且必须写明:三条里只要有一条不过,本章的排他性表述(“只随…不随…”)就必须撤回,本章能保留的至多是“类型是一个需要被控制的变量”这样一个弱得多的主张。

十五 证伪条件与一个当场可做的最小实验

15.1 最强的竞争解释

其实不就是给得多少吗?给得越多依赖越重,撤掉就越惨。

这句话之所以最强,是因为类型占比与支持总量在真实教学里必然高度相关——细则越详尽,量越大,类型也越偏丙。本章的回应必须落在一处:在支持总量相同的两个条件之间,类型占比仍有变异,且这个变异预测损失。

15.2 八条

条件一(类型的独立贡献):若类型主效应在控制提供频率、先备水平与加工努力后消失,本章为伪,退回指导假说;若交互项方向与预测相反,撤回第七节的交互预测,保留类型轴。

条件二(努力量):等努力对照中,若损失按努力量排序,本章为伪。

条件三(实际核验率):控制实际核验率后,若类型标签无独立贡献,本章的分类学应被实际核验率取代。

条件四(专长交互):若类型效应随学习者水平变号,本章的排他性表述为伪。

条件五(评判用途):若“给范文并用它评判他人作品”的损失显著小于“给范文并要求接受”,本章的类型标签太粗,须加第二维。

条件六(不可确定性):若一条可确定但不可核验的教师裁定不产生损失,则轴选错了,应改用不可确定性。

条件七(理由复现):若学生在撤除后能复现丙类裁定背后的理由,则丙类传过去的是知识而非拐杖,本章的前提为伪。

条件八(编码信度):若两位独立编码者按第十节手册对同一批作业与过程记录编码,一致性低于零点七,本读数不具备可清点性。

15.3 被证伪能学到什么

若条件一被触发,学到的是:类型不是独立变量、频率才是,而降低外部反馈频率这个立了四十年的处方可以直接搬到外语写作教学。若条件三被触发,学到的更多:类型是一个多余的中间变量,真正起作用的是学生有没有真的去核——那会把处方从“改变支持的类型”变成“要求学生记录核验过程”,后者便宜得多。

15.4 一个当场可做的最小实验

本章最便宜的检验是条件五,二十分钟内可以设计,一个单元内可以完成:

题目:范文的用法是否改变它的类型归属 被试:同一位教师的两个平行班,一个写作单元 条件 A:给两篇范文,要求学生在写作前阅读并模仿 条件 B:给同样两篇范文,要求学生先用一份简短的问题清单 去评判这两篇(哪一处更好?为什么?如果要改,改哪里?), 再开始写作 控制:范文相同、时长相同、教师相同、写作任务相同 因变量:两周后在无范文、无细则条件下完成同类任务的表现

本章的预测:两条件无差异(因为范文在两条件下都是丙类) 竞争预测(评价性判断那一路):条件 B 显著优于条件 A

预注册项(看数据前写死):因变量的评分规则由不知条件分配的第三方执行; 样本量与统计检验在实施前确定; 条件 B 的问题清单不得包含任何评价标准(否则引入新的丙类支持)

不利结果的处置(提前写死):若条件 B 显著更优,正文撤回”范文一律属丙类” 的分类,改为”范文的类型归属取决于它被如何使用”, 并相应削弱第七节的排他性表述。

本章预期自己会输掉这一格。 把这句话写在这里,是为了让读者在结果出来时能够核对本章有没有改口。

十六 数据的现状:有一份公开数据,但它不在本章的领域

第十四节那三条检验所需的自变量是“这一处判断学生是照着什么做出的”。这个字段在现行的作业归档里不存在——作业本上只有结果,没有依据。

但有一份公开数据在结构上高度匹配,值得单独说。 第 7.3 节那项二〇二五年的研究,其数据已按论文的可获取性声明公开,内容包括:各场次练习题与考试题的学生表现;学生级、班级级与评分者级协变量;以及匿名化并带时间戳的学生与人工智能导师的完整对话。代码同库。

对话日志的价值在于它使“实际核验”变得可编码——学生是直接采纳建议,还是追问、比对、自行判断,在对话里看得见。这正是本章第八节乙类与甲类的分界所需的过程记录,而这样的记录在传统作业归档里没有。

三处限制:其一,字段清单取自论文的可获取性声明,本章未能逐个打开仓库文件核对。其二,它是高中数学,与外语教学的代理关系已在 7.3 写明。其三,它的三臂是按“有无教学护栏”分的,不是按“可不可核验”分的;用它检验本章的类型轴需要在对话日志上重新编码,而重新编码的规则必须在看数据前写死。

还须写明一处本章没有而别处有的数据。 语言学习产品的后台日志(词典查询、语法检查采纳率、翻译调用)在原理上也能区分甲乙两类——查了几次、看了几条例句、是否在建议之后仍作改动,这些都是行为留痕。但这类数据属于厂商,本章未能取得任何一份可公开复算的样本,因此不把它写进检验方案,只作为一条可能的路径记录在此:若有机构能取得并公开一份带查询日志的写作语料,第十四节的第三条检验立刻可做,成本远低于自行采集。

由此得到本章的第三层主张:

现行的作业与测验归档只记录产出,不记录产出的依据;而“这一处判断是照着什么做出的”这个字段,在写作过程留痕成为常规之前无法被采集。 人工智能辅助写作意外地把这个字段变成了可得的——因为对话本身就是依据的记录。这是本章唯一一处认为技术变化对研究有利的地方。

十七 两处削弱本章的约束

17.1 来自保险:处方被削掉

本章原本要写的一句更强的话是:教学应当尽可能减少丙类支持。

这句话被保险自己的设计逻辑削掉了。免赔额不是零——保险的设计从来不是“让当事人承担全部风险”,那等于没有保险;它是在两类错误之间权衡出来的一个份额:自留太少则行为被改变(道德风险),自留太多则风险汇集的意义消失。

把这一笔搬回来:本章不能主张最小化丙类支持。一个完全没有外部标准的写作任务,对多数学生意味着高错误率与放弃。本章能主张的只是“这个份额应当被知道,并被有意地设定”——而份额该设在哪里,本章给不出任何依据,正如保险给不出一个普适的免赔额。

17.2 来自概率预报:价值排序被推翻

本章原本要写的第二句更强的话是:不确定应当尽可能交还给学生。

这句话被这一家的边界条件削掉了。概率预报之所以校准良好,依赖两个条件:预报员自己持有判断,以及他长期、高频地收到结果核验。 缺了第二个,第一个不成立——持有判断而得不到核验,不会产生校准,只会产生固执。而第九节第三个场景已经查出来了:持有不确定与得到反馈是两回事。

把这一笔搬回来:把不确定交还给一个得不到反馈的学生,不是训练,是遗弃。本章因此不能主张交还本身有价值,只能主张交还加上核验才有价值——而现行教学里最稀缺的恰恰是后者。这一处削弱动的是价值排序,它使本章从一个“应当交还”的主张退回到一个“交还与核验必须配套”的主张。

十八 这个读数一旦进入考核会发生什么

一旦不可自核支持占比被任何机构采纳为指标,最省事的实现方式不是真的把判断交回学生,而是把细则写得更抽象。分类的判定依赖“该规定是否无法被学生独立核对”,而一份写得足够含糊的细则反而更难被判为规定了什么——读数改善的方式恰好是让标准更不可用。

第二种更省事的实现方式是要求学生记录核验过程。第十节的手册要求过程留痕才能区分甲乙两类;一旦这成为指标,学生会学会写“我查了语料库并比对了两条例句”,而实际上只看了释义。本章所依赖的那个区分,恰恰是最容易被表演的。

更糟的一层,而且它正是本章自己借来的那个概念所预言的:道德风险说的就是安排一旦改变,被安排者的行为随之改变。这个读数进入考核,就是一次新的安排,而它会以本章无法预测的方式改变教师与学生的行为。 本章不能一边用道德风险论证“安排不是中性的”,一边假设自己的读数是中性的。

第三种更隐蔽的实现方式是换名词。 一旦“不可自核支持占比”成为一个被看的数,最省事的做法是把细则改名叫“参考提示”、把范文改名叫“同伴作品样例”,而实际提供方式不变。本章的三分依据的是学生做出那一处判断时手边有什么、他能对它做什么,不是那个东西叫什么;但编码者是人,而名称是编码时最先看到的东西。第十节手册里“判定依据产出的依据而非资源的名称”这一条,正是为这一层写的,可它防不住有意的规避。

本章看不到这个反噬的出口。这也是本章坚持这个读数只能用于教师的自我诊断与教研组内部非评价性讨论、不得进入任何考核、评课或质量监测的理由。如果这个读数只能以进入考核的方式传播,那么它不传播更好。

十九 不适用的边界与伦理界限

本章至少在以下七种情形下不适用。 其一,纯语法操练(无判断)。其二,零起点阶段(高自持只意味着高错误率)。其三,高利害短期备考(此时合规的即期价值可能正当地压过训练价值)。其四,得不到任何反馈的场合——见 17.2,此时交还不是训练。其五,没有过程留痕的场合(甲乙两类不可分,读数退化)。其六,本章完全没有处理班级内部差异:同一份支持对不同学生的类型归属不同——一个有能力去核语料库的学生拿到的是甲类,一个没有这个能力的学生拿到的是乙类。本章的读数是班级层面的,它把这个差异抹平了,而这个差异很可能与既有的能力差距同向,因而本章的读数可能系统性地低估弱势学生的处境。这是本章在伦理上最需要警惕的一处。 其七,占比不是越低越好,见第十七节。

伦理界限三条。 其一,这个读数指的是安排,不是人——一个高占比说的是“这份任务的判断大部分不在学生手里”,不是“这位教师不该给细则”,更不是“这些学生不会自己判断”。其二,不得把过程留痕用于评价学生——留痕是为了区分支持的类型,一旦它被用来评分,学生会表演核验过程,读数当场失效(见第十八节)。其三,已按这个读数做出不利安排的机构,必须公开三类的判定规则与边界例,并给出复核通道。

二十 检提这道题的那个问法

本章的自我定位不是“本章也有局限”,而是把本章的判据对准提出这道题的那个问法。

这道题是这样被问出来的:作者先有一个直觉——“给得越全,学生越不会自己判断”——然后去找三家来源、找一条推翻材料、造一个读数。在这个过程里,作者自己的判断依据是什么?

是他自己的教学经验与阅读记忆。而这份依据在第一版稿里是不可核验的:第一版稿没有做外部检索,它对“这个应该没人说过”的判断,学生无法核、读者无法核、作者自己也无法核。按本章自己的三分,第一版稿对自己主张新颖性的依据属于丙类。

而这一轮的外部检索把它变成了甲类——可核、被核、且核出了相反的结果:三条主张一条不剩,其中一条在教育评价内部已被同一位作者用两篇论文说完,另一条在认识论里辩论了四十年。

这件事本身就是本章的一次演示,而且方向对本章不利。 它演示的不是“丙类必然造成损失”,而是更难堪的一件事:作者在第一版稿里持有的那份不确定(“这可能没人说过”),并没有因为他自己持有它而被消化掉——它只是一直没有被核验。 按 17.2 那条削弱:持有而无核验,不产生校准,只产生固执。第一版稿就是那个固执的实例。

这个定位有三个后果。其一,本章的这份名单很可能仍然不完整——这一轮的检索仍然由作者定方向、作者写检索词,而检索本身也可以是丙类的(作者只能接受检索工具返回的结果,无法核验它漏了什么)。其二,本轮检索中有两处明确的未闭合项:一篇标题同时含“认知依赖”与“课堂”的论文,以及一本整本讨论自动化如何取走判断的专著,两者的内容本章都没能取得。若它们已经写出本章第七节那个耦合,本章就没有剩下的东西了。其三,最该记录的一条:这个系列的每一篇都由同一位作者提出问题、挑选来源、撰写分界、设定证伪条件——按本章自己的读数,这个系列的不可自核支持占比接近一,而外部检索是其中唯一的甲类成分。

因此本章对自己最诚实的表述是:它做的是操作化,不是发现;而它最有价值的部分不是第七节那个耦合,是第三节那份名单、7.2 那三处塌缝,以及第十五节那个本章预期自己会输的实验。

二十一 结论、三层主张与一条写死日期的赌注

外语学习中的那份不确定必须有人拿着,而在现行的四本账里没有一个字段记录它由谁拿着。

关于“外部依据取代学生的判断”、关于“撤除后表现下降”、关于“可核验与只能接受是两类东西”,本章都不是第一个到场的——最早的一条在一九四九年,最近的一条在二〇〇四年,而最危险的一位就在教育评价内部,一九八九年与二〇〇九年各写了一篇。本章因此不主张这三件。本章主张的只有一个耦合:撤除后损失的大小由支持的类型占比决定,而不由频率、数量或省下的努力量决定;而这个耦合与一个立了四十年的假说给出互不相容的实验。

本章的主张分三层,读者可以只取其中一层。

第一层(最强、最易倒):类型在控制频率、先备与努力之后仍解释撤除损失,并与余量交互。证伪见条件一、二、三、四。本章自己列出了这一层可能失败的三种方式,并预期在第十五节那个实验上输掉一半。

第二层(分析工具):三类支持的分类学,尤其是“名义可查证型”这一类,以及不可自核占比的清点手册。即使第一层被推翻,这个三分仍可用于教研讨论具体任务设计。证伪见条件五、八。

第三层(最稳、最易检验):现行的作业与测验归档只记录产出,不记录产出的依据;而人工智能辅助写作的对话日志意外地使这个字段变得可得。这一层任何人取一批本地作业归档核对即可。

若读者不接受第一层,可只引第三层。

三层之间不是强弱递进,而是三种不同的可错性。 第一层错在预测上——它可以被一次实验推翻。第二层错在有用性上——它不会被实验推翻,只会被弃用,若教研讨论里没人觉得三分有帮助,它就自动消失。第三层错在事实上——任何人翻一批本地归档就能看出记没记依据。本章把它们分开写,是因为它们的读者不同:第一层写给要做实验的人,第二层写给要备课的人,第三层写给要建数据的人。一个读者只否掉其中一层,不构成对另外两层的反对。

赌注

在二〇三一年十二月三十一日之前,将出现至少一项公开发表的研究,在支持总量与提供频率受控的条件下,报告撤除后的表现落差随支持的类型(学习者可否自行核验)而系统性变化。

什么不算命中,一并写死。 其一,仅操纵频率或数量的研究,不算命中——那是既有做法。其二,未控制支持总量的研究,不算命中——类型与总量在真实教学里共线。其三,未测量学习者实际核验行为的研究,不算命中——“原则上可核验”与“实际去核验”必须分开。其四,仅报告有无支持之别的研究,不算命中。其五,样本少于六个班级的研究,不算命中。其六,由本章作者参与的研究,不算命中。

若到期无此研究出现,本条按未兑现记,不按证伪记。但若到期出现的研究报告落差与类型无关、或类型效应在控制努力量后消失,本章第一层即被证伪,作者将公开撤回第一层,保留第二、三层。

附 本章解释不了的四个洞

其一,份额该设在哪里。 第十七节承认免赔额不是零,却完全说不出教学里那个份额该是多少、随什么变化。保险在同一个位置上有一套精算,本章什么都没有。这是本章最大的缺口,而且它直接决定这个读数有没有实践价值。

其二,类型归属可能不是支持的属性,而是支持与学生的关系。 第十九节第六条已经指出:同一份语料库,对有能力去核的学生是甲类,对没有这个能力的学生是乙类。若类型归属依赖学生,那么“类型占比”这个班级层面的量就没有定义良好的所指,而本章没有办法处理这一层。

其三,为什么可核验会保住能力。 本章主张甲类损失小,机制只说到“判断仍在他手里”。但这句话本身需要解释:为什么“查语料库并比对”这个动作产生的判断能力,与“从头自己想”产生的相当?本章没有任何理论预期,而这正是它与默会知识那一路冲突的地方。

其三之补,为什么甲类不是零损失。 本章只主张甲类损失小,不主张为零——查语料库这个动作本身也依赖一份不可核验的东西:学生凭什么相信语料库里的高频形式就是该用的形式?可核验性是递归的,而任何一次核验都在某一层停下来。 本章把这一层的存在写明,但没有办法在读数里处理它:清点手册只数到“学生是否调用并比对了一个事实性资源”,不追问那个资源本身的地位。这意味着本章的甲乙丙三分是相对于一条约定的停止层画出来的,而这条停止层是本章自己定的。

其四,这个耦合是不是语言特有的。 本章用来佐证的那份实测是高中数学。若耦合在数学上成立而在语言上不成立,本章需要解释外语产出有什么特殊之处,而本章说不出来;若两处都成立,本章就只是一个通用现象的外语版本。

统稿修订说明

统稿修订说明(第二版 → 本书)。 ① 题名、摘要、第一节、第七节、第七节第一小节、第十四节第一条与第十五节条件一:撤回“类型排他决定损失”,改为控制后的独立贡献与交互,第一条检验改为二乘二(评审甲第五条硬问题)。② 第十一节末新增与自动化程度元分析的交手(评审乙)。③ 第十三节:对《离场之后》《抽样框》的概括按第十一章对照表更新。④ 参考文献增补一条。

引注核验说明

关于引注的六点说明。 其一,本章是对第一版稿的整体更正:第一版稿的三条主张经检索确认全部已有归属。其二,第一版稿把“预报员校准良好是因为自己持有判断并长期收到核验反馈”挂在一九七七年那篇实证报告名下,本章核不到该句在该文中,已改引其他出处并明写原句未取得。其三,自动化那一家的核心悖论句本章核不到逐字原文,正文改引其摘要首句。

其四,保险那一家的奠基文献原刊卷期页本章核不到,改引开放获取重印本;其核心概念的论述原句同样未取得。其五,第一版稿把关于评分标准明确度的一项研究转述为“越明确成绩并未更高”,这不准确:该研究报告成绩普遍提升(效应量约零点八二至一点三八),但提升幅度与明确度等级无关——这恰好支持本章“差别不在量”的主张,本章已改写;另该文的作者顺序与刊名与第一版稿所记不同,已更正。其六,Ryle(1949)、Polanyi(1958)、Braverman(1974)的页码本章未逐页核对;一九五九年那篇撤除实验与 Salmoni 等(1984)的结论逐字原句亦未取得,正文仅作定性引述。

本章引注已并入全书参考书目;统稿新增的引注一律标明核验状态。

© 德麦国际出版社 · 张丹丹《英语教学的智慧》· 德麦国际专著第 119 号 · ISBN 979-8-90690-078-4