第14课教师参考与评分|温度与采样:同一候选表怎样选出不同词
学生完成独立任务后使用。预测猜错不扣分,评分看观察、依据和修订。
Q0
接受原有认识,记录是否提出可观察证据,不要求初次猜测与结论一致。
Q1:默认实验
默认材料:T=1;选择方式为按区间抽样;u=0.62。原始候选甲0.40、乙0.30、丙0.20、丁0.10。
中间一步:先算甲对应的区间上界0.4,再算乙上界0.4+0.3;不要按词语含义选答案。
程序关键结果:选中:乙;40.00%。边界:本地真实概率计算与给定抽样数重放;未运行语言模型。
Q2:改变条件
保持 u=0.62 和按区间抽样不变,只将 T 从1改为0.5;随后恢复 T=1,仅切换为只保留前两项。
本题的变化参考:
T=0.5时甲概率约53.33%,默认u=0.62仍选乙;T=1、前两项时甲约57.14%、乙约42.86%。改变比例不保证这一次词必变,需同时看分布和落点。
Q3:独立参考
总和1。k=2保留春夏:2/3、1/3。p=0.85需累计到春夏秋0.90,归一化5/9、5/18、1/6。原始表区间下三次为春、秋、冬。这些只是符号选择,不证明任何真实季节或模型正确率。核对时分别检查保留集合与新概率,两者缺一不可;若有人直接用阈值作分母,虽然可能选对候选,仍没有得到总和为一的完整分布,应返回保留概率和重新计算。
先读条件,再查来源或中间算式,最后比较结论。答案碰巧一致但缺必要证据,不给足依据分。措辞不同而条件完整应接受。
Q4:迁移参考
只保留第一项,归一化后为1;与原示例保留三项不同,表明top-p数量会随分布变化。
Q5:离堂核验
合格回答回应“只改变温度或选择方式,候选比例与实际选中的词会怎样变化?”,并指向Q1或Q2一次实际观察。只复述名词或产品名不足。
10分评分
| 项目 | 分值 | 可观察标准 |
|---|---|---|
| Q0原始预测与Q1观察分开 | 1 | 留下初稿,猜错不扣分,修订有依据 |
| Q1中间过程 | 2 | 1分定位输入或原文,1分完成可复核判断 |
| Q2控制条件 | 2 | 1分只改指定条件,1分描述前后证据 |
| Q3独立任务 | 3 | 1分选对适用材料,1分过程正确,1分结论与未知处理 |
| Q4迁移 | 1 | 新材料下保持条件与来源对应 |
| Q5边界与交付 | 1 | 可复现记录,诚实区分本地、人工、外部输出 |
建议达到7分且Q3至少2分后继续综合任务;这是教师建议,未经过真人试教验证。