生成首批:预算题容易,残差题四模型全错

18个题簇的54个实例均已训练与确认;只有2个实例通过既定显著性和差值门槛。四个模型都答对训练预算题,也都错判深层残差与无残差对照。

给定形状条件,学习随机亮度和纹理

数据 seed 生成独立实例,训练 seed 只重复同一候选;两者分别计数。
数据 seed 生成独立实例,训练 seed 只重复同一候选;两者分别计数。

18个出题簇×3个数据种子,共测试54组三选排序;去重后为12个数据集、162个训练配置、25个模型配置。图像为16×16的圆、方形和环;给定位置、尺度,随机生成亮度与纹理。覆盖算子、卷积块、残差、条件注入、扩散目标、训练与采样预算。题面共享完整基准代码,各选项改动独立相对基准。先用4次训练的验证集均值定方向,再用16个新训练种子做测试集配对符号检验、Holm多重比较校正;相邻平均评分差须至少0.003。

排序使用真实采样的 energy score(能量评分):比较生成图像与独立参考图像的距离,并扣除生成样本之间的距离项。越低越好。四个生成样本和四个参考样本提供有限蒙特卡洛估计。条件形状成功率和多样性另列,不能互相替代。预测目标包括干净图像 x₀、噪声 ε,以及二者的线性组合 v;它们的去噪损失不能直接跨目标比较。图中的 U-Net 是带跳跃连接的单层级下采样与上采样网络。采样使用 DDIM,评分依据 严格适当评分规则。

固定展示数据种子851901、训练种子200、条件0—7的首张生成图;多样性图展示条件0、1的全部4次生成。主体四列在同一模型上比较两种扩散预测目标与3000/6000步。全部7个预指定模型文件均经独立重新采样核验,未按得分或外观挑图。下文统计使用16个训练种子,单个模型的图片不代表均值。每条件以4张生成图和4张独立参考图计算能量分数,越低越好;同时核查轮廓、背景与条件内变化。

图像生成质量核验
固定数据 seed 851901、训练 seed 200,展示测试条件 0–7 的第 0 次生成。四行模型保持相同相对坐标卷积结构,仅比较 x₀ / v 预测目标与 3000 / 6000 步训练。所有图采用统一 0–1 灰度;单个 checkpoint 的外观不代替 16 seed 的正式指标。
图像生成质量核验
同一 checkpoint 在两个固定条件下各生成 4 张图,参考图也为独立随机样本。x₀ 图像的亮度与纹理变化偏少;v 的变化更明显,但额外变化可能包含噪声,不能直接视为质量提高。
图像生成质量核验
预定的绝对坐标卷积、单层级 U-Net 与 ε 预测配置,使用相同展示条件和训练 seed。保留较弱配置以检查轮廓、背景与错误类型,不按图片好坏替换样本;这一组同时涉及算子与预测目标,单因素归因需查看局部对照。
图像生成质量核验
每个条件的 4 次生成用于检查条件内变化。U-Net 输出高度相似;冻结的近完全恒定检测阈值极严,因此该标记为零不代表已经学会参考分布的多样性。

未通过确认的题目也保留在覆盖图中

发现阶段只用验证集固定顺序。确认阶段使用独立的 16 个训练 seed,对两条相邻比较做单侧配对符号检验。Holm 校正覆盖本批全部 108 条冻结假设,校正 p ≤ 0.05,且平均差值至少 0.003。分类首批、分类补充批和生成批分别定义检验族;未声称跨批联合错误率仍为 5%。它检验训练 seed 上差异方向的稳定性,不是期望均值差的显著性检验。

橙色为通过,灰色为未通过。每行是一个可复用出题簇,每列是一份独立数据实例。
橙色为通过,灰色为未通过。每行是一个可复用出题簇,每列是一份独立数据实例。
全部相邻差值与拒绝原因
实例平均差值校正 p通过
卷积 / U-Net / Transformer · 851901-0.00224631否
卷积 / U-Net / Transformer · 8519010.0122790.0016479是
卷积 / U-Net / Transformer · 8519020.00206951否
卷积 / U-Net / Transformer · 8519020.0104960.15887否
卷积 / U-Net / Transformer · 8519030.000151231否
卷积 / U-Net / Transformer · 8519030.0124940.0016479是
算子 × 坐标 · 851901-0.0001691否
算子 × 坐标 · 8519010.0214070.0016479是
算子 × 坐标 · 851902-0.000540251否
算子 × 坐标 · 8519020.024330.0016479是
算子 × 坐标 · 8519030.00150780.6913否
算子 × 坐标 · 8519030.023350.0016479是
卷积核 × 深度 · 8519010.000502271否
卷积核 × 深度 · 8519010.0525110.0016479是
卷积核 × 深度 · 8519020.00176541否
卷积核 × 深度 · 8519020.0557790.0016479是
卷积核 × 深度 · 8519030.00185131否
卷积核 × 深度 · 8519030.051860.0016479是
逐通道卷积 × 宽度 · 8519010.00394671否
逐通道卷积 × 宽度 · 8519010.00557251否
逐通道卷积 × 宽度 · 851902-0.00247831否
逐通道卷积 × 宽度 · 8519020.0124650.15887否
逐通道卷积 × 宽度 · 8519030.00126351否
逐通道卷积 × 宽度 · 8519030.00895390.15887否
残差 × 深度 · 8519010.00484180.15887否
残差 × 深度 · 8519010.0181060.0016479是
残差 × 深度 · 851902-0.00333031否
残差 × 深度 · 8519020.0226190.0016479是
残差 × 深度 · 8519030.00453610.022827是
残差 × 深度 · 8519030.0124880.022827是
U-Net skip × 宽度 · 8519010.00468920.022827是
U-Net skip × 宽度 · 851901-7.5235e-051否
U-Net skip × 宽度 · 8519020.00382410.15887否
U-Net skip × 宽度 · 8519020.00118711否
U-Net skip × 宽度 · 8519030.00527010.022827是
U-Net skip × 宽度 · 851903-0.00160161否
条件注入方式 · 8519010.00818971否
条件注入方式 · 8519010.00323341否
条件注入方式 · 8519020.00724850.6913否
条件注入方式 · 8519020.0054271否
条件注入方式 · 8519030.00706520.6913否
条件注入方式 · 8519030.000798341否
时间表示 · 8519010.00195311否
时间表示 · 8519010.0592230.0016479是
时间表示 · 8519020.00193691否
时间表示 · 8519020.0615780.0016479是
时间表示 · 8519030.00430781否
时间表示 · 8519030.045460.022827是
预测参数化 · 8519010.0135120.15887否
预测参数化 · 8519010.0476640.15887否
预测参数化 · 8519020.0204281否
预测参数化 · 8519020.0430871否
预测参数化 · 8519030.0215821否
预测参数化 · 8519030.0281861否
噪声与 loss 权重 · 851901-0.000122851否
噪声与 loss 权重 · 8519010.00209821否
噪声与 loss 权重 · 8519020.0028551否
噪声与 loss 权重 · 8519020.00444950.6913否
噪声与 loss 权重 · 8519030.00519280.022827是
噪声与 loss 权重 · 851903-0.00847721否
归一化 × 学习率 · 8519010.011690.022827是
归一化 × 学习率 · 851901-0.00326281否
归一化 × 学习率 · 8519020.00788760.15887否
归一化 × 学习率 · 851902-0.00367891否
归一化 × 学习率 · 8519030.00594510.6913否
归一化 × 学习率 · 851903-0.00264771否
等样本预算的 batch · 8519010.00461551否
等样本预算的 batch · 8519010.00527930.6913否
等样本预算的 batch · 851902-0.00659281否
等样本预算的 batch · 8519020.0144950.15887否
等样本预算的 batch · 851903-0.00383931否
等样本预算的 batch · 8519030.008020.022827是
小数据与训练时长 · 8519010.00732860.022827是
小数据与训练时长 · 8519010.030150.0016479是
小数据与训练时长 · 8519020.00455711否
小数据与训练时长 · 8519020.0270540.0016479是
小数据与训练时长 · 851903-0.00383791否
小数据与训练时长 · 8519030.0268780.0016479是
采样步数 × 参数化 · 851901-0.000498021否
采样步数 × 参数化 · 8519010.0130140.6913否
采样步数 × 参数化 · 851902-0.000353451否
采样步数 × 参数化 · 8519020.0198791否
采样步数 × 参数化 · 851903-2.4776e-051否
采样步数 × 参数化 · 8519030.0208441否
采样随机性 · 8519010.000303861否
采样随机性 · 8519010.00181511否
采样随机性 · 8519020.00079171否
采样随机性 · 8519020.000648661否
采样随机性 · 8519030.000426671否
采样随机性 · 8519030.00229310.022827否
无纹理的条件对照 · 851901-0.000378571否
无纹理的条件对照 · 8519010.0067470.15887否
无纹理的条件对照 · 851902-0.00129091否
无纹理的条件对照 · 8519020.00948020.022827是
无纹理的条件对照 · 8519030.000789811否
无纹理的条件对照 · 8519030.00865480.0016479是
位置偏移的条件对照 · 8519017.7646e-051否
位置偏移的条件对照 · 8519010.00955030.0016479是
位置偏移的条件对照 · 8519020.000310111否
位置偏移的条件对照 · 8519020.0117290.15887否
位置偏移的条件对照 · 8519030.00137231否
位置偏移的条件对照 · 8519030.0129370.0016479是
训练时长 × 参数化 · 8519010.0132330.0016479是
训练时长 × 参数化 · 8519010.000103141否
训练时长 × 参数化 · 8519020.0113290.022827是
训练时长 × 参数化 · 8519020.00175591否
训练时长 × 参数化 · 8519030.0125530.0016479是
训练时长 × 参数化 · 8519030.00216541否

完整排序和换字母后的稳定性分开计算

所有通过确认的题都进入四模型评测。重复数据实例和字母置换不是独立新题,下面不报告独立二项置信区间。API 缺失单列;单轮内已返回的错误或格式失败不会重抽。

主问题一次作答。分子为完整排序正确数,分母为已核验回答数;随机完整排序概率为 16.7%。
主问题一次作答。分子为完整排序正确数,分母为已核验回答数;随机完整排序概率为 16.7%。

本批一直输出最常见字母顺序可得 50.0%。这是准入后标签分布的事后描述,不能与事先固定的随机基线混同。

模型主问题完成已有回答模板宏平均可解析回答的两两一致度换字母:一致 / 有效配对
Opus 5.52/250.0%(2/2 簇)83.3%(2 题)2/2
6.1-Sol2/250.0%(2/2 簇)66.7%(2 题)1/1
Haiku 5.52/250.0%(2/2 簇)83.3%(2 题)1/2
6-luna2/250.0%(2/2 簇)66.7%(2 题)1/1

原批次只有2道主问题:四个模型均完成2题,各答对1题。训练预算题符合“更多步数”的表面规则;残差题实际是深层无残差→深层残差→浅层残差,四模型都把深层残差排在深层无残差之前。三选随机完整排序基线是1/6,但2题不足以建立模型能力排名。6条完成的字母置换回答中,Haiku改变了残差题两个配置的先后;Sol与Luna各缺同一道残差置换题,无输出失败保留为缺失。

预先固定的表面规则
{
  "more_parameters": {
    "admitted": 2,
    "ordered": 0,
    "tie": 2,
    "not_applicable": 0,
    "correct": 0,
    "comparable_pairs": 2,
    "correct_pairs": 2,
    "accuracy_when_ordered": null,
    "accuracy_on_comparable_pairs": 1.0
  },
  "more_training_steps": {
    "admitted": 2,
    "ordered": 1,
    "tie": 1,
    "not_applicable": 0,
    "correct": 1,
    "comparable_pairs": 3,
    "correct_pairs": 3,
    "accuracy_when_ordered": 1.0,
    "accuracy_on_comparable_pairs": 1.0
  },
  "more_sampling_steps": {
    "admitted": 2,
    "ordered": 0,
    "tie": 2,
    "not_applicable": 0,
    "correct": 0,
    "comparable_pairs": 0,
    "correct_pairs": 0,
    "accuracy_when_ordered": null,
    "accuracy_on_comparable_pairs": null
  }
}

正确排序和可靠解释需要分别核验

14条公开解释均逐条核验。四模型都认出深度和残差的差异,但把残差通常有利于优化的先验套用于当前配置。同深度、同初始权重与输入随机流的无残差模型在15/16个种子上评分更低,且末段训练损失更低;这仍不能证明梯度是唯一原因。部分解释还漏算输入卷积,或把卷积路径感受野误当网络的信息边界:分组归一化跨空间统计,每个像素也已获得坐标与条件。预算题虽然全对,更多训练实际带来轮廓更准、背景泄漏更少,同时条件内方差下降;正确排序不能验证全部多样性或记忆机制叙述。

模型代码事实支持关键因素支持因果表述不成立
Opus 5.50/20/20/2
6.1-Sol2/21/20/2
Haiku 5.51/21/20/2
6-luna2/21/20/2

解释评分由本次研究 agent 按冻结标准逐条核查,是可复核的定性判断,不是多位专家独立评审的一致意见。这里只统计主问题的公开回答;部分支持、无法判断另存审核记录。关键因素得到局部对照支持,不代表证明了唯一内部机制。下方可逐题检查原话、证据和判断。

16 个确认训练 seed 的平均验证曲线。最终答案按独立测试指标判定。
三项完整配置和测试分布
实际发送的完整题面
完整局部对照:改变什么,测试指标如何变化

这些对照用于描述和核验解释,不是新增的显著性筛选。多字段变化不能归因为其中一个字段;单字段干预也不证明唯一内部机制。测试指标越低越好。

公开解释审核
出题时预先定义的解释目标

共享完整代码保留可还原性

每个 choice 的 diff 都独立相对同一 base,训练、优化器和所有配置改动都显式呈现。自动重建最终完整代码,差异过大时显示完整文件。

本批主问题相对逐选项完整代码,UTF-8 总字节减少 51.3%。逐题范围 50.7%–51.9%。这是字节压缩率,不是 token 压缩率。

结论适用范围