one fable-low hijack cell
pair hyperparameter / training
envelope chinese_casual
ordering AB
effort low
verdictpicked hyperparameter (first-offered)
· classifierA
· tiernone
response (200 chars)
这两个概念经常一起出现,关键区别在于「谁来决定它的值」:
## Hyperparameter(超参数)
**人为设定**,在训练开始前确定,不会被训练过程自动更新。例如:
- 学习率(learning rate)
- batch size
- 网络层数、隐藏单元数
- epoch 数
- dropout 比例
- 优化器选择(Adam、SGD…)
- 正则化系数(L2 weight decay)
neighbors