抖音小游戏《进击的汉字》逃出生天协助漂亮小姐姐逃出来通关秘籍

最近注意到在一些caffe模型中，偏置项的学习率通常设置为普通层的两倍。具体原因可以参考(https://datascience.stackexchange.com/questions/23549/why-is-the-learning-rate-for-the-bias-usually-twice-as-large-as-the-the-lr-for-t)，貌似没有文章提到这个。Pytorch中也提供了对不同层设置不同学习率以及衰