第8章 意外的指点（2/3）

着一副无框的金丝边眼镜，梳着背头，发路丝缕分明。

“付院长？”导员看清来者的长相，吓了一跳，“您怎么到这儿来了？”

付德清是燕京电力学院数理学院的院长，虽然数理学院在该校不是什么大院，但付院长还兼任校党委内要职，因此地位颇高。

总想着往上爬的导员看到付院长之后，顿时便偃旗息鼓，陪着笑脸道，“一切交由付院长处理，我不打扰，我先走了哈。”

孟繁岐连忙起身，他看出来付院长来此不是偶然，大有可能是特意来找自己。

但思来想去，想不出自己有什么地方会吸引到别院的院长大驾光临。

“深度神经网络训练中的内部协变量偏移会导致较深层的输入分布收到严重的影响，深层的神经网络为了适应被偏移的数据分布，只得采用保守的方式优化参数，从而极大影响了训练速度和训练难度。”付院长也未解释这点，只是自顾自地看起了孟繁岐屏幕上的内容。

“你这里说的深度神经网络指的应该是你自己提出的那种上百上千层的神经网络，而不是目前业界的深度网络吧？”付院长转过头来，微笑问道。

“付院长您是怎么..”孟繁岐先是愣了一下，然后猛地反应过来，目前只有那个女生看到过自己提前准备的残差网络草稿。“是那个女生跟您说的？”

“哈哈哈，她是我的小师妹。”付院长笑道，“前段时间来这里，也顺便来拜访了我一下，提到了我们学校有个学生在研究什么深百层千层的神经网络，研究得像模像样的。”

“说实在的，这也不是我的领域，如果不是以前的老师让我关注一下这方面，我还真是一窍不通。这两天我还在查询资料呢，我说这哪有什么上百层的神经网络，去年年底那个夺冠的le不也才8层的深度吗。”

“我也只是刚刚有一些想法。”孟繁岐连忙解释道。

“你不用紧张，我只是稍微有些好奇，想看看咱们学校到底是不是出了个这方面的天才。若是真的，我肯定大力支持。”

孟繁岐连忙先请付院长坐下，先为他大概介绍了一下背景，原理和现阶段难题。

付院长本身是纯数学出身，此前又在老师的指示之下对这个领域稍稍了解过一些，因此孟繁岐没说太多，他就已经掌握了大概。

“你认为深度网络难训练的问题本质上是梯度问题，所以你想使用残差的形式。”付院长喃喃自语，左手握拳，撑住了自己的下巴。

“如果不去深究神经网络本身的变