手机浏览器扫描二维码访问
第8章 意外的指点（第2页）
“你这里说的深度神经网络指的应该是你自己提出的那种上百上千层的神经网络，而不是目前业界的深度网络吧？”
付院长转过头来，微笑问道。……
“你这里说的深度神经网络指的应该是你自己提出的那种上百上千层的神经网络，而不是目前业界的深度网络吧？”
付院长转过头来，微笑问道。
“付院长您是怎么..”
孟繁岐先是愣了一下，然后猛地反应过来，目前只有那个女生看到过自己提前准备的残差网络草稿。“是那个女生跟您说的？”
“哈哈哈，她是我的小师妹。”
付院长笑道，“前段时间来这里，也顺便来拜访了我一下，提到了我们学校有个学生在研究什么深百层千层的神经网络，研究得像模像样的。”
“说实在的，这也不是我的领域，如果不是以前的老师让我关注一下这方面，我还真是一窍不通。这两天我还在查询资料呢，我说这哪有什么上百层的神经网络，去年年底那个夺冠的a1exnet不也才8层的深度吗。”
“我也只是刚刚有一些想法。”
孟繁岐连忙解释道。
“你不用紧张，我只是稍微有些好奇，想看看咱们学校到底是不是出了个这方面的天才。若是真的，我肯定大力支持。”
孟繁岐连忙先请付院长坐下，先为他大概介绍了一下背景，原理和现阶段难题。
付院长本身是纯数学出身，此前又在老师的指示之下对这个领域稍稍了解过一些，因此孟繁岐没说太多，他就已经掌握了大概。
“你认为深度网络难训练的问题本质上是梯度问题，所以你想使用残差的形式。”
付院长喃喃自语，左手握拳，撑住了自己的下巴。
“如果不去深究神经网络本身的变换，而只是将其的变换理解为一个未知的高维函数的话，f（x）的多次累加会比x+f（x）的残差形式要不稳定太多。”
孟繁岐后世主要以理解算法的流程，了解几种对比方法的优缺点为主。
对于其具体的内在原理，数学推导，平心而论，他的关心远远不足。现下正是弥补这部分短板的大好机会。
“如果我们讨论一个函数的多次嵌套，f（f（f（f（..f（x）..））））的话，不管是否是残差的形式，都是相当难以分析的。从数学上直观来看，两个相同次数的嵌套，有残差与否，不应当会改变该函数的实际表达能力。也就说，你构建的模型其对函数拟合的能力是与原本相当的。”
“倘若真的可以观察到明显的改善，那说明这种残差的形式只是能够让你所说的模型更容易被优化。换言之，以我的视角来说，该函数的求解变得更加精确了，从这个角度来看，残差是一种简洁的欧拉前向形式。”
付德清说着，拿起了纸开始了一些推演。孟繁岐疏于数学上的推演，但他很熟悉这种形式构建的网络有什么特性，因而越听越觉得惊奇。付院长的数学分析竟然相当接近不少后来的实验结果。
只可惜自己看他亲自上手推论，却稍微有些吃力了。
此时此刻和他一样一头雾水的还有附近竖起耳朵吃瓜的几名高年级学长学姐。
本章完
HP叫我女王大人
简介关于hp叫我女王大人哈利波特同人小说。女主，但非女生向。轻松搞笑不虐主，轻腐。半无敌流，无脑嗨，欢迎围观吐槽...
僵尸玄学精通
gtp1tgtdivnetkquot1tgtahrefquotbeginquot1t立即阅读gta1t...
罪犯哭诉：谁让他开出租的？
（凶犯搞笑娱乐各种技能）苏尘穿越平行世界，参加了一档真人秀节目，抽取到职业出租车司机。只是他的直播画风好像有一点点奇怪。苏尘这阿姨抱着个孩子鬼鬼祟祟的，像不像个人贩子？网友宝宝在她怀中不哭不闹，还被逗笑，你管这叫人贩子？十分钟后。网友我去！这阿姨真是人贩子！？苏尘你们看这位乘客盒子装的竟然是白粉，该不罪犯哭诉谁让他开出租的？...
快穿：反派大佬的狗腿子
gtp1tgtdivnetkquot1tgtahrefquotbeginquot1t立即阅读gta1t...
成神后我搞上了水仙
简介关于成神后我搞上了水仙阅读指南星际abo文，各种大乱炖，神话，水仙，变性。女主最强人类，铁石心肠万人迷，对舔狗团全部都是单箭头。1v1水仙cp。避雷有变性元素。作者不爱写大纲，具体剧情也只比读者早几天知道而已。简介女主成神之路。a1pha苏阳被爱而不得的反派舔狗改造成了娇娇软软的beta苏音，最后苏阳苏音he了。反派舔狗prpr那我呢？苏阳去死！一个舔狗强制爱失败，反而给女神送老婆的故事。你们要我光芒万丈，又要我卑贱如泥，你们要我高贵圣洁，又要我低眉顺眼，你们要我不染尘埃，又要我柔软多情。你们要我杀伐果决，又要我温柔慈悲。愚昧的造物为自己挑选主人，造神又将神打翻，一轮又一轮永不满意。...
我的小龙君
简介关于我的小龙君白龙为了复活师父而被夺取龙珠，中咒变为小孩。后来他利用赤狐三小姐和她身上的龙鳞甲为他的盾牌，只为解除咒术，重新寻回师父肉身。然而当他险些将赤狐三小姐害死时，赫然现，她体内的元神竟然是自己一直在寻找的师父。他爱了师父万年，师父一心只想成仙。师父重回肉身，现当年自己渡劫失败，竟然是因为徒弟对她做了大逆不道的事情...