手机浏览器扫描二维码访问
第8章 意外的指点（第2页）
“你这里说的深度神经网络指的应该是你自己提出的那种上百上千层的神经网络，而不是目前业界的深度网络吧？”
付院长转过头来，微笑问道。……
“你这里说的深度神经网络指的应该是你自己提出的那种上百上千层的神经网络，而不是目前业界的深度网络吧？”
付院长转过头来，微笑问道。
“付院长您是怎么..”
孟繁岐先是愣了一下，然后猛地反应过来，目前只有那个女生看到过自己提前准备的残差网络草稿。“是那个女生跟您说的？”
“哈哈哈，她是我的小师妹。”
付院长笑道，“前段时间来这里，也顺便来拜访了我一下，提到了我们学校有个学生在研究什么深百层千层的神经网络，研究得像模像样的。”
“说实在的，这也不是我的领域，如果不是以前的老师让我关注一下这方面，我还真是一窍不通。这两天我还在查询资料呢，我说这哪有什么上百层的神经网络，去年年底那个夺冠的a1exnet不也才8层的深度吗。”
“我也只是刚刚有一些想法。”
孟繁岐连忙解释道。
“你不用紧张，我只是稍微有些好奇，想看看咱们学校到底是不是出了个这方面的天才。若是真的，我肯定大力支持。”
孟繁岐连忙先请付院长坐下，先为他大概介绍了一下背景，原理和现阶段难题。
付院长本身是纯数学出身，此前又在老师的指示之下对这个领域稍稍了解过一些，因此孟繁岐没说太多，他就已经掌握了大概。
“你认为深度网络难训练的问题本质上是梯度问题，所以你想使用残差的形式。”
付院长喃喃自语，左手握拳，撑住了自己的下巴。
“如果不去深究神经网络本身的变换，而只是将其的变换理解为一个未知的高维函数的话，f（x）的多次累加会比x+f（x）的残差形式要不稳定太多。”
孟繁岐后世主要以理解算法的流程，了解几种对比方法的优缺点为主。
对于其具体的内在原理，数学推导，平心而论，他的关心远远不足。现下正是弥补这部分短板的大好机会。
“如果我们讨论一个函数的多次嵌套，f（f（f（f（..f（x）..））））的话，不管是否是残差的形式，都是相当难以分析的。从数学上直观来看，两个相同次数的嵌套，有残差与否，不应当会改变该函数的实际表达能力。也就说，你构建的模型其对函数拟合的能力是与原本相当的。”
“倘若真的可以观察到明显的改善，那说明这种残差的形式只是能够让你所说的模型更容易被优化。换言之，以我的视角来说，该函数的求解变得更加精确了，从这个角度来看，残差是一种简洁的欧拉前向形式。”
付德清说着，拿起了纸开始了一些推演。孟繁岐疏于数学上的推演，但他很熟悉这种形式构建的网络有什么特性，因而越听越觉得惊奇。付院长的数学分析竟然相当接近不少后来的实验结果。
只可惜自己看他亲自上手推论，却稍微有些吃力了。
此时此刻和他一样一头雾水的还有附近竖起耳朵吃瓜的几名高年级学长学姐。
本章完
病娇师尊是反派，被我重生强制爱
简介关于病娇师尊是反派，被我重生强制爱前世姜黎九被师尊带回来的小师妹诬陷，不仅失去极品冰灵根与金丹，就连尸身也被残害到破败不堪。重生归来，得知自己不过是一本团宠文中恶毒女配，这一次，听说师尊带了一个小师妹回山，她当众叛出师门，转头拜另一人为师。只是怎么也想不明白，前世那个抱住自己尸身，说出执着又悲伤的话以吾命，换吾妻。那个人，为何变得冷静自持？可是，一想到曾看过他失去理智，崩溃绝望，眼眶通红，毁去自己，换她活！姜黎九忍不住地想撕开他的伪装，看他爱自己无法自拔的样子...
来自地狱的男人
星空魔帝，重生归来！敌人，要跪着！美女，要躺着！我是魔，以神为奴，以仙为仆！不服？那就杀到你服！夜风！...
许区长，你前女友暴富了
简介关于许区长，你前女友暴富了Vs全世界我都可以放弃，唯你，是我掌心的一点朱砂痣。他归来时，已不是当年那个曾为她写下一整本公考宝典的小小办公室主任了，这些年平步青云，成为了一手缔造海晏河清的大司长。却不料横生波折，被贬回地方。别后多年，她依然平凡不闻。他说小娴，哪怕你我已经分手，你到底是我一手带入公家门里的人，他们是在欺负你上面没人？夏瑾娴额，也不算没人吧，还是有那么两个的。许晏清？？？没多久，许晏清知道了。这女人不光离婚了，还赶上了一次次的拆迁，成了收租婆。并且，捡了两个狗男人在身边陪着，还认了个司法界第一大佬的爹。许晏清一不小心，我好像要吃软饭了。夏瑾娴是的，填报财产的话，房产那一页就需要26行。不过也算共同财产，毕竟天使投是你。男女主是初恋，怕耽误彼此前程，狠心分手后各自再婚，最终破镜重圆的故事最大阻碍是双方家庭因素，不是第三者的问题。不是火葬场，两个人当年也很甜的。纯洁双c党勿入。（又名小孩子别看）写的是体制内职场的白日梦，做个梦而已，随便看看吧。...
经济大清
这一年，美洲土着经受着残忍的掠夺，大清沉醉在康熙盛世中，俄国的彼得大帝东征西讨，英国光荣革命峥嵘初现这一年，一个累死在工作中的小审计员穿越到了大清皇子胤祚的身上。一片小小的蝴蝶翅膀能否吹动大清...
无双圣医：第一美人对我投怀送抱
叶天宇手持一纸婚书踏入都市，没曾想遭到未婚妻一家无情嘲讽，叶天宇霸气悔婚。自此龙出深渊，各种天材地宝与绝世佳人围绕身旁，一身无敌神通傲视群雄。秦神医在叶天宇面前，我算什么神医？只是一个学徒罢了！八大天师奇门遁甲，五门八卦，世界巅峰只有一人，龙帝！红颜榜十大佳人世人只知我们容颜倾城，而不知佳人只为龙帝一人。无双圣医第一美人对我投怀送抱...
大明星从荒野开始
他是影视圈硬汉，荒野达人，功夫一流。他是情歌王子，声如天籁。他还是一位文抄公。...