九五免费小说网

手机浏览器扫描二维码访问

本站弹窗广告每日仅弹出一次
尽可能不去影响用户体验
为了生存请广大读者理解

第8章 意外的指点(第2页)

“你这里说的深度神经网络指的应该是你自己提出的那种上百上千层的神经网络,而不是目前业界的深度网络吧?”付院长转过头来,微笑问道。

“付院长您是怎么..”孟繁岐先是愣了一下,然后猛地反应过来,目前只有那个女生看到过自己提前准备的残差网络草稿。“是那个女生跟您说的?”

“哈哈哈,她是我的小师妹。”付院长笑道,“前段时间来这里,也顺便来拜访了我一下,提到了我们学校有个学生在研究什么深百层千层的神经网络,研究得像模像样的。”

“说实在的,这也不是我的领域,如果不是以前的老师让我关注一下这方面,我还真是一窍不通。这两天我还在查询资料呢,我说这哪有什么上百层的神经网络,去年年底那个夺冠的AlexNet不也才8层的深度吗。”

“我也只是刚刚有一些想法。”孟繁岐连忙解释道。

“你不用紧张,我只是稍微有些好奇,想看看咱们学校到底是不是出了个这方面的天才。若是真的,我肯定大力支持。”

孟繁岐连忙先请付院长坐下,先为他大概介绍了一下背景,原理和现阶段难题。

付院长本身是纯数学出身,此前又在老师的指示之下对这个领域稍稍了解过一些,因此孟繁岐没说太多,他就已经掌握了大概。

“你认为深度网络难训练的问题本质上是梯度问题,所以你想使用残差的形式。”付院长喃喃自语,左手握拳,撑住了自己的下巴。

“如果不去深究神经网络本身的变换,而只是将其的变换理解为一个未知的高维函数的话,f(x)的多次累加会比x+f(x)的残差形式要不稳定太多。”孟繁岐后世主要以理解算法的流程,了解几种对比方法的优缺点为主。

对于其具体的内在原理,数学推导,平心而论,他的关心远远不足。现下正是弥补这部分短板的大好机会。

“如果我们讨论一个函数的多次嵌套,f(f(f(f(..f(x)..))))的话,不管是否是残差的形式,都是相当难以分析的。从数学上直观来看,两个相同次数的嵌套,有残差与否,不应当会改变该函数的实际表达能力。也就说,你构建的模型其对函数拟合的能力是与原本相当的。”

“倘若真的可以观察到明显的改善,那说明这种残差的形式只是能够让你所说的模型更容易被优化。换言之,以我的视角来说,该函数的求解变得更加精确了,从这个角度来看,残差是一种简洁的欧拉前向形式。”

付德清说着,拿起了纸笔开始了一些推演。孟繁岐疏于数学上的推演,但他很熟悉这种形式构建的网络有什么特性,因而越听越觉得惊奇。付院长的数学分析竟然相当接近不少后来的实验结果。

只可惜自己看他亲自上手推论,却稍微有些吃力了。

此时此刻和他一样一头雾水的还有附近竖起耳朵吃瓜的几名高年级学长学姐。

热门小说推荐
摸金乙元

摸金乙元

浮世万千,吾爱有三,日月与卿。日为朝,月为暮,卿为朝朝暮暮。浮世万千,不得有三,水中月,镜中花,梦中你。月可求,花可得,唯你求而不得。终是自古多情空余恨,好梦由来最易醒!辞别再无相见日,终是一人度春秋!......

大周九皇子

大周九皇子

大周九皇子情节跌宕起伏、扣人心弦,是一本情节与文笔俱佳的历史军事小说,大周九皇子-肆拾先生-小说旗免费提供大周九皇子最新清爽干净的文字章节在线阅读和TXT下载。...

农村夫夫下山记

农村夫夫下山记

《农村夫夫下山记》作者:北茨,已完结。陆小子,又带着媳妇儿儿子出来遛弯儿啊。陆子昂一手拉着媳妇儿,一手抱着自家胖小子,眉开眼笑,意满志得。陆子昂祖…...

一觉睡到原始大荒

一觉睡到原始大荒

被一杯啤酒干到大荒的林羽,靠着脑海中一点点不正宗的道教知识,靠着某音小视频的知识在异界大荒闯出一片自己的世界的故事。既然世界改变了,那么就尽力活成自己想要的状态吧。——林羽......

天纵骄狂

天纵骄狂

冰山捕头x疯狗逃犯,古耽奇幻武侠 ———— 江湖头号要犯楚狂人称“活阎王”,穷凶极恶,狂妄猖獗,是条人见人唾的疯狗。 他遭追兵围追堵截,身受重伤,穷途末路,所幸混入人牙子车队,逃过一劫。 本欲就此隐姓埋名,休养伤病,谁知才出狼窝,又入虎口,他被人贱卖为奴。 而赎买他的新主子,就是先前重伤他的捕头。 —— ps:1.背景架空,奇幻武侠,会有很多不科学的设定出现。 2.排雷:受非处,被人虐待过,介意勿入。感情线是纯爱1v1 3.文中一切cp无血缘关系 4.he 一句话简介:古风武侠冰山捕头x疯狗逃犯...

我让烫男人喜当爹

我让烫男人喜当爹

干掉咒灵后,一个三岁左右的孩子从天而降,稳稳落入了WTW的怀里。 那孩子顶着一头金色卷毛,湛蓝色的眼睛盯着他,脆生生地喊了句—— “爸爸!” 这个便宜,不占白不占。 WTW:“哎!” 然后他就眼睁睁的看着眼前的崽崽头发瞬间变成了银色。 WTW:“???” 「技能·亲缘血脉」绑定成功! 孽缘自此开始。 - “爸爸!”在幼儿园被同学欺负后,崽崽哭得上气不接下气。 远在几百公里开外的WTW突然感觉脑壳一阵剧痛。 WTW:“……” 瞬间不再摸鱼,火速干飞咒灵飞回了日本。 同期挚友:“……这就是父爱的力量?” WTW表情狰狞,不,这叫「技能·千里传音唤亲爹」。 崽崽走路不稳,在WTW眼前摔了个狗吃屎,屑父不但不扶,甚至哈哈大笑,下一秒,他的腿上出现了和崽崽如出一辙的伤口。 WTW:“……” 抱着崽崽找到同期女同学后—— “父子连心?” WTW表情麻木,不,这叫「技能·伤在你身疼在我心」。 WTW带回来一个海胆头小鬼,本以为崽崽会吃醋。 结果—— 崽崽和海胆头小鬼相处得其乐融融,直接把他忘到脑后。 “我是来拆散这个家的,我要把悠希从不靠谱的大人手中拯救出来。” WTW:“???” 后来—— 参加学校亲子活动,坐在观众席上的WTW凭借着惊人的身高优势,拼命挥舞着手上特制的小彩旗。 “悠希,给爸爸冲——!” 俨然成为了合格的老父亲…… 片场二: 在执行任务中,揍敌客长子捡到了一个昏迷的孩子,不知道为什么,他觉得这孩子长得非常合他眼缘。 此时的他并不知晓,有一个神奇的能力,叫做「技能·亲缘力爆表」 在这个孩子于昏迷中低低呼唤了一句爸爸后,他没有任何犹豫,平静地应了一声。 于是,经典重现,孽缘再次展开…… 而在遥远的另一个世界,遍寻不着崽崽的WTW看着《全职Ο人》漫画中出现的名为“悠希”的新角色,瞳孔地震! 还有其他的老父亲和青梅竹马线,但是文案写不下了!! 阅读提示: 感谢我的宝贝基友今沨沨提供的文案援助! 文案已换梗,旧梗实在没有灵感,对不起大家! 大量私设,OOC!!!纯日常文!讲述崽崽的成长经历!正文主角为崽儿,番外会长大!正文主亲情友情,番外会有CP! 请不要在他人的文下提起我,也不要在我的文下提起其他人,类似评论、与文章不相干评论会删!(重点),引战评论导致吵架的会删(此为10.29新增) 刚开始V文比例很高,不是百分百,会随着篇幅增加慢慢降低 非现实向养崽文,因为幼崽非人类...