TOP榜写作榜手机小说

最近更新新书入库全部小说

燃文小说吧 >> 虐心耽美 >> 学医路漫漫 >> 第一百零六章深度学习入门-吴恩达课程笔记

第一百零六章深度学习入门-吴恩达课程笔记 (2/3)

要误差小于一定值,我们就接受。这和统计学的p值的思想是一致的。

多变量函数的构造,可能是不同函数的复合,如j(a,b,c)=3(a+bc),因此求偏导数需要用到链式法则。我们一般情况只能观察到各个变量的微小变化对其他变量的影响。从而能够根据这些数据来反过来推断变量的组织形式即函数的具体结构。以模块化的思想来解耦,将复杂函数分解为一定的模块函数,这是计算机科学的分而治之的思想。只要变量足够多,理论上可以构造出任意连续函数,只是我们需要考虑计算的代价,只能找到一个局部最优解。。最优化的思路,理论上存在着一组参数,能够使得算法有最好的性能,我们就是不断地逼近其,所以有各种调参和模型的组合等等操作。如从简单的神经网络的隐藏层不断增加,也有卷积神经网络等等的改进。

以线性代数的思想来定义各种数据,如以一维数组代表一个向量,从而能够将特定的信息映射到一个高维的空间,然后在这个基础上探索各种关系。我们需要以表现定理来理解。如线性方程组的求解对应于现实的规划问题。在具体的编程中,由于计算机的离散特性,往往使用这些线性代数的对象如向量,矩阵来构建这些函数的映射关系。如梯度下降的学习率就是需要我们定义的一些常数。。

把现实的对象抽象到矩阵的形式,进行各种变换,可以找到不同矩阵的相似性,从而认为其对应的现实对象是相似的。有矩阵的各种运算如加减,矩阵的点积和叉积,求逆,转置等等,还有矩阵对角化可以求解特征值。典型的例子是图像是以像素矩阵来存储的。

向量化,利用numpy库进行计算可以减少计算时间,因为矩阵运算有一定的优化。vectorization,使得计算加速。毕竟很多情况下我们需要处理稀疏矩阵的情况,运算量大,耗时长,只能采取某些快速的近似算法来计算一个可以接受的结果。

可视化是我们理解数据的一个方法,pytlib库提供很多工具。

浅层神经网络:最简单的模型f(x)=∑wixi+b。xi是输入,经过这个中间的隐藏层的函数映射f,能够产生一定的输出f(x),可以继续经过一定激活函数的处理如ax函数来得到特定的分类。隐藏层的嵌套和复合函数的构造是一致的。理论上,通过对参数的调整,我们可以构造出任意满足我们需求的函数,如把图像输入映射到具体的文本输出,即图像识别。当然,浅层的神经网络没有这么好的性能,需要更加复杂的神经网络结构才能构造出来,但深度学习的性能其实也是基于浅层神经网络的简单性能不断升维实现的,可以视为微积分的原函数。而神经网络的隐藏层就对应于不同对象的特征,最后能够通过参数的调整实现高维层次的识别,对应于线性代数的基底的线性组合(特征=基底)。于是就可以抽象为大规模的矩阵运算z【i】【i】=w【i】【i】x【i】【i】+b【i】.使用向量矩阵的形式来表示数据是有理由的,一方面是计算机存储和运算的需求,同时各种矩阵计算的优化使得大规模的运算量减少,能够以能够承受的时间和空间开销得到比较满意的结果。

激活函数是非线性的,可以实现我们需要的功能,毕竟世界本来就是复杂的,只能以线性来逼近。而非线性函数的使用,能够更好地逼近现实情况。有oid函数1/(1+e,^-1),relu函数anh函数(e^z-e^-z)/(e^z+e^-z),leakingrelu函数max(0.001z,z)

激活函数同样可以求导,可以利用梯度下降法找到使得损失函数最小的值。

反向传播算法backpropagationintuition,根据损失函数的求导来反过来对隐藏层的参数进行修改,如同一个反馈环的形成,初始输入产生损失函数的一定的值,而通过损失函数的梯度下降,对前面隐藏层的参数进行调整,最后循环反复使得损失函数的值最小,同时各个参数也收敛于特定的值。

批处理batc处理来更改参数的值,从初始化到参数更新,如w=w-adw,w的初始值可以是随机的,而且学习率a也是可以变化的。

足够多的矩阵运算能够使得模型的参数收敛,即训练出可以使用的算法。因此gpu的使用带来的计算能力的提升是算法发挥出重要作用的基础,而大规模的数据使得运算具有更大的意义。

如果我们突然患上重病,我们如何能够利用技术来改变自己的命运?我们可以对疾病进行建模,通过各种特征如各种指标,血常规,尿常规,粪常规等等,其他实验室检查,医学影像,病理检查等等,构造复杂的神经网络模型,通过已经整理好的结构化数据即确诊疾病和对应的指标矩阵,来对这个模型进行训练,从而能够对疾病做出诊断。然后在这个基础上,一方面可以继续学习成熟的疗法与疾病的对应,另一方面可以构造出新的疗法,如确定特定疾病需要改变的指标,以及各种已知的能够对这些指标产生影响的处理,经过训练,能够得到每个人不同情况的不同疗法,可能这就能够在绝望中挽救生命。

深层神经网络:基于浅层神经网络的叠加形成的更加复杂的模型,能够以更高的准确度来处理更加复杂的情况。本质上也是构造输入和期望输出之间的函数。其中的多隐藏层对应于不同的特征,能够构建更加复杂的函数,即特征的选择性组合对


状态提示:第一百零六章深度学习入门-吴恩达课程笔记
第2页完,继续看下一页

学医路漫漫最新章节 - 学医路漫漫全文阅读 - 学医路漫漫txt下载 - 余东林的全部小说 - 学医路漫漫 燃文小说吧

猜你喜欢: 我徒弟身价百亿叫我女王水浒韩伯龙传仙缘之长行路仙魔之竹农门药香续生帝天归来校园春色撩妻成瘾:法医老婆不好惹(HP同人)hp妖言惑众机器猫之野比大雄的淫荡人生tfboys虐心恋一品农夫[耽美]梦想的结局之王春狗养女成妃之红缠废墟之决战阿拉德梦幻奇遇记香山淫圣传战姬母女丼高冷青梅的逗比竹马绿帽的幸福奇案缉凶劫中淫(全本)毒宠万兽太子妃傻子行走天下哥布林杀手 Unlighted world(人类畜牧)腹黑毒女:逆世大小姐女老板一边打电话一边被推书里书外(翻译文)
完本推荐: (剑三同人)寄余生(H)援交的学生会长-v文(足球同人)我在皇马踢足球的那几年攻占帝国将军[穿越]老娘穿进耽美种马做渣攻化作微风一笑挥情剑迷魂记[三部]机器管家今天也是靠颜值的一天呢[娱乐圈]赵东阳是个好雄性重生之种田养狼大奶死党阿颖的故事专属后期穿越之不做炮灰重回被渣之前灵魂情人狐四郎这个魔君我罩了领衔主演[重生]另类竹马木系法师和土著小哥儿(网王同人)(网王)_[冢不二]恋爱烦恼冷山镇自杀事件魔王大人今天也很不开心
最近更新: 如果我追上你,我就把你嘿嘿嘿冤罪美妻恋妓[末世]弱鸡宅男重生记残缺的拼图重回现代美人心动降物王爷只想种田三世一生帝妃至尊:逆天大小姐温软情 人诸天无限之卡牌系统大唐双龙夺艳记来到城市1852铁血中华一枚戒指引发的穿越无限之吞噬无敌(剑三同人)【裴洛】浪蕊浮花[GL探险]参商驭兽师的地球生活我才不是你表妹(穿书)天众轮回录朋友的母亲(翻译文)爱的补偿起源故事冷夫萌妻最终幻想之最强小飞哥肛虐生zhi俱乐部星辰遨游记

学医路漫漫最新章节手机版 - 学医路漫漫全文阅读手机版 - 学医路漫漫txt下载手机版 - 余东林的全部小说 - 学医路漫漫 燃文小说吧移动版 - 燃文小说吧手机站