


下载本文档
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、(深度学习方向)深度学习和过往的神经网络训练方法有什么区别?给出几 个具体的 loss function ?神经网络和深度学习的概念区别:神经网络是我们经常看到的那种层级网络结构尼是指一种具体的模型。而深度 学习是基于当神经网络层数增多,神经网络学习日益困难的问题而提出的一种学 习的方式。更加具体的解答请参见博客,这里面写的非常清楚。以下是我基于上述博客做的一个简短的解答:1.深度学习的目的?大多数情况下,我们面临的主要是一个分类问题或者是回归问题。但是基于已 有的数据,我们很难提取一些有效的特征构建模型(传统机器学习基于经验), 而深度学习则是设计了这样一套方案,能够让模型自己学习特征。因此
2、,深度模型是手段,特征学习是目的。摘自上述博客。As a result, Deep Learning is an unsupervised learning algorithm.2传统神经网络的训练方式?传统的神经网络训练方式正如大家所了解的那样,分为前向传播和反向传播。前向传播构建了神经网络层输出与层输入之间的复杂关系,而反向传播则是利用1读万卷书行万里路梯度下降方法,往回更新参数,使得目标函数(也即loss function )下降,最 终趋于收敛,则训练完毕。3. 传统的神经网络训练方式有什么不好?梯度消失问题也就是说若某一层的梯度非常小贝|该层前面的梯度会更最终趋于0 ),也就是说很前
3、面的层数的参数会趋于不更新。博客中还讲了其他的一些缺点,该兴趣的可以自行查看。4. 深度学习训练方法?深度学习方法采用逐层训练的方法,参照博客中AutoEncoder可以很好的理 解 layer-wise。其实感觉反向传播同神经网路是一样的,只是在前向传播时,是逐层训练,逐层 调优。5. 些 loss function ?-二(NLP方向)现在深度学习在nip领域有哪些应用?请具体说明三.什么是中文分词?列举出几种你所知的分词方法三大主流分词方法:基于词典的方法、基于规则的方法和基于统计的方法。词典或规则:基于已有词典,根据匹配类型不同而划分,有最大匹配法等。统计:一靄1读万卷书行万里路L组成词语的字可能多次同时出现的可能性最大而形成的N-gram模型2.将词语构成看成是标注问题而出现的隐马尔科夫链、条件随机场等模型。N-gram 和 HMM、CRF 的区别?
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2025年共青团团内推优知识考试大题库及答案(共50题)
- 10便携衣架(教学设计)苏教版五年级下册综合实践活动
- 2024年秋九年级历史上册 第5课 罗马城邦与罗马帝国教学实录 新人教版
- 新零售营销策略及技术应用探讨与实践方案设计
- 教育资源整合与利用实施方案
- 视频剪辑 课件全套 1-11 Premiere Pro基础知识 - PR中的RGB颜色
- 2024-2025学年新教材高中数学 第八章 立体几何初步 8.1 基本立体图形(3)教学实录 新人教A版必修第二册
- 2024年四年级英语下册 Unit 3 What subject do you like best Lesson 15教学实录 人教精通版(三起)
- 本科毕业论文完整范文(满足查重要求)地方政府行政管理创新问题研究
- 5 热在水中的传递(教学设计 )-2023-2024学年科学五年级下册教科版
- 批判性思维能力测量表(CDTI-CV)-彭美慈
- 《现代家政导论》电子教案 4.1模块四项目一家政教育认知
- 一年级数学个位数加减法口算练习题大全(连加法-连减法-连加减法直接打印版)
- 2024年浙江省杭州市白蚁防治研究所招聘历年高频难、易错点500题模拟试题附带答案详解
- 幼儿园6S管理培训课件
- GB/T 25052-2024连续热浸镀层钢板和钢带尺寸、外形、重量及允许偏差
- 电梯大修标准
- 狗狗训练合同
- 胰岛素正确注射方式
- Q-GDW 12461-2024 电力物资包装通.用技术规范
- 部编版三年级语文下册课内外阅读训练(类文阅读含答案)
评论
0/150
提交评论