第三周 超参数调试、Batch Norm和程序框架3.1 & 3.2 & 3.3 选择超参数 在训练神经网络时我们有很多超参数要进行调试：学习率、动量、Adam的参数、学习率衰减、batch size、隐藏层数、隐藏单元数等等。吴恩达老师建议较为重要，可以考虑调节的参数顺序为：学习率、动量（ \( \beta 一般取0.9 \) ）、batch size、隐藏单元数、其它。在进行实验时，两个参数调试要在一个矩形数组内搜索最优组合，三个参数则要在一个立方数组内搜索最优...
第四周 - 深度神经网络的核心概念第 31 题在我们的前向传播和后向传播实现中使用的“缓存”是什么？A.它用于在训练期间缓存成本函数的中间值。B.我们用它将在正向传播过程中计算的变量传递到相应的反向传播步骤。它包含了反向传播计算导数的有用值。C.它用于跟踪我们正在搜索的超参数，以加快计算速度。D.我们用它将反向传播过程中计算的变量传递到相应的正向传播步骤。它包含用于计算正向传播的激活的有用值。第 32 题以下哪些是“...
1 向量化( Vectorization )在逻辑回归中，以计算z为例，z = w的转置和x进行內积运算再加上b，你可以用for循环来实现。但是在python中z可以调用numpy的方法，直接一句z = np.dot( w, x ) + b用向量化完成，而且你会发现这个非常快。ng做了个实验，求两个100万长的一维向量的內积，用向量化花了1.5毫秒，而用for循环计算花了400多毫秒。所以平常记得用向量化，一定要避免使用for循环，你的代码会快很多。CPU和GPU都有并行化的指令，有...
1 什么是神经网络( What is a neural network )深度学习一般是指非常非常大的神经网络，那什么是神经网络呢？以房子价格预测为例，现在你有6个房子（样本数量），你知道房子的大小和对应价格，你想要建立一个函数来用房子的大小来预测价格。我们可以用线性回归( linear regression) 来拟合这些数据。可以把这个函数视作最为简单的神经元，用房子的大小x作为对神经元的输出，把房价y作为神经元的输出。神经网络就是有很多个这样的神...
Error analysisCarrying out error analysisError analysis是手动分析算法错误的过程。通过一个例子来说明error analysis的过程。假设你在做猫图像识别的算法，它的错误率高达10%，你希望提高它的表现。 你已经有了一些改进的想法，包括：算法把狗的图片错误识别为猫，需要修正；算法把其他一些猫科动物（比如狮子，豹，...）错误识别为猫，需要修正；算法对于比较模糊的图片容易识别错误，需要改进；算法对于加了滤镜的图片容易识...
http://www.52nlp.cn/%E6%B7%B1%E5%BA%A6%E5%AD%A6%E4%B9%A0%E8%AF%BE%E7%A8%8B%E6%B7%B1%E5%BA%A6%E5%AD%A6%E4%B9%A0%E5%85%AC%E5%BC%80%E8%AF%BE%E8%B5%84%E6%BA%90%E6%95%B4%E7%90%86这里整理一批深度学习课程或者深度学习相关公开课的资源，持续更新，仅供参考。1. Andrew Ng (吴恩达) 深度学习专项课程 by Coursera and deeplearning.ai这是 Andrew Ng 老师离开百度后推出的第一个深度学习项目（deeplearning.ai)的一个课程: ...
最新版Python全套培训课程视频，绝对零基础到Python大牛。包括：零基础得python基础班， 高阶进阶就业篇完整版(含：数据分析、机器学习、网络爬虫、数据挖掘、深度学习、人工智能等)课程共108.9G。本套课程价值2万元以上。文章底部附加全套课程下载地址，由于文件较大，保存时可选择分卷保存。 全套课程文件目录：Python全套一、python基础班 1-1 Linux基础01-课程简介 02-操作系统简介 03-linux命令简介 04-目录相关命令 05-文件相...
吴恩达老师斯坦福CS230深度学习课程资源进行开放了，大家都知道吴恩达老师最出名的是他在coursera的机器学习课程，可以说让很多刚开始接触ml的小白入门该领域。我个人本身也是在大二下学期由于学校一个创新项目的需求，学习吴恩达老师网易云课堂的机器学习课程，也记得ML从那个时候真正火起来了，我这一届当时保研的同学能够往这个方向的就往这个方向走，导致计算机硬件方向和其他方向爆了冷门。吴恩达在开设了机器学习课程之后，最...
大家期待已久的Java深度学习课程终于准备好了，本次会有三节课程。通过这些课程的学习，相信会帮助很多对深度学习感兴趣但是缺乏上手经验的同学快速入门。这些课程中也穿插了一些企业级机器学习应用训练和部署的经验。 第一节 DJL综述 视频链接10分钟深度学习简介 介绍Deep Java Library Deep Java Library的架构简介 为什么要用Java做深度学习？ DJL和其他Java解决方案的比较 DJL快速上手小工具以及Live demo DJL在大数据平台上的...