一、为什么会有ResNet？ 一个伟大的发明都在于他解决了一个痛点问题，而ResNet就是解决了深层网络难以训练的问题。在原著论文里称这个问题为degradation pro...
发简信
IP属地：云南
-
ResNet论文和代码解读 -
梯度消失和梯度爆炸问题详解
1.为什么使用梯度下降来优化神经网络参数？ 反向传播（用于优化神网参数）：根据损失函数计算的误差通过反向传播的方式，指导深度网络参数的更新优化。 采取反向传播的原因：首先，深...
-
点积(dot)运算及简单应用写在最前面 1.本文将尽量简明直观的介绍点积运算，及其在python中的简单应用。对点积运算的理解将对机器学习的算法编写提供相当大的帮助。2.本文代码使用python及num...
-
epoch、batch、training step（iteration）的区别转载知乎：https://www.zhihu.com/question/43673341/answer/257382587（1）iteration：表示1次迭代（也叫trai...
-
【转载】学会区分 RNN 的 output 和 statehttps://zhuanlan.zhihu.com/p/28919765 学会区分 RNN 的 output 和 state 七月 6 个月前 写这篇文章的起因是，有人问调...
-
神经机器翻译概览：基准模型与改进（上）下篇：神经机器翻译概览：基准模型与改进（下） 介绍一下当前机器翻译领域很火的神经机器翻译(Neural Machine Translation ，简称NMT)领域的大致状况，...
-
Ngram ppl 计算说明语言模型可以用于知道前个词的情况下，预测第个词的概率。Perplexity(PPL) 用来衡量语言模型的好坏，越小越好。其物理意义可以近似理解为：有了语言模型后，预测的第个词...
-
pyTorch版OpenNMT的学习笔记前言 2017年1月18日Touch7的开发团队发布了pyTorch，pyTorch是一个python优先的深度学习框架，能够在GPU加速的基础上实现Tensor计算和动态神...
