NLP与人工智能

BERT 在训练的过程中使用了 Masked Language Model (MLM)，随机遮挡一些单词，并对这些单词进行预测，BERT 训练的需要大量的计算量。ELECTR...

文哥的学习日记

word2vec是用来生成词向量的工具，而词向量与语言模型有着密切的关系，为此，不妨先来了解一些语言模型方面的知识。 1、统计语言模型 统计语言模型（Statistical ...

Panverson

@author: Panverson 背景和诞生 在word2vec诞生之前，利用机器学习方法解决自然语言处理问题使，一般都是用one-hot编码（可以翻译成“独热编码”）去...

白尔摩斯

=== 名词解释 === BGD： 批量 - 梯度下降算法SGD： 随机 - 梯度下降算法MBGD：小批量 - 梯度下降算法 === 批量梯度下降算法 BGD ===...

不会停的蜗牛

今天的内容有： LSTM 思路 LSTM 的前向计算 LSTM 的反向传播 关于调参 LSTM 长短时记忆网络(Long Short Term Memory Network,...

罗泽坤

Maximum Likelihood Estimate and Expectation Maximization Algorithm 一、最大似然估计思想： 设有外形完全相同...