在n-gram语言模型中，一些词语的组合没有在语料中出现过，所以其统计概率会为0，但是这是不合理的。所以需要使用平滑方式调整概率值。平滑的基本思...

在nlp的世界里，词向量占据了重要的位置，它分布式的表示了单词的语义信息，大幅度的提升了下游任务的效果。 Word2vec根据预测词的方式包括两...

语言模型：衡量一句话是句子的概率假设有句子,根据语言模型计算s的概率为通常还使用n-gram语言模型计算句子概率 1-gram语言模型(uni-...

看到一篇数据预处理很全面的文章，所以将链接贴了过来 https://www.jianshu.com/p/37e529c8baa9 对上述文章的补...

摘要 提升树广泛应用于机器学习的各个领域，在这篇论文中，提出了一个新的提升树方式。 1. 介绍 论文的创新点共一下四点： We design a...

XGBOOST是GBDT模型的升级版，同样也用到了adboosting的思想 一 预备知识 XGBOOST是前向加法模型，那么有公式：设表示第n...

文本相似度是自然语言处理研究热点之一，论文提出了一种新的衡量文本相似度的方法，Word Mover’s Distance (WMD)。此方法利用...

在之前的章节里，学习了集成学习的两个代表方式：bagging和boosting，现在来看如果将bagging和boosting运用在决策树中。 ...