引言 今天带来神作Attention Is All You Need的翻译,该作提出了Transformer模型。很牛逼的模型像PLATO-2和GPT-3都是基于Transf...
IP属地:河南
引言 今天带来神作Attention Is All You Need的翻译,该作提出了Transformer模型。很牛逼的模型像PLATO-2和GPT-3都是基于Transf...
引言 不懂数学是学不好人工智能的,本系列文章就汇总了人工智能所需的数学知识。本文是高等数学篇。 另有线代篇和概率论篇。 人工智能数学基础之概率论[https://www.ji...
引言 这是李宏毅老师讲的机器学习视频中与自然语言处理有关的,本文主要关注Self-attention。 处理序列的模型 我们已经知道如何处理输入是一个向量的问题。假设我们遇到...
前言 本文只会记录人工智能中所用到的线性代数知识,并不会记录大学线性代数教材中的所有知识。 标量 只有大小没有方向的量称为标量。 单个数字就是标量。 向量 所谓的向量就是一组...
概率论 基础概念 随机试验 试验是指为了观察某事的结果或某物的性能而从事的某种活动。在概率论中,一个试验如果具有以下3个特点: 可重复性:在相同条件下可以重复进行 可观察性:...