序列模型的任务
序列数学表示:T表示长度
怎样独一无二表示序列中的单词:建立大词典,借助one-hot
循环神经网络
前向计算过程
通过时间的反向传播
多种循环网络结构
音乐生成是一对多、下面两个是命名实体识别和机器翻译
语言模型
RNN的梯度消失
GRU
LSTM
双向RNN:循环单元可以使RNN\GRU\LSTM
深层循环神经网络(层数最多也是叠加个位数)
序列模型的任务
序列数学表示:T表示长度
怎样独一无二表示序列中的单词:建立大词典,借助one-hot
循环神经网络
前向计算过程
通过时间的反向传播
多种循环网络结构
音乐生成是一对多、下面两个是命名实体识别和机器翻译
语言模型
RNN的梯度消失
GRU
LSTM
双向RNN:循环单元可以使RNN\GRU\LSTM
深层循环神经网络(层数最多也是叠加个位数)