LSTM的概念,LSTM有哪些变种以及BPTT(基于时间的反向传播)
区块链毕设网qklbishe.com为您提供问题的解答
LSTM的概念,LSTM有哪些变种以及BPTT(基于时间的反向传播)
LSTM是在标准RNN基础上做了改进,解决RNN训练过程中的梯度消失问题,结构上主要是增加了控制门单元:遗忘门、输入门、输出门,控制信息的保留与信息的更新。 遗忘门:当前状态的输入与上一轮的隐藏状态加权的控制参数,与上一轮的控制参数通过门单元得到新的控制参数; 输入门:当前状态的输入与上一轮的隐藏状态得到的要保留下来的信息,与新数据形成控制参数通过门单元得到输入信息; 通过tanh控制有价值信息作为输出。
09:46
以上就是关于问题LSTM的概念,LSTM有哪些变种以及BPTT(基于时间的反向传播)的答案
欢迎关注区块链毕设网-
专业区块链毕业设计成品源码,定制。
区块链NFT链游项目方科学家脚本开发培训