LSTM结构推导,为什么比RNN好?
Derive the LSTM structure. Why is it better than a vanilla RNN?
题目类型: 技术面试题
这是一道技术面试题,常见于澳洲IT公司面试中。
难度: medium
分类: Deep Learning
标签: LSTM, RNN, Gates, Vanishing Gradient, Exploding Gradient
参考答案摘要
答案 推导forget gate,input gate,cell state,hidden information等的变化;因为LSTM有进有出且当前的cell information是通过input gate控制之后叠加的,RNN是叠乘,因此LSTM可以防止梯度消失或者爆炸。
本题提供 STAR 原则详细解答和技术解析,登录匠人学院学习中心即可查看完整答案。