ho是表示initial hidden state,co是表示initial cell state。是 h_t(hidden state at timet 和 c_t (cell state)的初始值。如果不特殊设定的话,就用zeros初始化。
  h和c的侧重点不同。h(t)和RNN中的h(t)类似,但在运算时增加了一步,有些许不同。c(t)是LSTM新引入的概念,用来防止梯度消失,可以记住更久的东西。
原创 | 2022-12-05 11:35:00 |浏览:1.6万
ho是表示initial hidden state,co是表示initial cell state。是 h_t(hidden state at timet 和 c_t (cell state)的初始值。如果不特殊设定的话,就用zeros初始化。
  h和c的侧重点不同。h(t)和RNN中的h(t)类似,但在运算时增加了一步,有些许不同。c(t)是LSTM新引入的概念,用来防止梯度消失,可以记住更久的东西。
Copyright 2005-2020 www.kxting.com 版权所有 | 湘ICP备2023022655号
声明: 本站所有内容均只可用于学习参考,信息与图片素材来源于互联网,如内容侵权与违规,请与本站联系,将在三个工作日内处理,联系邮箱:47085,1089@qq.com