LSTM神经网络输入输出究竟是怎样的?
创始人
2024-11-08 04:18:30
LSTM神经网络输入输出究竟是怎样的?

常规feedforward输入和输出:矩阵输入矩阵形状:(n_samples,dim_input)输出矩阵形状:(n_samples,dim_output)注:真正测试/训练的时候,网络的输入和输出就是向量而已。加入n_samples这个维度是为了可以实现一次训练多个样本,求出平均梯度来更新权重,这个叫做Mini-batchgradientdescent。如果n_samples等于1,那么这种更新方式叫做StochasticGradientDescent(SGD)。Feedforward的输入输出的本质都是单个向量。常规Recurrent(RNN/LSTM/GRU)输入和输出:张量输入张量形状:(time_steps,n_samples,dim_input)输出张量形状:(time_steps,n_samples,dim_output)注:同样是保留了Mini-batchgradientdescent的训练方式,但不同之处在于多了timestep这个维度。Recurrent的任意时刻的输入的本质还是单个向量,只不过是将不同时刻的向量按顺序输入网络。所以你可能更愿意理解为一串向量asequenceofvectors,或者是矩阵。

相关内容

热门资讯

原创 深... 一个二战战败国,竟敢发出战争威胁? 深夜时分,当大家都沉浸在睡梦中时,外交部大楼却灯火通明。而就是在...
每周股票复盘:电魂网络(603... 截至2025年11月14日收盘,电魂网络(603258)报收于19.76元,较上周的19.43元上涨...
第17个双十一,淘天用价值、即... 图源:视觉中国 当“双十一”走到第十七个年头,行业内外对它的审视,早已超越了一场大促本身。 曾经,双...
安徽多地或迎降雪!合肥雨夹雪!... 安徽省气象台提示,未来一周全省以晴到多云天气为主,仅16-17日我省有一次降水过程,其中16日淮河以...
双十一销量暴涨十倍,谁是AI眼... 双十一虽然结束了,但是小雷的双十一专题还没到结束的时候。在各个品牌和平台陆续发布战报后,我们终于有机...