arxiv Feedforward Sequential Memory Networks: A New Structure to Learn Long-term Dependency

名称
Feedforward Sequential Memory Networks: A New Structure to Learn Long-term Dependency
首页
https://yiyibooks.cn/arxiv/1512.08301v2/index.html
原始地址
https://arxiv.org/pdf/1512.08301v1
描述
在本文中,我们提出了一种新型的神经网络结构,即\ emph {feedforward顺序存储网络(FSMN)},以在不使用复发反馈的情况下对时间序列的长期依赖性进行建模。拟议的FSMN是标准完全连接的馈电神经网络,配备了其隐藏层中一些可学习的内存块。存储器块使用窃听的延迟线结构将长上下文信息编码为固定尺寸表示形式,作为短期内存机制 ...