码迷,mamicode.com
首页 > 编程语言 > 详细

LSTM与Highway-LSTM算法实现的研究(1)

时间:2015-12-22 22:36:36      阅读:539      评论:0      收藏:0      [点我收藏+]

标签:

LSTM与Highway-LSTM算法实现的研究(1)

zoerywzhou@gmail.com

http://www.cnblogs.com/swje/

作者:Zhouw

 2015-12-22

 

声明:

1)该LSTM的学习系列是整理自网上很大牛和机器学习专家所无私奉献的资料的。具体引用的资料请看参考文献。具体的版本声明也参考原文献。

2)本文仅供学术交流,非商用。所以每一部分具体的参考资料并没有详细对应。如果某部分不小心侵犯了大家的利益,还望海涵,并联系博主删除。

3)本人才疏学浅,整理总结的时候难免出错,还望各位前辈不吝指正,谢谢。

请联系:zoerywzhou@gmail.com 或13813017783@163.com

 
本研究课题系本人本科毕业设计,开题报告初步确定,后面会实时更新,希望能与大家相互交流,共同进步!
 
一、研究计划: 
 
1、理解LSTM的基本概念、原理与相关应用
2、剖析LSTM的代码实现
3、理解深度学习中Highway的思想,以及如何在LSTM中实现Highway
4、剖析Highway-LSTM代码
5、选择一个应用,进行验证
 
定期(每隔一月)对算法剖析的进展做总结,目标在3月底,完全掌握LSTM的代码与算法。
 
二、以下为部分学习资料的链接:
 
Github上的资源:
 
 
Basic LSTM by Torch (LUA) https://github.com/karpathy/char-rnn 
 
Highway LSTM by Torch (LUA) https://github.com/yoonkim/lstm-char-cnn 
 
 
LSTM implementation: http://apaszke.github.io/posts.html 
 

部分参考文献:

[High-way-lstm-1]High-way LSTM RNNS FOR Distant Speech Recognition.pdf   : http://yunpan.cn/cuAYRBGLtX6UJ   访问密码 510b

[High-way-lstm-2]Character-Aware Neural Language Models.pdf   :http://yunpan.cn/cuAYRBGLtX6UJ  访问密码 510b

 

LSTM与Highway-LSTM算法实现的研究(1)

标签:

原文地址:http://www.cnblogs.com/swje/p/5068069.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!