码迷,mamicode.com
首页 > 其他好文 > 详细

读《专家展望未来5年深度学习发展趋势》总结

时间:2016-01-07 10:03:25      阅读:235      评论:0      收藏:0      [点我收藏+]

标签:

原文网址:http://www.iteye.com/news/31270

1.我们应该会看到更为深层的模型,与如今的模型相比,这些模型可以从更少的训练样例中学习,在非监督学习方面也会取得实质性进展。我们应该会看到更精准有用的语音和视觉识别系统。 

2.我期望深度学习能够越来越多地被用于多模(multi-modal)问题上,在数据上更结构化。这将为深度学习开创新的应用领域,比如机器人技术,数据挖掘和知识发现。 

3.目前深度学习算法和神经网络的性能与理论性能相去甚远。如今,我们可以用五到十分之一的成本,以及十五分之一的参数来设计视觉网络,而性能比一年前花费昂贵成本设计出的网络更优,这完全凭借改善的网络架构和更好的训练方法。我坚信,这仅仅只是个开始:深度学习算法将会更高效,能够在廉价的移动设备上运行,即使没有额外的硬件支持或是过高的内存开销。 

4.我看到的一个趋势是,架构正在迅速地变得更大、更复杂。我们正在朝着建设大型神经网络系统方面发展,交换神经组件的输入输出,不同数据集上预训练的网络部分,添加新模块,同时微调一切等等。比如,卷积网络曾是最大/最深的神经网络架构之一,但如今,它被抽象成了大多数新架构中的一小部分。反过来,许多这些架构也会成为将来创新架构中的一小部分。我们正在学习如何堆“乐高积木”,以及如何有效地将它们连线嵌套建造大型“城堡”。

5.有很多技术都基于深度监督式学习技术,视频技术也是一样,搞清楚如何让深度学习在自然语言处理方面超越现在的方法,在深度无监督学习和深度强化学习方面也会取得显著进步。

6. 在过去的两年中,我们观察到,在大多数使用了深度学习的领域中,深度学习取得了极大的成功。即使未来5年深度学习无法达到人类水平的认知(尽管这很可能在我们有生之年发生),我们也将会看到在许多其他领域里深度学习会有巨大的改进。具体而言,我认为最有前途的领域将是无监督学习,因为世界上大多数数据都是未标记的,而且我们大脑的新皮层是一个很好的无监督学习区域。 

技术分享

7.目前大数据生态系统一直专注于收集,管理,策展大量数据。很明显,在分析和预测方面也有很多工作。从根本上说,企业用户不关心那些。企业用户只关心结果,即“这些数据将会改变我的行为方式吗?将会改变我做出的抉择吗?”我们认为,这些问题是未来5年需要解决的关键问题。我们相信,人工智能将会是数据和更好的决策之间的桥梁。 

8.深度学习将会在演变中起到显著的作用,但需要与其他人工智能方法结合。在接下来的5年里,我们会看到越来越多的混合系统中,深度学习用于处理一些难以感知的任务,而其他人工智能和机器学习(ML)技术用于处理其他部分的问题,如推理。 

9.在未来5年,越来越难的问题,如视频识别,医学影像或文字处理将顺利由深度学习算法解决。我们还可以看到深度学习算法被移植到商业产品中,就像10年前人脸检测如何被纳入相机中一样。 

技术分享

 

读《专家展望未来5年深度学习发展趋势》总结

标签:

原文地址:http://www.cnblogs.com/hqt2050/p/5108630.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!