码迷,mamicode.com
首页 > 其他好文 > 详细

spark未来的发展方向

时间:2014-06-21 21:23:20      阅读:319      评论:0      收藏:0      [点我收藏+]

标签:java   数据   工作   算法   代码   python   

          spark是采用scala语言开发的基于内存的计算框架,作者Matei Zaharia,在未来的发展方向:

1、spark streaming:提高spark的流处理能力,使得spark更适于通过一套代码进行大数据流处理和批量计算;

2、MLlib:spark0.8加入了MLlib,下一步会在MLlib中加入更多的机器学习算法,使得spark更适于分布式机器学习;

3、GraphX:是基于spark的图计算框架,当前很多社交网络分析,机器学习和图的相关算法最终完成推荐系统的工作,最终想达到让用户只通过几行简单的

                        代码能够实现图算法;

4、稳定性:与用户和开源社区合作,部署在多种应用场景下,包括ETL、SQL、机器学习、图分析等,使其更加稳定;

5、易用性:继续完善spark的python/java API,同时使其安装部署更加方便。

努力将spark打造成大数据时代的智能手机。

spark未来的发展方向,布布扣,bubuko.com

spark未来的发展方向

标签:java   数据   工作   算法   代码   python   

原文地址:http://blog.csdn.net/zcc_0015/article/details/32188097

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!