码迷,mamicode.com
首页 > 其他好文 > 详细

关于大数据工程师要掌握的知识

时间:2016-06-19 15:40:13      阅读:147      评论:0      收藏:0      [点我收藏+]

标签:

1、hadoop、Hive、sqoop、spark、storm、odps、dremel、hbase(hadoop、spark重要)

2、oracle、mysql后台开发,以及对量海数据处理、高并发请求处理

3、熟悉Linux,Shell或Python等语言

4、互联网行业数据挖掘

5、分布式、多线程及高性能的设计与编码及性能调优(重要)

6、熟悉Internet基本协议(如TCP/IP. HTTP等)内容及相关应用

7、设计模式、事务处理、缓存框架、搜索引擎、任务调试、Web Service、http、图片服务器

8、熟悉相关计算学习算法,包括贝叶斯、随机树、神经网络等,良好的数据结构基础,包括树和图的相关计算

9、熟悉全文检索技术,如ElasticSearch、lucene等使用

关于大数据工程师要掌握的知识

标签:

原文地址:http://www.cnblogs.com/liuranjsj/p/5597982.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!