zookeeper负责协调 hbase必须依赖zookeeper flume 日志工具 sqoop 负责 hdfs dbms 数据转换 数据到关系型数据库转换 大数据学习群119599574 hadoop database 是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库 利用Hado ...
分类：
其他好文 时间：
2018-10-02 17:19:44
阅读次数：
155
1.XFTP 建立连接的时候要选择SFTP 2.关于如何删除Linux自带的JDK https://www.linuxidc.com/Linux/2016-12/138043.htm 1.#java -version 查看jdk版本2.#rpm -qa |grep jdk 查看jdk安装包3.#rp ...
分类：
其他好文 时间：
2018-09-22 19:53:10
阅读次数：
239
1、什么是hadoop hadoop中有3个核心组件： 分布式文件系统：HDFS —— 实现将文件分布式存储在很多的服务器上 分布式运算编程框架：MAPREDUCE —— 实现在很多机器上分布式并行运算 分布式资源调度平台：YARN —— 帮用户调度大量的mapreduce程序，并合理分配运算资源 ...
分类：
其他好文 时间：
2018-09-22 19:52:16
阅读次数：
169
1、什么是大数据 基本概念 《数据处理》 在互联网技术发展到现今阶段，大量日常、工作等事务产生的数据都已经信息化，人类产生的数据量相比以前有了爆炸式的增长，以前的传统的数据处理技术已经无法胜任，需求催生技术，一套用来处理海量数据的软件工具应运而生，这就是大数据！ 处理海量数据的核心技术： 海量数据存 ...
分类：
其他好文 时间：
2018-09-22 19:42:10
阅读次数：
142
1、Hadoop生态概况 Hadoop是一个由Apache基金会所开发的分布式系统集成架构，用户可以在不了解分布式底层细节情况下，开发分布式程序，充分利用集群的威力来进行高速运算与存储，具有可靠、高效、可伸缩的特点。大数据学习资料分享群119599574 Hadoop的核心是YARN,HDFS,Ma ...
分类：
其他好文 时间：
2018-09-19 12:50:26
阅读次数：
125
有很多学习大数据的朋友，在初期学习时，通常会对如何学习而感到迷茫。我经常收到零基础的朋友关于如何入门、如何规划学习大数据、大数据的学习流程是什么的一些问题。今天我就粗浅的总结几点学习大数据方法。 大数据学习资料分享群119599574一、兴趣建立 兴趣是可以让一个人持续关注一个事物的核心动力,那么兴 ...
分类：
其他好文 时间：
2018-09-18 13:08:05
阅读次数：
126
大数据已经火了很久了，一直想了解它学习它结果没时间，了解了一些资料，结合我自己的情况，整理了一个学习路线，。 学习路线 Linux(shell,高并发架构,lucene,solr) Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeepe ...
分类：
其他好文 时间：
2018-09-17 13:34:04
阅读次数：
148
前言： 一、背景介绍 二、大数据介绍 正文： 一、大数据相关的工作介绍 二、大数据工程师的技能要求 三、大数据学习规划 四、持续学习资源推荐（书籍，博客，网站） 五、项目案例分析（批处理+实时处理） 大数据学习群：119599574 前言 一、背景介绍 本人目前是一名大数据工程师，项目数据50T，日 ...
分类：
其他好文 时间：
2018-09-16 15:44:29
阅读次数：
158
大数据指不用随机分析法这样捷径，而采用所有数据进行分析处理的方法。互联网时代每个企业每天都要产生庞大的数据，对数据进行储存，对有效的数据进行挖掘分析并应用需要依赖于大数据开发，大数据开发课程采用真实商业数据源并融合云计算+机器学习，让学员有实力入职一线互联网企业。 今天小编的技术分享详细学习大数据的 ...
分类：
其他好文 时间：
2018-09-14 13:14:29
阅读次数：
151
最近很多人问小编现在学习大数据这么多，他们都是如何学习的呢。很多初学者在萌生向大数据方向发展的想法之后，不免产生一些疑问，应该怎样入门？应该学习哪些技术？学习路线又是什么？今天小编特意为大家整理了一份大数据从入门到精通的学习路线。并且附带学习资料和视频。希望能够帮助到大家。大数据学习资料分享群：11 ...
分类：
其他好文 时间：
2018-09-06 14:34:29
阅读次数：
201
