这本书由宋立桓老师和陈建平老师共同合作,本书的切入点明确而清晰,从Hadoop生态明星Cloudera入手,单刀直入逐步引出各类大数据基础和核心应用框架。全书系统介绍了大数据的相关知识,全书共十八章(宋立桓老师撰写第一章到第十二章、陈建平撰写第十三章到第十八章),从大数据概述、Clouderahadoop平台的安装部署、并对大数据hadoop组件分别进行介绍,包括HDFS分布式文件系统、MapRe
分类:
其他好文 时间:
2018-11-15 00:19:59
阅读次数:
154
这本书由宋立桓老师和陈建平老师共同合作,本书的切入点明确而清晰,从Hadoop生态明星Cloudera入手,单刀直入逐步引出各类大数据基础和核心应用框架。全书系统介绍了大数据的相关知识,全书共十八章(宋立桓老师撰写第一章到第十二章、陈建平撰写第十三章到第十八章),从大数据概述、Clouderahadoop平台的安装部署、并对大数据hadoop组件分别进行介绍,包括HDFS分布式文件系统、MapRe
分类:
其他好文 时间:
2018-11-14 21:00:22
阅读次数:
179
什么是大数据?进入本世纪以来,尤其是2010年之后,随着互联网特别是移动互联网的发展,数据的增长呈爆炸趋势,已经很难估计全世界的电子设备中存储的数据到底有多少,描述数据系统的数据量的计量单位从MB(1MB大约等于一百万字节)、GB(1024MB)、TB(1024GB),一直向上攀升,目前,PB(等于 ...
分类:
其他好文 时间:
2018-11-14 11:00:40
阅读次数:
412
Hadoop大数据部署 一. 系统环境配置: 1. 关闭防火墙,selinux 关闭防火墙: 设置selinux为disable 2. 配置ntp时间服务器 将IP地址换成可用的时间服务器IP 3. 修改系统限制 4. 创建hadoop用户 5. 配置hosts 6. 分发公钥 保证某一个节点上都有 ...
分类:
其他好文 时间:
2018-11-02 23:58:45
阅读次数:
366
hadoop大数据平台架构之DKhadoop详解大数据的时代已经来了,信息的爆炸式增长使得越来越多的行业面临这大量数据需要存储和分析的挑战。Hadoop作为一个开源的分布式并行处理平台,以其高拓展、高效率、高可靠等优点越来越受到欢迎。这同时也带动了hadoop商业版的发行。这里就通过大快DKhado ...
分类:
其他好文 时间:
2018-10-09 14:26:12
阅读次数:
167
据能够在国内得到快速发展,甚至是国家层面的支持,最为重要的一点就是我们纯国产大数据处理技术的突破以及跨越式发展。在互联网深刻改变我们的生活、工作方式的当下,数据就成为了最为重要的资料。尤其是数据安全问题就更为突出,前阶段的Facebook用户数据泄漏所引发产生的一系列问题,就充分的说明了数据安全问题 ...
分类:
其他好文 时间:
2018-10-09 14:23:32
阅读次数:
214
一、简单科普类 (文末附下载链接) 1、《人工智能:李开复谈AI如何重塑个人、商业与社会的未来图谱2》 作者:李开复,王咏刚 推荐理由:文章写得一般,但李开复和王永刚老师总结的还可以,算国内比较简单的一本AI科普作品 图书简介:人工智能被写入2017年政府工作报告,智能革命时代先行者李开复,人工智能 ...
分类:
其他好文 时间:
2018-09-27 18:09:25
阅读次数:
147
HDFS是Hadoop大数据平台中的分布式文件系统,为上层应用或其他大数据组件提供数据存储,如Hive,Mapreduce,Spark,HBase等。
分类:
其他好文 时间:
2018-09-14 11:55:55
阅读次数:
201
大数据是做什么的 ? 大数据– 随着计算机技术的发展,互联网的普及,信息的积累已经到了一个非常庞大的地步,信息的增长也在不断 的加快,随着互联网、物联网建设的加快,信息更是爆炸是增长,收集、检索、统计这些信息越发困难, 必须使用新的技术来解决这些问题 ? 大数据的定义:1、 大数据由巨型数据集组成, ...
分类:
其他好文 时间:
2018-09-05 17:39:22
阅读次数:
603
Hadoop发展到今天家族产品已经非常丰富,能够满足不同场景的大数据处理需求。作为目前主流的大数据处理技术,市场上很多公司的大数据业务都是基于Hadoop开展,而且对很多场景已经具有非常成熟的解决方案。 作为开发人员掌握Hadoop及其生态内框架的开发技术,就是进入大数据领域的必经之路。 下面详细介 ...
分类:
其他好文 时间:
2018-08-18 13:20:23
阅读次数:
161