1：namenode+secondaryNameNode工作机制 2：datanode工作机制 3：HDFS中的通信（代理对象RPC） 下面用代码来实现基本的原理 1：服务端代码 2：代理对象接口 3：代理对象的实现 4：客服端 ...
分类：
其他好文 时间：
2019-04-29 22:31:44
阅读次数：
203
大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的IT技术。在这里还是要推荐下我自己建的大数据学习交流群:529867072，群里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入,大家都是软件
分类：
其他好文 时间：
2019-04-28 12:30:06
阅读次数：
125
1）hdfs的客户端 1.网页形式->测试用 http://192.168.40.11:50070/dfshealth.html#tab-overview 2.命令行形式->测试用 3.企业级API 2）查看帮助 hdfs dfs -help 3）查看当前目录信息 hdfs dfs -ls / 3） ...
分类：
其他好文 时间：
2019-04-27 23:59:22
阅读次数：
339
大数据已经融入到各行各业，哪些大数据技术是最受欢迎？哪些大数据技术潜力巨大？请听大讲台老师对10个最热门的大数据技术的介绍。 大数据学习群：199427210 （一）预测分析 预测分析是一种统计或数据挖掘解决方案，包含可在结构化和非结构化数据中使用以确定未来结果的算法和技术。可为预测、优化、预报和模 ...
分类：
其他好文 时间：
2019-04-26 13:36:05
阅读次数：
118
大数据学习之Linux进阶 1-> 配置IP 1）修改配置文件 vi /sysconfig/network-scripts/ifcfg-eno16777736 2）注释掉dhcp #BOOTPROTO="dhcp" 3）添加配置（windows->ipconfig -all） IPADDR=192. ...
分类：
系统相关 时间：
2019-04-25 01:22:06
阅读次数：
170
大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。首先给出一个通用化的大数据处理框架，主要分为下面几个方面：数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。 一、数据采集 ...
分类：
其他好文 时间：
2019-04-23 15:39:37
阅读次数：
163
一、大数据技术基础1、linux操作基础 linux系统简介与安装 linux常用命令–文件操作 linux常用命令–用户管理与权限 linux常用命令–系统管理 linux常用命令–免密登陆配置与网络管理 linux上常用软件安装 linux本地yum源配置及yum软件安装 linux防火墙配置 ...
分类：
其他好文 时间：
2019-04-10 00:47:38
阅读次数：
175
或许我们昨天还在畅想着未来，可是不知不觉，那个被我们畅想的未来已经悄然降临。不断的改变我们身边的方方面面。 我们必须跟上时代，才能不被时代所抛弃。 新时代人工智能的出现，让人类担心是否会被替代，我觉得大家大可不用担心。学习是我们人类天赋，只要你肯学习，就不会被取代。 当然我们也不能盲目的学，要有目标 ...
分类：
其他好文 时间：
2019-03-22 21:30:32
阅读次数：
132
面向对象的四大特性 static关键字 public class StaticDemo { String a = "非静态属性"; static String b = "静态属性"; static int c; static int d; static { System.out.println("这 ...
分类：
其他好文 时间：
2019-03-21 17:16:44
阅读次数：
147
Java常用API API（Application Programming Interface）应用程序接口 ...
分类：
其他好文 时间：
2019-03-20 01:21:32
阅读次数：
113
