hadoop集群安装 安装环境服务部署规划 服务器IP node01 node02 node03 HDFS NameNode HDFS SecondaryNameNode HDFS DataNode DataNode DataNode YARN ResourceManager YARN NodeMa ...
分类：
其他好文 时间：
2021-03-09 12:59:55
阅读次数：
0
在linux系统中，文件、目录的操作权限可以分为 r（读）：4 w（写）：2 x（执行）：1 假设和值为7，7=4+2+1，代表着rwx三个权限都有；假设和值为6=4+2，代表着rw两个权限不可执行。以此类推。 而777，代表着最高权限。如果某文件被赋予了777权限，表示该文件允许文件的拥有者、文件 ...
分类：
其他好文 时间：
2021-03-08 14:16:18
阅读次数：
0
打开 在Python中，使用open函数，可以打开一个已经存在的文件，或者创建一个文件，语法如下： 变量(文件对象) = open(name,mode) name:是要打开的目标文件名的字符串（可以包含文件具体路径） mode：设置打开文件的模式（访问模式）：只读、写入、追加等 打开文件模式 **注 ...
分类：
编程语言 时间：
2021-03-08 13:11:36
阅读次数：
0
一、进程与线程的区别？ 进程是所有线程的集合，每一个线程是进程中的一条执行路径，线程只是一条执行路径。 二、创建线程的三种方式： 继承Thread类创建线程类 实现Runnable接口 通过Callable和Future创建线程 三、创建线程池的四种方式：（参考1） newCachedThreadP ...
分类：
编程语言 时间：
2021-03-06 14:38:29
阅读次数：
0
杀死进程 $HADOOP_HOME/sbin/stop-yarn.sh $HADOOP_HOME/sbin/stop-dfs.sh 删除所有节点 hadoop 根目录下的 data 和 logs rm -rf data/ logs/ 格式化 在 hadoop 根目录下执行 hdfs namenode ...
分类：
其他好文 时间：
2021-03-06 14:35:10
阅读次数：
0
MySQL复制 （1）扩展方式： Scale Up ，Scale Out （2）MySQL的扩展 读写分离 复制：每个节点都有相同的数据集 向外扩展 二进制日志 单向 （3）复制的功用： 数据分布 负载均衡读 备份 高可用和故障切换 MySQL升级测试 一主多从 主从复制介绍 两台或两台以上实例，通 ...
分类：
数据库 时间：
2021-03-04 13:19:58
阅读次数：
0
说明 Percona XtraDB Cluster(简称PXC)，是由percona公司推出的mysql集群解决方案。特点是每个节点都能进行读写，且都保存全量的数据。也就是说在任何一个节点进行写入操作，都会同步给其它所有节点写入到自己的磁盘。这点跟Oracle Rac有本质的区别，Rac是多个节点连 ...
分类：
数据库 时间：
2021-03-04 13:04:00
阅读次数：
0
create table customer row format SERDE 'org.apache.hadoop.hive.serde2.avro.AvroSerDe'stored as inputformat 'org.apache.hadoop.hive.ql.io.avro.AvroCont ...
分类：
其他好文 时间：
2021-03-03 12:21:19
阅读次数：
0
大数据概述 一.用图表描述Hadoop生态系统的各个组件及其关系。 Hadoop生态系统除了核心的HDFS和MapReduce以外，Hadoop生态系统还包括Zookeeper、HBase、Hive、Pig、Mahout、Sqoop、Flume、Ambari等功能组件。 (1).HDFS:具有处理超 ...
分类：
其他好文 时间：
2021-03-03 12:14:24
阅读次数：
0
在MySQL作为应用系统的后台数据库时，我们常常见到这样的架构，一拖二、一拖三等等。这是用MySQL的读写分离技术，实现数据的写入和读取分别在不同的库上，提升了数据库服务能力。同样，在Oracle作为后台数据库的架构中，我们也可以这么做。实现的方式有很多种。有基于RAC架构的，使用其中某个节点作为读 ...
分类：
数据库 时间：
2021-03-03 11:51:56
阅读次数：
0
