最近做集群机房迁移，在旧机房和新机房之间接了根专线，做集群不停机搬迁，也就是跨机房，同时要新加百多台服务器，遇到几个问题，记录一下。旧集群的机器是centos 6, 新机房加的机器是centos 7。一、丢包问题在跨机房的时候，datanode显示很多Slow BlockReceiver的日志WARN org.apache.hadoop.hdfs.server.datanod
分类：
其他好文 时间：
2018-07-13 16:21:59
阅读次数：
251
1 cd /usr/local/spark/spark-2.3.1-bin-hadoop2.6 2 ./bin/pyspark 3 >>> textFile = spark.read.text("README.md")2018-07-10 09:03:16 WARN ObjectStore:568 ...
分类：
其他好文 时间：
2018-07-10 11:26:21
阅读次数：
151
一、Log4j基本使用方法 Log4j由三个重要的组件构成：【日志信息的优先级】，【日志信息的输出目的地】，【日志信息的输出格式】。 日志信息的优先级从高到低有ERROR、WARN、 INFO、DEBUG，分别用来指定这条日志信息的重要程度； 日志信息的输出目的地指定了日志将打印到控制台还是文件中； ...
分类：
其他好文 时间：
2018-07-02 13:05:20
阅读次数：
166
程序用的是log4net打印日志，偶现日志打印不全的问题，程序的log4net配置如下： PatternLayout 相关配置信息如下所示： -X号: X信息输出时左对齐； %p: 输出日志信息优先级，即DEBUG，INFO，WARN，ERROR，FATAL, %d: 输出日志时间点的日期或时间，默 ...
分类：
Web程序 时间：
2018-06-29 21:06:19
阅读次数：
214
iVew框架的文档 https://www.iviewui.com/docs/guide/install 这里使用的是 npm 来安装，在项目下执行下面命令npm install iview --save： npm WARN ajv-keywords@3.2.0 requires a peer of ...
分类：
其他好文 时间：
2018-06-29 14:08:54
阅读次数：
2948
$("#worked_count").parent().attr("onClick","window.location.href='view/warn/task_list.html?task_status=D'"); $(document).ready(function () { console.d ...
1、要求： （1）必须是5.7.6版本以上的mysql （2）GTID状态为OFF 2、开启步骤： （1）：SET GLOBAL ENFORCE_GTID_CONSISTENCY = 'WARN'; （2）：SET GLOBAL ENFORCE_GTID_CONSISTENCY = 'ON'; （3 ...
分类：
数据库 时间：
2018-06-25 12:55:10
阅读次数：
639
一、 [zk: localhost:2181(CONNECTED) 1] rmr /zkTestPaths_92018-06-25 11:18:30,189 [myid:] - WARN [main-SendThread(localhost:2181):ClientCnxn$SendThread@1 ...
分类：
其他好文 时间：
2018-06-25 12:47:40
阅读次数：
232
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 解决方案是在文件hadoop-env.s ...
分类：
移动开发 时间：
2018-06-23 14:32:55
阅读次数：
182
] WARN org.apache.kafka.common.utils.AppInfoParser- Error registering AppInfo mbean javax.management.InstanceAlreadyExistsException: kafka.consumer:ty... ...
分类：
其他好文 时间：
2018-06-19 16:21:31
阅读次数：
1580
