一、定义agent，并运行1、配置文件#计划##收集hive的日志，存到hdfs/opt/cdh-5.3.6/hive-0.13.1-cdh5.3.6/logs/hive.log命令：tail -f source：Exec source 在启动时运行一个给定的Unix命令，并期望该进程在标准输出上不... ...
分类：
其他好文 时间：
2019-05-08 14:44:10
阅读次数：
214
一：引言： 大部分系统都涉及到数据访问，数据库包SQL（关系型数据库）和NOSQL（非关系型数据库），SQL包括：sqlserver，Oracle,Mysql；NOSQL包括：MongoDB和redis。 二：spring boot与jdbc整合 1.1 首先添加依赖 1.2 数据源配置 测试类：测 ...
分类：
编程语言 时间：
2019-05-03 13:03:04
阅读次数：
181
master做为集合节点 $FLUME_HOME/conf/agent1.conf agent1.channels = ch1 agent1.sources = avro-source1 agent1.sinks = log-sink1 agent1.channels.ch1.type=memory ...
分类：
Web程序 时间：
2019-05-02 09:41:57
阅读次数：
188
在实际需求中，我们往往需要不同的配置组合。例如，开发用的配置，测试用的配置，生产环境用的配置。为了能方便地在这些配置中切换，你可以把配置文件升级为包，然后为这些使用场景分别创建不同的配置文件，但是最方便的做法是在单个配置文件中使用python类来组织多个不同类别的配置。 下面的代码是personal ...
分类：
其他好文 时间：
2019-05-02 00:36:03
阅读次数：
181
在实际需求中，我们往往需要不同的配置组合。例如，开发用的配置，测试用的配置，生产环境用的配置。为了能方便地在这些配置中切换，你可以把配置文件升级为包，然后为这些使用场景分别创建不同的配置文件，但是最方便的做法是在单个配置文件中使用python类来组织多个不同类别的配置。 下面的代码是personal ...
分类：
其他好文 时间：
2019-04-30 23:48:47
阅读次数：
157
ssh-keygen ssh-copy-id Xshell 配置 测试可以正常登录，如果登录异常请检查 /etc/ssh/sshd_config 配置文件对应参数 ...
分类：
其他好文 时间：
2019-04-28 15:45:20
阅读次数：
140
一.性能测试有几种类型，它们之间什么关系？ 性能测试包括：负载测试、压力测试、配置测试、并发测试、容量测试、可靠性测试、失败测试。 负载测试: 通过在被测系统上不断加压，直到性能指标达到极限，例如“响应时间”超过预定指标或某种资源已经达到饱和状态。主要目的是找到系统处理能力的极限。 压力测试(强度测 ...
分类：
其他好文 时间：
2019-04-24 23:37:23
阅读次数：
249
十一、Nginx11.1、介绍11.2、常见其他 Web 服务器11.3、版本11.4、Nginx 安装11.5、目录结构11.6、操作命令十二、Mysql12.1、介绍12.2、关系型数据库(SQL)种类12.3、特征12.4、术语12.4、与非关系型数据库比较(Not Only SQL)12.4 ...
分类：
数据库 时间：
2019-04-15 20:11:41
阅读次数：
242
Spark Streaming用于流式数据的处理。Spark Streaming支持的数据输入源很多，例如：Kafka、Flume、Twitter、ZeroMQ和简单的TCP套接字等等。数据输入后可以用Spark的高度抽象原语如：map、reduce、join、window等进行运算。而结果也能保存 ...
分类：
其他好文 时间：
2019-04-14 17:44:05
阅读次数：
162
flume 拦截器(interceptor)1、flume拦截器介绍拦截器是简单的插件式组件，设置在source和channel之间。source接收到的事件event，在写入channel之前，拦截器都可以进行转换或者删除这些事件。每个拦截器只处理同一个source接收到的事件。可以自定义拦截器。 ...
分类：
Web程序 时间：
2019-04-02 21:03:11
阅读次数：
203
