1：在flume/job下配置flume-file-logger.conf配置文件 2：在flume根目录下开启监听（注意，如果当天没有使用hive产生过日志文件的话先操作hive产生当天日志文件） 3：操作hive产生日志文件，查看控制台 ...
分类：
其他好文 时间：
2020-04-12 12:53:11
阅读次数：
150
Springboot默认使用的日志框架就是logback 创建自定义的logback spring.xml放在resources类目录下即可 logback spring.xml: java调用： ...
分类：
编程语言 时间：
2020-04-12 00:02:28
阅读次数：
66
1。hadoop生态系统 2.Hadoop分布式文件系统 2.1 HDFS的设计 2.2 HDFS的概念 数据块 namenode和datanode HDFS的高可用性 2.3命令行接口 2.4hadoop文件系统 2.5通过Flume和sqoop导入数据 ...
分类：
其他好文 时间：
2020-04-09 15:30:24
阅读次数：
92
1. monkey 1.1. 介绍 通过monkey程序模拟用户触摸屏幕，滑动Trackball、按键等操作来对设备上的程序进行压力测试，检测程序多久的时间会发生异常，检查和评估被测程序的稳定性 官方：Monkey是一个程序，运行在您的模拟器或设备上，并生成伪随机的用户事件流，如点击，触摸或手势，以 ...
分类：
其他好文 时间：
2020-04-09 01:01:27
阅读次数：
399
postgresql的日志管理比较灵活，可以设置多种格式log_destination=‘csvlog‘;调成csvlog后log_line_prefix无效；然后自己写个脚本就可以在数据库中方便的调用了，我这里用的是外部表方式，得装file_fdw扩展；如果不装就可以考虑直接copy到数据库里去；
分类：
数据库 时间：
2020-04-09 00:22:01
阅读次数：
114
大家一直都在谈论微服务架构，园子里面也有很多关于微服务的文章，前几天也有一些园子的朋友问我微服务架构的一些技术，我这里就整理了微服务架构的技术栈路线图，这里就分享出来和大家一起探讨学习，同时让新手对微服务相关技术有一个更深入的了解。 ...
分类：
Web程序 时间：
2020-04-08 10:22:07
阅读次数：
113
创建3台虚拟机 主机为桌面版 其他为迷你版本 ******************************常用命令、进程名称****************************启动集群命令： start-all.sh启动zookeeper： zkServer.sh start 启动journal ...
分类：
Web程序 时间：
2020-04-05 00:40:06
阅读次数：
101
学习了这么久hadoop，都没有搭过集群，是不合格的。这次搭建完，细扣具体的Job运行情况，日志信息，对Hadoop了解更深了。后面也要陆续搭建分布式flume,kafka,hbase,mysql来完成最终的离线批处理分析项目。 搭建步骤 1. 虚拟机环境准备(IP地址、主机名、新用户、防火墙、SS ...
分类：
其他好文 时间：
2020-04-04 15:00:32
阅读次数：
81
kubernetes的EFK部署标签（空格分隔）：kubernetes系列一：kubernetes的EFK部署一：kubernetes的EFK部署1.1关于pod的日志信息cd/var/log/containers/lsls-lrt*1.2kubernetes的EFK部署添加Googleincubator仓库helmrepoaddincubatorhttp://storage.googleapis
分类：
Web程序 时间：
2020-04-03 18:01:14
阅读次数：
131
Flume定义： Flume是Cloudera提供的一个高可用的、高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构， 灵活简单。 为什么选用Flume 主要作用： 实时读取服务器本地磁盘的数据， 将数据写入到HDFS Flume的组织架构 1、最简单的组织架构 2、Flume ...
分类：
Web程序 时间：
2020-04-02 22:33:57
阅读次数：
107
