1：在flume/job下配置flume-file-logger.conf配置文件 2：在flume根目录下开启监听（注意，如果当天没有使用hive产生过日志文件的话先操作hive产生当天日志文件） 3：操作hive产生日志文件，查看控制台 ...
分类：
其他好文 时间：
2020-04-12 12:53:11
阅读次数：
150
装饰器的应用场景 附加功能 数据的清理或添加: 函数参数类型验证 @require_ints 类似请求前拦截 数据格式转换 将函数返回字典改为 JSON/YAML 类似响应后篡改 为函数提供额外的数据 mock.patch 函数注册 在任务中心注册一个任务 注册一个带信号处理器的函数 不同应用场景下 ...
分类：
编程语言 时间：
2020-04-10 13:29:05
阅读次数：
75
00 前言 在进行mysql性能优化的时候，第一个想到的便是查看慢sql。 但是对于慢sql有没有什么好的工具进行分析呢？ 推荐两个工具mysqldumpslow及pt query digest。 mysqlslowdump较为简单，常用命令： 得到返回记录最多的20个sql mysqldumpsl ...
分类：
数据库 时间：
2020-04-10 12:20:50
阅读次数：
116
今天介绍一下SpringBoot配置日志文件 SpringBoot在所有的内部日志中使用Commons Logging，但是默认配置也提供了对常用日志的支持，如Java Util Logging，Log4J，Log4J2和Logback。但是每种Logger都可以通过配置使用控制台或者文件输出日志内 ...
分类：
编程语言 时间：
2020-04-08 22:17:57
阅读次数：
97
运行 Hibernate 测试的时候错误提示： log4j:WARN No appenders could be found for logger (org.jboss.logging). log4j:WARN Please initialize the log4j system properly. ...
分类：
Web程序 时间：
2020-04-08 10:16:00
阅读次数：
113
Log4J的配置文件就是用来设置记录器的级别、存放器和布局的，它可接key=value格式的设置或xml格式的设置信息。log4j.properties是被PropertyConfigurator类中的doConfigure方法进行解析的。 Log4J配置文件的基本格式如下： #配置根Logger ...
分类：
其他好文 时间：
2020-04-07 15:35:54
阅读次数：
59
--前期准备（添加到队列中） 0-1在新建后的MVC项目中的【Models】中添加一个类，用于处理异常信息，并继承自HandleErrorAttribute public class MyExceptionAttribute: HandleErrorAttribute { //创建队列集合 publ ...
分类：
Web程序 时间：
2020-04-05 13:43:32
阅读次数：
82
1、搭建项目的目录规范 - ATM 项目根目录 - readme.md 项目的说明书 - start.py 项目启动文件 - conf 配置文件 - settings.py - lib 公共方法文件 - common.py - core（用户视图层） 存放用户视图层代码文件 - src.py - i ...
分类：
其他好文 时间：
2020-04-05 09:39:19
阅读次数：
69
目标:根据配置问价内心戏,加载爬虫,抓取代理ip,进行校验,如果可用写入到数据库中 思路: 1.在run_spider.py中,创建RunSpider类 2.提供一个运行爬虫的run方法,作为运行爬虫的入口,实现核心的处理逻辑 根据配置文件信息,获取爬虫对象列表 遍历爬虫对象列表,获取爬虫对象,遍历 ...
分类：
编程语言 时间：
2020-04-04 22:43:26
阅读次数：
117
之前在用python自带的logging包进行日志输出的时候发现有些logging语句没有输出，感到比较奇怪就去查了一下logging文档。然后发现其在设置和引用时的logging level会影响最后的输出。logging包默认对输出分成了6个等级：这里的分值就代表了相应关键字出现的等级高低，NO ...
分类：
编程语言 时间：
2020-04-04 11:21:54
阅读次数：
74
