DDL执行 线上服务器执行DDL,更新表结构,需要谨慎,结构更改会导致全表被独占锁定(新版本有改善) 避免这种情况,使用COPY策略,而不是直接执行ALTER TABLE语句 思路:创建一个新表,满足新要求,将旧表数据逐条导入新表,同时表上可以执行其他任务,导入的过程其他任务都记录在日志,导入完成后 ...
分类:
数据库 时间:
2020-03-18 20:15:58
阅读次数:
73
最近,在使用eclipse导入老项目的时候,出错,关键的一步是导入jar包的时候,出现Cannot nest output folder这个错误,真的很烦人,这个问题大概整了自己快有1个星期了,经过自己来来回回的摸索,今天终于发现问题的原因所在了。 这个是同事正常项目结构: 这个是在导入jar包成功 ...
分类:
系统相关 时间:
2020-01-20 15:07:01
阅读次数:
277
日志 导入logging函数 # 设置日志的记录等级 logging.basicConfig(level=logging.DEBUG) # 调试debug级 # 创建日志记录器,指明日志保存的路径、每个日志文件的最大大小、保存的日志文件个数上限 file_log_handler = Rotating ...
分类:
编程语言 时间:
2019-12-28 10:14:08
阅读次数:
93
MyBatis简单使用方式总结 三个部分来理解: 1.对MyBatis的配置部分 2.实体类与映射文件部分 3.使用部分对MyBatis的配置部分: 1.配置用log4J显式日志 2.导入包的别名 3.配置数据库连接 4.配置各个映射文件 参考代码:mybatis-config.xml log4j. ...
分类:
其他好文 时间:
2019-03-20 20:42:04
阅读次数:
209
日志服务器的运作机制大致是这样的: 1、客户端将日志发送到服务器,服务端的日志里于是出现了客户端的日志 2、服务端将日志导入mysql,通过php程序进行日志分析并显示在网页上。 环境:CentOS 6.3 x64 服务端:loganalyzer.test.org 192.168.1.249 客户端 ...
分类:
其他好文 时间:
2018-11-28 12:34:53
阅读次数:
238
需要准备的工作: 1 配置本地的ODBC链接 2 把iis日志导入到数据库中,这里的数据库可以根据自己的情况来选择,可以是sql server/mysql/oracle等. 3 在命令行里执行"C:\Program Files (x86)\Log Parser 2.2\logparser.exe" ...
分类:
其他好文 时间:
2018-11-18 21:02:58
阅读次数:
139
官方地址:https://www.elastic.co/guide/en/logstash-versioned-plugins/current/index.html 配置文件写法: # 日志导入input {}# 日志筛选匹配处理filter {}# 日志匹配输出output {} 日志解析配置文件 ...
分类:
其他好文 时间:
2018-08-05 13:09:11
阅读次数:
778
我们使用的 mariadb, 用的这个审计工具 https://mariadb.com/kb/en/library/mariadb-audit-plugin/ 这个工具一点都不考虑后期对数据的处理, 因为他的日志是这样的 所以需要上 logstash 格式化一下 注意 !!! replace 那个地 ...
分类:
数据库 时间:
2018-07-27 13:12:19
阅读次数:
260
一、前置准备: Linux命令基础 Scala、Python其中一门 Hadoop、Spark、Flume、Kafka、Hbase基础知识 二、分布式日志收集框架Flume 业务现状分析:服务器、web服务产生的大量日志,怎么使用,怎么将大量日志导入到集群 1、shell脚本批量,再传到Hdfs:实 ...
分类:
Web程序 时间:
2018-07-25 18:59:14
阅读次数:
367
#! /usr/bin/env python# ! -*- coding:utf8 -*-from __future__ import print_functionimport oss2import os, sysimport datetimeimport socketfrom pymongo im ...
分类:
其他好文 时间:
2018-06-07 11:36:54
阅读次数:
269