概念 主从复制,就是将一台Redis服务器的数据,复制到其他Redis服务器,前者称之为主节点(master/leader),后者称之为从节点(slave/follower);数据的复制是单向的,只能由主节点到从节点。Master以写为主,Slave以读为主。 默认情况下,每台Redis服务器都是主 ...
分类:
其他好文 时间:
2020-05-10 01:40:12
阅读次数:
51
Spark Job log 文件分析: 下面是一个Spark 数据据统计Job 的 log 文件, 从前到后的顺序分析Job的执行过程(Spark local mode)。 启动 SparkContext 提交 Job RatingHistogram 20/05/04 18:02:20 INFO S ...
分类:
其他好文 时间:
2020-05-05 09:12:49
阅读次数:
103
1、批处理 传统消息中间件,一次只发送单挑消息;kafka,一次发送多条消息,微批处理。 2、数据压缩 日志格式,数据压缩,snappy, 3、顺序写入 只在log文件末尾追加 4、分区 参考: (1)https://mp.weixin.qq.com/s/G5nfLpPOr80pk1sHzrLuOA ...
分类:
其他好文 时间:
2020-04-30 09:49:07
阅读次数:
61
一、前言 在项目开发的过程中,日志是必不可少的一部分,可以帮我们定位异常,分析错误原因等功能,log4net是.Net下一个非常优秀的开源日志记录组件。log4net记录日志的功能非常强大。它可以将日志分不同的等级,以不同的格式,输出到不同的媒介。本文主要是介绍在前几篇已经创建好的项目里加上日志处理 ...
1. 将打包好的项目传到Linux下(如利用xftp) 2. 找到文件目录,执行以下命令: nohup java -jar xxxx.war >xxxx.log 2>&1 & 解释: 以上命令后台运行项目,并将输出信息打印到xxxx.log文件 3. 注意 项目pom.xml文件里需添加插件 <bu ...
分类:
编程语言 时间:
2020-04-22 16:09:05
阅读次数:
144
最近在重新搞了一遍接口自动化,发现每次执行完后会生成新的.log日志文件或者.html测试报告,因为这些最好以日期来命名,故每次都会新增一条,想控制一下总数,避免时间一长了就生成过多的文件。非常简单的思路,这里记录一下。
分类:
其他好文 时间:
2020-04-21 16:43:09
阅读次数:
56
新建文件夹 进入文件夹运行 npm init -y 新建app.js const Koa =require('koa') const app=new Koa() app.use(async(ctx)=>{ ctx.body='Hello world' }) app.listen(6789,()=>{ ...
分类:
其他好文 时间:
2020-04-15 17:55:01
阅读次数:
196
创建SqlServer容器 or 二者区别 文件路径差异 使用Navicat时候,发现通过UI菜单创建数据库时,由于没有默认目录,需要设定后才能正常创建。 但是使用SQL指令时候无此问题,注意:log文件路径也需要同时设置 ...
分类:
数据库 时间:
2020-04-11 20:16:04
阅读次数:
79
目标:如何写一个Python日志类,用来输出不同级别的日志信息到本地文件夹下的日志文件里。 练习场景: 我们需要封装一个简单的日志类,主要有以下内容: 1.生成的日志文件格式是 年月日分秒.log 2.生成的XXX.log文件存储在项目根目录下Logs文件夹下 3.这个日志类,支持INFO,ERRO ...
分类:
编程语言 时间:
2020-04-08 16:18:53
阅读次数:
91
1.使用make test中提到需要安装tcl 8.5以上.可以不按, 2.在退出redis-cli过程中失败,检查后发现在配置文件中未配置log文件信息.配置完路径自己创建了log文件之后还需要保证有访问的权限. 未解决的问题 1.在配置文件中更改 后台运行 不成功,拷贝conf文件到其他文件夹后 ...
分类:
其他好文 时间:
2020-04-04 15:01:04
阅读次数:
114