Flume： Flume是一种分布式的、可靠的、可用的服务，可以有效地收集、聚合和移动大量的日志数据。 它有一个基于流数据的简单而灵活的体系结构。 它具有健壮性和容错能力，具有可调的可靠性机制和许多故障转移和恢复机制。 它使用一个简单的可扩展数据模型，允许在线分析应用程序。 source：源 对ch ...
分类：
Web程序 时间：
2020-01-17 11:36:35
阅读次数：
104
之前学习了appium各种元素定位、手势操作，数据配置，pageobject设计模型等等 ，相对比较零散，没有完全的整合起来。 正所谓万丈高楼平地起，搭建一个完整的自动化框架变得很重要。 框架功能 测试包管理 业务功能封装 测试用例封装 截图处理 断言处理 日志管理 测试报告生成 数据配置 数据驱动 ...
分类：
移动开发 时间：
2020-01-16 18:33:13
阅读次数：
108
1.引入jar包 2.aop日志类 再次启动项目，控制台将输出日志，并将日志写入到文件中 3.利用aop实现表单防重复提交 方法1： 1.后端生成一个唯一的提交令牌（token），并存储在缓存中。 2.页面提交请求携带这个提交令牌，后端验证并在第一次验证后删除该令牌，保证提交请求的唯一性。 方法2： ...
分类：
编程语言 时间：
2020-01-15 13:40:16
阅读次数：
81
1.容器技术和容器平台技术 （1）容器技术： （1.1）容器核心知识：是什么、为什么、怎么做（架构、镜像、容器、网络、存储）； （1.2）容器进阶知识：multi-host、容器网络、数据管理、日志管理、安全性。 （2）容器平台技术： （2.1）容器编排引擎：docker swarm、kuberne ...
分类：
其他好文 时间：
2020-01-14 12:45:55
阅读次数：
173
问题 ASP报告内部错误，查看日志报告“不允许的父路径” 解决方案 当访问Pleskwin上的asp站点时候，报告内部服务器错误。这是一种通常常见的标准信息，需要去查看日志方可确定问题来源。 点击自己的站点，选择“日志管理器”，查看当天最新的日志。从日志中可以看到index.asp第xx行报错：“不 ...
分类：
Web程序 时间：
2020-01-12 10:01:32
阅读次数：
117
创建a2.conf文件并且编写 Sources 类型是exec 配置文件如下 启动集群 启动flume 产生临时文件 ...tmp 关闭临时文件 再次写入文本，会再次产生一个临时文件。截图左边是一个内容输入和时间对照 从时间上看出大概是30s会关闭这个文件。 在hdfs 上查看内容 以上根据自己的理 ...
分类：
Web程序 时间：
2020-01-10 16:01:33
阅读次数：
111
系统架构介绍 整个实时监控系统的架构是先由 Flume 收集服务器产生的日志 Log 和前端埋点数据, 然后实时把这些信息发送到 Kafka 分布式发布订阅消息系统，接着由 Spark Streaming 消费 Kafka 中的消息，同时消费记录由 Zookeeper 集群统一管理，这样即使 Kaf ...
分类：
其他好文 时间：
2020-01-07 11:44:25
阅读次数：
100
系统日志架构概述 在centos7系统中有两个日志服务，分别是传统的rsyslog和新添加的systemd-journal systemd-journal是一个改进型的日志管理服务，可以收集来自内核、系统早期的启动阶段的日志、系统守护进程在启动和运行中的标准输出和错误信息、还有syslog的日志。该 ...
分类：
其他好文 时间：
2020-01-04 14:29:17
阅读次数：
129
一、概述 1、log4j： Log4j是Apache的一个开源项目，通过使用Log4j，我们可以控制日志信息输送的目的地是控制台、文件、GUI组件，甚至是套接口服务器、NT的事件记录器、UNIX Syslog守护进程等；我们也可以控制每一条日志的输出格式；通过定义每一条日志信息的级别，我们能够更加细 ...
分类：
其他好文 时间：
2020-01-02 22:37:23
阅读次数：
97
众所周知,项目一旦上线一般是不允许改动的,但是线上一旦出现问题的话,看日志就是一件比较头痛的事情,因为并没有类似elk或者kafka的日志管理系统,小的项目也没有必要,所以常用的方法是sftp下日志,看问题,然后操作以后,再下载,所以想实现类似tail 命令的功能,可以实时看到日志输出,通过浏览器. ...
分类：
Web程序 时间：
2019-12-30 22:49:39
阅读次数：
100
