为什么使用ELK日志分析:一般我们需要进行日志分析场景:直接在日志文件中grep、awk就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统,将所有节点上的日志统一收集,管理,访问。准备两台测试服务器:Centos7(1),Cento
分类:
其他好文 时间:
2019-05-12 01:01:41
阅读次数:
153
1、ls命令 就是list的缩写,通过ls 命令不仅可以查看linux文件夹包含的文件,而且可以查看文件权限(包括目录、文件夹、文件权限)查看目录信息等等 常用参数搭配: ls -a 列出目录所有文件,包含以.开始的隐藏文件 ls -A 列出除.及..的其它文件 ls -r 反序排列 ls -t ...
分类:
其他好文 时间:
2019-04-18 09:25:27
阅读次数:
111
为什么用到ELK: 一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集 ...
分类:
其他好文 时间:
2019-03-20 19:07:52
阅读次数:
217
文本处理工具和正则表达式Linux文本处理三剑客grep:文本过滤(模式:pattern)工具grep,egrep,fgrep(不支持正则表达式搜索)sed:streameditor,文本编辑工具awk:Linux上的实现gawk,文本报告生成器本篇主要讲述grep一.grep作用:文本搜索工具,根据用户指定的“模式”对目标文本逐行进行匹配检查;打印匹配到的行。(模式就是“正则表达式”)模式:由正
分类:
系统相关 时间:
2019-03-20 15:58:37
阅读次数:
205
关于三维模型搜索引擎项目相关度排序算法是怎么做的: 以文字搜模型: 基于Lucene文本搜索引擎,查找最匹配的; 以图片搜模型: 计算图片特征,对图片特征计算HashCode, 搜索的时候匹配HashCode; 以模型搜模型: 计算模型的特征得到n维特征矩阵, 对特征矩阵计算HashCode, 搜索 ...
分类:
其他好文 时间:
2019-03-20 01:05:11
阅读次数:
240
1.作用Linux系统中grep命令是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。grep全称是GlobalRegularExpressionPrint,表示全局正则表达式版本,它的使用权限是所有用户。2.格式grep[options]3.主要参数[options]主要参数:-c:只输出匹配行的计数。-I:不区分大小写(只适用于单字符)。-h:查询多文件时不显示文件名
分类:
系统相关 时间:
2019-03-18 22:29:03
阅读次数:
188
文本处理三剑客(grep)grep:文本过滤(模式:pattern)工具grep,egrep,fgrep(不支持正则表达式搜索)作用:文本搜索工具,根据用户指定的“模式”对目标文本逐行进行匹配检查;打印匹配到的行模式:由正则表达式字符及文本字符所编写的过滤条件grep命令选项-color=auto:对匹配到的文本着色显示-m#匹配#次后停止-v显示不被pattern匹配到的行-I忽略字符大小写-n
分类:
其他好文 时间:
2019-03-16 15:34:56
阅读次数:
168
ELK系列的示例中,启动的是单个的ES节点。 系列文章: 【ELK】【docker】【elasticsearch】1. 使用Docker和Elasticsearch+ kibana 5.6.9 搭建全文本搜索引擎应用 集群,安装ik分词器 【ELK】【docker】【elasticsearch】2. ...
分类:
其他好文 时间:
2019-02-28 11:54:47
阅读次数:
1012
Linux三剑客:grep, awk, sed。 Linux命令搜索及查看-> 点击这里。 grep 命令 :强大的文本’搜索’工具 sed :实现数据的增加,删除,替换,选取等(按顺序逐行读取文件,不会影响源文件) 格式:sed [option] [command] [file] 常用命令: a ...
分类:
系统相关 时间:
2019-02-21 15:53:51
阅读次数:
228