阅读目录 一 介绍 二 索引的原理 三 索引的数据结构 四 聚集索引与辅助索引 五 MySQL索引管理 六 测试索引 七 正确使用索引 八 联合索引与覆盖索引 九 查询优化神器 explain 十 慢查询优化的基本步骤 十一 慢日志管理 一 介绍 为何要有索引? 一般的应用系统，读写比例在10:1左 ...
分类：
数据库 时间：
2019-09-05 18:49:47
阅读次数：
97
1.1 什么是Spark Streaming Spark Streaming类似于Apache Storm，用于流式数据的处理。根据其官方文档介绍，Spark Streaming有高吞吐量和容错能力强等特点。Spark Streaming支持的数据输入源很多，例如：Kafka、Flume、Twitt ...
分类：
其他好文 时间：
2019-09-04 10:22:15
阅读次数：
115
官网指导文档： http://flume.apache.org/releases/content/1.7.0/FlumeDeveloperGuide.html http://flume.apache.org/releases/content/1.9.0/FlumeDeveloperGuide.htm ...
分类：
Web程序 时间：
2019-09-03 12:06:57
阅读次数：
114
1.下载安装 Java代码 官方网站：http://flume.apache.org/ http://mirror.bit.edu.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz tar -zxvf apache-flume-1.6.0-bin ...
分类：
Web程序 时间：
2019-09-02 12:02:11
阅读次数：
119
日志采集框架Flume Flume介绍 概述 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 Flume可以采集文件，socket数据包、文件、文件夹、kafka等各种形式源数据，又可以将采集到的数据(下沉sink)输出到HDFS、hbase、hive、kafka等众多外部 ...
分类：
Web程序 时间：
2019-09-02 09:35:39
阅读次数：
86
模拟实现一个ATM + 购物商城程序额度15000或自定义实现购物商城，买东西加入购物车，调用信用卡接口转账可以体现，手续费5%支持多账户登录支持账户间转账记录每月日常消费流水提供还款接口ATM记录操作日志提供管理接口，包括添加账户，用户额度，冻结账户等。。。用户认证用装饰器 ...
分类：
其他好文 时间：
2019-09-02 09:25:23
阅读次数：
98
项目中使用了tomcat，Nginx，测试阶段，生产阶段经常会有些bug需要调查。需要有些日志管理工具，在没有ELK的情况下，可以通过配置nginx来实现基本的日常查看。不需要登录到Linux服务器上，通过浏览器即可快速获得日志文件。 开发测试环境适用，生产环境慎用。 规划： 1.准备通过web查询 ...
分类：
其他好文 时间：
2019-09-01 01:31:33
阅读次数：
99
一、Flume简介 Apache Flume 是一个分布式，高可用的数据收集系统。它可以从不同的数据源收集数据，经过聚合后发送到存储系统中，通常用于日志数据的收集。Flume 分为 NG 和 OG (1.0 之前) 两个版本，NG 在 OG 的基础上进行了完全的重构，是目前使用最为广泛的版本。下面的 ...
分类：
Web程序 时间：
2019-08-31 17:18:53
阅读次数：
130
1 介绍 ELK日志管理属于基础设施平台，接入多个应用系统是正常现象，如果接入多个系统的索引文件没有进行权限划分，那么很大程度会出现索引文件误处理现象，为了避免这种情况发生，多用户及权限设置必不可少。 通过Filebeat采集应用日志，发送到redis（或者kafka），通过在filebeat.ym ...
分类：
其他好文 时间：
2019-08-29 09:52:25
阅读次数：
1127
讲师阮一鸣介绍ebay的Pronto团队在ebay内部管理上百个Elasticsearch集群，超过4000个数据节点。在生产环境上支持的服务有 订单搜索、商品推荐、日志管理、风险控制、IT运维、安全监控等。 Elasticsearch能做什么 首先先了解Elasticsearch是什么，摘抄自以下 ...
分类：
其他好文 时间：
2019-08-20 22:24:02
阅读次数：
202
