elk开源分布式日志分析平台一.简介1.核心组成2.三大组件3.elk的工作流程4.elk的帮助手册二.Logstash和elasticsearch(elasticsearch和logstash依赖java环境)1.java2.nginx的安装3.redis的安装4.安装elasticsearch5.安装logstash6.安装kibana三.检验elk的日志结果一.简介1.核心组..
分类:
其他好文 时间:
2016-11-07 08:27:40
阅读次数:
252
本课程的基础课程是,Hadoop数据分析平台课程。相信,能看我本博文的朋友,是有一定的基础了。 只是前个课程是讲解,这个课程是应用。 第一层是:数据源层,代表有生产线上的数据,比如关系型数据库orcal,电子商务网站,网站的访问日志。 第二层是:数据仓库或数据集层。 第三层是:数据探索层,如要列出本 ...
分类:
其他好文 时间:
2016-11-07 02:26:16
阅读次数:
372
Apache Kylin大数据分析平台的演进 转:http://mt.sohu.com/20160628/n456602429.shtml 我是来自Kyligence的李扬,是上海Kyligence的联合创始人兼CTO。今天我主要来和大家分享一下来Apache Kylin 1.5的新功能和架构改变。 ...
分类:
Web程序 时间:
2016-09-06 13:56:22
阅读次数:
333
使用Apache Kylin搭建企业级开源大数据分析平台 转:http://www.thebigdata.cn/JieJueFangAn/30143.html 我先做一个简单介绍我叫史少锋,我曾经在IBM、eBay做过大数据、云架构的开发,现在是Kyligence的技术合伙人。 Kylin是这两年在 ...
分类:
Web程序 时间:
2016-09-05 19:03:31
阅读次数:
201
简介 随着云时代的到来,大数据(big data)也越来越受大家的关注,比如互联网行业日常生成的运营、用户行为数据,随着时间及访问量的增长这一规模日益庞大,单位可达日TB或PB级别。如何在如此庞大的数据中挖掘出对我们有用的信息?目前业界主流存储与分析平台是Hadoop为主的开源生态圈,MapRedu ...
分类:
其他好文 时间:
2016-08-22 17:50:32
阅读次数:
203
一、环境搭建 1. 《OD大数据实战》Hadoop伪分布式环境搭建 2. 《OD大数据实战》Hive环境搭建 3. 《OD大数据实战》Flume入门实例 4. 《OD大数据实战》Kafka入门实例 5. 《OD大数据实战》Oozie环境搭建 6. 7. 《OD大数据实战》HBase环境搭建 二、 ...
分类:
其他好文 时间:
2016-08-17 10:32:16
阅读次数:
1109
1、介绍elk是实时日志分析平台,主要是为开发和运维人员提供实时的日志分析,方便人员更好的了解系统状态和代码问题。2、elk中的e(elasticsearch):(2.1)先安装依赖包,官方文档说明使用java1.8yum-yinstalljava-1.8.0-openjdk安装elasticsearch:tarzvxfelasticsearch-1.7...
分类:
其他好文 时间:
2016-08-11 23:30:29
阅读次数:
814
笔者是一位移动互联网老兵,做过好几个App的开发运营工作,其中一些如今侥幸有了上亿用户。今天和大家聊一下App开发中,不能缺少的一个工具——数据分析系统 首先,App创业者为什么需要一个数据分析系统? 当你开发了一个App,它有精美的UI,优秀的功能,极致的用户体验,满心欢喜地提交到各个应用商店,是 ...
分类:
移动开发 时间:
2016-08-09 19:05:52
阅读次数:
208
转自:http://www.wowotech.net/u-boot/boot_flow_1.html 1. 前言 本文将结合u-boot的“board—>machine—>arch—>cpu”框架,介绍u-boot中平台相关部分的启动流程。并通过对启动流程的简单分析,掌握u-boot移植的基本方法。 ...
分类:
其他好文 时间:
2016-08-06 21:53:29
阅读次数:
450
A,首先说说ELK是啥, ELK是ElasticSearch 、 Logstash 和 Kiabana 三个开源工具组成。Logstash是数据源,ElasticSearch是分析数据的,Kiabana是展示数据用的 B,开始搞 1,安装 Logstash 依赖包 JDK JDK 的安装方式比较简单 ...
分类:
其他好文 时间:
2016-08-02 18:51:48
阅读次数:
176