码迷,mamicode.com
首页 >  
搜索关键字:日志采集    ( 185个结果
Java开发工程师案例-网络日志分析系统
章节1:项目简介 课时1项目简介14:50 章节2:创建工程 课时2创建数据库09:40 课时3搭建程序框架09:09 章节3:主窗口布置 课时4创建主窗口14:45 课时5主窗口布局 10:57 课时6添加菜单栏12:09 课时7添加工具栏13:29 课时8添加按钮面板11:29 课时9按钮联动操作09:19 章节4:日志采集 课时10日志读取17:23 课时11...
分类:编程语言   时间:2015-07-28 09:09:10    阅读次数:214
seci-log 1.07 发布 增加资产发现和远程日志分析
日志分析软件 seci-log 1.07发布,增加了资产,端口扫描,并把发现的资产自动添加到资产库中,支持远程日志采集分析。上篇文章http://www.oschina.net/news/63425/seci-log-1-06,有兴趣可以了解一下...
分类:其他好文   时间:2015-07-01 20:45:24    阅读次数:243
监控系统选型
一. 监控系统选型1. nagio, 2. zabbix,3. nagios + cacti,4. 小米刚开源了自己的监控系统 open-falcon 可以看看二. 纯日志采集与分析使用ELK, 三件套的使用。
分类:其他好文   时间:2015-06-26 21:01:54    阅读次数:108
Flume环境部署和配置详解及案例大全
flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力 。 一、什么是Flume? flume 作为 cloudera 开发...
分类:Web程序   时间:2015-05-25 16:15:53    阅读次数:258
Flume-ng+Kafka+storm的学习笔记
Flume-ngFlume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 Flume的文档可以看http://flume.apache.org/FlumeUserGuide.html官方的英文文档 介绍的比较全面。 不过这里写写自己的见解这个是flume的架构图从上图可以看到几个名词...
分类:Web程序   时间:2015-05-02 01:01:18    阅读次数:348
flume 日志采集工具
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。当前Flume有两个版本Flume 0.9X版本的统称Flume...
分类:Web程序   时间:2015-04-14 19:35:33    阅读次数:154
Flume 1.5日志采集并存入mongodb的安装搭建
Flume的介绍就不多说了,大家可以自己搜索。但是目前网上大都是Flume 1.4版本或之前的资料,Flume 1.5感觉变化挺大的,如果你准备尝试一下,我这里给大家介绍一下最小化搭建方案,并且使用MongoSink将数据存入mongodb。完全单机运行,没有master,没有collector(说白了collector也就是一个agent,只是数据来源于多个其他agent),只有一个agent。...
分类:数据库   时间:2014-11-13 16:39:29    阅读次数:464
企业服务总线之日志分析平台
日志分析平台Sm@rtLogAnalysis是为用户提供通过图形界面快捷查找历史日志,高效定位问题的功能。提供了平台日志查询、业务日志查询、日志备份、日志系统节点管理等功能,可以帮助用户准确配置和查询日志信息。      日志分析平台分两部分,一部分是日志采集模块即LogApp,负责收集ESB平台日志和业务日志,另一部分是日志分析模块,负责分类分析日志、备份日志等功能。   产品...
分类:其他好文   时间:2014-10-27 17:40:02    阅读次数:200
多种字符集并存情况下sqoop从MySQL导入HBase中文乱码解决
最近在做binlog日志采集同步到数据平台的事。刚开始需要借助sqoop将从库数据表数据初始化到hbase中,整个过程都需要自动化进行,尽量减少人为干预。但是,由于历史原因,线上存在两种字符集格式的数据库(表),而导入到hbase的数据我们需要统一采用utf-8格式存储。sqoop直接导入的话,没法控制中文字符转码工作。所以需要对sqoop源码进行简单改动支持这种方式。 大体思路是,通过定义一个...
分类:数据库   时间:2014-09-11 19:26:02    阅读次数:573
Flume 1.5.0简单部署试用
================================================================================一、Flume简介================================================================================1、概述Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输..
分类:其他好文   时间:2014-08-30 19:11:30    阅读次数:368
185条   上一页 1 ... 16 17 18 19 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!