专栏介绍ELK是目前行业中非常热门的一个技术，它可以用于电商网站、门户网站、企业IT系统等各种场景下，也可以用于对海量的数据进行近实时的数据分析。专栏深入浅出剖析ELK在企业常见应用框架以及ZooKeeper、Kafka与ELK进行整合的方法和架构。首选通过具体的一个应用案例介绍ZooKeeper+Kafka+ELK构建一套实时日志处理系统的过程。然后通过对Logstash和filebeat的对比
分类：
其他好文 时间：
2018-08-20 20:15:17
阅读次数：
281
Maven的常见打包方式：jar、war、pom Pom工程一般都是父工程，管理jar包的版本、maven插件的版本、统一的依赖管理。聚合工程。 itrip-parent：父工程，打包方式pom，管理jar包的版本号。 | 项目中所有工程都应该继承父工程。 |-- itrip -common：通用的 ...
分类：
系统相关 时间：
2018-08-10 01:24:56
阅读次数：
183
参考：https://www.jianshu.com/p/9e72b3942c59 原因是在kafka集群kafka/config/server.properties文件中num.patitions = 1. 需要修改分区默认值。 partitions在是在创建topic的时候默认创建的partit ...
分类：
编程语言 时间：
2018-08-07 20:52:33
阅读次数：
1700
华为大数据kafka操作web界面创建角色、用户。用户管理角色进入服务器环境，进入客户端目录/opt/hadoopclient，导入环境变量source bigdata_env。切换用户kinit kafka用户（kafka_test） bin/kafka-topics.sh --list --zo ...
分类：
其他好文 时间：
2018-08-05 14:20:27
阅读次数：
446
https://blog.csdn.net/xiewendong93/article/details/50500471 https://my.oschina.net/phoebus789/blog/730787 https://blog.csdn.net/qinglu000/article/deta ...
分类：
其他好文 时间：
2018-08-03 10:44:31
阅读次数：
610
全球服游戏如今正在成为出海游戏的主要考虑模式，跨国对战、全球通服打破国界的限制，将不同地区不同语言的玩家放在一起合作/竞技，成功吸引了大量玩家的关注，并逐渐成为主流的游戏玩法。游戏厂商们也在尝试采用一地部署多地覆盖、全球逐步宣发的模式进行第一款全球服游戏的发行试点及成本控制。文章主要针对全球服和出海游戏的特性优势、架构布局、网络规划、实用技术等几个方面进行探讨。本文主要观点：(1) 微服务是主流，
分类：
其他好文 时间：
2018-07-23 15:48:38
阅读次数：
186
在Kafka0.9版本之前消费者保存的偏移量是在zookeeper中/consumers/GROUP.ID/offsets/TOPIC.NAME/PARTITION.ID。新版消费者不在保存偏移量到zookeeper中，而是保存在Kafka的一个内部主题中“__consumer_offsets”，该主题默认有50个分区，每个分区3个副本，分区数量有参数offset.topic.num.partit
分类：
其他好文 时间：
2018-07-22 12:02:47
阅读次数：
398
环境：mac 1、github上下载 源码 项目地址：https://github.com/apache/zookeeper 2、安装 ant mac：brew update -> brew install ant ant -version 检查是否安装成功 3、cd zookeeper 文件夹， ...
分类：
其他好文 时间：
2018-07-21 20:36:15
阅读次数：
195
Zookeeper概念简介： Zookeeper是一个分布式协调服务；就是为用户的分布式应用程序提供协调服务 1、zookeeper是为别的分布式程序服务的(比如服务管理、心跳检查、配置信息管理) 2、Zookeeper本身就是一个分布式程序（只要有半数以上节点存活，zk就能正常服务） 3、Zook ...
分类：
其他好文 时间：
2018-07-18 20:36:43
阅读次数：
163
目录 1.zookeeper概述2.什么是zookeeper？3.为什么使用zookeeper？4.zookeeper的特性5.事务Transaction的ACID特性6.zookeeper的应用场景主要是?7.zookeeper的角色与系统模型8.leader角色与leader选举机制9.二阶提交 ...
分类：
其他好文 时间：
2018-07-17 16:23:06
阅读次数：
161
