这篇文章主要用来介绍Kafka & Zookeeper相关基础知识。 1. Kafka是由Linkedin开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景，之后于2 ...
分类：
编程语言 时间：
2020-07-15 23:49:56
阅读次数：
93
1.flume连接mysql驱动包准备 进入链接下载源码https://github.com/keedio/flume-ng-sql-source现在最新是1.5.3解压， 进入到目录中编译 直接编译可能报错，跳过test mvn package -DskipTests 2.flume与kafka, ...
分类：
数据库 时间：
2020-07-15 23:28:07
阅读次数：
166
Hadoop原生的计算框架MapReduce，简单概括一下：进程量级很重，启动很慢，但能承载的数据量很大，效率相较于Spark微批处理和Flink实时来讲很慢，Shuffle任何一个写MR同学都必须掌握的东西，说难不难，说简单也不简单 MapReduce程序的五个阶段： input map shuf ...
分类：
其他好文 时间：
2020-07-15 15:53:30
阅读次数：
58
Goreplay 介绍 GoReplay是一个开源的网络监控工具，它可以记录你的实时流量，并用于跟踪、负载测试、监控和详细分析。 GoReplay提供了一种unique approach for shadowing方式：GoReplay不是以代理形式，而是监听网络接口上的流量，不需要对生产基础设施进 ...
分类：
系统相关 时间：
2020-07-15 15:27:15
阅读次数：
116
项目创建 （1）npm install -g wepy-cli 全局安装wepy 脚手架 （2）wepy init standard xxx 创建项目 （3）cd xxx 进入项目目录 （4）npm install 安装项目依赖 （5）wepy build —watch 实时监控 项目运行 （1）打 ...
分类：
其他好文 时间：
2020-07-15 12:58:06
阅读次数：
77
源中瑞智慧能源系统应用互联网等新一代信息技术对能源的生产、存储、输送和使用状况进行实时监控、分析，并在大数据、云计算的基础上进行实时监测、报告和优化处理，以形成最佳状态、开放透明、吸收企业、科研机构综合性能源管理系统。
分类：
其他好文 时间：
2020-07-15 12:55:15
阅读次数：
72
1. 需求说明 在前端开发中，往往会遇到页面需要实时刷新数据的情况，给用户最新的数据展示。 2. 逻辑分析 如果需要数据实时更新，我们自然是需要使用定时器，不断的调用接口数据，会相对的消耗内存。 3. 代码示例 data(){ return { intervalId:null } }, method ...
分类：
其他好文 时间：
2020-07-14 18:29:06
阅读次数：
85
本文主要讲了Redis的持久化相关功能，持久化一直是影响Redis性能的高发地，也是面试中经常被问到的。包括RDB相关的特定和优缺点，AOF的优缺点，事实上，由于RDB的数据实时性问题，目前用AOF比较多了。而持久化恢复也是优先AOF。RDB是旧的模式，现在基本上都使用AOF。当然，两个都会一起说到。RDBRDB流程图RDB特点RDB是一种快照模式，即——保存的是keyvalue数据内容。RDB有
分类：
其他好文 时间：
2020-07-14 09:18:45
阅读次数：
86
车间看板做为现企业可视化管理最重要的工具；它不但能让企业员工随时了解企业生产情况，还能方便领导层随时做出生产调整与策越； 现代车间看板相对以前人为手工维护的看板有了极大的改进，已完全不需要人为干预，且实时性极高；车间看板在引入互联技术、 及最新物联网技术后使其在可视化管理方面又有了质的提升；企业员工 ...
分类：
其他好文 时间：
2020-07-13 23:05:44
阅读次数：
146
问题： 小汪作为一个有数学天分的程序猿，设计了一套密码生成器来搞定自己的密码问题。 密码生成器由N个槽位组成，槽位的下标为0~N-1，每个槽位存储一个数。起初每个槽位都是0。 密码生成器会进行M轮计算，每轮计算，小汪会输入两个数L,R(L<=R),密码生成器会将这两个数作为下标，将两个下标之间（包含 ...
分类：
其他好文 时间：
2020-07-13 21:53:20
阅读次数：
264
