基础概念 Kafka最初是由Linkedin公司开发,是一个分布式、支持分区的、多副本的,基于zookeeper协调的分布式消息系统,可以实时的处理大量数据以满足各种需求场景:基于hadoop的批处理系统、低延迟的实时系统、storm/spark流式处理引擎、web/nginx日志、访问日志、消息服 ...
分类:
其他好文 时间:
2020-05-16 00:14:31
阅读次数:
73
1、缓存预热 缓存冷启动,redis启动后,一点数据都没有,直接就对外提供服务了,mysql就裸奔 (1)提前给redis中灌入部分数据,再提供服务(2)肯定不可能将所有数据都写入redis,因为数据量太大了,第一耗费的时间太长了,第二根本redis容纳不下所有的数据(3)需要根据当天的具体访问情况 ...
分类:
其他好文 时间:
2020-05-02 12:07:28
阅读次数:
69
讲了手写了storm wordcount程序 蕴含了很多的知识点 (1)Spout(2)Bolt(3)OutputCollector,Declarer(4)Topology(5)设置worker,executor,task,流分组 storm的核心基本原理,基本的开发,学会了 storm集群部署,怎 ...
分类:
编程语言 时间:
2020-05-02 11:51:07
阅读次数:
65
默认情况webstorm在 文件上 + + 的话,.vue格式化之后的JavaScript和css代码不符合Eslint的配置 修改方法如下 点击webstorm的File Settings Editor Code Style ...
分类:
Web程序 时间:
2020-04-30 13:30:50
阅读次数:
213
kafka Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的、多副本的,基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/ngin ...
分类:
其他好文 时间:
2020-04-12 16:38:30
阅读次数:
65
在WebStorm中打开项目,通常会启动一个虚拟服务器,并使用63342端口,地址为:http://localhost:63342/test_05_configure_pop_ups.html 这样会造成局域网内的其他设备不能访问这个地址,给开发和调试带来了不便。把项目代码直接发布到服务器上,直接通 ...
分类:
Web程序 时间:
2020-04-09 00:58:59
阅读次数:
104
太可怕了,太痛苦了,不知道我这12年是怎么熬过来了,高考都差点挺不过去了,自杀的情形在我的心中不知道模拟了多少次,只是觉得对不起父母,也对不起自己,我也没有那么大的勇气。 前两年知道我的病是余光恐惧症之后,稍微看到了一点希望,原来这个病并不是只有我一个人有,原来还有可能有治愈的机会,不然,这辈子都一 ...
分类:
其他好文 时间:
2020-04-06 15:50:24
阅读次数:
78
http://www.semantikoz.com/blog/lambda-architecture-velocity-volume-big-data-hadoop-storm/ Big data architecture paradigms are commonly separated into ...
分类:
其他好文 时间:
2020-04-05 22:02:51
阅读次数:
90
前面我们已经安装了flink,与storm一样,flink也有两种模式,一是本地模式,主要用于学习和测试,另一个是集群模式,实际生产中使用这种模式。本节将阐述如何使用本地模式的flink进行词频统计。 1 系统、软件以及前提约束 CentOS 7 64 工作站 作者的机子ip是192.168.100 ...
分类:
其他好文 时间:
2020-03-30 00:09:57
阅读次数:
64