StormUI 无法获取数据，ambari-server 日志中提示 “SPNego authentication failed, can not get hadoop.auth cookie”
分类：
其他好文 时间：
2019-03-20 17:29:52
阅读次数：
156
一 Kafka 概述1.1 Kafka 是什么在流式计算中，Kafka 一般用来缓存数据，Storm 通过消费 Kafka 的数据进行计算。1）Apache Kafka 是一个开源消息系统（微信公众号、QQ、微信等群），由 Scala 写成。是由 Apache 软件基金会开发的一个开源消息系统项目。 ...
分类：
其他好文 时间：
2019-03-19 17:09:41
阅读次数：
558
1.大纲 Storm工作原理是什么？ 流的模式是什么？默认是什么？ 对于mapreduce如何理解？ Storm的特点和特性是什么？ Storm组件有哪些？ 2.Storm工作原理是什么？ 相对于hadoop而言，strom的优势在于对于应对大数据两的实时数据处理上，因为hadoop在处理大数据过程 ...
分类：
其他好文 时间：
2019-03-14 00:49:56
阅读次数：
764
在调试时请 注意 : 在WebStorm中启动调试时，WebStorm会根据你设置的url，自动打开新的Chrome浏览器进程访问这个设置的url，而且这个浏览器页面和你平常看到的浏览器差异会比较大，看不到书签栏，也看不到你先前所装的所有插件。这是因为平常我们打开Chrome浏览器进程时，并不会添加 ...
分类：
Web程序 时间：
2019-02-28 18:15:06
阅读次数：
454
前言：有时候一个类实里面的方法实在太多了，要找到指定的方法很慢 可以通过ctrl+F12直接显示一个弹出层，里面只有这个类的属性和方法，点击就能快速定位了。 windows下按下快捷`Ctrl`+`Shift`+`-`，这样就能折叠所有代码了。再点开一层层。 windows下按下快捷`Ctrl`+` ...
分类：
Web程序 时间：
2019-02-28 15:22:24
阅读次数：
238
在配置kafka和storm的时候, 经常的会出现一些问题, 主要在以下几个: 1. 打jar包上去storm集群的时候会出现jar包冲突,类似于log4j或者sf4j的报错信息. 2. kafka本地Java生产者和消费者无法消费数据 3. kafkaSpout的declareFields到底是什 ...
分类：
其他好文 时间：
2019-02-26 17:43:47
阅读次数：
201
strom简介官方网址：http://storm.apache.org/是一个免费，开源的分布式实时计算系统，使用它可以轻松实现数据流的实时处理，Strom很简单，可以用任何编程语言storm用例：实时在线分析机器学习，连续计算，分布式RPC，ETL等。Strom的特点：快速：基准时钟在超过一百万元组（可以理解为数据包）每秒处理的每个节点简单的设置：有可扩展性，容错性，保证了数据的处理能力，并且易
分类：
其他好文 时间：
2019-02-21 20:06:50
阅读次数：
201
storm的基本概念别人总结的， https://blog.csdn.net/pickinfo/article/details/50488226 编程模型最关键最难就是实现局部聚合的业务逻辑聚合类实现Aggregator接口重写方法aggregate，聚合使用存储中间聚合过程状态的类，本地hashm... ...
分类：
其他好文 时间：
2019-02-15 17:42:51
阅读次数：
144
1.下载storm安装文件并解压 [root@hadoop01 soft]# wget http://mirrors.hust.edu.cn/apache/storm/apache-storm-1.1.3/apache-storm-1.1.3.tar.gz [root@hadoop01 soft]#... ...
分类：
其他好文 时间：
2019-02-14 20:44:20
阅读次数：
198
