码迷,mamicode.com
首页 >  
搜索关键字:storm ui显示supervisor个数与实际不符的解决    ( 1724个结果
PhpStorm之翻译插件
安装插件 File->Setting->Pluugins 搜索 Translation 如何使用 安装完插件后,重启软件 快捷键 Ctrl+Shift+Y ,选中需要翻译的文本,然后鼠标右键选择Translate OVER!!! ...
分类:Web程序   时间:2019-05-10 23:40:50    阅读次数:1654
用实例的方式去理解storm的并行度
什么是storm的并发度 一个topology(拓扑)在storm集群上最总是以executor和task的形式运行在suppervisor管理的worker节点上。而worker进程都是运行在jvm虚拟机上面的,每个拓扑都会被拆开多个组件分布式的运行在worker节点上。 1.worker 2.e ...
分类:其他好文   时间:2019-05-10 21:56:15    阅读次数:130
Spark学习(三): 基本架构及原理
Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架,最初在2009年由加州大学伯克利分校的AMPLab开发,并于2010年成为Apache的开源项目之一,与Hadoop和Storm等其他大数据和MapReduce技术相比,Spark有如下优势: Spark提供了一个全面、统 ...
分类:其他好文   时间:2019-05-07 19:50:41    阅读次数:108
PHP 之获取Windows下CPU、内存的使用率
getFilePath( 'cpu_usage.vbs', "On Error Resume Next Set objProc = GetObject(\"winmgmts:\\\\.\\root\cimv2:win32_processor='cpu0'\") WScript.Echo(objPro... ...
分类:Windows程序   时间:2019-05-04 14:51:20    阅读次数:214
ZooKeeper 介绍
Zookeeper用途场景: Zookeeper分布式服务框架是Apache Hadoop的一个子项目,主要是用来解决分布式应用经常遇到的一些数据管理问题。如:集群管理,统一命名服务,分布式配置管理,分布式消息队列,分布式说,分布式通知协调等。 越来越多的分布式开始依赖ZK,比如Storm,Hbas ...
分类:其他好文   时间:2019-05-04 14:39:06    阅读次数:149
做大数据工程师需要掌握哪些技能呢?
大数据是眼下非常时髦的技术名词,与此同时自然也催生出了一些与大数据处理相关的职业,通过对数据的挖掘分析来影响企业的商业决策。Hadoop工程师用人企业普遍要求掌握以下技术:1、熟悉Linux开发环境,熟悉Shell命令2、熟悉Java、python、scala语言(至少一种)3、具备较丰富的基于Hadoop、MapReduce、Yarn、Storm、Spark、Hive、Hbase、kafka、F
分类:其他好文   时间:2019-05-03 16:24:53    阅读次数:132
flink专题
一、Storm (一)什么是Storm? Storm为分布式实时计算提供了一组通用原语,可被用于“流处理”之中,实时处理消息并更新数据库。这是管理队列及工作者集群的另一种方式。 Storm也可被用于“连续计算”(continuous computation),对数据流做连续查询,在计算时就将结果以流 ...
分类:其他好文   时间:2019-05-01 14:59:35    阅读次数:146
kafka专题-1
大数据技术之Kafka一 Kafka概述 1.1 Kafka是什么 在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算。 1)Apache Kafka是一个开源消息系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2)Kafka最初是由 ...
分类:其他好文   时间:2019-05-01 14:52:35    阅读次数:142
Spark Streaming初步使用以及工作原理详解
在大数据的各种框架中,hadoop无疑是大数据的主流,但是随着电商企业的发展,hadoop只适用于一些离线数据的处理,无法应对一些实时数据的处理分析,我们需要一些实时计算框架来分析数据。因此出现了很多流式实时计算框架,比如Storm,Spark Streaming,Samaz等框架,本文主要讲解Sp ...
分类:其他好文   时间:2019-04-30 17:19:01    阅读次数:208
浅谈kafka streams
随着数据时代的到来,数据的实时计算也越来越被大家重视。实时计算的一个重要方向就是实时流计算,目前关于流计算的有很多成熟的技术实现方案,比如Storm、Spark Streaming、flink等。我今天要讲的kafka streams体量上来说没有那么大,都算不上一个框架,只是kafka的一个类库。 ...
分类:其他好文   时间:2019-04-29 19:24:43    阅读次数:241
1724条   上一页 1 ... 15 16 17 18 19 ... 173 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!