码迷,mamicode.com
首页 >  
搜索关键字:aggregate 聚合 mapreduce    ( 9709个结果
Eth-Trunk 技术
Q.为什么要Eth-Trunk? 随着网络中部署的业务量不断增长,对于全双工点对点链路,单条物理链路的带宽已经不满足业务流量需求。 Eth-Trunk(链路聚合技术)作为一种捆绑技术,可以把多个独立的物理接口绑定在一起作为一个大带宽的逻辑接口使用,这样既不用替换接口板,也不会浪费IP资源。Eth-T ...
分类:其他好文   时间:2020-07-08 15:03:26    阅读次数:105
交换机CPU使用率高的原因
交换机CPU的功能 1.管理已配置的软件协议,例如: – 生成树协议(STP) – 路由协议,例如OSPF和EIGRP – 热备路由协议(HSRP) – 思科发现协议(CDP) – 端口聚合协议(PAgP) – VLAN中继协议(VTP) – 动态中继协议(DTP) 2.将配置/动态条目编程到硬件A ...
分类:其他好文   时间:2020-07-07 20:21:45    阅读次数:232
Turbine使用
一、简介 Turbine是聚合服务器发送事件流数据的一个工具,Hystrix的监控中,只能监控单个节点,实际生产中都为集群,因此可以通过Turbine来监控集群下Hystrix的metrics情况 Turbine的github地址:https://github.com/Netflix/Turbine ...
分类:其他好文   时间:2020-07-07 18:14:33    阅读次数:74
PostgreSql 聚合函数string_agg与array_agg
string_agg(expression, delimiter) 非空输入值连接成字符串,由分隔符分隔 array_agg(expression) 输入值(包括空值)连接到一个数组中 ;输入数组连接成一个更高维度的数组(输入必须具有相同的维度,不能为空或空); 1.查询同一个部门下的员工且合并起来 ...
分类:数据库   时间:2020-07-07 15:17:29    阅读次数:220
第一章:Hadoop基础介绍
Hadoop的整体框架 Hadoop由HDFS、MapReduce、HBase、Hive和ZooKeeper等成员组成。 HBase是一个开源的,基于列存储模型的分布式数据库 HDFS是一个分布式文件系统。有着高容错性的特点,并且设计用来部署在低廉的硬件上,适合那些有着超大数据集的应用程序 MapR ...
分类:其他好文   时间:2020-07-06 15:47:59    阅读次数:67
MapReduce运行原理和过程
一.Map的原理和运行流程 Map的输入数据源是多种多样的,我们使用hdfs作为数据源。文件在hdfs上是以block(块,Hdfs上的存储单元)为单位进行存储的。 1.分片 我们将这一个个block划分成数据分片,即Split(分片,逻辑划分,不包含具体数据,只包含这些数据的位置信息),那么上图中 ...
分类:其他好文   时间:2020-07-06 14:25:24    阅读次数:60
hive函数之~hive当中的lateral view 与 explode
1、使用explode函数将hive表中的Map和Array字段数据进行拆分 lateral view用于和split、explode等UDTF一起使用的,能将一行数据拆分成多行数据,在此基础上可以对拆分的数据进行聚合,lateral view首先为原始表的每行调用UDTF,UDTF会把一行拆分成一 ...
分类:其他好文   时间:2020-07-05 21:00:05    阅读次数:80
路由器与交换机做链路聚合
AR1配置 interface Eth-Trunk1 undo portswitch # interface GigabitEthernet0/0/0 eth-trunk 1 # interface GigabitEthernet0/0/1 eth-trunk 1 SW1配置 interface E ...
分类:其他好文   时间:2020-07-05 19:18:58    阅读次数:141
缘起:BigTable
Google的三篇论文,Google File System,MapReduce以及Big Table可以说是整个大数据领域的三驾马车,这里,我们简单介绍下这三驾马车基本都是干哈的,重点解读下Bigtable: A Distributed Storage System for Structured ...
分类:其他好文   时间:2020-07-05 17:38:34    阅读次数:68
JStorm介绍
一、简介JStorm是一个分布式实时计算引擎。JStorm是一个类似于Hadoop MapReduce的系统,用户按照指定的接口实现一个任务,然后将这个任务交给JStorm系统,JStorm将这个任务跑起来,并按7*24小时运行。如果中间一个worker发生了意外故障,调度器立即分配一个新的work ...
分类:Web程序   时间:2020-07-04 20:35:29    阅读次数:54
9709条   上一页 1 ... 31 32 33 34 35 ... 971 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!