码迷,mamicode.com
首页 >  
搜索关键字:dfs-map    ( 18个结果
re模块
# 元字符 匹配内容# . 匹配除换行符意外任意字符串# \w 匹配字母或数字下划线# \d 匹配数字# \s 匹配任意空白符# \W \D \S 和 |w \d \s 相反 # \n 匹配换一个行符 回车 # \t 匹配一个 tab # 空格 匹配空格 # ^ 匹配字符串的开始 # $ 匹配字符串 ...
分类:其他好文   时间:2019-09-15 18:33:57    阅读次数:112
奇点云数据中台技术汇(四)| DataSimba系列之流式计算
市场变化越来越快,企业对于数据及时性的需求,也越来越大,另一方面,当下数据容量呈几何倍暴增,数据的价值在其产生之后,也将随着时间的流逝,逐渐降低。因此,我们最好在事件发生之后,迅速对其进行有效处理,实时,快速地处理新产生的数据,帮助企业快速地进行异常管理和有效决策,而不是待数据存储在一起之后,再进行... ...
分类:其他好文   时间:2019-06-18 20:05:52    阅读次数:100
PIGS POJ - 1149(水最大流)
题意: 有M个猪圈,每个猪圈里初始时有若干头猪。一开始所有猪圈都是关闭的。依次来了N个顾客,每个顾客分别会打开指定的几个猪圈,从中买若干头猪。每个顾客分别都有他能够买的数量的上限。每个顾客走后,他打开的那些猪圈中的猪,都可以被任意地调换到其它开着的猪圈里,然后所有猪圈重新关上。问总共最多能卖出多少头 ...
分类:其他好文   时间:2018-11-29 11:16:46    阅读次数:167
Hadoop_28_MapReduce_自定义 inputFormat
1. 自定义inputFormat 1.1.需求: 无论hdfs还是mapreduce,对于小文件都有损效率,实践中,又难免面临处理大量小文件,此时就需要有相应解决方案; 1.2.分析: 小文件的优化无非以下几种方式: 1、在数据采集的时候,就将小文件或小批数据合成大文件再上传HDFS; 2、在业务 ...
分类:其他好文   时间:2018-07-03 18:22:12    阅读次数:164
HDU 5527 Too Rich
题目:http://acm.split.hdu.edu.cn/showproblem.php?pid=5527 题意:给你1,5,10,20,50,100,200,500,1000,2000面额的硬币,问凑成p金额最多可以用多少硬币 参考:http://blog.csdn.net/tc_to_top ...
分类:其他好文   时间:2017-10-10 14:37:02    阅读次数:137
hdu5305 Friends(dfs+map/hash)
题目:http://acm.hdu.edu.cn/showproblem.php?pid=5305 题意:给定N个人和M条朋友关系,是朋友关系的两个人之间有两种联系方式online和offline。使每一个人的online的数量和offline的数量相等,求方案数。 分析:因为M<=28,暴力枚举的 ...
分类:其他好文   时间:2017-06-05 18:55:48    阅读次数:153
HDFS的体系架构
通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapReduce处理过程,以及数据仓库工具Hive和分布式数据库Hbase的介绍。基本涵盖了Hadoop分布式平台的全部技术核心。 HDFS的体系架构 整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持,并通过M ...
分类:其他好文   时间:2017-05-21 16:01:36    阅读次数:134
Graph-DFS-Map-图的深度优先遍历-城市地图问题
#include using namespace std; /* 5 8 1 2 2 1 5 10 2 3 3 2 5 7 3 1 4 3 4 4 4 5 5 5 3 3 min: 9 -------------------------------- Process exited with retu... ...
分类:其他好文   时间:2017-02-11 12:31:22    阅读次数:160
上传文件到hdfs注意事项
我在MapReduceInput下创建CFItemSet文件夹,下面有itemSet.txt。 我想上传到cf下,然后想着hdfs上会显示cf/itemSet.txt。 但是发现hdfs上只有cf文件,注意并不是文件夹,好奇怪,只能先删除(否则提示cf已存在)再重新上川。 然后进入到MapReduc ...
分类:Web程序   时间:2016-11-16 14:05:46    阅读次数:169
深度优先搜索 dfs C++实现
#include<map> #include<iostream> #include<string> #include<vector> using?namespace?std; static?vector<string>?order; static?map<string,?int?>?vis; void?dfs(map<string,?vector<string>?>?...
分类:编程语言   时间:2015-09-13 23:13:36    阅读次数:473
18条   1 2 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!