如何表示这样一个分区的,高效容错的而且能够持久化的分布式数据集呢?一般情况下抽象的RDD包含如下5大接口。 1)partition : 分区属性: 每个RDD包好多个分区, 这既是RDD的数据单位, 也是计算粒度, 每个分区在由一个Task线程处理. 在RDD创建的时候可以指定分区的个数, ... ...
分类:
其他好文 时间:
2016-10-13 19:33:38
阅读次数:
174
Sublime Text是个小巧便捷的编辑器,除了众多好用的插件外,还有它自带的快捷键,打代码事半功倍,不会用的赶紧看看吧! ...
分类:
其他好文 时间:
2016-10-13 19:31:21
阅读次数:
125
每天一个设计模式-5 工厂方法模式 1.模式定义 定义一个用于创建对象的接口,让子类决定实例化那一个类,Factory Method使一个类的实例化延迟到其子类。 2.工厂方法模式解决问题的思路 工厂方法模式需要接口对象,那就定义一个方法来创建这个接口对象(工厂方法);可是事实上它自己是不知道如何创 ...
分类:
其他好文 时间:
2016-10-13 19:33:20
阅读次数:
125
1 #include<bits/stdc++.h> 2 using namespace std; 3 #define ll long long 4 #define inf 0x3f3f3f3f 5 #define mod 1000000007 6 #define lson 2*n 7 #define ...
分类:
其他好文 时间:
2016-10-13 19:29:16
阅读次数:
159
Atitti.数字证书体系cer pfx attilax总结 一、数字证书常见标准 1 数字证书文件格式(cer和pfx)的区别: 1 二、数字证书存储内容 2 X.509是一种非常通用的证书格式。 2 详细特征 2 X.509证书格式 3 一、数字证书常见标准 数字证书体现为一个或一系列相关经过加 ...
分类:
其他好文 时间:
2016-10-13 19:28:57
阅读次数:
322
卷积和池化都是针对大规模图像数据进行处理,提高运算效率 1.Convolution 在大图片中截取小图片patch,对每个patch提取特征,卷积后得到convolved feature. 隐藏层的每个节点对应一个特征值 large images xlarge small patches xsmal ...
分类:
其他好文 时间:
2016-10-13 19:31:02
阅读次数:
149
最近有一桩打着疑似情怀招牌的事件,与褚橙、罗胖子之流的说情怀卖商品的不同之处在于,其喊的是情怀,最终卖的也是情怀——其主人竟然不是冲着钱去的,这就是实实在在把情怀当成干货卖了。 ...
分类:
其他好文 时间:
2016-10-13 19:30:07
阅读次数:
214
传送门 CDQ分治 感觉CDQ分治擅长于处理1-3维度内数据的不等关系,一般的处理都是一维sort,二维CDQ,三维树状数组一类的。一般的总体复杂度都是$O(Nlog^2N)$。 这道题的的维度可以视为3个,一是时间,二是位置,三是初值。位置不够的手动补全就行了。然后做两次CDQ分治即可。 ...
分类:
其他好文 时间:
2016-10-13 19:29:22
阅读次数:
214
if结构: if(条件){ //(条件为真则输出) 多重if: if(条件){ //(条件为真则输出,为假输出下一个if) if(条件){ //(同上,多次重复) ~~~~~~~ if~else结构 ...
分类:
其他好文 时间:
2016-10-13 19:28:47
阅读次数:
132
大学,石油工程专业,名不见经传的一所普通一本院校。 恰逢,行业危机,让我思考以后要怎么走下去,想进入互联网行业,第一反应,程序员。 百度,知乎,论坛。编程如何入门,C语言,C语言,php,php。正式开始接触C语言,php,然后偶然又接触到web前端,现在,web前端,大量涌入自学转行,也不知我的选 ...
分类:
其他好文 时间:
2016-10-13 19:27:20
阅读次数:
120
最近在工作过程中碰到一个隐藏的bug,经调试发现竟然是toFixed函数不可靠的结果引起的。后端同学在处理价格比较的时候,用foFixed进行价格的四舍五入之后,竟然发现比较的结果有问题; 大家都知道,Number类型的变量有个toFixed方法,该方法将Number四舍五入为指定小数位数的数字,以 ...
分类:
其他好文 时间:
2016-10-13 19:28:14
阅读次数:
222
Atitit.rsa密钥生成器的attilax总结 1.1. 密钥生成器 1 1.2. 生成固定的密钥 2 1.2.1. 设置或重置 SecureRandom 对象的随机数种子 2 1.3. 密钥结构 2 1.1. 密钥生成器 public static Map<String, Object> in ...
分类:
其他好文 时间:
2016-10-13 19:27:08
阅读次数:
264
ssh登录docker容器1、启动一个docker容器# docker run -t -i ubuntu/ruby:v1 /bin/bash2、然后在容器里,安装openssh-server openssh-client# apt-get install openssh-server openssh ...
分类:
其他好文 时间:
2016-10-13 19:24:39
阅读次数:
306
用质数分辨算法来建立一棵散列树(Hash树)。 选择从2开始的连续质数来建立一个十层的哈希树。第一层结点为根结点,根结点下有2个结点;第二层的每个结点下有3个结点;第三层的每个结点下有5个结点;依此类推,即每层结点的子节点数目为连续的质数。到第十层,每个结点下有29个结点。 同一结点中的子结点,从左 ...
分类:
其他好文 时间:
2016-10-13 19:26:11
阅读次数:
247
系统使用的是centos - minimal 在安装rabbitMQ之前需要先安装Erlang Erlang:下载链接 # rpm -ivh 下载的rpm包文件名 安装完Erlang之后,检查系统中是否有socat # yum search socat 如果没有,也需要安装 # yum instal ...
分类:
其他好文 时间:
2016-10-13 19:24:37
阅读次数:
158
atitit.错误:找不到或无法加载主类 的解决 v4 qa15.doc 1.1. 修改此java文件,让他启动编译,还是不能生成了新的class, 1.2. 估计ide调试锁死class ,查看debug,退出调试,还是不行 1.3. Unlock class dir 1.4. 估计是web 项目 ...
分类:
其他好文 时间:
2016-10-13 19:23:06
阅读次数:
118
#include <cctype>的函数 c++中应该是#include <cctype> c中应该是#include <ctype.h> 以下为字符函数库中常用的函数: 函数名称 返回值 isalnum() 如果参数是字母数字,即字母或数字,该函数返回true isalpha() 如果参数是字母, ...
分类:
其他好文 时间:
2016-10-13 19:22:57
阅读次数:
121