码迷,mamicode.com
首页 > 2016年01月31日 > 全部分享
Hadoop自定义分区Partitioner
一:背景 为了使得MapReduce计算后的结果显示更加人性化,Hadoop提供了分区的功能,可以使得MapReduce计算结果输出到不同的分区中,方便查看。Hadoop提供的Partitioner组件可以让Map对Key进行分区,从而可以根据不同key来分发到不同的reduce中去处理,我们可以自
分类:其他好文   时间:2016-01-31 21:34:07    阅读次数:338
Node.js安全清单
前言 安全性,总是一个不可忽视的问题。许多人都承认这点,但是却很少有人真的认真地对待它。所以我们列出了这个清单,让你在将你的应用部署到生产环境来给千万用户使用之前,做一个安全检查。 以下列出的安全项,大多都具有普适性,适用于除了Node.js外的各种语言和框架。但是,其中也包含一些用Node.js写
分类:Web程序   时间:2016-01-31 21:36:05    阅读次数:261
WebStorm11 注册码
这个注册方法我也是在贴吧上看到的:http://tieba.baidu.com/p/4160766032 注册方法 注册时选择“License server”输入“http://15.idea.lanyus.com/”点击“OK”快速激活JetBrains系列产品
分类:Web程序   时间:2016-01-31 21:33:27    阅读次数:201
向死而生——我修的死亡学分
郝萌主倾心贡献。尊重作者的劳动成果,请勿转载。假设文章对您有所帮助,欢迎给作者捐赠。支持郝萌主。捐赠数额任意,重在心意^_^ 我要捐赠: 点击捐赠Cocos2d-X源代码下载:点我传送游戏官方下载:http://dwz.cn/RwTjl游戏视频预览:http://dwz.cn/RzHHd游戏开发博客
分类:其他好文   时间:2016-01-31 21:33:47    阅读次数:326
Hive文件存储格式
Hive文件存储格式包括以下几类: 1.TEXTFILE 2.SEQUENCEFILE 3.RCFILE 4.ORCFILE(0.11以后出现) 其中TEXTFILE是默认格式,建表是不指定默认为这个格式,导入数据时会直接把数据文件拷贝到HDFS上不进行处理。SEQUENCEFILE、RCFILE、
分类:其他好文   时间:2016-01-31 21:35:35    阅读次数:234
Hadoop中的DBInputFormat
一:背景 为了方便MapReduce直接访问关系型数据库(MYSQL、Oracle等),Hadoop提供了DBInputFormat和DBOutputFormat两个类,通过DBInputFormat类把数据库表的数据读入到HDFS中,根据DBOutputFormat类把MapReduce产生的结果
分类:数据库   时间:2016-01-31 21:33:01    阅读次数:393
Hive表连接
Hive中表连接操作大致分为以下四种: 1:join即等值连接,只有某个值在两个表中同时存在才会被检索出来。 2:left outer join即左外连接,左边表中的值无论是否存在右表中,都会输出,但是右表中的记录只有在左表中存在时才会输出。 3:right outer join即右外连接,右边表中
分类:其他好文   时间:2016-01-31 21:33:33    阅读次数:201
如何获取imageView中当前内容的相关信息并比较?
1 public class MainActivity extends Activity implements OnClickListener{ 2 3 private Button button; 4 private EditText editText; 5 private ImageView i
分类:其他好文   时间:2016-01-31 21:32:49    阅读次数:193
SSO
单点登录(Single Sign On),简称为SSO,SSO不仅在企业级开发很常用,在互联网中更是大行其道。随便举几个例子,比如我们登录新浪微博后,再访问新浪首页后,我们发现,已经自动登录了;再比如我们登录CSDN后,可以写博客、逛论坛、下载资源等等。前者是完全跨域的单点登录,下文会讲,后者是共同
分类:其他好文   时间:2016-01-31 21:32:04    阅读次数:138
VMware10 安装centos6.7 设置NAT模式
最近刚开始学Linux运维。我看的书是《跟阿铭学Linux》,视频教程里面使用NAT模式手动分配IP可以成功ping通网关,但是我照着视频一步一步操作却一直不成功,不知道是什么原因,昨天弄到晚上12点,夜里睡觉做梦时也一直在想这个,今天早上又起来弄,觉得有可能是版本的问题,视频里面用的是VMware
分类:系统相关   时间:2016-01-31 21:33:10    阅读次数:242
JDK,JRE,JVM的区别与联系
很多朋友跟我一样,已经使用Java开发很久了,可是对JDK,JRE,JVM这三者的区别与联系一直都是模模糊糊的,下面我们来总结一下。 JDK Java Development ToolKit(Java开发工具包)。JDK是整个Java的核心,包括了Java运行环境(Java Runtime Envi
分类:其他好文   时间:2016-01-31 21:32:45    阅读次数:243
Storm命令详解
在Linux终端直接输入storm,不带任何参数信息,或者输入storm help,可以查看storm命令行客户端(Command line client)提供的帮助信息。Storm 0.9.0.1版本在Linux终端直接输入storm后的输出内容如下: [html] view plain copy
分类:其他好文   时间:2016-01-31 21:32:15    阅读次数:186
CodeForces 191C 树链剖分 第4遍
非常无奈,模板重新无奈的打错了。。只是,非常快便找到了。。 题意:给一些边,有一些操作,每次操作,都要在这些边上加上1,求每一个边的边权。。 #include<cstdio> #include<iostream> #include<cstring> #include<algorithm> using
分类:其他好文   时间:2016-01-31 21:33:58    阅读次数:239
时空地图TimeGIS 可编辑ArcGIS的Shape矢量文件的地理信息系统
时空地图 TimeGIS 6.0 是一个地理信息系统软件,它可以显示网络地图,编辑ArcGIS的SHP矢量文件格式,显示NETCDF等栅格文件,管理图层等。 在它的基础上,可以二次开发各种GIS应用,如历史GIS,土地GIS,水利GIS,交通GIS,GPS软件,气象GIS等等。 时空地图 TimeG
分类:其他好文   时间:2016-01-31 21:33:27    阅读次数:362
HDU3341 Lost's revenge(AC自动机+DP)
题目是给一个DNA重新排列使其包含最多的数论基因。 考虑到内存大概就只能这么表示状态: dp[i][A][C][G][T],表示包含各碱基个数为ACGT且当前后缀状态为自动机第i的结点的字符串最多的数论基因数 其中ACGT可以hash成一个整数(a*C*G*T+c*G*T+g*T+T),这样用二维数
分类:其他好文   时间:2016-01-31 21:33:08    阅读次数:255
android异常捕获处理
继承UncaughtExceptionHandler 接口,重写方法,进行处理 package com.example.exp; import java.lang.Thread.UncaughtExceptionHandler; import com.example.threadtest.MainA
分类:移动开发   时间:2016-01-31 21:33:30    阅读次数:212
Hadoop新MapReduce框架Yarn详解
简介 本文介绍了Hadoop自0.23.0版本后新的MapReduce框架(Yarn)原理,优势,运行机制和配置方法等,着重介绍新的yarn框架相对于原框架的差异及改进,并通过Demo示例详细介绍了在新的Yarn框架下搭建和开发Hadoop程序的方法。读者通过本文中新旧Hadoop MapReduc
分类:其他好文   时间:2016-01-31 21:32:17    阅读次数:450
534条   上一页 1 2 3 4 5 6 7 8 ... 32 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!