本文章详细叙述了hadoop中SequenceFile的使用，包括普通的使用方法及在mapreduce中的使用...
分类：
其他好文 时间：
2014-10-13 16:11:19
阅读次数：
267
本文描述如何设置一个单一节点的 Hadoop 安装，以便您可以快速执行简单的操作，使用 Hadoop MapReduce 和 Hadoop 分布式文件系统 (HDFS)。...
分类：
其他好文 时间：
2014-10-07 19:00:13
阅读次数：
235
今天使用hadoop时发现查看本机ip时无法使用 提示没有该命令
首先查看了Linux的版本号
uname -a 查看内核版本
接着查看Linux的版本
lsb_release -a
发现时CentOS
使用ifconfig时提示没有该命令
这时决定使用管理员权限
su 和su - 都需要密码 艹 只能冒充管理员调用没有加密的命令 sbin/ifcon...
分类：
系统相关 时间：
2014-09-30 14:05:39
阅读次数：
232
我使用hadoop的是hadoop1.1.2，而很多公司也在使用hadoop0.2x版本，因此市面上的hadoop资料版本不一，为了扩充自己的知识面，MapReduce的新旧api进行了比较研究。 hadoop版本1.x的包一般是mapreduce hadoop版本0.x的包一般是mapre...
测试数据的下载地址为：http://pan.baidu.com/s/1gdgSn6r一、文件分析 首先可以用文本编辑器打开一个HTTP_20130313143750.dat的二进制文件，这个文件的内容是我们的手机日志，文件的内容已经经过了优化，格式比较规整，便于学习研究，感兴趣的读者可以尝试一下。....
分类：
移动开发 时间：
2014-09-26 23:38:19
阅读次数：
416
14/09/2022:41:13WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicable
14/09/2022:41:13WARNmapred.JobClient:UseGenericOptionsParserforparsingthearguments.ApplicationsshouldimplementToolforthesame...
分类：
编程语言 时间：
2014-09-21 03:25:50
阅读次数：
362
一：课程简介：Hadoop是当下云计算大数据的王者。Hadoop不仅是一个大数据的计算框架，同时也是大数据的存储平台。使用Hadoop，用户可以在不了解分布式底层细节的情况下开发出分布式程序，从而可以使用众多廉价的计算设备的集群的威力来高速的运算和存储，而且Hadoop的运算和存储是可靠的、高效的、...
分类：
移动开发 时间：
2014-09-13 17:10:05
阅读次数：
245
首先保证JDK、Hadoop安装设置成功可以参考[linux]ubuntu下安装hadoop[linux]ubutnu12.04 下安装jdk1.7使用hadoop版本为1.2.1，jdk为1.7在hadoop-1.2.1\src\examples\org\apache\hadoop\example...
分类：
其他好文 时间：
2014-08-15 21:06:49
阅读次数：
636
来自：http://heipark.iteye.com/blog/1171923通过 "conf.set("tmpjars", jars);" 可以设置第三方jar，之前一直只是添加一个jar，运行OK，今天打算添加多个jar的时候发现mapreduce在运行时找不到 class（ClassNotF...
分类：
系统相关 时间：
2014-08-08 17:24:16
阅读次数：
240
问题：比如查询一个用户连续登陆天数超过7天的用户，或者查询连续在7天的某个时间段登陆的用户。 网上查询sql的语句的用法，对于hive来说也可以试试，查询词"SQL 连续天数查询" 如果使用hadoop如何解决？？ 思路（以连续N天登陆为例）： 1、计算出每天登陆的用户集合 1、使...
分类：
其他好文 时间：
2014-08-05 10:49:29
阅读次数：
826
