通过API操作之前要先了解几个基本知识
一、hadoop的基本数据类型和java的基本数据类型是不一样的,但是都存在对应的关系
如下图
如果需要定义自己的数据类型,则必须实现Writable
hadoop的数据类型可以通过get方法获得对应的java数据类型
而java的数据类型可以通过hadoop数据类名的构造函数,或者set方法转换
二、hadoop提交作业的的步骤分为八个...
分类:
编程语言 时间:
2015-02-11 18:46:55
阅读次数:
184
通过阅读Hadoop源码,针对org.apache.hadoop.conf和org.apache.hadoop.io包的部分类接口进行解读,主要包含了hadoop的资源配置类Configuration、hadoop的序列化机制、Writable的地位与继承实现关系、常用类解析等
分类:
其他好文 时间:
2015-02-11 00:25:14
阅读次数:
266
UserWarning: /home/toddler/.python-eggs is writable by group/others and vulnerable to attack when used with get_resource_filename. Consider a more secure location (set with .set_extraction_path or ...
分类:
数据库 时间:
2015-02-07 16:03:25
阅读次数:
212
系统里面的class文件以前都是直接丢到WEB-INF/classes 目录下面的,后来将class文件打为jar包,丢到了WEB-INF/lib 目录下面。
出问题的这个bean 就是因为 同时在WEB-INF/classes 和 WEB-INF/lib 下面的jar包中同时存在了该class文件。
另一个同时前几天调试过该class文件,但是他的class文件放在了WEB-INF/classes下面,他的class中没有esyerDao的注入。...
分类:
其他好文 时间:
2015-02-04 23:29:36
阅读次数:
401
Hadoop的自定制数据类型有两种,一种较为简单的是针对值,另外一种更为完整针对于键和值都适合 一、针对值,实现 Writable 接口 package org.apache.hadoop.io;
import java.io.DataOutput;
import java.io.Dat...
分类:
其他好文 时间:
2015-02-04 13:11:16
阅读次数:
202
今天在服务器上访问phpMyAdmin,出现这样的提示 Wrong permissions on configuration file, should not be world writable!查资料一看,原来phpMyAdmin要在755权限下才能正常工作(777不行)。所以解决办法也就来...
分类:
其他好文 时间:
2015-01-19 20:31:27
阅读次数:
124
升级vsftpd或者vsftpd-ext后,登录时可能会出现这样的错误:500 OOPS: vsftpd: refusing to run with writable root inside chroot ()这是由于下面的更新造成的:- Add stronger checks for the co...
分类:
其他好文 时间:
2015-01-16 20:37:28
阅读次数:
192
Bean property 'xxx' is not writable or has an invalid setter method...
分类:
其他好文 时间:
2015-01-15 12:58:30
阅读次数:
159
当我们限定了用户不能跳出其主目录之后,使用该用户登录FTP时往往会遇到这个错误:500 OOPS: vsftpd: refusing to run with writable root inside chroot ()这个问题发生在最新的这是由于下面的更新造成的:- Add stronger checks for the configuration error of running with a...
分类:
其他好文 时间:
2015-01-05 09:27:11
阅读次数:
142
FTP服务器的搭建,我要实现的需求是: 不允许匿名访问,因为我的机器不想让谁都能登录上来,随便获取文件, 需要锁定一个目录,因为在家里,我需要给媳妇下载一些电影 韩剧之类的东西,媳妇会来我机器下载,但是我不想让他随意操作我的东西。 万一删除我的配置文件,我就惨了(吐槽一下韩剧:媳妇问我,你都没...
分类:
系统相关 时间:
2015-01-03 23:41:18
阅读次数:
484