码迷,mamicode.com
首页 > Windows程序 > 详细

通过FileSystem API读取数据

时间:2015-03-06 16:17:07      阅读:205      评论:0      收藏:0      [点我收藏+]

标签:

参照前面提到的通过Hadoop URL读取数据,有时根本不可能在应用中设置URLStreamHandlerFactory实例,在这种情况下,需要使用FileSystem API来打开一个文件的输入流

 

使用FileSystem以标准输出格式显示Hadoop文件系统中的文件

 

程序如下:

package com.lcy.hadoop.file;

import java.io.InputStream;
import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class FileSystemCat {

    public static void main(String[] args) throws Exception{
        // TODO Auto-generated method stub
        String uri=args[0];
        Configuration conf=new Configuration();
        FileSystem fs=FileSystem.get(URI.create(uri),conf);
        InputStream in=null;
        try{
            in=fs.open(new Path(uri));
            IOUtils.copyBytes(in, System.out, 4096,false);
        }finally{
            IOUtils.closeStream(in);
        }
    }
}

 

运行示例:

技术分享

通过FileSystem API读取数据

标签:

原文地址:http://www.cnblogs.com/Murcielago/p/4318492.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!