第二种方式读取并显示HDFS中的内容

1.讀取HDFS内容的java客戶端代碼：

package Hdfs;

import java.io.InputStream;
import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
/**
 * FileSystem类的实例是通过工厂方法，其中Configuration对象封装了HDFS客户端或者HDFS集群的配置
 * 该方法通过给定的URI方案和权限确定使用的文件系统。得到FileSystem实例之后，调用open()函数
 * 获得文件的输入流，open方法返回FSDataInputStream对象
 * @param args
 * @throws Exception
 */
public class FilesystemCat {
    public static void main(String[] args) throws Exception {
        String url = "hdfs://neusoft-master:9000/user/root/test/demo1";
        Configuration conf = new Configuration();
        FileSystem fs = FileSystem.get(URI.create(url), conf);
        InputStream in = null;
        try {
            in = fs.open(new Path(url));
            IOUtils.copyBytes(in, System.out, 4096, false);
        } catch (Exception e) {
            IOUtils.closeStream(in);
        }
    }
}

2.將上述代碼打成har包傳輸到linux中運行，結果如下。

總結：

    访问hdfs的两种方式各有不同：首先利用Java.net.URL对象打开数据流。第二种方法是利用FileSystem方法的get方法完成配置，利用IOUtils的copyBytes方法读取数据。