pig2 发表于 2014-2-27 12:49:06

通过反编译工具查看hadoop源码及类IOUtils使用示例

阅读本文可以带着下面问题:
1.如何查看编译包的代码?
2.包中代码的使用?

1.下载jd-gui
jd-gui是一个Java反编译工具,可以将Jar包中的class类之间编译回.java文件,
下载地址:
链接: http://pan.baidu.com/s/1eQ1MvV8 密码: lrql

2.通过jd-gui查看源码

(1)找到编译包




(2)选择包查看源码

查看代码示例:




IOUtils.copyBytes可以方便地将数据写入到文件,不需要自己去控制缓冲区,也不用自己去循环读取输入源。import java.io.BufferedInputStream;
import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class IOUtilsDemo {
    public static void main(String[] args) throws IOException {
      BufferedInputStream is = new BufferedInputStream(System.in);
      FileSystem fs = FileSystem.get(new Configuration());
      Path outputPath = new Path("hdfs://xxyy:9000" + args);
      FSDataOutputStream os = fs.create(outputPath);
      // 参数说明
      // is - 输入源
      // os - 输出源
      // 4096 - 缓冲区大小
      // true - 是否关闭数据流,如果是false,就在finally里关掉
      //      IOUtils.closeStream(is);
      //      IOUtils.closeStream(os);
      IOUtils.copyBytes(is, os, 4096, true);
      System.out.println("Created file " + outputPath + " of length " +
            fs.getFileStatus(outputPath).getLen() + " bytes.");
    } // END: main
} // END: IOUtilsDemo
示例:
$ ls -lrth a.dat
-rw-rw-r-- 1 dwapp dwapp 485M May 13 15:58 a.dat
$ cat a.dat | java IOUtilsDemo /group/alidw/dhwdata1/ae/odl/ae01/wps11.dat
Created file hdfs://xxyy:9000/group/alidw/dhwdata1/ae/odl/ae01/wps11.dat of length 508310840 bytes.
$ hadoop fs -ls /group/alidw/dhwdata1/ae/odl/ae01/wps11.dat
Found 1 items
-rw-r--r--   3 dwapp cug-alidw508310840 2013-05-13 16:29 /group/alidw/dhwdata1/ae/odl/ae01/wps11.dat

Hadoop技术组

式微 发表于 2015-11-5 18:46:03

楼主,请问这个方式相比maven查看hadoop源码的区别是什么呢?半天都没有把maven的弄好,就想知道这个能不能取代maven。。
页: [1]
查看完整版本: 通过反编译工具查看hadoop源码及类IOUtils使用示例