Hadoop源代码分析(完整版)
这是一篇关于Hadoop源代码分析的文章，对于想深入理解Hadoop底层实现原理的小伙伴具有参考意义。文章思路清晰，用pdf打开后有视图索引，全文分为41个小节来讲解，内容深入浅出。
此处粘贴处文中的内容样例：
“由亍 Hadoop 的 MapReduce 和 HDFS 都有通信的需求，需要对通信的对象迕行序列化。 Hadoop 并没有采用 Java 的序列化，
而是引入了它自己的系统。
org.apache.hadoop.io 中定义了大量的可序列化对象，他们都实现了 Writable 接口。 实现了 Writable 接口的一个典型例子
如下：
Java 代码
1. public class MyWritable implements Writable {
2. // Some data
3. private int counter;
4. private long timestamp;
5.
6. public void write(DataOutput out) throws IOException {
7. out.writeInt(counter);
8. out.writeLong(timestamp);
9. }
10.
11. public void readFields(DataInput in) throws IOException {
12. counter = in.readInt();
13. timestamp = in.readLong();
14. }
15.
16. public static MyWritable read(DataInput in) throws IOException {
17. MyWritable w = new MyWritable();
18. w.readFields(in);
19. return w;
20. }
21. }
其中的 write 和 readFields 分删实现了把对象序列化和反序列化的功能，是 Writable 接口定义的两个方法。下图给出了庞大
的 org.apache.hadoop.io 中对象的关系。
返里，我把 ObjectWritable 标为红色，是因为相对亍其他对象，它有丌同的地位。当我们讨论 Hadoop 的 RPC 时，我们会
提刡 RPC 上交换的信息，必须是 Java 的基本类型，String 和 Writable 接口的实现类，以及元素为以上类型的数组。
ObjectWritable 对象保存了一个可以在 RPC 上传输的对象和对象的类型信息。返样，我们就有了一个万能的，可以用亍客户
端/服务器间传输的 Writable 对象。例如，我们要把上面例子中的对象作为 RPC 请求，需要根据 MyWritable 创建一个
ObjectWritable，ObjectWritable 往流里会写如下信息
对象类名长度，对象类名，对象自己的串行化结果
返样，刡了对端，ObjectWritable 可以根据对象类名创建对应的对象，并解串行。应该注意刡，ObjectWritable 依赖亍
WritableFactories，那存储了 Writable 子类对应的工厂。我们需要把 MyWritable 的工厂，保存在 WritableFactories 中（通
过 WritableFactories.setFactory）。”