hadoop序列化（四）-----序列化框架 2016-01-21

框架简介 MapReduce仅仅可以支持Writable做key，value吗？答案是否定的。事实上，一切类型都是支持的，只需满足一个小小的条件：每个类型是以二进制流的形式传 ...

(1861)次阅读|(0)个评论

hadoop序列化（三）-----自定义Writable 2016-01-21

自定义Writable hadoop 虽然已经实现了一些非常有用的Writable，而且你可以使用他们的组合做很多事情，但是如果你想构造一些更加复杂的结果，你可以自定义 W ...

(1851)次阅读|(0)个评论

hadoop序列化（2）----序列化与Writable实现 2016-01-21

简介 在hadoop中，Writable的实现类是个庞大的家族，我们在这里简单的介绍一下常用来做序列化的一部分。 java原生类型 除char类型以外，所有的 ...

(1630)次阅读|(0)个评论

hadoop序列化（一）-----序列化与Writable接口 2016-01-21

简介 序列化和反序列化就是结构化对象和字节流之间的转换，主要用在内部进程的通讯和持久化存储方面。 通讯格式需求 hadoop在节点间的内部通讯使用 ...

(2114)次阅读|(0)个评论

HDFS数据完整性 2016-01-19

HDFS数据完整性 数据完整性常见技术 为了保证数据的完整性，一般采用数据校验技术： 1） 奇偶校验技术 2） MD5，sha1等校 ...

(2110)次阅读|(0)个评论

Java 反射机制 2016-01-19

基本概念 　　在Java 运行时 环境中，对于任意一个类，能否知道这个类有哪些属性和方法？对于任意一个对象，能否调用它的任意一个方法？ 　　答案是 ...

(1640)次阅读|(0)个评论

查看更多