sq331335144 发表于 2013-10-25 10:44:21

如何只读取hdfs里大文件的本地磁盘部分的数据块?

如何只读取hdfs里大文件的本地磁盘部分的数据块吗?
就是怎样实现数据局部性吗?吗?吗?hdfs上大文件分布式存储在datanode上,而在运行mapreduce时数据直接从本地磁盘的datablock读取并处理,但是怎么读取存储在本地磁盘的datablock呢吗?吗?吗?

yuanqingyu0123 发表于 2013-10-25 10:44:21

mark一下,同求解答

mexiang 发表于 2013-10-25 10:44:21

客户端获取 数据块时有相关的host addresses,查询一下就知道了
页: [1]
查看完整版本: 如何只读取hdfs里大文件的本地磁盘部分的数据块?