微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

大数据之-Hadoop之HDFS的API操作_定位读取文件_只读取某个block的内容_案例---大数据之hadoop工作笔记0065

然后我们再来看看,如果我们的文件比较大,比如一个文件有10g,这个如果是个日志文件的话,

我们只读取最新的128M可以嘛?

因为我们只关心最新的日志对吧.

是可以的.

首先我们上传一个大点的文件,去hdfs中去,比如这个

hadoop fs -put /opt/software/hadoop-2.7.2.tar.gz / 上传到根目录

然后我们去看看,可以看到

有个block0

size是1

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐