怡然航空

文章
3
资源
0
加入时间
2年10月21天

HDFS1概述

HDFS概述HDFS(hadoop Distributed File System)被设计为可以运行在通用通用硬件上、提供流式数据操作、能够处理超大文件的分布式文件系统。HDFS具有高度容错、高吞吐量、容易扩展、高可靠性等特征。使用场景适合一次写入,多次读出的场景,且不支持文件的修改。适合用来做数据分析,并不适合用来做网盘优点高容错性(1)数据自动保存为多个副本。它通过增加副本的形式,提高容错性。(2)某一个副本丢失后,它可以自动恢复适合处理大数据(1)数据规模:能够处理

InputStream多次重复使用的解决方案

本文是对InputStream进行重复使用提供一种方案,先将InputStream缓存到一个ByteArrayOutputStream中,用的时候进行转换获取InputStream,用完后进行销毁。