其他分享
首页 > 其他分享> > HDFS

HDFS

作者:互联网

HDFS的简介:
HDFS的产生背景:随着数据量的越来越大,一个操作系统存储不下所有的数据。需要分配到更多的操作系统管理的磁盘上存储。但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统,HDFS只是分布式文件管路系统的一种。

HDFS的简介:HDFS是一个分布式文件系统,用于存储文件,通过目录树结构来定位文件。

HDFS的使用场景:适合一次写入,多次读出的场景。不支持文件的修改。适合做数据分析,并不适合做网盘应用。

HDFS的缺点:

  1.不适合做低延时的数据访问

  2.无法高效的存储小文件:1.存储了大量小文件,会占用大量的namenode的存储空间去存储小文件的目录和块信息。2.小文件的寻址时间会超过读取时间,违背了HDFS的设计初衷

  3.不支持文件的随机修改,并发写入:1.一个文件只能有一个写,不允许多个线程同时写。2.仅支持数据的append(追加),不支持文件的随机修改。

  

 

标签:HDFS,存储,文件,适合,支持,分布式
来源: https://www.cnblogs.com/hskq/p/16282553.html