小文件存储-小文件存储,扇区怎么选择

摘要： 本文目录一览：1、查询archive为什么要合并小文件??2、...

本文目录一览：

• 1、查询archive为什么要合并小文件??
• 2、hdfs适合存储大量的小文件
• 3、exfat格式优缺点有哪些?

查询archive为什么要合并小文件??

出现较少的字节使用较长的编码，这样一来，变短的字节相对于变长的字节更多，文件的总长度就会减少，并且，字节使用比例越不均匀，压缩比例就越大。

压缩软件（compression software）自然就是利用压缩原理压缩数据的工具，压缩后所生成的文件称为压缩包（archive），体积只有原来的几分之一甚至更小。

Archive是文档，而temp是英文temporary（意：临时）是缩写，其文件扩展名是.temp，和.tmp等格式文件一样，都是临时文件的意思。

然后运行Archive Searcher后，首先在“搜索此文件”后面的下拉菜单中选择是搜索文件夹还是文件，然后在文件名中输入需要搜索的文件或者文件夹名称，如果文件名记得不太清楚了，还可以使用通配符。

hdfs适合存储大量的小文件

1、小文件是指文件大小明显小于HDFS上块（block）大小（默认64MB）的文件。

2、HDFS（Hadoop分布式文件系统）是一种分布式文件系统，它主要用于存储大量的数据，并提供高可靠性和高吞吐量的数据访问。因此，HDFS是能够真正存储数据的分布式文件系统。

3、有一种误解就是，之所以HDFS不适合大量小文件，是因为即使很小的文件也会占用一个块的存储空间。这是错误的，HDFS与其它文件系统不同，小于一个块大小的文件，不会占用一个块的空间。

4、存储大量小文件(这里的小文件是指小于HDFS系统的Block大小的文件（默认64M）)的话，它会占用 NameNode大量的内存来存储文件、目录和块信息。这样是不可取的，因为NameNode的内存总是有限的。

exfat格式优缺点有哪些?

缺点：小文件存储会占用更多的存储空间(簇比NTFS大，小文件会多占用空间)exFAT很好，MAC、WIN都支持，还可以支持大硬盘和大文件 ，但它有一个问题，有时会很严重。

ExFAT系统的优点包括：兼容性好：ExFAT系统可以在大多数现代设备和操作系统上运行，如Windows，macOS和Linux。可伸缩性：ExFAT系统可以处理大文件和大型存储设备，而不会出现性能问题。

格式优缺点：exFAT的优点在于可扩展至更大软盘大小，从FAT32的32GB扩展到256TB；exFAT比NTFS消耗更少的软盘空间，实验发现，4GB的闪存刚格式化为NTFS时就用掉了30MB软盘空间，而格式化为exFAT时只用了96KB。