|
计算机应用 2015
云存储系统中文件分界点确定方法——cut-garKeywords: hadoop分布式文件系统,小文件,文件分界点,cut-gar,灰色关联分析 Abstract: ?针对hadoop分布式文件系统(hdfs)中小文件定义模糊导致hdfs处理小文件性能不佳的问题,提出了一种云存储系统中文件分界点的确定方法——cut-gar。该方法分析消耗namenode内存(m)、文件上传速度(mufs)、文件读取速度(mafs)与文件大小之间的关系,得出文件大小三个近似最优值,fm、fmufs、fmafs;然后利用灰度关联分析,将m、mufs、mafs作为评价指标,文件大小作为评价对象,得到评价指标-评价对象灰色关联度以及评价指标所占权重,将fm、fmufs、fmafs与对应权重相乘,得出文件分界点。实验结果表明,cut-gar在m、mufs和mafs三者之间取得平衡,可以有效确定文件分界点,提升小文件处理性能。
|