Hadoop4.2HDFS测试报告之六

【Hadoop4.2HDFS测试报告之六】的更多相关文章

Hadoop4.2HDFS测试报告之六

测试结论第一组数据作表格作图: 第二组数据作表格作图: 根据以上图分析得出以下结论: 1. 本地存储的读写速率基本保持23M左右,说明本地存储比较稳定. 2. HDFS存储两个数据节点的读写速率性能比较好,当文件大小为1G时与本地存储性能接近,说明具备高可用性,测试过程中停掉一个节点,正常读写文件,说明也具备高稳定性. 3. HDFS存储两个数据节点的读写速率比HDFS存储单个数据节点的读写速率提升1.6倍,说明具备高性能和高扩展性. 4. HDFS存储在文件大于100M时读写速率15M/s以…

Hadoop4.2HDFS测试报告之三

第一组:文件存储写过程记录 NameNode:1 DataNode:1 本地存储 scp localpath romotepath 500 2 1 23.67 NameNode:1 DataNode:1 HDFS存储 hadoop fs -put localpath hdfspath 500 2 1 31.92 NameNode:1 DataNode:2 HDFS存储 hadoop fs -put localpath hdfspath 500 2 1 41.39 NameNode:1 DataN…

Hadoop4.2HDFS测试报告之四

第二组:文件存储读过程记录测试系统组成存储类型测试程序或命令测试文件大小(Mb) 文件个数(个) 客户端并发数(个) 读速率 (M/s) NameNode:1 DataNode:1 本地存储 scp romotepath localpath 50 20 1 23.51 NameNode:1 DataNode:1 HDFS存储 hadoop fs -get hdfspath localpath 50 20 1 13.70 NameNode:1 DataNode:2 HDFS存储 hadoo…

Hadoop4.2HDFS测试报告之五

第二组:文件存储读过程记录 NameNode:1 DataNode:1 本地存储 scp romotepath localpath 500 2 1 23.05 NameNode:1 DataNode:1 HDFS存储 hadoop fs -get hdfspath localpath 500 2 1 28.40 NameNode:1 DataNode:2 HDFS存储 hadoop fs -get hdfspath localpath 500 2 1 42.67 NameNode:1 DataN…

Hadoop4.2HDFS测试报告之二

第一组:文件存储写过程记录测试系统组成存储类型测试程序或命令测试文件大小(Mb) 文件个数(个) 客户端并发数(个) 写速率(M/s) NameNode:1 DataNode:1 本地存储 scp localpath romotepath 50 20 1 24.23 NameNode:1 DataNode:1 HDFS存储 hadoop fs -put localpath hdfspath 50 20 1 10.82 NameNode:1 DataNode:2 HDFS存储 hadoop…

Hadoop4.2HDFS测试报告之一

1.1 测试方案 1.1.1 测试目标为了验证本地文件系统和HDFS存储能力对比,将1G文件组存储进各个文件系统,记录存储任务消耗的时间. l 测试HDFS的高可用性和高稳定性 l 测试HDFS的高性能和高扩展性 l 测试HDFS的读写速率大于15M/s 1.1.2 测试过程将测试过程分为两组进行: 第一组:在本地/root文件夹中创建1G文件组,记录写完成的时间,测试三次,并计算出写速率:在HDFS文件系统中建立/root文件夹,将本地/root文件中的文件(1G文件组)分…

免费高效实用的.NET操作Excel组件NPOI（.NET组件介绍之六）

很多的软件项目几乎都包含着对文档的操作,前面已经介绍过两款操作文档的组件,现在介绍一款文档操作的组件NPOI. NPOI可以生成没有安装在您的服务器上的Microsoft Office套件的Excel报表,并且在后台调用Microsoft Excel ActiveX更有效率;从Office文档中提取文本,以帮助您实现全文索引功能(大多数时候,此功能用于创建搜索引擎): 从Office文档提取图像: 生成包含公式的Excel工作表. 一.NPOI组件概述: NPOI是完全免费使用: 涵盖Excel…