插入性能比:
lzotest表采用lzo压缩格式,nolzo无压缩, 分别启动20个线程,每个线程一条一条插入1w条数据
lzo耗时 54273ms, nolzo耗时53146
scan性能比:
逐条scan两张表, 20w条数据
lzo耗时 6509ms, nolzo耗时7593ms
压缩比:
60w条数据压缩前nolzo 205m
修改压缩格式为lzo后 数据为111m,压缩比为54.146%
综上所述,插入上开启lzo稍差但对比不明显,scan时lzo性能略有优势,压缩比还算比较可观
分享到:
相关推荐
hbase安装lzo压缩包的编译文件master
HBase开启审计日志
某大数据公司内部Hbase性能测试详细设计文档及用例 罗列了Hbase性能测试需要注意的一些参数设置,给出了Hbase测试用例
hbase性能报告
里面包括了特定场合下,HBase随机查询的一些性能指标参考以及调优策略
用phoenix对hbase建立二级索引,利用关系型数据库一样用sql语句操作HBase
YCSB HBase Group 7-1 测试步骤
默认情况下,在创建HBase表的时候会自动创建一个region分区,当导入数据的时候,所有的HBase客户端都向这一个region写数据,直到这个region足够大了才进行切分。 一种可以加快批量写入速度的方法是通过预先创建一些...
HBase性能深度分析HBase性能深度分析
HBase写性能优化策略HBase写性能优化策略HBase写性能优化策略
本hbase的jar依赖包主要是基于hbase-1.0.0-cdh5.6.1版本,之所以用cdh版,是因为测试脚本引用的是这个版本的类和方法。 本依赖包在Loadrunner12和Jmeter3.1下测试通过,是从网上收集的基础包组成,能够满足测试所有...
HBase在不同版本(1.x, 2.x, 3.0)中针对不同类型的硬件(以IO为例,HDD/SATA-SSD/PCIe-SSD/Cloud)和场景(single/batch, get/scan)做了(即将做)各种不同的优化,这些优化都有哪些?如何针对自己的生产业务和...
hbase-1.2.2-Java测试最小依赖包,很多博客都写过,但是很多博客都没有经过验证,本依赖包是经过代码严格检测的,能够通过最简单的hbase数据写入,数据读取等操作的,请放心下载
Hbase 性能 优化,Hbase 数据查询 插入参考
HBase最佳实践-读性能优化策略,HBase最佳实践-读性能优化策略
HBase的性能优化测试,应各自环境不同参照设置自己的数据库参数
Phoenix_on_HBase性能测试报告.pdf
Hbase性能测试详细设计文档及用例.pdf
介绍HBase堆外内存测试