读书人

hbase学习记要之scan

发布时间: 2012-11-01 11:11:31 作者: rapoo

hbase学习记录之scan
1.scan类似于一般数据库的游标(cursor),可以提供顺序的读。
2.scan的结果集为[start,end),这个需要注意
3.scan的setCaching设置的值为每次rpc的请求记录数,默认是1,应该设置的大一些,hbase的例子设置是500,该设置选项可以通过hbase的配置

<property>  <name>hbase.client.scanner.caching</name>  <value>10</value></property>

来作用于整个hbase,也可以使用前面的setCaching
设置小了性能不好,设置太大会造成响应慢、超时、或者OOM
4.scan的setCacheBlocks 当mr或者全表查询的时候要设置成false,查询热数据的的时候可以使用,这样就在hbase的jvm中缓存当前记录
5.scan的setBatch设置每次取的column size,batch和caching和hbase table column size共同决定了rpc的次数

读书人网 >互联网

热点推荐