Hbase快速计数行数

Question

现在，我在resultscanner上实现行计数，如下所示

for (Result rs = scanner.next(); rs != null; rs = scanner.next()) {
    number++;
}

如果数据达到百万，时间计算是很大的。我想要实时计算，但我不想使用Mapreduce

如何快速计算行数。

Answer 1

在HBase中使用RowCounter RowCounter是一个mapreduce作业，用于对表的所有行进行计数。这是一个很好的实用工具，可以用作健全性检查，以确保HBase可以读取表的所有块，如果存在元数据不一致的问题。它将在一个进程中运行mapreduce all，但如果有一个mapreduce集群供它利用，它将运行得更快。

$ hbase org.apache.hadoop.hbase.mapreduce.RowCounter <tablename>

Usage: RowCounter [options] 
    <tablename> [          
        --starttime=[start] 
        --endtime=[end] 
        [--range=[startKey],[endKey]] 
        [<column1> <column2>...]
    ]