hbase中查看hlog文件内容-mysql教程-PHP中文网

hbase中查看hlog文件内容

php中文网

发布： 2016-06-07 16:34:42

原创

2231人浏览过

hbase 中除了有查看hfile文件的命令，也提供也查看hlog文件的命令：在 hbase 的根目录下有个.logs目录，里面就是hlog文件，一台RegionServer机器对应一个文件。老的hlog文件会被移到.oldlogs目录: [admin@bufer108081.tbc ~/dev/baoniu]$ hadoop fs -ls /hb

hbase中除了有查看hfile文件的命令，也提供也查看hlog文件的命令：

在hbase的根目录下有个.logs目录，里面就是hlog文件，一台RegionServer机器对应一个文件。老的hlog文件会被移到.oldlogs目录:

[admin@bufer108081.tbc ~/dev/baoniu]$ hadoop fs -ls /hbase-0.90/.logs
Found 49 items
drwxrwxr-x   - hadoop hadoop,admin          0 2014-05-20 20:43 /hbase-0.90/.logs/bufer108056.tbc,30020,1400049798389
drwxrwxr-x   - hadoop hadoop,admin          0 2014-05-20 20:43 /hbase-0.90/.logs/bufer108057.tbc,30020,1400049798399
drwxrwxr-x   - hadoop hadoop,admin          0 2014-05-20 20:43 /hbase-0.90/.logs/bufer108058.tbc,30020,1400049798425

登录后复制

命令的参数：

移动端无限滚动加载瀑布流

里面有2个文件夹。其中这个文件名是:finishing，是我项目还没有请求后台的数据的模拟写法。请求后台数据之后，瀑布流的js有一点点变化，放在文件名是：finished。变化在于需要穿参数到后台，和填充的内容都用后台的数据填充。看自己项目需求来。由于chrome模拟器是不允许读取本地文件json的，所以如果你要进行测试，在hbuilder打开项目就可以看到效果啦，或者是火狐浏览器。

查看详情

[admin@bufer108081.tbc ~/dev/baoniu]$  ~/hbase/bin/hbase org.apache.hadoop.hbase.regionserver.wal.HLog --dump
Usage: HLog <ARGS>
Arguments:
 --dump  Dump textual representation of passed one or more files
         For example: HLog --dump hdfs://example.com:9000/hbase/.logs/MACHINE/LOGFILE
 --split Split the passed directory of WAL logs
         For example: HLog --split hdfs://example.com:9000/hbase/.logs/DIR

[admin@bufer108081.tbc ~/dev/baoniu]$  ~/hbase/bin/hbase org.apache.hadoop.hbase.regionserver.wal.HLog --dump -h                                                 usage: HLog <filename...> [-h] [-j] [-p] [-r <arg>] [-s <arg>] [-w <arg>]
 -h,--help             Output help message
 -j,--json             Output JSON
 -p,--printvals        Print values
 -r,--region <arg>     Region to filter by. Pass region name; e.g.
                       '.META.,,1'
 -s,--sequence <arg>   Sequence to filter by. Pass sequence number.
 -w,--row <arg>        Row to filter by. Pass row name.

登录后复制

通过以下命令就可以查看hlog文件的内容：

[admin@bufer108081.tbc ~/dev/baoniu]$ ~/hbase/bin/hbase org.apache.hadoop.hbase.regionserver.wal.HLog --dump -p /hbase-0.90/.logs/bufer108118.tbc,30020,1400049798450/bufer108118.tbc%2C30020%2C1400049798450.1400557412298
14/05/20 15:06:49 INFO Configuration.deprecation: fs.default.name is deprecated. Instead, use fs.defaultFS
Sequence 8347119 from region a98994dbcf5b1fcd47f69efcf804c385 in table test
  Action:
    row: 0042:2100520170149
    column: a:title
    at time: Tue May 20 11:43:45 CST 2014
    value: xE5x95x86xE5x93x81xE4xB8xADxE8xAFx95xE5xAEx9DxE8xB4x9D
  Action:
    row: 0042:2100520170149
    column: a:user_id
    at time: Tue May 20 11:43:45 CST 2014
    value: 778896
  Action:
    row: 0042:2100520170149
    column: a:pict_url
    at time: Tue May 20 11:43:45 CST 2014
    value: 19/60/74/196074.jpg
  Action:
    row: 0042:2100520170149
    column: a:categ
    at time: Tue May 20 11:43:45 CST 2014
    value: 1101
  Action:
    row: 0042:2100520170149
    column: a:minimum_bid
    at time: Tue May 20 11:43:45 CST 2014
    value: 2000.00
  Action:
    row: 0042:2100520170149
    column: a:reserve_price
    at time: Tue May 20 11:43:45 CST 2014
    value: 2000.00

登录后复制

原文地址：hbase中查看hlog文件内容, 感谢原作者分享。