hbase很慢

zhaopingzi

hbase(main):002:0> create 'scores','grade','course'
0 row(s) in 21.2420 seconds
建个空表花了21秒多啊

hbase(main):003:0> scan 'scores'
ROW                           COLUMN+CELL                                                                          
Jerry                        column=course:art, timestamp=1384999879884, value=80                                 
Jerry                        column=course:math, timestamp=1384999834502, value=100                              
Jerry                        column=grade:, timestamp=1384999634415, value=2                                      
Tom                          column=course:art, timestamp=1384999525075, value=97                                 
Tom                          column=course:math, timestamp=1384999494882, value=87                                
Tom                          column=grade:, timestamp=1384999364977, value=1                                      
2 row(s) in 2.3730 seconds

这个花2.3730，貌似略快了点

hbase(main):001:0> get 'scores','Tom'
COLUMN                        CELL                                                                                 
course:art                   timestamp=1384999525075, value=97                                                   
course:math                  timestamp=1384999494882, value=87                                                   
grade:                       timestamp=1384999364977, value=1                                                     
3 row(s) in 7.6250 seconds

真慢啊 ！！！！！！

zhaopingzi

是HBASE慢还是DADOOP慢，我怀疑是hadoop慢， hadoop dfs -ls / 出结果需要7-8秒啊

wenhq

strace -d -tt command 看下那里慢。hadoop

zhaopingzi

回复 3# wenhq



$strace -d -tt  hbase shell
。。。。。
pid 29952 stopped, [SIGTRAP]
) = 0
[wait(0x57f) = 29952]
pid 29952 stopped, [SIGTRAP]
15:26:58.413260 clone( [wait(0x57f) = 29952]
pid 29952 stopped, [SIGTRAP]
child_stack=0x42067250, flags=CLONE_VM|CLONE_FS|CLONE_FILES|CLONE_SIGHAND|CLONE_THREAD|CLONE_SYSVSEM|CLONE_SETTLS|CLONE_PARENT_SETTID|CLONE_CHILD_CLEARTID, parent_tidptr=0x420679d0, tls=0x42067940, child_tidptr=0x420679d0) = 30057
[wait(0x57f) = 29952]
pid 29952 stopped, [SIGTRAP]
15:26:58.413324 futex(0x420679d0, FUTEX_WAIT, 30057, NULL

这个有个停顿

wenhq

strace -d -r -tt  
看下这个，少个-r 这个查看相对时间，对于你看那里耗时多有帮助。

zhaopingzi

回复 5# wenhq


    pid 31974 stopped, [SIGTRAP]
)                  = 0
[wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
     0.000090 mprotect(0x37ff481000, 4096, PROT_READ [wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
) = 0
[wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
     0.001405 munmap(0x2ab23acec000, 187670 [wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
) = 0
[wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
     0.000133 mmap(NULL, 1052672, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_ANONYMOUS|MAP_32BIT, -1, 0 [wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
) = 0x40196000
[wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
     0.000072 mprotect(0x40196000, 4096, PROT_NONE [wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
) = 0
[wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
     0.000051 clone( [wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
child_stack=0x40296250, flags=CLONE_VM|CLONE_FS|CLONE_FILES|CLONE_SIGHAND|CLONE_THREAD|CLONE_SYSVSEM|CLONE_SETTLS|CLONE_PARENT_SETTID|CLONE_CHILD_CLEARTID, parent_tidptr=0x402969d0, tls=0x40296940, child_tidptr=0x402969d0) = 32079
[wait(0x57f) = 31974]
pid 31974 stopped, [SIGTRAP]
     0.000059 futex(0x402969d0, FUTEX_WAIT, 32079, NULLHBase Shell; enter 'help<RETURN>' for list of supported commands.
Type "exit<RETURN>" to leave the HBase Shell
Version 0.94.13, r1536939, Wed Oct 30 00:25:06 UTC 2013

hbase(main):001:0>

wenhq

free -g 输出看看。 如果used 和cache的比较多那么就 sync && sync && echo 3 >/proc/sys/vm/drop_caches

zhaopingzi

回复 7# wenhq


# free -g
             total       used       free     shared    buffers     cached
Mem:            19         19          0          0          0          0
-/+ buffers/cache:         19          0
Swap:            7          1          6


echo 3 >/proc/sys/vm/drop_caches什么作用？

wenhq

release the  buffer and cached space of memory

freebug

最后解决了么