HIVE + HBASE mapreduce效率问题

HADOOP 0.20.203

HBASE 0.90.3

HIVE 0.7.1

 

3 DATA node

 

200万数据，比较HIVE+ HDFS 与 HBASE +HDFS +HIVE的统计。

hive在HBASE中作统计时间长很多，10倍了。

 

hive已调整:

<property>
  <name>hive.mapjoin.bucket.cache.size</name>
  <value>10000</value>

 

 

研究中

评论

3 楼 lookqlp 2012-12-03  

您好，我这表hive关联hbase表统计比原先hive表也慢很多，不知道你有没有新的进展了？

2 楼 han.zoo 2012-02-17  

是我自己环境的实验。效果并不好。也受机器资源限制。

1 楼 moudaen 2012-02-10  

您好！请问下你这个实验做了吗？求指导，我的QQ号是：304145723，能否告知您的联系方式。谢谢！