distributed cache热门博客列表 - ITeye博客频道

博客专栏推荐

本月博客排行

年度博客排行

redis高级（分布式缓存实现,spring integration）

Distributed Cache: http://www.linuxidc.com/Linux/2012-11/74363.htm http://www.chepoo.com/distributed-cache-implementation-based-on-redis.html Spring Integeration: http://blog.csdn.net/java2 ...

redis distributed cache

zhb8015 评论(0) 有1206人浏览 2014-05-08 11:01

Hadoop 中使用DistributedCache遇到的问题

自己在写MAR/REDUCE代码时，遇到了一个问题，一个大数据文件和一个小数据文件匹配计算，但是小数据文件太小，所以想采用HIVE的MAP JOIN的方式，把小数据文件放到直接大数据文件map的datanode的内存中，这样少了MR代码的1对N的数据文件关联。实现这个的最佳方案就是利用distributed cache。HIVE的MAP JOIN也是利用这个技术。首先简要介 ...