-
hadoop技术学习
收藏1、大数据和云计算技术学习;2、内核代码研究;3、架构分享。 同时欢迎关注微信公众号: “大数据和云计算技术”。该微信公众号已经有几千人关注,微信领域关注度排名排前的公众号。
最近更新文章
实时分析系统(HIVE/HBASE/IMPALA)浅析
1. 什么是实时分析(在线查询)系统?
大数据领域里面,实时分析(在线查询)系统是最常见的一种场景,通常用于客户投诉处理,实时数据分析,在线查询等等过。因为是查询应用,通常有以下特点:
a. 时延低(秒级别)。
b. 查询条件复杂(多个维度,维度不固定),有简单(带有ID)。
c. 查询范围大(通常查询表记录在几十亿级别)。
d. 返回结果数小(几十条甚至几千条)。
高速数据总线kafka分析
1. Kafka的作用
在大数据系统中,常常会碰到一个问题,整个大数据是由各个子系统组成,数据需要在各个子系统中高性能,低延迟的不停流转。 ...
资源管理框架(mesos/YARN/coraca/Torca/Omega)选型分析
1 资源调度的目标和价值
1.1 子系统高效调度
任务之间资源隔离,减少争抢。 任务分配调度时结合资源分配,各个任务分配合理的资源,充分利用系 ...