最新文章列表

Hadoop之HBase学习笔记

本文主要是一些具体的java代码以及少量的概念描述,至于具体的概念可以详细百度   1、namespace    HBase namespace特性是对表资源进行隔离的一种技术,隔离技术决定了HBase能否实现资源统一化管理的关键,提高了整体的安全性。      *配额管理:限制一个namespace使用的资源,如:region、table   *命名空间安全管理:提供了多租户安全管理 ...
290434409 评论(0) 有1069人浏览 2015-10-15 14:12

Hadoop2.7.1+Hbase1.2.1集群环境搭建(8)雅虎YCSB测试hbase性能测试

(1)hadoop2.7.1源码编译 http://aperise.iteye.com/blog/2246856 (2)hadoop2.7.1安装准备 http://aperise.iteye.com/blog/2253544 (3)1.x和2.x都支持的集群安装 http://aperise.iteye.com/blog/2245547 (4)hbase安装准备 ...
zilongzilong 评论(0) 有7310人浏览 2015-10-13 17:45

Sqoop--关系型数据库跟hdfs数据传输工具

1.什么是Sqoop   Sqoop即 SQL to Hadoop ,是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具,充分利用MapReduce并行特点以批处理的方式加快数据传输,发展至今主要演化了二大版本,Sqoop1和Sqoop2。  Sqoop工具是hadoop下连接关系型数据库和Hadoop的桥梁,支持关系型数据库和hive、hdfs,hbase之间数据的相互导入, ...
zhanghh321 评论(0) 有1907人浏览 2015-10-09 16:48

Kudu简介

今天浏览Cloudera的官博,发现了一篇介绍《Kudu: New Apache Hadoop Storage for Fast Analytics on Fast Data》的文章,摘记如下:   1. 什么是Kudu This new open source complement to HDFS and Apache HBase is designed to fill gaps in ...
dayutianfei 评论(1) 有3399人浏览 2015-09-29 17:02

浅谈大数据平台演变(转)

一说到开源大数据处理平台,就不得不说此领域的开山鼻祖Hadoop,它是GFS和MapReduce的开源实现。虽然在此之前有很多类似的分布式存储和计算平台,但真正能实现工业级应用、降低使用门槛、带动业界大规模部署的就是Hadoop。得益于MapReduce框架的易用性和容错性,以及同时包含存储系统和计算系统,使得Hadoop成为大数据处理平台的基石之一。Hadoop能够满足大部分的离线存储和离线计 ...
dalan_123 评论(0) 有537人浏览 2015-09-21 22:51

hbase等源码导入eclipse流程

hbase:   1. 下载源码 svn co http://svn.apache.org/repos/asf/hbase/trunk hbase   2. 执行 mvn eclipse:eclipse -DskipTests   3. 导入到eclipse   tomcat:   tomcat的源码是利用ant来创建和管理的。先安装ant,再执行ant ide-ecli ...
jimmee 评论(0) 有1713人浏览 2015-09-20 19:00

hbase分布式搭建

iteye样式有些出不来,请查看附件
magic_agate 评论(0) 有684人浏览 2015-09-14 17:34

PostgreSQL数据库简介

一.数据库简介         数据库分关系型数据库和非关系型数据库,关系型数据库有:ORACLE、PostgreSQL、MySQL、SQL SERVER等,非关系型数据库有:redis、mongoDB、HBASE,其中redis是内存key-value数据库,mongoDB是文档型数据库,HBASE是列式数据库。   数据库排名:http://db-engines.com/en/ranki ...
bijian1013 评论(0) 有3870人浏览 2015-09-12 21:58

mysql分布式缓存与memcached

  请尊重知识,请尊重原创 更多资料参考请见  http://www.cezuwang.com/listFilm?page=1&areaId=906&filmTypeId=1 memcached 作为一个流行度不亚于MySQL的缓存工具 ...
annan211 评论(0) 有2196人浏览 2015-09-06 23:15

hbase 报文 处理 逻辑

    报文格式:  每隔一个小时 出现一个文件类型 报文 ,所以 我们的处理思路是,一个小时做一次处理。   import java.io.FileInputStream; import java.util.Properties; import java.util.concurrent.Executors; import java.util.concurrent.Schedul ...
knight_black_bob 评论(0) 有778人浏览 2015-09-06 11:34

Hbase 协处理器

在分析协处理器 Coprocessor 之前, 我们先来总结下客户端发起 RPC 请求, 最终到 HRegion 的过程 在客户端操作表中的数据时,会先找到改行的HRegionLocation,然后练习HRegionServer,通过RPC 调用HRegion上的方法,因为HRegion 才是真正存储数据的地方。 如果客户端代码想要在 HRegion
ziye520 评论(0) 有1006人浏览 2015-09-04 16:47

Innodb 存储引擎优化

  请尊重知识,请尊重原创 更多资料参考请见  http://www.cezuwang.com/listFilm?page=1&areaId=906&filmTypeId=1 Innodb 存储引擎优化Innodb 作为与MyISAM同为最受欢迎的mysql存储引擎,其与myisam的区别主要表现在 1 缓存机制 2 锁定机制 3 事务支持 4 数据存储在某些特定环境下性能差异也是 ...
annan211 评论(0) 有973人浏览 2015-09-02 18:55

MyISAM存储引擎的优化

   MyISAM存储引擎的优化作为mysql最流行最古老的存储引擎之一的MyISAM,其在以读为主的非事务性系统中的优异表现成为多数程序员的首选。   MyISAM 存储 ...
annan211 评论(0) 有875人浏览 2015-09-02 17:14

Hbase java 常见操作

      import java.io.IOException; import java.util.ArrayList; import java.util.HashMap; import java.util.List; import java.util.Map; import org.apache.hadoop.conf.Configuration; impo ...
knight_black_bob 评论(0) 有1071人浏览 2015-08-25 15:12

HBase 中mapreduce join的使用

首先介绍常用的几种 mapreduce 方法 reduce side join reduce side join是一种最简单的join方式,其主要思想如下: 在map阶段,map函数同时读取两个文件File1和File2, ...
snwz 评论(0) 有1021人浏览 2015-08-06 16:48

HBASE的java api简介

一:创建表 //获取配置 Configuration conf = new Configuration(); //填写配置信息 conf.set("hbase.zookeeper.quorum", "it04:2181,it05:2181,it06:2181"); //获得操作hb ...
wuai 评论(0) 有781人浏览 2015-08-06 09:47

最近博客热门TAG

Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics