最新文章列表

hbase 安装

1.上传hbase安装包   2.解压   3.配置hbase集群,要修改3个文件(首先zk集群已经安装好了) 注意:要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下   3.1修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_55 //告诉hbase使用外部的zk expo ...
baoliangquan 评论(0) 有495人浏览 2016-12-12 21:22

《自己动手写云盘》 – 搭建Hbase环境

 人个主页链接:http://www.tongtongxue.com/archives/4669.html     软件准备 1、zookeeper-3.4.9.tar.gz 2、hbase-1.1.7-bin.tar.gz   安装Zookeeper 由于Hbase的需要zookpeeper的协同管理,所以先把Zookeeper安装好。 1、首先从Apache网站将zookeep ...
Chicago09 评论(0) 有1248人浏览 2016-12-11 17:39

《自己动手写云盘》 – 系统架构及技术选型

  系统架构 在上一篇《自己动手写云盘》 – 确立需求博文中提出要实现的功能,鉴于这些功能,可以确定该系统如下架构:  其中以HDFS分布式文件系统作为底层文件系统,在此之上搭建HBase分布式数据库,同时
Chicago09 评论(0) 有3338人浏览 2016-12-01 22:15

大数据架构开发 挖掘分析 Hadoop HBase Hive Storm Spark Sqoop Flume ZooKeeper Kafka Redis 视频

培训大数据架构开发、挖掘分析! 从零基础到高级,一对一培训!全程技术指导![技术QQ:
ggttyy8 评论(0) 有276人浏览 2016-12-01 16:31

Hbase万亿级存储性能优化总结

转:http://blog.csdn.net/odailidong/article/details/41794403 背景       hbase主集群在生产环境已稳定运行有1年半时间,最大的单表region数已达7200多个,每天新增 ...
依然任逍遥 评论(0) 有763人浏览 2016-11-15 22:19

hbase统计表的行数

1、count命令     hbase(main):001:0> count 'mobile_info'     hbase(main):001:0> count 'mobile_info',INTERVAL=2000    //INTERVAL:行数间隔 2、hbase自带的mapreduce     -bash-4.1# hbase org.apache.hadoop.h ...
sxyqhyt 评论(0) 有4058人浏览 2016-11-08 14:22

hive 安装部署和Java客户端

(转自)http://blog.csdn.net/zhongguozhichuang/article/details/52702476 主要对Hive 安装配置进行介绍。 二、Hive 运行模式 与 Hadoop 类似,Hive 也有 3 种运行模式: 1. 内嵌模式 将元数据保存在本地内嵌的 Derby 数据库中,这是使用 Hive 最简单的方式。但是这种方式缺点也比较明显,因为一个内嵌 ...
ymq267 评论(0) 有2027人浏览 2016-11-04 10:15

hbase shell 在SecureCRT下无法删除命令问题解决

用SecureCRT连接linux 运行hbase shell时 无法删除命令,可以按照以下步骤设置后操作。 操作步骤: 一:在options-terminal-Emulation下 将 Terminal改为Linux 二:用ctrl+Backspace删除命令
天堂飘过 评论(0) 有530人浏览 2016-10-24 10:25

spark (4)spark-shell 读写hdfs 读写redis 读写hbase

  (1)初学者对于spark的几个疑问 http://aperise.iteye.com/blog/2302481 (2)spark开发环境搭建 http://aperise.iteye.com/blog/2302535 (3)Spark Standalone集群安装介绍 http ...
zilongzilong 评论(0) 有6048人浏览 2016-09-13 20:25

启动Hbase时其中一个节点连不上zookeeper问题解决(maxClientCnxns)

安装hbase集群时,到启动集群时其中一个节点报错如下: 2016-09-09 15:32:57,749 INFO  [main-SendThread(madwx31:2181)] zookeeper.ClientCnxn: Socket connection established to madwx31/192.168.32.31:2181, initiating session 2016-09 ...
静水深流 评论(0) 有5499人浏览 2016-09-09 16:51

HBase 常用Shell命令

网络转载,看着感觉挺有用,收藏一下!   进入hbase shell console$HBASE_HOME/bin/hbase shell如果有kerberos认证,需要事先使用相应的keytab进行一下认证(使用kinit命令),认证成功之后再使用hbase shell进入可以使用whoami命令可查看当前用户
sqcjy111 评论(0) 有754人浏览 2016-08-26 09:17

HBase性能优化

1、修改Linux配置 Linux系统最大可打开文件数一般默认的参数值是1024,如果你不进行修改并发量上来的时候会出现“Too Many Open Files”的错误,导致整个HBas ...
houston123 评论(0) 有1150人浏览 2016-08-11 13:51

记录hbase遇到的问题

这次记录下学习hbase遇到的一些问题,有了新问题也会追加。   背景:使用vmware创建3台桥接模式虚拟机进行集群,熟练之后大概会使用7台。 宿主机操作系统:mac osx 10.11.3 16G 256G SSD。 软件版本:hadoop 2.7.2、zookeeper 3.4.8、hbase 1.2.2   1、瞎捣鼓,通过hdfs将/hbase目录删除了,此时执行在hbas ...
zk_chs 评论(0) 有3059人浏览 2016-08-04 11:41

快速搭建hadoop+hbase分布式集群

hadoop集群部署 1. 准备三台机器,如`10.8.177.23`,`10.8.177.24`,`10.8.177.25` 2. 修改主机名称,配置`hosts`文件(root用户下操作): # 每台机器执行,我这里hd开头 ...
290434409 评论(1) 有2317人浏览 2016-07-25 16:46

分布式数据库hbase详解

  新霸哥注意到了在人类随着计算机技术的发展,数据的存储量发生了很大的变化,可以用海量来形容,同时,存储的数据类型也是有多种多样的,网页,图片,视频,音频,电子邮件等等,所以在这中情况下以谷歌旗下的BigTable为代表的新型数据库产生并且迅速发展。Hbase就是BigTable的开源实现,下面新霸哥将详细的为你揭晓HBase相关知识以及相关应用。   互联网时代对数据库的要求和传统的还是有区别的 ...
xinbage 评论(0) 有358人浏览 2016-07-25 07:47

OpenTSDB设计解读

关于OpenTSDB的表设计,这两篇文章已经写得很好了: http://blog.csdn.net/bluishglc/article/details/31052749 http://www.jianshu.com/p/0bafd0168647 但对于tsdb-uid这个表,我觉得还是可以说得更详细一点的。以第一个链接提到的例子为例: 我们插入2个metrics: proc.stat.cpu ...
bylijinnan 评论(0) 有3282人浏览 2016-07-17 12:22

HBase问题

1.java.net.UnknownHostException: unknown host:xxxx异常解决办法 windows下开发HBase应用程序,HBase部署在linux环境中,在运行调试时可能会出现无法找到主机,类似异常信息如下: java.net.UnknownHostException: unknown host: jmnb 解决办法如下: 在C:\WINDOWS\system3 ...
h_1_y_m 评论(0) 有308人浏览 2016-06-16 17:02

基于hadoop的出租车数据分析系列(三)

http://mp.weixin.qq.com/s?__biz=MzI0NzM2MDExMw==&mid=2247483689&idx=1&sn=c30dee4330bc4da5adcd04b1f693b065&scene=23&srcid=0602ag9GRJmT0FXu0VjM5dsC#rd
小牛的后院 评论(0) 有509人浏览 2016-06-02 20:32

基于hadoop的出租车数据分析(二)

http://mp.weixin.qq.com/s?__biz=MzI0NzM2MDExMw==&mid=2247483687&idx=1&sn=1862868680559dd79303f3ab1a6e1714&scene=23&srcid=0601xbYy24Qs2nvUZ4qo9lal#rd
小牛的后院 评论(0) 有439人浏览 2016-06-01 22:29

最近博客热门TAG

Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics