本月博客排行
-
第1名
lerf -
第2名
bosschen -
第3名
paulwong - fantaxy025025
- johnsmith9th
- xiangjie88
- zysnba
- 龙儿筝
年度博客排行
-
第1名
青否云后端云 -
第2名
宏天软件 -
第3名
gashero - wy_19921005
- vipbooks
- e_e
- benladeng5225
- gengyun12
- wallimn
- javashop
- ranbuijj
- fantaxy025025
- jickcai
- zw7534313
- qepwqnp
- 解宜然
- ssydxa219
- zysnba
- sam123456gz
- sichunli_030
- tanling8334
- arpenker
- gaojingsong
- xpenxpen
- kaizi1992
- wiseboyloves
- jh108020
- ganxueyun
- xyuma
- xiangjie88
- wangchen.ily
- Jameslyy
- luxurioust
- mengjichen
- lemonhandsome
- jbosscn
- zxq_2017
- nychen2000
- lzyfn123
- wjianwei666
- forestqqqq
- ajinn
- siemens800
- zhanjia
- Xeden
- hanbaohong
- java-007
- 喧嚣求静
- mwhgJava
- kingwell.leng
最新文章列表
java操作hbase
HBase提供了Java API对其进行管理,包括对表的管理、数据的操作等。 HBaseAdmin —— 对表的创建、删除、显示以及修改等。 HTable —— 通过HTable的实例来访问表并进行数据的操作。
package test;
import java.io.IOException;
import java.util.ArrayList;
import java.util ...
simplehbase对JOPO新增xml配置和无配置方式
simplehbase介绍文章如下:
https://github.com/zhang-xzhi/simplehbase/wiki/C00-simplehbase-3%E5%88%86%E9%92%9F%E7%AE%80%E4%BB%8B
github
https://github.com/zhang-xzhi/simplehbase/
https://github.com/zhang-xzhi/ ...
hive 读取查询 hbase 数据
常出现的可能是版本问题,
我hbase使用的是0.96.x hive使用0.13.1版本
如果版本不对会报错。
将hbase lib下的相关包全部移至hive的lib里面,
如下包:
guava-12.0.1.jar
hbase-client-0.96.1.1-cdh5.0.2.jar
hbase-common-0.96.1.1-cdh5.0.2.jar
hbase-common- ...
HBASE ScannerTimeoutException 问题
在对Hbase进行Scan的时候有时候会抛出ScannerTimeoutException,场景如下:
Java代码
2012 15:28:52 (14mins, 41sec)
org.apache.hadoop.hbase.client.ScannerTimeoutException: 60622ms passed since the last invocat ...
hbase维护(转载)
一,基本命令:
建表:create 'testtable','coulmn1','coulmn2'
也可以建表时加coulmn的属性如:create 'testtable',{NAME => 'coulmn1', BLOOMFILTER => 'NONE', REPLICATION_SCOPE => '0', VERSIONS => '10', CO ...
通过Phoenix使用HBase记要
HBase 官网: http://hbase.apache.org/ Phoenix 官网: http://phoenix.apache.org/
在使用上与其他关系型数据库的主要差异如下: 1. 不支持INSERT和UPDATE,统一为UPSERT; 2. 不支持java.sql.Statement.setQueryTimeout(int seconds); 3. 通过 java.sql.D ...
HBase Java Api详解
一、HBaseConfiguration
关系:org.apache.hadoop.hbase.HBaseConfiguration
作用:对HBase进行配置
返回值
函数
描述
void
addResource(Path file)
通过给定的路径所指的文件来添加资源
void
clear()
清空所有已设置的属性
string ...
hadoop2.2生态系统快速安装脚本
对于使用hadoop进行开发的朋友们,可能要自己搭建一套hadoop的运行环境,如果不是经常变动的还好,如果,经常搭建而且还是多台机器,那么我们一个个的安装,就显得有点捉襟见肘了,这也是这个脚本诞生的目的,主要帮助我们在快速搭建hadoop集群,以及安装底层的配置依赖环境如JDK,Maven,Ant等,在安装hadoop前,还有一些关于linux基础的工作需要做,包括SSH无密码登陆和批量用户创建, ...
防止人为误操作MySQL数据库技巧一例
防止人为误操作MySQL数据库技巧一例
(本题来自老男孩培训内部学生问题,属于数据库安全技巧)
在若干年前,老男孩亲自遇到一个“命案”,老大登录数据库update一个记录,结果忘了加where,于是悲剧发生了,这使得我对MySQL的增量恢复熟练度远超过其他的知识点,同时也很在意对内的数据库安全,并且每次讲课讲到此处,都会给学生讲这个领导的故事。
1、mysql帮助说明
[oldboy_c64 ...
hadoop mr file2hfile2hbase
写了个简单的mr 操作file到hfile,在把hfile倒入hbase的例子,在此记录一下:
File2HFile2HBase.java代码:
package com.lyq.study.example;
import java.io.IOException;
import java.security.PrivilegedAction;
import java.util.Arra ...
RpcClient$FailedServerException的解决思路
具体的错误信息如下:
org.apache.hadoop.hbase.client.RetriesExhaustedException: Failed after attempts=35, exceptions:
Mon Aug 25 12:00:40 CST 2014, org.apache.hadoop.hbase.client.RpcRetryingCaller@1a58c9e, ...
hbase结合hive和sqoop实现导数据到mysql
hive整合hbase表的两点好处:
1.实现数据导入到MYSQL。
2.实现hbase表转换为另外一张hbase表。
三个操作环节:
1.hbase关联hive作为外部表:
CREATE EXTERNAL TABLE hive_device_app(row_key string,genera_type string,install_type string,label str ...
安装mysql-connector-java出现以下问题,解决
[root@master-hadoop hive]# yum install mysql-connector-java -y
Loaded plugins: fastestmirror, security
Loading mirror speeds from cached hostfile
* base: centos.ustc.edu.cn
* extras: mirrors.aliyun.c ...
最近博客热门TAG
Oracle(49876) MySQL(37268) SQL Server(17623) Access(9329) DB2(4271) Redis(3181) Sybase(2414) 数据挖掘(2098) MongoDB(2014) SQLite(1817) PostgreSQL(1635) HBase(1492) NoSQL(1000) HSQLDB(620) Informix(581) Derby(578) Cassandra(375) PowerBuilder(333) CouchDB(113) TokyoCabinet(87)