caodaoxi
- 浏览: 548192 次
- 性别:
- 来自: 北京
-
最新评论
-
Tristan_S：
这个有点意思
ASM -
starryskydog：
程序修改detail band部分的样式 如内容字体大小 ...
使用jasperReport实现动态表头 -
samwong：
Good, so usefule
使用YUI Compressor压缩CSS/JS -
gc715409742：
能够告诉我怎么在web项目中使用YUI Compressor？ ...
使用YUI Compressor压缩CSS/JS -
JsonTeye：
您好！ 我看你的代码，我现在也在做动态报表，实现功能由用户自己 ...
使用jasperreport动态生成pdf,excel,html
文章列表
网上有篇关于hive的partition的使用讲解的比较好，转载了：
一、背景
1、在Hive Select查询中一般会扫描整个表内容，会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据，因此建表时引入了partition概念。
2、分区表指的是在创建表时指定的partition的分区空间。
3、如果需要创建有分区的表，需要在create表的时候调用可选参数partitioned by，详见表创建的语法结构。
二、技术细节
1、一个表可以拥有一个或者多个分区，每个分区以文件夹的形式单独存在表文件夹的目录下。
2、表和列名不区分大小写。
3、分区是以字段的形式 ...
- 2013-06-03 11:46
- 浏览 548
- 评论(0)
网上有篇关于hive的partition的使用讲解的比较好，转载了：
一、背景
1、在Hive Select查询中一般会扫描整个表内容，会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据，因此建表时引入了partition概念。
2、分区表指的是在创建表时指定的partition的分区空间。
3、如果需要创建有分区的表，需要在create表的时候调用可选参数partitioned by，详见表创建的语法结构。
二、技术细节
1、一个表可以拥有一个或者多个分区，每个分区以文件夹的形式单独存在表文件夹的目录下。
2、表和列名不区分大小写。
3、分区是以字段的形式 ...
- 2013-06-03 11:46
- 浏览 107
- 评论(0)
1.创建表的语句：Create [EXTERNAL] TABLE [IF NOT EXISTS] table_name[(col_name data_type [COMMENT col_comment], ...)][COMMENT table_comment][PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)][CLUSTERED BY (col_name, col_name, ...) [SORTED BY (col_name [ASC|DESC], ...)] INTO num_buckets BUCKETS] ...
- 2013-06-03 10:50
- 浏览 1871
- 评论(0)
1.创建表的语句：Create [EXTERNAL] TABLE [IF NOT EXISTS] table_name[(col_name data_type [COMMENT col_comment], ...)][COMMENT table_comment][PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)][CLUSTERED BY (col_name, col_name, ...) [SORTED BY (col_name [ASC|DESC], ...)] INTO num_buckets BUCKETS] ...
- 2013-06-03 10:50
- 浏览 563
- 评论(0)
http://blog.csdn.net/hguisu/article/details/7282050hadoop、hbase的安装见前面的文章
下面是hive的安装
1、下载
http://mirror.bit.edu.cn/apache/hive/stable/
Hadoop Hive与Hbase整合
一 、简介
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的 ...
- 2013-06-03 10:18
- 浏览 650
- 评论(0)
http://blog.csdn.net/hguisu/article/details/7282050hadoop、hbase的安装见前面的文章
下面是hive的安装
1、下载
http://mirror.bit.edu.cn/apache/hive/stable/
Hadoop Hive与Hbase整合
一 、简介
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的 ...
- 2013-06-03 10:18
- 浏览 556
- 评论(0)
注：下面所有例子中 – - 之间实际上是没有空格的，使用时请删除空格。
Rsync是一个远程数据同步工具，可通过LAN 或互联网快速同步多台主机间的文件。Rsync 本来是用以取代 rcp的一个工具，它当前由 rsync.samba.org 维护。Rsync 使用所谓的”Rsync演算法”来使本地和远程两个主机之间的文件达到同步，这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度相当快。
Rsync 的特色：
快速：第一次同步时 rsync 会复制全部内容，但在下一次只传输修改过的文件。
安全：rsync 允许通过 ssh 协议来加密传输数据。
更少的带宽：rsync ...
- 2013-05-30 23:15
- 浏览 517
- 评论(0)
注：下面所有例子中 – - 之间实际上是没有空格的，使用时请删除空格。
Rsync是一个远程数据同步工具，可通过LAN 或互联网快速同步多台主机间的文件。Rsync 本来是用以取代 rcp的一个工具，它当前由 rsync.samba.org 维护。Rsync 使用所谓的”Rsync演算法”来使本地和远程两个主机之间的文件达到同步，这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度相当快。
Rsync 的特色：
快速：第一次同步时 rsync 会复制全部内容，但在下一次只传输修改过的文件。
安全：rsync 允许通过 ssh 协议来加密传输数据。
更少的带宽：rsync ...
- 2013-05-30 23:15
- 浏览 220
- 评论(0)
服务器filesshpathfreebsdapache
考虑到服务器数据的安全，我考虑增加一台备份服务器，通过数据同步，达到较好的冗余。
linux下有非常好的一个命令rsync可以实现差异备份，下面就说说它的用法：
ubuntu缺省安装的安装中，rsync服务是没有开启的。需要做3步：
1、修改/etc/default/rsync，让rsync服务在开机的时候启动。
$ sudo vi /etc/default/rsync
将RSYNC_ENABLE=false改为RSYNC_ENABLE=true
2、创建一个rsyncd.conf，缺省安装中是没有这个文件的。
$ ...
- 2013-05-30 23:14
- 浏览 373
- 评论(0)
java中的BitSet学习
分类：
算法 Java SE
2012-08-09 21:50
338人阅读 评论(0)
收藏
举报
(1)BitSet类 大小可动态改变, 取值为true或false的位集合。用于表示一组布尔标志。
此类实现了一个按需增长的位向量。位 set 的每个 ...
- 2013-05-30 22:31
- 浏览 318
- 评论(0)
java中的BitSet学习
分类：
算法 Java SE
2012-08-09 21:50
338人阅读 评论(0)
收藏
举报
(1)BitSet类 大小可动态改变, 取值为true或false的位集合。用于表示一组布尔标志。
此类实现了一个按需增长的位向量。位 set 的每个 ...
- 2013-05-30 22:31
- 浏览 483
- 评论(0)
http://blog.chinaunix.net/uid-20196318-id-2420884.htmlKafka[1]是linkedin用于日志处理的分布式消息队列，linkedin的日志数据容量大，但对可靠性要求不高，其日志数据主要包括用户行为（登录、浏览、点击、分享、喜欢）以及系统运行日志（CPU ...
- 2013-05-28 19:01
- 浏览 352
- 评论(0)
http://blog.chinaunix.net/uid-20196318-id-2420884.htmlKafka[1]是linkedin用于日志处理的分布式消息队列，linkedin的日志数据容量大，但对可靠性要求不高，其日志数据主要包括用户行为（登录、浏览、点击、分享、喜欢）以及系统运行日志（CPU ...
- 2013-05-28 19:01
- 浏览 391
- 评论(0)
# ######################### 关于 HDFS Append ####################
(1) 背景
早期的HDFS版本不支持HDFS append功能. 当一个文件被关闭时, 这个文件就不能再被修改了. 如果要修改的话, 就只能重读此文件并将数据写入一个新的文件. 虽然这种方式 ...
- 2013-05-27 12:57
- 浏览 617
- 评论(0)
# ######################### 关于 HDFS Append ####################
(1) 背景
早期的HDFS版本不支持HDFS append功能. 当一个文件被关闭时, 这个文件就不能再被修改了. 如果要修改的话, 就只能重读此文件并将数据写入一个新的文件. 虽然这种方式 ...
- 2013-05-27 12:57
- 浏览 958
- 评论(0)