chiyx
- 浏览: 274977 次
- 性别:
- 来自: 杭州
-
最新评论
-
solrer：
eclipse内存分析工具MAT浅谈（一） -
bo_hai：
第二个sql没有执行成功，请赐教？
HIVE中row_number函数的描述与使用场景 -
NOH小爷：
你好 ，能不能详细介绍下 Path to GC Roots ...
eclipse内存分析工具MAT浅谈（一） -
wushexin：
Bad owner or permissions on $HO ...
（转）配置多个git远程仓库的ssh-Key切换 -
jkdcdlly：
测试，不行，帮你修改了一下select * from (SEL ...
HIVE中row_number函数的描述与使用场景
文章列表
huffman 编码是一种变长前缀式编码，通过利用被编码消息中符号的出现频率（频率出现越高的用越少的码），可以有效的节约空间。在 SICP 的2.3.4节通过实现一个huffman编码树来阐述通过表和数据抽象去操作集合和数的例子。
构建 huffman 编码树
huffman 树以表的方式来表示，将树分为 叶子节点*和 *非叶子节点
('leaf symbol weight) : 叶子节点，包含标示叶子的符号'leaf， 实际字符 symbol，权重 weight(left right symbols weight): 非叶子节点, 包含左子树 left, 右子树 r ...
概述
SkipList 是由William Pugh发明的一种数据结构，它的作用类似平衡二叉树，对查找，删除，插入操作的时间复杂度为O(logN)，是一种十分高效的查找结构。SkipList使用随机化的平衡方案取代了平衡二叉树的严格的平衡方案， ...
Linux系统用环境变量来在程序和脚本中标识它自己。这为你的程序提供了获得系统信息的一个简单方法。
问题是如何设置这些变量。
在你登陆Linux系统启动一个bash shell时，默认情况下bash在几个文件中查找并执行其中的命令。这些文
件称作启动文件。bash检查的启动文件取决于你启动bash shell的方式。启动bash shell有3种方式：
登陆时当做默认登陆shell
作为非登陆shell的交互式shell
作为运行脚本的非交互式shell
登陆shell
当你登陆Linux时，bash shell会作为登陆的shell启动。登陆shell会从4个不同的启动文 ...
转载地址：http://omiga.org/blog/archives/2269
目前的git仓库如github都是通过使用SSH与客户端连接，如果只是固定使用单个git仓库的单个用户
（first），生成生成密钥对后，将公钥保存至github，每次连接时SSH客户端发送本地私钥（ ...
在python中任何对象都能被用于真值测试的表达式中，满足以下任意条件的对象的真值被认为是False：
None
False
数值对象中的0值，如0，0L，0.0，0j
空序列,如'',[],()
空map,{}
用户自定义类型中，如果类中包含__nonzore__()，当该方法返回False时,或者类中含有__len__()方法，当该方法返回0时.
abs(x)
返回数值的绝对值，参数x为整形或者浮点型
all(iterable)
判断迭代器对象中的元素是否全为真，若是则返回真,等价代码如下：
def all(iterable):
for element in iterable:
if not element:
return False
return True
any(iterable)
判断迭代器对象中的元素是否有任意一个元素为真，若是则返回真。
basestring()
str 和 unicode的超类，不能被实例化。但是可以用于判断一个对象是否是字符串型的，isinst ...
二叉查找树的效率依赖于其高度，为O（h），普通的具有N个结点的二叉查找树树的高度落差会很大，极端情况下会出现h=n的情况（插入结点序列为排好序的情况下），这样二叉查找树就退化为一个列表了。于是就出现了平衡 ...
修正：前驱与后继操作有误，修正
二叉查找树是满足如下性质的二叉树：
设x为二叉树中的一个结点，如果y是x的左子树中的一个结点，则key[y]<=key[x]
如果y是x的右子树，则key[x]<=key[y]
二叉查找树的数据结构和操作定义如下：
/*file:biTree.h*/
#ifndef CHIYX_BITREE
#define CHIYX_BITREE
#ifndef NULL
#define NULL 0
#endif
typedef int DataType;
//二叉树的节点结构
typedef struct BiTreeNode {
...
基数排序：
#include <stdlib.h>
#include "algosort.h"
/*被排序元素的最大位数，4则意味着只能排序< 10000 的数*/
#define WIDTH 4
#define MAXK 10 //位数划分基于的基数，10表示为10进制划分
void radixSort(int a[], int n) {
int i;
void innerCountingSort(int a[], int n, int d);
for (i = 0; i < WIDTH; i++) {
in ...
快速排序:
/*
*将r位置中的位置移动到正确位置q上，并返回q，使得在a[p]..a[q-1] < a[q],
a[q+1]..a[r] > a[q]
*/
int partition(int a[], int p, int r);
void qSort(int a[], int p, int r);
void quickSort(int a[], int n) {
qSort(a, 0, n - 1);
}
void qSort(int a[], int p, int r) {
int q;
while (p < r) {
q ...
堆排序：
/**
*排序过程中使用到的堆的结构
*/
typedef struct heap {
int heapSize;
int *ap;
int apLength;
} Heap;
/*
*调整i位置上的元素，以保持最大堆的性质
*/
void maxHeapify(int a[], int i, int hSize) {
int l, r, largest;
l = 2 * i + 1;
r = l + 1;
if (l < hSize && a[l] > a[i]) {
largest = l;
...
正常进行2次比较的二分查找实现,取列表中点值，（1）先比较x是否小于v[mid]，若小于则说明在mid的左侧，（2）继续比较x是否大于v[mid],若大于则说明在mid的右侧
（3）否则mid即为x的位置
int binsearch(int x, int v[], int n) {
int low, high, mid;
low = 0;
high = n - 1;
while(low <= high) {
mid = low + high;
if (x < v[mid]) {
high = mid - 1;
}
else if ( ...
在使用Spring AOP的过程中，经常需要使用到各种不同的JoinPoint的定义，Spring AOP遵循了AspectJ形式的JoinPoint的定义形式，但是Spring目前只支持部分的AspectJ形式的Joinpoint的定义，同时Spring AOP只支持方法级别的JoinPoint。以下是我在学习Sp ...
假设一个场景：存在表user_score,该表的数据如下
idratescore1'0-4'102'0-4'403'0-4'304'0-4'205'5-10'106'5-10'407'5-10'308'5-10'209'11-20'1010'11-20'4011'11-20'3012'11-20'20
现在要求用一条查询语句取出每种rate下score最大的两条记录，也就算取出id为：2，3，6，7，10，11的记录，要求分别给出SQL和HIVESQL的查询语句
以下是我的想到的方案：
SQL：对user_score根据rate进行分区后根据score进行倒序排序，然后应用row_numbe ...
在使用HIVE时，如果某个列应用了某个函数并使用如f(col) 重新命名列f(col) as fc,
对想基于fc直接直接group by时，如：
select f(col) as fc, count(*) from table_name group by fc
HIVE是不支持的，运行该语句会报错。
可以使用以下的两种方式来达到相同的目的：
（1）使用子查询
select sq.fc, count(*) from (select f(col), col from tableName) sq group by sq.fc
(2)不使用别名进行分组
select f(col) as f ...