Kevin12
- 浏览: 235335 次
- 性别:
- 来自: 上海
-
最新评论
-
lwb314：
你的这个是创建的临时的hive表，数据也是通过文件录入进去的， ...
Spark SQL操作Hive数据库 -
yixiaoqi2010：
你好 我的提交上去 总是报错，找不到hive表，可能是哪里 ...
Spark SQL操作Hive数据库 -
bo_hai：
target jvm版本也要选择正确。不能选择太高。2.10对 ...
eclipse开发spark程序配置本地运行
文章列表
博客来源：http://www.wnt.com.cn/html/news/tophome/top_xytd/top_xytd_jswz/bbs_service/20130711/111140562.html感谢该博客作者的讲解，同时也记录下来以后学习。
Hadoop计算中的Shuffle过程
Shuffle 过程是MapReduce的核心，也被称为奇迹发生的地方。要想理 ...
在hive中创建表后，将准备好的数据导入到该表中，如果第一个字段是int类型时，你通过select * from tablename;查询该表时候，第一个字段返回的是null的.
解决方法：如果你出现的问题和上面的一样，很可能是你定义表的第一个字段是int类型，将其该成string类型后就可以了。
先给出解决方法，具体原因有待分析。
转载请注明出处：http://kevin12.iteye.com/blog/2028776
hadoop2.2环境搭建好后可以运行wordcount例子来查看一个文件中的单词数量，废话不多说，看下面的步骤：
首先在/usr/local/hadoop/下创建一个目录，是为了存放我们的测试文件，目录名称为myfile,在进入myfile中创建一个名称为wordcount.txt文件里面输入数据如下：
hello hadoop
hello java
hello world
运行命令hadoop fs -mkdir /input在hdfs中创建一个input目录;
运行命令hadoop fs -inpu ...
pig的安装方法：
链接地址：http://kevin12.iteye.com/blog/2026327
1.先从官网下载pig，我使用的版本是pig-0.11.1.tar.gz，放到linux的/usr/local目录下；
2.执行命令 tar -zxvf pig-0.11.1.tar.gz，然后运行命令 mv pig-0.11.1 pig重命名为pig；
3.运行命令vi /etc/profile打开profile文件，在文件/etc/profile中设置环境变量PIG_HOME，并把bin目录添加到环境变量PATH中；下图是我的配置文件内容，然后运行命令 source /etc/pro ...
链接地址：http://kevin12.iteye.com/blog/2017998
将本地电脑设置成“文件和打印机共享”的，设置方法如下：
打开网络共享中心-》更改高级共享设置-》针对不同的网络配置文件更改共享选项中，文件和打印机共享下面的启用文件和打印机共享进行勾选，并保存修改。
然后在运行窗口中输入命令mstsc打开远程桌面连接，再在虚拟中的运行中输入命令\\本地电脑名或在IP\本地电脑要共享的盘符$并回车，等以后弹出一个对话框，让你输入本地电脑名称和密码，输入后回车，就直接在远程虚拟机中打开你本地共享的盘符了。
注意有时候上面运行的慢，请耐心等待响应，直到弹出相应的对话框。
...
having和where区别：
1.不能在where子句中过滤组，where子句仅用于过滤行。过滤组必须使用having子句。
2.不能在where子句中使用组函数，having子句才可以使用组函数。
where 子句的作用是在对查询结果进行分组前，将不符合where条件的行去掉，即在分组之前过滤数据，条件中不能包含聚组函数，使用where条件显示特定的行。
having 子句的作用是筛选满足条件的组，即在分组之后过滤数据，条件中经常包含聚组函数，使用having 条件显示特定的组，也可以使用多个分组标准进行分组。
java中的float 和double类型会发生精度丢失，为了能精确表示和计算浮点数，java提供BigDecimal类。创建BigDecimal对象时，不要直接使用double浮点数来创建一个BigDecimal对象，否则同样会发生精度丢失问题，要用String类型作为创建BigDecimal对象的参数，如BigDecimal d = new BigDecimal("0.05");
程序中用对double浮点数进行加减乘除运算时，则需要先将double类型数值包装成BigDecimal对象，下面是一个封装double精确计算的类。
package com.kevin.cha ...
oracle数据库导出导入有很多方法，最常用的是：
1.PL/SQL Developer导入导出数据这个比较方便。
首先必须按照PL/SQL Developer客户端，连接上数据库。
导出表数据: Tools(工具)-->Export Tables(导出表)-->选择要导出的表，选择输出文件保存的位置和文件名称。点击导出即可。
导入表数据：Tools(工具)-->Import Tables(导入表)-->选择导出的文件，点击导入即可。
2.通过命令行导出导入。
如果你安装的系统中没有配置oracle环境变量，那么你执行时候要进入到oracle的BIN目录中,或 ...
链接地址：http://kevin12.iteye.com/blog/1955888
最近做项目时候用到spring和oracle了，但是启动项目时候包如下错误：
严重: Error while registering Oracle JDBC Diagnosability MBean.
javax.management.MalformedObjectNameException: Invalid character '\n' in value part of ...
最近做流程项目数据库是oracle，获取流程处理人时候出现下面的错误，错误太长，先给出解决方法：
解决方法是：
jbpm4_lob 表NAME_ HIBERNATE类型为TEXT ,Hibernate自动创建的类型为long。导致could not read column value from result set: NAME5_1_; 流已被关闭
确保生成的字段类型为clob
Hibernate: SELECT
resources0_.DEPLOYMENT_ AS DEPLOYMENT4_1_,
resources0_.DBID_ AS DBID1_ ...
链接网址：http://kevin12.iteye.com/blog/1954205
下面是在网上搜集的关于hibernate的主键生成策略：
1) Assigned
主键由外部程序负责生成，无需Hibernate参与。
2) hilo
通过hi/lo 算法实现的主键生成机制，需要额外的数据库表保存主键生成历史状态。
3) seqhilo
与hilo 类似，通过hi/lo 算法实现的主键生成机制，只是主键历史状态保存在Sequence中，适用于支持Sequence的数据库，如Oracle。
4) increment
主键按数值顺序递增。此方式的实现机制为在当前应用实例中维持一个变量，以保存着当前 ...
链接网址：http://kevin12.iteye.com/blog/1954203
最近做流程项目将原来流程项目的数据库由mysql改成oracle，今天保存绘制好的流程图时候，报错如下：
org.springframework.orm.hibernate3.HibernateSystemException: Dialect does not support identity key generation; ...
链接地址：http://kevin12.iteye.com/blog/1953780
注意的地方：<就是<号，即小于号，>是>号，即大于号；
最近将流程项目的数据库从mysql改成oracle的数据库，原先配置的mysql的ibatis文件就不能用了，比如分页功能，模糊查询都不能用了。下面记录我修改的oracle配置ibatis的分页以及动态多条件组合，模糊查询。这里只列出来一个分页查询的ibatis文件，代码虽然有点乱，细心耐心总会有收获的：
<select id="IUserInf_getListForPage" pa ...
链接地址：http://kevin12.iteye.com/blog/1953571
最近将流程项目数据库由mysql数据库改成oracle数据库时，发现oracle的ibatis配置文件和mysql的ibatis的模糊查询不同，下面记录一下，以备后用。
如果是mysql的模糊查询用：
<isNotEmpty prepend="AND" property="IM_NAME"> a.IM_NAME like concat('%',#IM_NAME#,'%')</isNotEmpty>
如果是oracle的模糊查询用：
<i ...
链接地址：http://kevin12.iteye.com/blog/1949491
问题如下：
九月 30, 2013 2:24:14 下午 org.jbpm.internal.log.Jdk14Log info
信息: exception while executing command org.jbpm.pvm.internal.cmd.CheckDbCmd@2bfb3f37
org.jbpm.api.JbpmException: no jBPM DB schema: no JBPM4_EXECUTION table. Run the create.jbpm.schema ta ...