indinna
- 浏览: 4903 次
- 性别:
- 来自: 北京
-
最新评论
文章列表
hive> drop table you_20161114;
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:One or more instances could not be retrieved)
报这类似的错误的时候
1:首先把mysql jar替换成 mysql-connector-java-5.1.32-bin.jar
然后重启hive 就可
2:若第一步不好使,则修改mysql的编 ...
官网中虽然说没有key 会随机分配到partition,但是不知道为什么在我这没有出现这种效果,所以我加了一个key,需要加个source拦截器
运行flume-ng agent --conf conf --conf-file test.sh --name a1 -Dflume.root.logger=INFO,console
# example.conf: A single-node Flume configuration
# Name the components on this agent
a1.sources = r1
a1.sinks = k1
a1.cha ...
版本：0.94-cdh4.2.1
hbase-site.xml配置
hbase.tmp.dir
本地文件系统tmp目录，一般配置成local模式的设置一下，但是最好还是需要设置一下，因为很多文件都会默认设置成它下面的
线上配置
<property>
<name>hbase.tmp.dir</name>
<value>/mnt/dfs/11/hbase/hbase-tmp</value>
</property>
默认值：
${ ...
1、for循环格式
for(i <- 1 to 10){print(i)}
2、懒加载 lazy val a = 1; 直到用时才会加载
3、方法的声明格式 def(x:Int,y:Int) : Int ={} 最后一个冒号后面是返回类型，不加则没有返回值
4、默认参数 def loadConf(conf : String = "default"){ print(conf)} 如果不传入参数 ，则默认使用default的数值
5、变长参数 def sun(elems: Int*){ } 可以传入 更多的参数
6、异常处理 scala 使用了模式匹配
try{ ...
当client提交一个任务后,首先resourceManger(RM)来调度出一个container,这个container是在nodeManger(NM)运作的,
client直接和这个container所在的NM进行通信,在这个container中启动applicationMaster(AM),启动成功之后,这个AM将全权负责此次任务的 ...