zhao_rock
- 浏览: 192464 次
- 性别:
- 来自: 大连
-
最新评论
-
kingding：
我编译之后吧jar包拷贝到lib后按照你的配置修改后运行报错： ...
基于flume-ng抓取mysql数据到kafka -
somefuture：
集成spring？spring现在没有xml了，怎么改呢
CXF集成Spring -
zhao_rock：
string2020 写道<mirrorOf>ce ...
使用Maven为代码构建依赖包 -
string2020：
<mirrorOf>central</mir ...
使用Maven为代码构建依赖包 -
aiien007：
同上
工作的感受
文章列表
最近在研究如何在Windows平台利用Eclipse执行MapReduce程序，第一个程序是拷贝的WorldCount，运行时发生了以下的错误均已解决，给自己提个醒也希望能对大家有帮助。
1. Failed to set permissions of path: \tmp\hadoop-root\mapred\staging\root1764752388\.staging to 0700
主要是在windows下运行的时候有一个代码权限的检测没有通过，具体的类core\org\apache\hadoop\fs\FileUtil.java
// read perms
...
- 2013-11-08 10:28
- 浏览 1164
- 评论(0)
整理了一些关于获取Linux操作系统信息的命令，记录以下，以便以后使用。
1. 获取当前Linux的版本，这里使用的是CentOS
[root@test~]# lsb_release -aLSB Version: :core-4.0-amd64:core-4.0-noarch:graphics-4.0-amd64:graphics-4.0-noarch:printing-4.0-amd64:printing-4.0-noarchDistributor ID: CentOSDescription: CentOS release 6.2 (Final)Release: 6.2Cod ...
- 2013-11-07 09:51
- 浏览 920
- 评论(0)
1. Shell的noglob设定
写shell脚本时遇到一个问题，tmp="*" echo $tmp 期望的结果是输出* 但是最终的输出结果都是当前目录的所有文件名(将*号进行了转义)。
如何不对特殊符号进行转义呢，设定noglob
设定noglob后，*等一些其他的特殊字符便会失去特定的功能，恢复成一个简单的字符#设定noglobset -o noglob
#取消设定noglobset +o noglob
2. Shell中反引号的作用
反引号：在执行一条命令时，会先将其中的 ``，或者是$()中的语句当作命令执行一遍，再将结果加入到原 ...
- 2013-11-06 15:20
- 浏览 832
- 评论(0)
python mysql 以及mysql-python的插件
yum install python
yum install MySQL-server
yum install MySQL-python
例子说明：从日志文件中筛选出有效值，插入到Mysql数据库中
#!/usr/bin/python
import MySQLdb
import os
import sys
fileHandle = open ( '/var/log/13-11-05.log' )
try:
conn=MySQLdb.connect(host='ipAd ...
- 2013-11-05 15:21
- 浏览 857
- 评论(0)
Expect可以在Linux下用于交互式处理，比如利用scp的时候，需要输入目标机器的密码，解压jdk时需要按下回车等操作，这些利用Expect都可以自动的完成，不需要人为参与。
自己写了一个简单的expect实现scp不用手动输入目标机器密码的小脚本，其中包含了接收命令行参数。
#!/usr/bin/expect
set username [lindex $argv 0]
#destination file path
set despath [lindex $argv 1]
#destination host password
set passwd [lindex ...
- 2013-11-04 10:04
- 浏览 752
- 评论(0)
近日，在启动HBase时，跟踪系统的日志报如下错误：
ERROR:org.apache.hadoop.hbase.PleaseHoldException: Master is initializing
结合网上的资料和自己的经历，将可能导致该错误的信息整理如下：
1. 时间没有同步
HBase需要结点间的时间必须是同步的，可以使用date命令在Linux查看时间
2. 底层采用的不是hdfs协议
这个可以通过查看hbase-site.xml中参数hbase.rootdir的值来群定，一些其它的协议比如file协议等等，
HBase也 是 ...
- 2013-11-04 08:31
- 浏览 15453
- 评论(0)