serisboy
- 浏览: 172105 次
- 性别:
- 来自: 广州
-
最新评论
-
kingding：
运行出错，java.lang.Exception: java. ...
hadoop--mapreduce代码之多表关联 -
wangyayun666：
不错，不错，学习了，我的居然运行起来了，太神奇了，之前报了一个 ...
hadoop--mapreduce代码：WordCount -
good_ovo：
有读取的文件吗？
hadoop--mapreduce代码之单表关联 -
hongye612430：
http://serisboy.iteye.com/admin ...
appscan 安全漏洞修复 -
ssrsmhz：
serisboy 写道blackbat 写道请问楼主，这个问题 ...
appscan 安全漏洞修复
文章列表
Mahout-Clustering
- 博客分类：
- mahout
http://www.coder4.com/archives/4181
http://www.cnblogs.com/linjiqin/archive/2013/03/15/2961649.html
mahout安装配置
ganglia metric 默认监控项
- 博客分类：
- hadoop
原文地址http://my.oschina.net/vieky/blog/98155
监控项 说明 监控值
Load_one One minute load average
每分钟的系统平均负载
load_one=0.0
Load_five Five minute load average
每5分钟的系统平均负载
load_five=0.0
Load_fifteen Fifteen minute load average
每15分钟的 ...
1.hadoop fs -Ddfs.replication=1 -put file.txt /tmp/a.txt 这个速度很快.
因为一个副本是写本地硬盘的.硬盘排除了
2.网卡坏了
http://www.cnblogs.com/ggjucheng/archive/2012/04/17/2454590.html
vmstat 1 检测内存，io，cpu
set mapred.reduce.slowstart.completed.maps=0.9 ;
jps -m
30688 Child 127.0.0.1 54561 attempt_201409281524_0001_r_0000 ...
使用php连接hive的条件
1 需要安装thrift 安装步骤
安装依赖库
yum install automake libtool flex bison pkgconfig gcc-c++ boost-devel libevent-devel zlib-devel python-devel ruby-devel
# ./configure --without-ruby
# make && make install
如果没有安装libevent ...
http://www.cnblogs.com/jdksummer/articles/2521550.html
ssh配置
主机A：10.0.5.199
主机B：10.0.5.198
需要配置主机A无密码登录主机A，主机B
先确保所有主机的防火墙处于关闭状态。
在主机A上执行如下：
1. $cd ~/.ssh
2. $ssh-keygen -t rsa --------------------然后一直按回车键，就会按照默认的选项将生成的密钥保存在.ssh/id_rsa文件中。
3. $cp id_rsa.pub authorized_keys
这 ...
有的时候， datanode或者tasktracker crash，或者需要向集群中增加新的机器时又不能重启集群。下面方法也许对你有用。
1.把新机器的增加到conf/slaves文件中（datanode或者tasktracker crash则可跳过）
2.在新机器上进入hadoop安装目录
$bin/hadoop-daemon.sh start datanode
$bin/hadoop-daemon.sh start tasktracker
3.在namenode上
$bin/hadoop balancer
参照http://www.cnblogs.com/rilley/arc ...
1.查看文件大小
du -sh *
2./bin/bash^M: bad interpreter
set ff?
set ff=unix
3.cpu
1.查看物理cpu个数
grep 'physical id' /proc/cpuinfo | sort -u | wc -l
2.查看核心数量
grep 'core id' /proc/cpuinfo | sort -u | wc -l
3.查看线程数
grep 'processor' /proc/cpuinfo | sort -u | wc -l
Sqoop的安装与使用
- 博客分类：
- hadoop
1 导入导出数据库
1)列出mysql数据库中的所有数据库命令
# sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password 123456
2)连接mysql并列出数据库中的表命令
# sqoop list-tables --connect jdbc:mysql://localhost:3306/test --username root --password 123456
命令中的test为mysql数据库中的test数据库名称 username ...
PHPExcel 学习笔记
- 博客分类：
- php
首先到phpexcel官网上http://phpexcel.codeplex.com下载最新的phpexcel类，下周解压缩一个classes文件夹，里面包含了PHPExcel.php和PHPExcel的文件夹，这个类文件和文件夹是我们需要的，把classes解压到你项目的一个目录中，重名名为phpexcel，开 ...
考thinkphp+jquery实现ajax，扩展了下，写了个查询，前台代码如下：
需要引入jquery.js，下载地址http://jquery.com
function ajax(id,pic){
//由于ThinkPHP不解析JavaScript里的ThinkPHP常量，所以需要先在这里定义。
var URL='__URL__';
$.ajax({
url: URL+'/returnAjax/id/'+id,//提交访问的URL
type: 'GET',//提交的方法 ...
转自http://www.iteye.com/topic/53526
1、使用JdbcTemplate的execute()方法执行SQL语句
jdbcTemplate.execute("CREATE TABLE USER (user_id integer, name varchar(100))");
2、如果是UPDATE或INSERT,可以用update()方法。
jdbcTemplate.update("INSERT INTO USER VALUES('"
+ user.getId() + "', '"
...
在前面demo的基础上再做一个涉及数据库访问，分层结构的简单用户登录注册例子，步骤如下:
1.新建user表，sql语句如下
DROP TABLE IF EXISTS `user`;
CREATE TABLE `user` (
`id` int(11) NOT NULL auto_increment,
`name` char(128) NOT NULL,
`credits` int(11) default '0',
`password` varchar(32) NOT NULL,
`last_visit` datetime default NULL,
` ...
JfreeChart
- 博客分类：
- java
JFreeChart的使用 http://www.cnblogs.com/xingyun/archive/2012/02/05/2339237.html
前提：导入需要的2个jar文件，jcommon-版本号.jar,jfreechart-版本号.jar。可以去官网下载：http://sourceforge.net/projects/jfreechart/files/
注意：下载的Jfreechart版本不要太高，新版本对中文的显示会出问题，我自己后来下的是1.0.10的版本。
实例一：比较简单的application版本的饼图
package com.test.jfreec ...