- 浏览: 81741 次
- 性别:
- 来自: 杭州
-
文章分类
- 全部博客 (95)
- Linux(CentOS) (17)
- ubuntu (16)
- linux命令 (13)
- java基础 (8)
- eclipse maven (1)
- ubuntu xen (0)
- samba (1)
- jdk (1)
- linux (1)
- jenkins (1)
- MySQL (4)
- spring (1)
- redis (2)
- zookeeper (3)
- java多线程 (3)
- 线程池 (2)
- 工具类 (1)
- 技术问答 (1)
- 算法 (1)
- eclipse JVM (1)
- hadoop配置 (2)
- hadoop配置 HDFS (0)
- ubuntu svn (1)
- hadoop (5)
- mapReduce (1)
- HDFS (2)
- hive (3)
- flume (1)
- python (6)
- centos (1)
- svn (1)
- sonar (1)
- JVM (1)
- kafka (1)
- zabbix (1)
- python paramiko (1)
- TPS (1)
- docker (4)
- ssh (2)
- Go (1)
最新评论
搭建环境:Centos x 6.6 64bit
前置环境jdk1.7、maven3.0.5
如果是你32bit的机器,可以直接下载官方已经编译好的包,64bit的机子重新编译步骤如下。
安装依赖工具
编译Hadoop
慢慢等着,这个过程会很久,..................................................................................................................................................................真的会很久
编译成功后会打包,放在hadoop-dist/target
# ls
antrun dist-tar-stitching.sh hadoop-2.6.0.tar.gz hadoop-dist-2.6.0-javadoc.jar maven-archiver
dist-layout-stitching.sh hadoop-2.6.0 hadoop-dist-2.6.0.jar javadoc-bundle-options test-dir
前置环境jdk1.7、maven3.0.5
如果是你32bit的机器,可以直接下载官方已经编译好的包,64bit的机子重新编译步骤如下。
安装依赖工具
yum install cmake lzo-devel zlib-devel gcc gcc-c++ autoconf automake libtool ncurses-devel openssl-devel libXtst tar xvf protobuf-2.5.0.tar.gz cd protobuf-2.5.0 ./configure make make install #验证: protoc --version libprotoc 2.5.0 tar -zxvf apache-ant-1.9.5-bin.tar.gz -C /usr/local #配置ant环境变量
编译Hadoop
慢慢等着,这个过程会很久,..................................................................................................................................................................真的会很久
mvn package -DskipTests -Pdist,native
编译成功后会打包,放在hadoop-dist/target
# ls
antrun dist-tar-stitching.sh hadoop-2.6.0.tar.gz hadoop-dist-2.6.0-javadoc.jar maven-archiver
dist-layout-stitching.sh hadoop-2.6.0 hadoop-dist-2.6.0.jar javadoc-bundle-options test-dir
发表评论
-
Centos7安装Go语言
2017-01-12 15:08 4521、下载安装包 # wget https://storag ... -
Centos安装Sqlite3
2017-01-12 11:30 6341、下载安装包 官网http://www.sqlite.org ... -
Docker仓库搭建(Registry + Portus)
2016-12-21 11:26 854引用 http://www.cnblogs.com/derek ... -
Centos7安装
2016-12-14 14:30 3681、配置静态IP vi /etc/sy ... -
Docker创建支持ssh服务的容器和镜像
2016-10-03 10:48 4331、启动容器 [root@docker ~]# docke ... -
svn
2015-06-05 13:15 4831、下载单个文件 svn co --depth=empt ... -
CentOS sendmail发送外部邮件
2015-05-10 13:39 15571、安装配置sendmail软件 yum install ... -
centos6.6 脚本
2015-04-20 21:15 392软件存放于~/soft下面,安装常用软件java、tomcat ... -
Flume
2015-03-12 17:23 6881、运行flume需要的jar包,以及hadoop配置文件 ... -
hadoop、hbase、hive、zookeeper版本对应关系
2015-03-11 15:25 726hadoop与HBase版本对应关系: Hbase Had ... -
HIVE实例
2015-03-09 16:08 4491、配置hive-site.xml文件,使用mysql作为me ... -
hadoop学习--mapReduce
2015-01-22 15:37 382vim words hello jzk hello ... -
linux文件夹权限问题
2014-07-20 16:08 6741、sudo chmod 777 /usr/local/j ... -
CentOS 6.5安装jenkins
2014-06-25 15:50 1382第一种方法 1、安装 新增 jenkins 的 yum 源 ... -
CentOS 6.5开机自启动svn、apache
2014-06-22 23:14 6941、编辑rc.local文件 #vi /etc/rc.d/rc ... -
CentOS 6.5搭建SVN 1.8.5服务器
2014-06-18 15:40 730yum install subversion apache安装 ... -
CentOS 6.5安装apache
2014-06-18 14:28 8231、依赖包的安装 tar zxvf apr-1.5.0.tar ... -
CentOS 6.5开放端口
2014-06-18 11:50 523netstat -anp|grep 8080 #查看8080 ... -
CentOS 6.5安装tomcat7
2014-06-18 11:43 6751、创建tomcat路径,上传apache-tomcat-7. ... -
CentOS 6.5安装JDK6
2014-06-18 11:32 6151、安装jdk6 上传jdk-6u30-linux-i586 ...
相关推荐
《Hadoop-2.6.0在CentOS6.5上的编译与集群搭建详解》 Hadoop,作为开源的大数据处理框架,是大数据领域的核心工具之一。版本2.6.0是其发展历程中的一个重要里程碑,它带来了诸多性能优化和功能增强。在本文中,我们...
【使用Eclipse编译运行MapReduce程序】 MapReduce是Google提出的一种编程模型,用于大规模数据集的并行计算。在Hadoop生态系统中,MapReduce被广泛应用于处理和生成大数据。Eclipse作为流行的Java集成开发环境,...
确保所有节点都安装了必要的软件,如CentOS 7.2、Hadoop 2.6.0、Hive 1.1.0、Spark 1.5.0、MySQL 5.6、JDK 1.8、Maven 3.3.3以及Scala 2.10。 2. **编译Spark源码**: 由于官方发布的Spark版本可能已经包含了Hive...
vue.js vue.min.js vue-router.js vue-router.min.js
内容概要:本文档是关于DM8数据库系统的SQL语言使用手册,全面介绍了其SQL语言的基础特性、功能、语法规则及相关使用方法。手册首先概述了DM_SQL的特点和它支持的各种数据类型(例如:数值、字符串、日期时间类型等)及其对应的表达式。接下来深入探讨了一系列高级话题,涵盖数据定义语句-DDL、数据操纵语句-DML和数据控制语句,具体讲解了多种表类型(常规表、HUGE表、外部表)的创建与管理,以及索引机制(全文索引、位图连接索引等)。此外还提供了丰富的实例示范,确保读者能直观理解并应用于实际项目。同时,文档也阐述了各种系统级别的功能,如日志和检查点管理、MPP管理和统计信息生成等功能的使用方法。 适合人群:具有一定数据库基础知识并且有意深入了解DM8数据库系统特性的开发工程师、数据库管理人员或相关专业技术人员。 使用场景及目标:①指导开发人员掌握DM8中各类SQL命令的实际运用技巧;②帮助运维人员学会通过SQL来进行有效的数据维护与优化,从而提升数据库的整体性能。 其他说明:该手册不仅仅是SQL理论的讲述,而是通过大量的实例演示让使用者更加熟悉日常的工作任务。对于复杂的企业级应用场景尤其有
1108_ba_open_report
anslow_02_0109
opencv下载安装教程
aronson_01_0707
Wang Chi, Szeto Donald - Designing Deep Learning Systems. A software engineer's guide
使用Python语言对Django框架进行设计,选用豆瓣读书网站(https://book.douba n.com/)作为研究对象,基于用户的阅读行为数据,运用网络爬虫技术来抓取所需数据,随后对这些数据进行深度清理,存储到数据库中。借助ECharts的可视化工具,深入分析和直观展示,实现数据分析与可视化。
barbieri_01_0108
brown_3ck_01_0718
关键词:学生选课系统;Python语言;MySQL数据库 学生选课系统采用B/S架构,数据库是MySQL。网站的搭建与开发采用了先进的Python进行编写,使用了Django框架。该系统从三个对象:由管理员和学生、教师来对系统进行设计构建。主要功能包括:个人信息修改,对学生、教师信息、课程信息、课程分类、选择课程、班级、成绩通知、教室信息、系统管理等功能
ganga_02_0909
毕设-springboot大学生竞赛管理系统(免费领取)
agenda_3cd_01_0716
Swift语言教程:从入门到实践 Swift是苹果公司开发的一种多范式编程语言,用于iOS、macOS、watchOS和tvOS应用开发。它结合了C和Objective-C的优点,同时提供了现代编程语言的许多特性,如安全性、速度以及表达力。以下是从入门到实践的Swift语言教程。 一、Swift基础 1. Swift环境设置 Xcode安装:下载并安装最新版本的Xcode,这是开发Swift应用的集成开发环境(IDE)。 创建项目:在Xcode中创建一个新的Swift项目,了解项目结构。 2. 基本语法 变量与常量:使用var声明变量,使用let声明常量。 数据类型:整数(Int)、浮点数(DoubleFloat)、字符串(String)、布尔值(Bool)等。 类型安全:Swift是强类型语言,每个变量和常量在声明时都需要指定类型(尽管Swift也能自动推断类型)。 运算符:算术运算符、比较运算符、逻辑运算符等。 3. 控制流 条件语句:if、else if、else。 循环语句:for循环、while循环、repeat-while循环。 控制转移语句:break、continue
【宝城期货-2025研报】钢材、铁矿石日报:关税扰动不断,钢矿弱势运行.pdf
anslow_05_0110