安装ubantu系统和搭hadoop环境遇到的问题
安装ubantu遇到的问题:
失败方法(不推荐):
网上有许多方法,我首先采用了制作u盘系统启动盘来安装ubantu系统
http://jingyan.baidu.com/article/60ccbceb18624464cab197ea.html,结果开机没出现引导界面。一开始,以为是系统有问题。用了两个版本的ubantu系统,重复安装了四五次都是这种情况。最后想到应该是主引导程序的配置的问题,也就是在用UltraISO软件将ubantu系统镜像文件写入到u盘时,设置便捷启动
百度上这篇文章是这样:
在弹出的窗口中进行如下图设置,
刻录校验:打上对号
写入方式:USB-ZIP+
便捷启动:写入新的硬盘主引导记录(MBR)-USB-ZIP+
设置完毕后,单击“写入”
如下图:
<!--EndFragment-->
但很不幸,我的制作过程这样设置后就不能写入了,最后也搜索不到解决的方案。
成功方法(推荐):
最后干脆就放弃了上面的方法。转而用硬盘安装ubantu系统(
链接:http://blog.csdn.net/zwyjg/article/details/16371349)结果一路顺风,一次性成功。
安装之后可改变win7和ubantu的先后启动顺序(针对EazyBCD、硬盘安装的情况):
1.修改系统启动引导项。安装完成重启后你会发现默认启动系统为Ubuntu。进入Ubuntu后点击桌面左上角应用程序—附件—终端,输入“sudo mv /etc/grub.d/30_os-prober /etc/grub.d/06_os-prober”然后会提示你输入密码,这个密码就是你安装系统时设置的密码,注意此时输入后不会出现*加密的标志,而是直接不显示,输完后回车,接着输入“sudo update-grub”然后回车即可。
2.点击桌面右上角重启,win7启动项已经在最上面且为默认了。进入win7后运行easybcd, 移除nerogrub引导项。
当然,如果有ubantu系统光盘的话,就更方便了,
相关软件的安装,如我的系统刚开始是没有中文输入法的。这时,只要有网,用无线wifi(较方便)或有线网络都可以,下载语言包即可。
搭建hadoop环境的问题
搭配hadoop环境,按照这个链接:http://weixiaolu.iteye.com/blog/1401931,一路上顺风顺水。建议:最好百度一下几个常用的命令,如:ls,rm,cd,mkdir,tar,cp等几个命令,然后搞懂linux下的绝对路径和相对路径。
上面这篇博客里附带的一篇安装jdk的博客,有时候转换了当前目录,却没告诉你,这时就需要好好看清楚当前路径。这里举例简要介绍一下如何看清当前目录:
第一个当前目录为/home/hadoop(冒号之后,$之前,$代表普通用户,有时候是#,这时代表的是root用户在操作);
第二个当前目录为~(为用户的Home目录的另一种写法,等同为绝对路径/home/administrator/);
伪分布式下,启动hadoop没有出现datanode:
首先确保网络通畅,网路不给力的话不会出现datanode;
也许是namenode格式化了两次以上,导致了namenode和datanode的ID不同,这时删除datanode的日志目录下的current/version这个文件即可,再在没启动hadoop的情况下重新格式化一下namenode.即在终端中进入hadoop目录下,然后输入:
bin/hadoop namenode -format就行了。
<!--EndFragment-->
相关推荐
内容概要:本文提供了一份详尽的指南用于帮助读者完成Pig数据处理工具在64位Ubuntu系统上针对已部署好的Hadoop集群环境下实施从头开始的手动安装以及环境变量设定的具体步骤。 适用人群:旨在帮助有一定Hadoop基础的...
本教程主要讲述了在 Ubuntu 16.04 环境下安装 Hadoop 2.7.1 的步骤,包括单机模式、伪分布式模式和分布式模式三种安装方式。以下是本教程的知识点总结: 1. 安装前的准备工作:创建 hadoop 用户,设置密码,增加...
在 Ubuntu12.04 上安装 Hadoop-1.2.1 的过程涉及到多个环节,包括系统准备、用户权限设置、Java 开发环境的安装、Hadoop 的下载与配置、主机名与网络设置以及 SSH 无密码登录的实现。以下是对这些步骤的详细解释: ...
### 基于Ubuntu的Hadoop简易集群安装与配置知识点详解 #### 一、绪论 ##### 1.1 研究背景及意义 在当前信息化社会中,随着科技的发展与进步,尤其是互联网技术的普及,我们正处在一个数据爆炸的时代。各行各业都在...
2. **解决安装问题**:如果安装过程中遇到问题,可以尝试使用 `sudo dpkg --configure -a` 命令解决。 #### 六、建立 SSH 无密码登录 为了简化集群内部的通信,可以通过 SSH 实现无密码登录。 1. **生成密钥**:...
ubuntu下安装hadoop集群,设置ssh对其他node无密码访问
在Ubuntu环境下搭建Hadoop伪分布式模式,主要是为了模拟多节点Hadoop集群的环境,以便于学习和测试Hadoop的功能。这个过程涉及到多个步骤,包括必要的资源下载、软件安装、环境配置以及Hadoop服务的启动与验证。以下...
首先,我们需要下载和安装JDK 1.6,接着下载和解压Hadoop安装包。然后,我们需要修改系统环境配置文件和地址解析文件,加入Hadoop相关的配置信息。 5. Hadoop配置 在Hadoop配置中,我们需要修改Hadoop的配置文件,...
### Ubuntu11.10下安装Hadoop0.20.2(单机伪分布式) #### 一、安装虚拟机VMware Workstation v7.1.4 在开始Hadoop的安装之前,首先需要在宿主机上安装虚拟机软件VMware Workstation v7.1.4。这一步主要是为了搭建...
一个描述环境搭建的文档,我用的Vmware10和Ubuntu14.04,Hadoop2.7
Ubuntu12.04下安装Hadoop2.4.0单机模式详细教程
在Ubuntu上搭建Hadoop是一个常见的任务,特别是在学习和实验分布式计算环境时。本文将详细讲解在Ubuntu 12.04上安装Hadoop伪分布式模式的过程,这将帮助你理解Hadoop的基础设置,并为日后扩展到完全分布式环境打下...
配置Hadoop和Hive在Ubuntu系统上是一项关键的任务,尤其对于那些需要处理大规模数据的开发者和数据分析师来说。在这个过程中,你需要确保你的系统满足必要的先决条件,并正确地安装和配置每一个组件。 首先,Hadoop...
7. 在 Ubuntu 操作系统上搭建 Hadoop 单节点需要完成环境准备、软件安装和配置过程。 8. 配置 SSH 免密钥登录可以确保可以无需密码登录。 9. 修改配置文件,包括 core-site.xml 和其他文件,是搭建 Hadoop 单节点的...
整个过程分为三个部分:安装 Ubuntu 操作系统、安装 Hadoop 分布式计算框架和安装 Hive 数据仓库管理系统。 一、安装 Ubuntu 操作系统 在安装 Ubuntu 操作系统之前,需要进行前期配置。打开 VMware Workstation 10...
本文档详细介绍了如何在Ubuntu系统上搭建Hadoop2.x环境,包括创建用户、安装Java环境、配置SSH无密码登录、安装Hadoop并配置相关核心文件的过程。通过这些步骤,用户可以顺利地在自己的Ubuntu环境中运行Hadoop集群,...
本文将详细介绍如何在 Ubuntu 操作系统下搭建 Hadoop 的单机版与伪分布式环境。 #### 2.1 Hadoop 的单机搭建 ##### 2.1.1 准备工作 1. **安装 Ubuntu 虚拟机**:首先,需要在虚拟机中安装 Ubuntu。推荐使用 ...