`
约巴拿
  • 浏览: 19746 次
  • 性别: Icon_minigender_1
社区版块
存档分类
最新评论

安装ubantu系统和搭hadoop环境遇到的问题

阅读更多



 

 安装
ubantu系统和搭hadoop环境遇到的问题

 

安装ubantu遇到的问题:

失败方法(不推荐):

网上有许多方法,我首先采用了制作u盘系统启动盘来安装ubantu系统

 

http://jingyan.baidu.com/article/60ccbceb18624464cab197ea.html,结果开机没出现引导界面。一开始,以为是系统有问题。用了两个版本的ubantu系统,重复安装了四五次都是这种情况。最后想到应该是主引导程序的配置的问题,也就是在用UltraISO软件ubantu系统镜像文件写入到u盘时,设置便捷启动 

百度上这篇文章是这样:

在弹出的窗口中进行如下图设置,

刻录校验:打上对号

写入方式:USB-ZIP+

便捷启动:写入新的硬盘主引导记录(MBR)-USB-ZIP+

设置完毕后,单击“写入”

如下图:

 

 

 

<!--EndFragment-->

但很不幸,我的制作过程这样设置后就不能写入了,最后也搜索不到解决的方案。

 

成功方法(推荐):

最后干脆就放弃了上面的方法。转而用硬盘安装ubantu系统(

链接:http://blog.csdn.net/zwyjg/article/details/16371349结果一路顺风,一次性成功。

安装之后可改变win7ubantu的先后启动顺序(针对EazyBCD、硬盘安装的情况):

1.修改系统启动引导项。安装完成重启后你会发现默认启动系统为Ubuntu。进入Ubuntu后点击桌面左上角应用程序—附件—终端,输入“sudo mv /etc/grub.d/30_os-prober /etc/grub.d/06_os-prober”然后会提示你输入密码,这个密码就是你安装系统时设置的密码,注意此时输入后不会出现*加密的标志,而是直接不显示,输完后回车,接着输入“sudo update-grub”然后回车即可。 

2.点击桌面右上角重启,win7启动项已经在最上面且为默认了。进入win7后运行easybcd, 移除nerogrub引导项。 

 

当然,如果有ubantu系统光盘的话,就更方便了,

相关软件的安装,如我的系统刚开始是没有中文输入法的。这时,只要有网,用无线wifi(较方便)或有线网络都可以,下载语言包即可。

 

搭建hadoop环境的问题

搭配hadoop环境,按照这个链接:http://weixiaolu.iteye.com/blog/1401931,一路上顺风顺水。建议:最好百度一下几个常用的命令,如:ls,rm,cd,mkdir,tar,cp等几个命令,然后搞懂linux下的绝对路径和相对路径。

上面这篇博客里附带的一篇安装jdk的博客,有时候转换了当前目录,却没告诉你,这时就需要好好看清楚当前路径。这里举例简要介绍一下如何看清当前目录:

 

第一个当前目录为/home/hadoop(冒号之后,$之前,$代表普通用户,有时候是#,这时代表的是root用户在操作);

第二个当前目录为~(为用户的Home目录的另一种写法,等同为绝对路径/home/administrator/);

伪分布式下,启动hadoop没有出现datanode:
首先确保网络通畅,网路不给力的话不会出现datanode;

也许是namenode格式化了两次以上,导致了namenode和datanode的ID不同,这时删除datanode的日志目录下的current/version这个文件即可,再在没启动hadoop的情况下重新格式化一下namenode.即在终端中进入hadoop目录下,然后输入:

bin/hadoop namenode -format就行了。

 

<!--EndFragment-->
  • 大小: 34.4 KB
  • 大小: 9.2 KB
分享到:
评论

相关推荐

    Pig数据处理工具在Ubuntu系统下的Hadoop环境中安装配置

    内容概要:本文提供了一份详尽的指南用于帮助读者完成Pig数据处理工具在64位Ubuntu系统上针对已部署好的Hadoop集群环境下实施从头开始的手动安装以及环境变量设定的具体步骤。 适用人群:旨在帮助有一定Hadoop基础的...

    Hadoop安装教程_单机/伪分布式配置_Hadoop2.7.1/Ubuntu 16.04

    本教程主要讲述了在 Ubuntu 16.04 环境下安装 Hadoop 2.7.1 的步骤,包括单机模式、伪分布式模式和分布式模式三种安装方式。以下是本教程的知识点总结: 1. 安装前的准备工作:创建 hadoop 用户,设置密码,增加...

    在 Ubuntu12.04 上安装Hadoop-1.2.1 (讲解的非常详细)

    在 Ubuntu12.04 上安装 Hadoop-1.2.1 的过程涉及到多个环节,包括系统准备、用户权限设置、Java 开发环境的安装、Hadoop 的下载与配置、主机名与网络设置以及 SSH 无密码登录的实现。以下是对这些步骤的详细解释: ...

    基于Ubuntu的Hadoop简易集群安装与配置

    ### 基于Ubuntu的Hadoop简易集群安装与配置知识点详解 #### 一、绪论 ##### 1.1 研究背景及意义 在当前信息化社会中,随着科技的发展与进步,尤其是互联网技术的普及,我们正处在一个数据爆炸的时代。各行各业都在...

    Ubuntu下的Hadoop安装教程

    2. **解决安装问题**:如果安装过程中遇到问题,可以尝试使用 `sudo dpkg --configure -a` 命令解决。 #### 六、建立 SSH 无密码登录 为了简化集群内部的通信,可以通过 SSH 实现无密码登录。 1. **生成密钥**:...

    ubuntu下安装hadoop集群

    ubuntu下安装hadoop集群,设置ssh对其他node无密码访问

    ubuntu环境下hadoop环境搭建(伪分布模式)

    在Ubuntu环境下搭建Hadoop伪分布式模式,主要是为了模拟多节点Hadoop集群的环境,以便于学习和测试Hadoop的功能。这个过程涉及到多个步骤,包括必要的资源下载、软件安装、环境配置以及Hadoop服务的启动与验证。以下...

    hadoop搭建与eclipse开发环境设置.docx

    首先,我们需要下载和安装JDK 1.6,接着下载和解压Hadoop安装包。然后,我们需要修改系统环境配置文件和地址解析文件,加入Hadoop相关的配置信息。 5. Hadoop配置 在Hadoop配置中,我们需要修改Hadoop的配置文件,...

    Ubuntu11.10下安装Hadoop0.20.2(单机伪分布式)

    ### Ubuntu11.10下安装Hadoop0.20.2(单机伪分布式) #### 一、安装虚拟机VMware Workstation v7.1.4 在开始Hadoop的安装之前,首先需要在宿主机上安装虚拟机软件VMware Workstation v7.1.4。这一步主要是为了搭建...

    如何在Vmware上用Ubuntu系统搭建Hadoop和spark环境

    一个描述环境搭建的文档,我用的Vmware10和Ubuntu14.04,Hadoop2.7

    Ubuntu12.04下安装Hadoop2.4.0单机模式详细教程

    Ubuntu12.04下安装Hadoop2.4.0单机模式详细教程

    在ubuntu上搭建hadoop总结

    在Ubuntu上搭建Hadoop是一个常见的任务,特别是在学习和实验分布式计算环境时。本文将详细讲解在Ubuntu 12.04上安装Hadoop伪分布式模式的过程,这将帮助你理解Hadoop的基础设置,并为日后扩展到完全分布式环境打下...

    ubuntu下配置hadoop和hive

    配置Hadoop和Hive在Ubuntu系统上是一项关键的任务,尤其对于那些需要处理大规模数据的开发者和数据分析师来说。在这个过程中,你需要确保你的系统满足必要的先决条件,并正确地安装和配置每一个组件。 首先,Hadoop...

    ubuntu搭建hadoop单节点.docx

    7. 在 Ubuntu 操作系统上搭建 Hadoop 单节点需要完成环境准备、软件安装和配置过程。 8. 配置 SSH 免密钥登录可以确保可以无需密码登录。 9. 修改配置文件,包括 core-site.xml 和其他文件,是搭建 Hadoop 单节点的...

    虚拟机Ubuntu+Hadoop+hive安装教程.pdf

    整个过程分为三个部分:安装 Ubuntu 操作系统、安装 Hadoop 分布式计算框架和安装 Hive 数据仓库管理系统。 一、安装 Ubuntu 操作系统 在安装 Ubuntu 操作系统之前,需要进行前期配置。打开 VMware Workstation 10...

    Ubuntu上搭建Hadoop2.x详细文档

    本文档详细介绍了如何在Ubuntu系统上搭建Hadoop2.x环境,包括创建用户、安装Java环境、配置SSH无密码登录、安装Hadoop并配置相关核心文件的过程。通过这些步骤,用户可以顺利地在自己的Ubuntu环境中运行Hadoop集群,...

    ubuntu下搭建hadoop

    本文将详细介绍如何在 Ubuntu 操作系统下搭建 Hadoop 的单机版与伪分布式环境。 #### 2.1 Hadoop 的单机搭建 ##### 2.1.1 准备工作 1. **安装 Ubuntu 虚拟机**:首先,需要在虚拟机中安装 Ubuntu。推荐使用 ...

Global site tag (gtag.js) - Google Analytics