`
安铁辉
  • 浏览: 244874 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
社区版块
存档分类
最新评论

hadoop学习心得之安装01 cygwin安装

阅读更多
hadoop是基于 unix 的 我的是Windows7所以要安装 cygwin

安装之前保证已经安装 jdk 1.6 以上

在安装 Cygwin 之前,得先下载 Cygwin 安装程序 setup.exe。
http://www.cygwin.com/ 找最新版本。上面有 安装帮助

一路next 到下图:
  擦 第一次写博客,javaeye插入图片怎么这麻烦啊

到选择  Cygwin 的安装目录,Cygwin 安装包存放目录 分别选择不同的目录。简单的英文,你懂的。


到选择下载路径的时候 ,随便选一个,找下载速度最快的,如果很慢可以取消重新换一个。很重要,第一次安装,下载了一天。悲剧啊

之后最重要的就是要选择安装组件。因为默认的 cygwin只会安装必要的组建。一下三个要手动改成安装状态;
  “Net Category”下的“OpenSSL”
  “Base Category”下的“sed”              为了在eclipse 上编译 Hadoop
  Editors Category”下的 vim 安装        方便在 Cygwin 上直接修改配置文 件

安装完成后,即可配置环境变量 
需要配置的环境变量包括 PATH 和 JAVA_HOME:JAVA_HOME 指向 JRE 安 装 目录 ;JDK
的 bin 目录,Cygwin 的 bin 目录,以及 Cygwin 的 usr\bin 目录都必须添加到 PATH 环境变量


########################经常出问题的地方就是#############
安装 sshd 服务

点击桌面上的 Cygwin 图标,启动 Cygwin,执行 ssh-hosstt-cconfig 命令

如果提示输入daemon 的值。Windows7输入 ntsec tty   xp ntsec就可以

如果提示是否更改用户名,选yes 简历新的用户名, sshd ,密码 记得。

当看到“Have fun”时,一般表示 sshd 服务安装成功了,如上图所示。

接下来,需要启动 sshd 服务。

在服务中启动 cygwin服务



6.
配置 ssh 登录ssh


执行 sssh-keeygen 命令生成密钥文件,


直接按回车键即可,如果不出错,应当是需要三次
按回车键。接下来生成 autthorizzed_keys 文件,按如下操作,生成
cd ~/.ssh/
ls   就能看见了(呵呵很菜)

cp id——rsa.pub authorized_keys

ls 看一下 ok不


完成上述操作后,执行 exitt 命令先退出 Cygwin 窗口,如果不执行这一步操作,下面的exitt
操作可能会遇到错误。接下来,重新运行 Cygwin,执行 ssh loccallhosstt 命令,在第一次执行 ssh
localhost 时,输入 yess,然后回车即可:


如果是 Windows 域用户,这步操作可能会遇到问题,错误信息如下:。


这个 错 误 暂 无解 决 办 法 ,问 题 的 解 决情 况 , 可 关 注 Hadoop 技 术 论坛 中 的 贴 :
http://bbs.hadoopor.com/thread-348-1-1.html(Cygwin 1.7.1 版本 ssh 问题)。否则,如果成功,
执行 who 命令时,可以看到如下图所示的信息:


至此,配置 ssh 登录成功,下面就可以开始安装 hadoop 了。
  • 大小: 43.7 KB
  • 大小: 27.1 KB
0
0
分享到:
评论

相关推荐

    在Windows上的Cygwin环境上安装Hadoop指南

    下面将详细介绍在Windows上的Cygwin环境下安装Hadoop的步骤,并解决一些常见问题。 首先,我们需要下载并安装Cygwin。访问Cygwin官方网站,选择适合你的Windows系统的安装包。在安装过程中,记得选择"Devel"类别下...

    Hadoop课程实验和报告——Hadoop安装实验报告

    Hadoop课程实验和报告——Hadoop安装实验报告 Hadoop是一个开源的大数据处理框架,由Apache基金会开发和维护。它提供了一种可靠、可扩展、可高效的方法来存储和处理大规模数据。在本实验报告中,我们将介绍Hadoop的...

    Hadoop学习笔记

    Hadoop学习笔记,自己总结的一些Hadoop学习笔记,比较简单。

    cygwin+eclipse搭建hadoop开发环境,运行wordcount

    总的来说,这些文档和资料将帮助你搭建一个完整的Hadoop开发环境,从安装Cygwin和Eclipse,到配置Hadoop环境,最后通过运行WordCount实例来验证你的环境是否正确配置。这不仅对于初学者来说是一次很好的学习体验,也...

    Cygwin+Eclipse搭建Hadoop单机开发环境离线包-cygwin-setup

    在Windows操作系统上搭建Hadoop开发环境,通常会借助于Cygwin模拟Linux环境,并通过Eclipse作为集成开发环境。本文将详细介绍如何在Windows 7 32位系统中使用Cygwin和Eclipse来构建一个Hadoop的单机开发环境。 首先...

    Cygwin+Eclipse搭建Hadoop单机开发环境-2

    安装Hadoop的过程中,你需要下载Hadoop的tarball文件,解压到Cygwin的安装路径下。然后,配置Hadoop的环境变量,包括HADOOP_HOME、PATH等,以便在命令行中直接使用Hadoop命令。这通常通过编辑Cygwin的.bashrc或.bash...

    最新版cygwin4hadoop,cygwin2.761

    Cygwin是一个强大的工具,它为Windows平台提供了一个类UNIX的环境,使得用户可以在Windows上运行许多GNU/Linux和Unix的命令行工具、应用程序和服务。...但作为开发和学习的平台,Cygwin4hadoop无疑是一个实用的选择。

    Hadoop学习总结

    HDFS是Hadoop的核心组件之一,是一个高度容错性的分布式文件系统。它被设计成能在普通的硬件上运行,并能够处理大规模的数据集。HDFS遵循主从架构,由NameNode(主节点)和DataNode(从节点)组成。NameNode负责元...

    Hadoop学习之jdk安装

    在深入学习Hadoop之前,首先需要确保你的开发环境已经准备就绪,这通常涉及到Java Development Kit(JDK)的安装。Hadoop是一个开源的分布式计算框架,它依赖于Java运行环境来执行其核心服务,例如HDFS(Hadoop ...

    windows下配置cygwin、hadoop等并运行mapreduce及mapreduce程序讲解

    【Windows下配置Cygwin...通过这种方式,Cygwin和Hadoop在Windows上的结合使得开发者能够在本地环境模拟Hadoop集群,便于学习、测试和调试MapReduce程序。不过,生产环境中通常推荐使用更稳定的Linux环境来运行Hadoop。

    hadoop的安装

    标题《hadoop的安装》所涉及的知识点涵盖Hadoop安装过程中的各个方面,包括但不限于JDK环境的配置与安装、Hadoop下载、解压、配置以及启动等步骤。以下是根据给定内容和描述生成的详细知识点: 1. JDK环境配置与...

    eclipse安装Hadoop插件

    随着大数据技术的快速发展,Hadoop作为处理海量数据的重要工具之一,其应用越来越广泛。为了更好地利用Eclipse进行Hadoop程序开发,安装Hadoop Eclipse插件是十分必要的。本文将详细介绍如何在Eclipse中安装Hadoop...

    hadoop3.2.1 各组件安装教程

    hadoop3.2.1 各组件安装教程

    徐老师大数据 Hadoop架构完全分析课程 Hadoop入门学习视频教程

    -019.Hadoop在Win7下免Cygwin环境安装NativeBug解决与dexpot多桌面应用.mp4 -020.Hadoop架构分析之单节点体系.mp4 021.Hadoop架构分析之集群结构分析.mp4 022.Hadoop架构分析之HDFS架构分析.mp4 023.Hadoop架构分析...

    cygwin中安装hadoop+eclipse编译源码并调试

    本文将详细介绍如何在Cygwin中安装Hadoop,并利用Eclipse来编译Hadoop源码以及进行调试。 首先,我们需要安装Cygwin。Cygwin提供了一个模拟Linux环境的平台,包括GCC编译器、Git等工具,这些对于编译和管理开源项目...

Global site tag (gtag.js) - Google Analytics