`

学习hadoop需要什么基础

 
阅读更多

“学习hadoop需要什么基础”这已经不是一个新鲜的话题了,随便上网搜索一下就能找出成百上千篇的文章在讲学习hadoop需要掌握的基础。再直接的一点的问题就是——学Hadoop难吗?用一句特别让人无语的话回答就是:难不会,会不难!

趁着学校放假的时间,写了一些hadoop学习分享的文章。刚开始写的几篇稍微有点乱,其中有一篇就是在说学习hadoop需要什么样基础的。所谓的难不会,会不难,必然也是建立你现在的基础之上的。假定你连基础的计算机基础都没有,那可能真的就是“难不会”了。如果你是有一个良好的计算机基础的,比如,虚拟机的配置你会、拥有JAVA基础和Linux操作基础,那学习hadoop对你来可能就是“会不难”哦!

 

当你看了很多介绍“学习hadoop需要什么基础”的文章后,你一定会得出一个结论,那就是学习hadoop所必须的三个基础技能:JAVA基础、Linux基础、虚拟机基础(上面已经说过了)。所有的文章在说完这个三个基础之后,好像在告诉我们所有人,你只要有这个三个基础就一定能够学好hadoop,从此走上人生巅峰······其实,也不尽然,只有当你真正接触了hadoop,你才会发现真正的问题所在。

接触过hadoop的人都知道,单独搭建hadoo里每个组建都需要运行环境、修改配置文件、测试等过程。如果仅仅是安装一下运行环境就行了,那你就大错特错了,几乎每个组件都是坑,这些坑几乎是不可能让初学者有一个愉快的学习过程的。Hadoop虽然起源于国外,但国内发行版本也蛮多,但是都没有去解决环境搭建的问题。如果说他们没有关注到运行环境搭建繁琐这样的问题话,我肯定是不相信的。真的不知道是他们现在的技术解决不了这个问题,还是不想去花费时间去解决?

今年3月初的时候,一个做程序开发的朋友给了一个国产发行版DKHadoop,是大快搜索开源的发行版hadoop。这款hadoop版本终于解决了运行环境搭建繁琐的问题,它将开源社区里多种常用的组件包括:HDFS,Hbase,Storm,Spark,Flume,Kafka,Mahout,ES等都集成到一个平台里,只需简单的一键安装就能完成,需要调用的时候直接调用即可,终于让我觉得不用在像以前拿样再去安装调试等等。



 

所以,我觉得学习hadoop需要的不仅仅是JAVA、虚拟机、Linux这三个方面的基础,选择的hadoop版本也是很重要。我们学习hadoop的重点是想要去开发一些东西,而不是为了学习运行环境的安装,这样会让人觉得有点本末倒置!

正在学习hadoop或者准备学习hadoop的朋友,个人还是比较推荐DKHadoop这套发行版,毕竟对新手而言算是很友好的了。我在用的是标准本三节点dkhadoop版本(放心,是免费的),虽然是免费的,但权限都是开放的。所以,对于新手或者个人研究而言已经够用了。需要dkhadoop安装包的,可以留言给我,可以打包发

  • 大小: 143.4 KB
分享到:
评论

相关推荐

    学习hadoop--java零基础学习hadoop手册

    在深入学习Hadoop之前,首先需要掌握一定的Java基础知识。Java是一种广泛使用的面向对象的编程语言,具有平台无关性、安全性高、性能好等特点。本节将介绍以下几个方面: 1. **Java环境搭建**:安装配置JDK(Java ...

    Hadoop大数据开发基础.rar

    │ └── Hadoop基础 -01简介及架构.ppt ├── 第2章 │ ├── 1. 安装配置虚拟机.ppt │ ├── 2. 安装Java.ppt │ └── 3. 搭建Hadoop完全分布式集群.ppt ├── 第3章 │ └── Hadoop基础操作.ppt ├──...

    零基础学习Hadoop

    总结来说,零基础学习Hadoop需要系统地了解Hadoop的基本概念、掌握Linux操作系统基础、了解虚拟化技术、学习Java编程语言。在学习过程中,从了解Hadoop的安装方式,到搭建环境,再到实际配置和使用,每一步都需要...

    Hadoop大数据开发基础-PPT课件

    这个PPT课件将帮助学习者系统地了解Hadoop的基本概念和操作,为进一步深入学习大数据处理技术奠定坚实基础。同时,配合"说明文档.txt",可以获取更详尽的步骤指导和学习建议,使学习过程更为高效。对于寻求Hadoop...

    Hadoop大数据开发基础_教案.rar

    总之,《Hadoop大数据开发基础》教程是一个全面且深入的学习资源,覆盖了从Hadoop基础知识到项目实施的各个方面,对于希望进入大数据领域的学习者来说是一份宝贵的教材。通过这个教程,读者可以逐步掌握Hadoop技术,...

    Hadoop大数据开发基础

    **Hadoop大数据开发基础** Hadoop是Apache软件基金会的一个开源框架,专为处理和存储大量数据而设计。它以其分布式文件系统(HDFS)和MapReduce...通过深入学习,可以为后续的大数据开发和分析工作打下坚实的基础。

    hadoop大数据基础学习

    掌握了这些基础知识之后,将进一步深入学习Hadoop的高级特性,探索如何利用Hadoop解决实际业务中的大数据问题。希望这些内容能够帮助大家更好地理解和掌握Hadoop,为大数据处理打下坚实的基础。

    零基础学习Hadoop3.0从入门到源码

    │ ├─视频-零基础学习Hadoop3.0-HDFS从入门到源码 │ │ │ 00--课程内容大纲和学习目标.mp4 │ │ │ 01--大数据课程导论--大数据概念.mp4 │ │ │ 02--大数据课程导论--大数据特点(5V特征).mp4 │...

    Hadoop大数据开发基础-PPT课件.rar

    通过学习“Hadoop基础 - 01简介及架构”,学生可以了解到Hadoop如何通过分布式计算解决海量数据问题,以及其分布式架构的原理。 第二章则详细介绍了Hadoop的安装配置过程。从“安装Java”开始,强调了Java环境对于...

    hadoop大数据培训零基础学习hadoop-北京尚学堂整理.pdf

    首先,学习Hadoop编程需要一定的Java基础。至少要熟悉Java的基本语法、对象、接口、继承和多态的概念,以及如何使用常用的Java包。对于初学者,建议通过实践小项目或例子来巩固理论知识。对于有经验的程序员,虽然...

    零基础学习hadoop到上手工作线路指导.zip

    零基础学习hadoop到上手工作线路指导.zip 真正的干货!分享给大家! 百度云

    java零基础学习hadoop手册

    java零基础学习hadoop手册--很不错的资料

    hadoop大数据培训零基础学习hadoop-北京尚学堂.pdf

    在学习Hadoop大数据技术之前,首先需要理解Hadoop是一个开源框架,主要设计用于处理和存储大量数据。Hadoop的核心组件包括HDFS(分布式文件系统)和MapReduce(一种分布式计算模型)。由于Hadoop是用Java编写的,...

    零基础学习hadoop到上手工作线路指导

    本书《零基础学习hadoop到上手工作线路指导》是由about云网络书籍团队编写,旨在为大数据领域零基础学习者提供从入门到实践的全程指导。书中包含了作者以及许多初学者的共同学习经验与心得,详细介绍了学习Hadoop所...

    大数据与云计算培训学习资料 Hadoop之HDFS基础入门知识介绍 共42页.ppt

    大数据与云计算培训学习资料 Hadoop之HDFS基础入门知识介绍 共42页.ppt

    Hadoop大数据处理技术基础与实践(第2版)(微课版)PPT-课件.rar

    1. **Hadoop基础**:Hadoop是Apache软件基金会的一个开源框架,专门用于处理和存储大规模数据。它的设计目标是高容错性和可扩展性,使企业能够处理PB级别的数据。 2. **分布式文件系统(HDFS)**:Hadoop的核心组件...

    Hadoop学习资料

    Hadoop作为开源分布式系统基础架构,由Apache基金会开发,允许用户在不了解分布式底层细节的情况下开发分布式程序,充分利用集群的威力进行高速运算和存储。它解决了大数据存储和处理的问题,尤其适合处理非结构化...

Global site tag (gtag.js) - Google Analytics