`
cuijiwei1989
  • 浏览: 3902 次
最近访客 更多访客>>
文章分类
社区版块
存档分类
最新评论

初识hadoop02

阅读更多
  因为即将毕业设计的原因,刚好选的老师的毕设是“云计算”老师给出的课题是hadoop 中关于map-reduse 的实现源码和用例的探究;
    云计算现在比较热的,或者说做的比较好的一些框架主要有:googl(不言而喻,最早提出云计算的boss),其次是亚马逊,微软,IBM,都有自己的一套框架。
   初识“云计算”感到云计算缺点有,优点还是主流。这里自己把阅读相关的文献后自己的想法说明下:
   缺点:
   1.数据安全性,个人觉得这是最要命的缺点了,及时你是一家小公司,你会放心的将自己的数据上传到云端服务器保存吗?你最担心的其实不是数据丢失问题,而是数据在服务提供商的云端数据存储的服务器安全吗?因此很容易得出一个结论,如果云计算是大势所趋,那么大点的公司都必须有自己的一套东西。简单说:没有一个钱庄会把自己的本票放在其他钱庄。
   2.网络的安全性,对于网络安全的管理也是对数据的安全性影响的一个直观方面;
   3.网络的稳定性,大家现在用的主流的网络都是2M,但是云计算的要求呢?如果你修改了一个文档,刚好这个文档很大,你需要上传到运服务器和其他开发者或者组员共享此文档,这时候就可能有蛋疼的事情出现了,由于网络的稳定性问题,上传文档经常出现断裂的情况发生;
分享到:
评论

相关推荐

    《Hadoop大数据开发实战》教学教案—01初识Hadoop.pdf

    《Hadoop大数据开发实战》教学教案—01初识Hadoop的内容主要涵盖了大数据的基本概念、核心需求以及Hadoop框架的初步介绍。在这个章节中,学习者将了解到大数据在当今信息化社会中的重要地位,并掌握大数据的基本特征...

    初识hadoop之hadoop 安装

    【初识Hadoop之Hadoop安装】 Hadoop是Apache软件基金会的一个开源分布式计算框架,它设计用于处理和存储海量数据。Hadoop的核心组件包括HDFS(Hadoop Distributed File System)和MapReduce,前者负责数据的分布式...

    第1讲:初识hadoop

    第1讲:初识hadoop

    初识Hadoop 2.x.pdf

    #### 五、初识MapReduce MapReduce是一种编程模型,用于简化大数据集的并行处理过程。其基本思想是将一个大的计算任务分解成多个“映射(Map)”和“规约(Reduce)”阶段来执行。 - **Map阶段**:负责将输入数据划分...

    初识Hadoop.docx

    ### 初识Hadoop知识点详解 #### 一、大数据概览 **1. 大数据定义** - **概念解析**:大数据的概念并非特指某个具体的数据量级,而是指那些无法用传统的数据处理工具进行有效捕捉、管理和处理的数据集合。这种...

    day01_初识hadoop.pdf

    【IT十八掌徐培成】Hadoop第02天-01.Hadoop基础回顾-进程初识-webui.zip

    本资源"【IT十八掌徐培成】Hadoop第02天-01.Hadoop基础回顾-进程初识-webui.zip"聚焦于Hadoop的基础知识,特别是对Hadoop进程的理解以及如何通过Web UI进行监控。这里我们将深入探讨Hadoop的核心组件、进程架构以及...

    hadoop从入门到精通课件pdf

    1. **第三章:初识Hadoop 2.x** - Hadoop概述:介绍Hadoop的起源、发展及在大数据处理中的地位。 - Hadoop生态系统:包括HDFS、MapReduce、YARN、HBase、Hive、Pig等组件的基本概念和作用。 - Hadoop 2.x的新特性...

    Hadoop权威指南中文版

    第一章:初识Hadoop 第2章 关于MapReduce 第3章 Hadoop分布式文件系统 第4章 Hadoop I/O 第5章:MapReduce 应用开发 第6章:MapReduce 的工作原理 第7章:MapReduce 的类型与格式

    Hadoop阶段初识学习笔记

    ### Hadoop基础知识详解 #### 一、Hadoop概述 Hadoop是一个开源的、可靠的、可扩展的系统架构,主要用于利用分布式架构存储海量数据并实现分布式的计算任务。它由Apache基金会维护,旨在解决大规模数据处理的问题...

    拥抱大数据——初识Hadoop,轻松应对海量数据存储与分析所带来的挑战

    【Hadoop概述】 Hadoop是Apache基金会开发的开源软件,主要设计用于处理和存储海量数据。它的核心由两个主要组件组成:HDFS(Hadoop Distributed File System)和MapReduce。Hadoop的名字来源于大象,象征其强大的...

    Hadoop大数据管理实验详细参考文档

    在本套“Hadoop大数据管理实验详细参考文档”中,我们涵盖了从初识Hadoop到进行实际操作的全过程,旨在帮助新手快速入门大数据处理的世界。Hadoop是一个开源框架,主要用于处理和存储海量数据,它的核心组件包括HDFS...

    HadoopDemo

    《HadoopDemo:初识与实践》 HadoopDemo是一个专为Hadoop初学者设计的项目,它通过一系列实例展示了Hadoop的核心功能和使用方法。Hadoop,作为大数据处理领域的重要框架,以其分布式、容错性和扩展性著称,是理解和...

    Hadoop权威指南 第二版(中文版)

    第1章 初识Hadoop  数据!数据!  数据存储与分析  与其他系统相比  关系型数据库管理系统  网格计算  志愿计算  1.3.4 Hadoop 发展简史  Apache Hadoop和Hadoop生态圈 第2章 关于MapReduce  一个气象数据...

    Hadoop 2.x

    **Hadoop 2.x 入门指南** Hadoop 2.x 是一个开源的分布式计算框架,它是Apache Hadoop项目的最新版本,旨在提供高效、可...通过学习"0101+初识Hadoop+2.x.pdf"这样的文档,你可以逐步掌握这个领域的核心概念和技术。

    Hadoop权威指南(中文版)2015上传.rar

    第1章 初识Hadoop 数据!数据! 数据存储与分析 与其他系统相比 关系型数据库管理系统 网格计算 志愿计算 1.3.4 Hadoop 发展简史 Apache Hadoop和Hadoop生态圈 第2章 关于MapReduce 一个气象数据集 数据的格式 使用...

    Hadoop集群程序设计与开发教学大纲.docx

    1. **初识Hadoop**:讨论为何学习Hadoop,Hadoop与云计算和大数据的关系,所需基础知识,以及学习环境。这将帮助学生理解Hadoop的背景和应用场景。 2. **Hadoop基础知识**:涵盖Hadoop的简介、版本演进、HDFS、...

    Hadoop开发者全集和proHadoop

    这些资料分为三个阶段,逐步深入,旨在帮助读者从初识到精通Hadoop的开发工作。 在《Hadoop开发者第一期》中,首先会介绍Hadoop的基础知识,包括它的起源、核心架构以及为什么它在大数据处理领域如此重要。这一部分...

    hadoop学习笔记.rar

    六、hadoop学习笔记之一:初识Hadoop 这篇笔记介绍了Hadoop的基本概念,包括Hadoop的诞生背景、核心组件以及Hadoop的优势。初学者可以从这里了解Hadoop的基本架构和工作原理,为后续的学习打下基础。 总结,Hadoop...

Global site tag (gtag.js) - Google Analytics