博客首页 → Hadoop

最新文章列表

java 远程连接Pseudo-Distributed Hadoop

本文主要描述如何实现在一台Linux机器上搭建一个Pseudo-Distributed的Hadoop，在另外一台机器上通过API访问 服务器端环境搭建： 1.版本信息   java：1.8.0_172   Hadoop: 2.9.1 2.设置JAVA_HOME   在～/.bash_profile中追加如下内容     JAVA_HOME=/usr/java/jdk1.8.0_172- ...
hadoophdfs 
fengyilin 评论(0) 有822人浏览 2018-06-04 09:09

hadoop yarn 内存配置

1、running beyond virtual memory 需要修改mapred-site.xml中的内存配置：https://blog.csdn.net/wqhlmark64/article/details/75090365 以及 yarn-site.xml中关闭虚拟内存检测：https://blog.csdn.net/T1DMzks/article/details/78818874 2.清 ...
hadoop 
cherishLC 评论(0) 有835人浏览 2018-06-01 11:02

Hadoop 安装及报错解决方法论

Da数据时代 ，不掌握点hadoop生态体系可还行。今儿记录下64位centos6.9安装hadoop2.7.6过程。   第一次安装图方便，直接下载了安装包，一路顺利安装完成，执行第一个mapredurce时报错。 意识到64位系统，hadoop编译安装的重要性，重新来过。 一、编译hadoop 1.hadoop-2.7.6-src.tar.gz hadoop官网下载资源包； 2. ...
hadoophadoop编译安装hadoop安装报错hadoop编译报错 
lizhiyu211 评论(0) 有2328人浏览 2018-05-16 00:00

Hadoop高可用集群（HA）

一、集群的规划 Zookeeper集群： 192.168.157.12 （bigdata12） 192.168.157.13 （bigdata13） 192.168.157.14 （bigdata14） Hadoop集群： 192.168.157.12 （bigdata12）   NameNode1      ResourceManager1     Journalnode 192. ...
Hadoop集群HA高可用 
jin8000608172 评论(0) 有494人浏览 2018-05-12 20:20

Hadoop分布式集群的搭建

https://bigdata.163yun.com/product/article/35   本篇将向大家介绍下Hadoop分布式集群的搭建。内容浅显，但能够为新手们提供一个参考，让像我一样的小白们对H ...
hadoop环境安装 
nethub2 评论(0) 有760人浏览 2018-05-09 17:22

【TOJ 5435】数据结构实验：对称二叉树

   本文转载自：http://www.itdaan.com/blog/2018/05/05/d085905b8b25b3947fe6523cc2dd9fb3.html 描述 判断一棵二叉树是否关于根节点对称（镜像对称）。 比如下图中左边二叉树是对称的，右边则是非对称的。
HadoopEmacsdotnetnuke 
Ilovejava1 评论(0) 有533人浏览 2018-05-07 16:39

Hadoop学习笔记

实验环境： 1、Linux操作系统 2、Hadoop的介质 3、Spark的介质 学习路线和课程简介： 1、基础：Java语言：Java基础（Java SE）：变量 类型 循环  if                                         面向对象：类、封装、集成、多态 I/O：输入流、输出流 反射、泛型 JDB ...
hadoop大数据 
jin8000608172 评论(0) 有1451人浏览 2018-05-04 12:32

大数据分析需要具备什么思维？

大数据分析需要具备什么思维？ 数据分析是从数据中提取有价值信息的过程，过程中需要对数据进行各种处理和归类，只有掌握了正确的数据分类方法 ...
大数据开发数据分析Hadoop 
mo默芯 评论(0) 有594人浏览 2018-04-11 19:39

大数据开发工程中会用什么工具？

大数据开发工程中会用什么工具？ 大数据研究的出现，为企业、研究机构、政府决策提供了新的行之有效思路和手段，想要做好大数据的管理和分析，一些大数据开发工具的使用是必不可少的，以下是大数据开发过程中常用的工具： 1. Apache Hive Hive是一个建立在Hadoop上的开源数据仓库基础设施，通过Hive可以很容易的进行数据的ETL,对数据进行结构化处理,并对Hadoop上大数据文件进行查 ...
大数据开发大数据Hadoop大数据培训 
mo默芯 评论(0) 有626人浏览 2018-04-11 19:37

大数据开发工具有哪些？

大数据开发工具有哪些？ 大数据研究的出现，为企业、研究机构、政府决策提供了新的行之有效思路和手段，想要做好大数据的管理和分析，一些大数据开发工具的使用是必不可少的，以下是大数据开发过程中常用的工具： 1. Apache Hive Hive是一个建立在Hadoop上的开源数据仓库基础设施，通过Hive可以很容易的进行数据的ETL,对数据进行结构化处理,并对Hadoop上大数据文件进行查询和处理 ...
大数据开发大数据学习大数据Hadoop 
mo默瑶 评论(0) 有415人浏览 2018-04-11 19:22

大数据开发工具有哪些？

大数据开发工具有哪些？ 大数据研究的出现，为企业、研究机构、政府决策提供了新的行之有效思路和手段，想要做好大数据的管理和分析，一些大数据开发工具的使用是必不可少的，以下是大数据开发过程中常用的工具： 1. Apache Hive Hive是一个建立在Hadoop上的开源数据仓库基础设施，通过Hive可以很容易的进行数据的ETL,对数据进行结构化处理,并对Hadoop上大数据文件进行查询和处 ...
大数据开发sparkHadoop 
mo默羽 评论(0) 有542人浏览 2018-04-11 18:13

大数据中常见9种数据分析手段是哪些？

大数据中常见9种数据分析手段是哪些？ 数据分析是从数据中提取有价值信息的过程，过程中需要对数据进行各种处理和归类，只有掌握了正确的数据分类方法和数据处理模式，才能起到事半功倍的效果，以下是数据分析员必备的9种数据分析思维模式： 1. 分类 分类是一种基本的数据分析方式，数据根据其特点，可将数据对象划分为不同的部分和类型，再进一步分析，能够进一步挖掘事物的本质。 2. 回归 回归是一种运用 ...
大数据开发大数据Hadoop 
mo默瑶 评论(0) 有838人浏览 2018-04-11 18:08

大数据实战 数据统计分析方法

大数据实战 数据统计分析方法 数据分析是从数据中提取有价值信息的过程，过程中需要对数据进行各种处理和归类，只有掌握了正确的数据分类方法和数据处理模式，才能起到事半功倍的效果，以下是数据分析员必备的9种数据分析思维模式： 1. 分类 分类是一种基本的数据分析方式，数据根据其特点，可将数据对象划分为不同的部分和类型，再进一步分析，能够进一步挖掘事物的本质。 2. 回归 回归是一种运用广泛的统 ...
大数据开发大数据数据分析Hadoop 
mo默羽 评论(0) 有823人浏览 2018-04-11 18:03

遇到Hadoop 50070端口打不开，该怎么办？

遇到Hadoop 50070端口打不开，该怎么办？ Hadoop 50070是hdfs的web管理页面，在搭建Hadoop集群环境时，有些大数据开发技术人员会遇到Hadoop 50070端口打不开的情况，引起该问题的原因很多，想要解决这个问题需要从以下方面进行排查！ 1. 排查Namenode是否部署成功 排查Namenode是否部署成功可以采用命令/etc/init.d/hadoop-0. ...
hadoop大数据开发老男孩大数据 
mo默瑶 评论(0) 有700人浏览 2018-04-10 22:25

Hadoop 50070端口打不开，该如何排查？

Hadoop 50070端口打不开，该如何排查？ Hadoop 50070是hdfs的web管理页面，在搭建Hadoop集群环境时，有些大数据开发技术人员会遇到Hadoop 50070端口打不开的情况，引起该问题的原因很多，想要解决这个问题需要从以下方面进行排查！ 1. 排查Namenode是否部署成功 排查Namenode是否部署成功可以采用命令/etc/init.d/hadoop-0.2 ...
大数据开发老男孩大数据Hadoop 
mo默芯 评论(0) 有3398人浏览 2018-04-10 22:20

遇到Hadoop 50070端口打不开，怎么办？

遇到Hadoop 50070端口打不开，怎么办？ Hadoop 50070是hdfs的web管理页面，在搭建Hadoop集群环境时，有些大数据开发技术人员会遇到Hadoop 50070端口打不开的情况，引起该问题的原因很多，想要解决这个问题需要从以下方面进行排查！ 1. 排查Namenode是否部署成功 排查Namenode是否部署成功可以采用命令/etc/init.d/hadoop-0.2 ...
大数据开发老男孩大数据Hadoop 
mo默羽 评论(0) 有3308人浏览 2018-04-10 22:19

离线计算成本节省的神兵利器

摘要： 对于创业成长型的企业来说，离线计算已经必不可少了，通过离线计算我们可以生成复杂的业务报表，通过离线计算我们也能精确的算出用户画像。离线计算已经当今的企业中成为了不可或缺的存在。那么使用弹性计算能够对离线计算领域带来什么好处呢？本文将介绍如何使用弹性计算节省企业离线计算成本。   背景   对于目前创业成长型的企业来说，离线计算已经必不可少了，通过离线计算我们可以生成复杂的业务报 ...
hadoopFacebook网络协议 
猫耳呀 评论(0) 有688人浏览 2018-04-04 10:48

最近博客热门TAG

Apache(33928) Lucene(5053) Hadoop(5049) nginx(3449) vim(3262) GCC(2954) memcached(2625) jfreechart(1688) Django(1602) Zend(1413) ActiveMQ(1398) Grails(1374) ActiveRecord(1349) OpenSource(1236) Emacs(870) Glassfish(858) lighttpd(810) rubygems(716) GAE(631) Blend(516)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics