博客首页 → Hadoop

最新文章列表

hadoop最新发行稳定版：DKHadoop版本选择详解

  Hadoop对于从事互联网工作的朋友来说已经非常熟悉了，相信在我们身边有很多人正在转行从事hadoop开发的工作，理所当然也会有很多hadoop入门新手。H ...
hadoop 
adnb34g 评论(0) 有627人浏览 2018-12-28 16:13

大数据hadoop入门之hadoop家族产品详解

    大数据这个词也许几年前你听着还会觉得陌生，但我相信你现在听到hadoop这个词的时候你应该都会觉得“熟悉”！越来越发现身边从事hadoop开发或者是正在学习hadoop的人变多了。作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐怕就已经足够让新手头疼。如果每一个发行版hadoop都可以做到像大快DKHadoop那样把各种环境搭建集成到一起，一次安装搞定所有，那 ...
hadoop 
adnb34g 评论(0) 有536人浏览 2018-12-26 15:19

大快搜索城市运河大数据政务管理平台案例解读

  大数据在政务当中的应用对于提高问题解决的效率可谓大有帮助，但政务大数据平台的应用开发远不止提高问题解决效率这么简单。当然，作为大数 ...
政务大数据管理平台hadoop 
adnb34g 评论(0) 有435人浏览 2018-12-24 13:34

DKhadoop安装配置步骤教程与常见问题解决

    上周分别就DKHadoop的安装准备工作以及服务器操作系统配置写了两篇分享的文章，这是个人第一次尝试写一个系统性的分享文章，必然会有很多疏漏的地方，还望见谅吧。今天分享的是DKHadoop安装以及常见问题的解决方案方法介绍。   【DKHadoop安装是总体很简单，跟大家所了解的hadoop版本安装差异比较大，这个是发行版是已经做了深度集成，基本可以“一键傻瓜式安装”，当然，更为具 ...
hadoop 
adnb34g 评论(0) 有462人浏览 2018-12-17 15:15

DKHadoop安装的环境准备介绍

  前几天去参加了一个线下的聚会，参加聚会的基本都是从事互联网工作的。会上有人提到了区块链，从而引发了一场关于大数据方面的探讨。我也是从去年才正式接触大数据，一直在学习hadoop。相信接触过hadoop的人都知道，。单独搭建hadoop里每个组建都需要运行环境、修改配置文件、测试等过程，每个组件几乎都有坑，尤其是让新手甚是苦恼。此前有在微博上与一些博友了解过他们的配置过程，有的配置了好几天愣是 ...
hadoop虚拟机 
adnb34g 评论(0) 有645人浏览 2018-12-05 14:37

hadoop和spark的区别

  学习hadoop已经有很长一段时间了，好像是二三月份的时候朋友给了一个国产Hadoop发行版下载地址，因为还是在学习阶段就下载了一个三节点的学习版玩一下。在研究、学习hadoop的朋友可以去找一下看看（发行版DKhadoop，去大快的网站上应该可以下载到的。）   在学习hadoop的时候查询一些资料的时候经常会看到有比较hadoop和spark的，对于初学者来说难免会有点搞不清楚这二者 ...
hadoop 
adnb34g 评论(0) 有636人浏览 2018-11-30 16:01

Hadoop基础入门之发行版本的选择

  经常会看到这样的问题：零基础学习hadoop难不难？有的人回答说：零基础学习hadoop，没有想象的那么难，也没有想象的那么容易。看到这样的答案不免觉得有些尴尬，这个问题算是白问了，因为这个回答似乎什么也没给出来。这个问题的关键在于“零基础”到底是个什么样的基础？ 所谓的零基础大体可以分为两种：第一种是hadoop初学者，有一定的Linux基础、虚拟机和Java基础；第二种是hadoop兴 ...
hadoop 
adnb34g 评论(0) 有621人浏览 2018-11-28 13:30

基于DKHadoop的智慧人社服务平台开发案例简述

  大数据技术的应用与发展正在让我们的生活经历一场深刻的“变革”，而且这种变革几乎让所有人都感觉非常舒服，自然而然的就完成了这样的一个变化。最根本的原因其实是大数据技术的应用真正帮助我们解决了问题。 我想也正是基于大数据技术的超强实用性吧，它才会被上升到国家战略层面的高度得以出现在政府工作报告中。大数据技术的应用于，对于建设智慧政务平台的可谓功不可没。智慧政务云平台的建设技术以及方案，可以说是 ...
hadoop 
adnb34g 评论(0) 有434人浏览 2018-11-16 13:54

DKH企业级大数据解决方案的优势分析

  大数据技术的发展与应用已经在深刻地改变和影响我们的日常生活与工作，可以预见的是在大数据提升为国家战略层面后，未来的几年里大数据技术将会被更多的行业应用。 相信很多人对于大数据技术的应用还是处于一个非常陌生的阶段，可能在很多地方听说过大数据，但具体应用在哪方面可能就并不清楚了。举个最简单的的例子，前段时间新闻报道说警方在某明星的演唱会上抓捕了一名在逃嫌犯，而这名嫌犯是在进入现场时被监控识别出 ...
hadoop 
adnb34g 评论(0) 有494人浏览 2018-11-02 13:31

DKhadoop大数据平台基础框架方案概述

  大数据作为当下最为热门的事件之一，其实已经不算是很新鲜的事情了。如果是三五年前在讨论大数据，那可能会给人一种很新鲜的感觉。大数据作 ...
hadoop 
adnb34g 评论(0) 有643人浏览 2018-10-31 14:07

DKHadoop大数据开发框架的构成模块

  大数据也不是近几年才出现的新东西，只是最近几年才真正意义上变得热门、火爆！而这要得益于互联网信息技术的快速发展，网络改变世界、改变生活，大数据技术的应用让这样的改变更为深刻。 关注大数据或者是互联网方面新闻的人应该知道，大数据已经上升到了国家战略的高度。可以说这是时代发展的必然趋势，从国家战略层面推进大数据技术的普及与应用，一个至关重要且非常核心的问题——数据安全问题就非常突出。解决数据安 ...
hadoop 
adnb34g 评论(0) 有560人浏览 2018-10-19 15:13

hadoop框架结构的说明介绍

  近年，随着互联网的发展特别是移动互联网的发展，数据的增长呈现出一种爆炸式的成长势头。单是谷歌的爬虫程序每天下载的网页超过1亿个（2000年数据，）数据的爆炸式增长直接推动了海量数据处理技术的发展。谷歌公司提出的大表、分布式文件系统和分布式计算的三大技术构架，解决了海量数据处理的问题。谷歌公司随即将设计思路开源，发表了具有划时代意义的三篇论文，很快根据谷歌设计思路的开源框架就出现了，就是如今非 ...
hadoop大数据 
adnb34g 评论(0) 有680人浏览 2018-10-15 15:50

MapReduce实现与自定义词典文件基于hanLP的中文分词详解

  前言： 文本分类任务的第1步，就是对语料进行分词。在单机模式下，可以选择python jieba分词，使用起来较方便。但是如果希望在Hadoop集群上通过mapr ...
mapreducehadoop 
adnb34g 评论(0) 有817人浏览 2018-10-15 13:42

hadoop2.9全分布式安装

  一.环境说明 安装介质 ：virtualbox centos6.8 网络模式 NAT +host-only(双网卡模式公司内网无法使用简单的桥连接—因为ip自动获取会被占用) 三台虚拟机   host ip 节点 h1 192.168.56.11 namenode resourcemanager secondarynamenode h2
hadoophadoop2.9全分布式 
qq466862016 评论(0) 有2758人浏览 2018-09-10 20:41

盘点大数据培训类别

第一类：开发类 1、Spark and Hadoop开发人员培训 （4天） 考试建议：CCA175 课程概述 学习关键概念和掌握使用最新技术和工具将数据采集到Hadoop 机群并进行处理。通过学习掌握诸如Spark（包括 Spark Streaming和Spark SQL）、Flume、Kafka 以及Sqoop 这样的Hadoop 生态系统工具和技术，Hadoop开发员将具备解决实际大数据问题 ...
hadooplinuxpython 
ClouderaHadoop 评论(0) 有535人浏览 2018-09-07 17:22

大数据工程师值得一考的4个Hadoop认证

1、CCA Administrator Exam (CCA131)  管理员认证 认证准备建议：Administrator管理员培训 考试形式：120分钟；70%通过；基于一个预配置的Cloudera企业版集群，解决8~12个场景下的任务 2、CCA Spark and Hadoop Developer (CCA175) 开发者认证 认证准备建议：Spark and Hadoop开发者培训 考试形 ...
hadoopWindowsFreeBSDOS 
ClouderaHadoop 评论(0) 有4993人浏览 2018-08-30 13:01

Hadoop 伪分布式上安装 Hive

  下载地址：点此链接（P.S.下载带bin的安装包） 下载hive后放到虚拟机文件夹内，打开： tar -zxf /home/tools/apache-hive-1.2.2-bin.tar.gz -C /home/software/ 修改并保存环境配置： gedit /etc/profile //添加 export HIVE_HOME=/home/softwar ...
hadoop 
fooler5 评论(0) 有724人浏览 2018-08-28 18:39

Ubuntu系统下配置Hadoop2.7.1+Hive2.1.0

1.准备环境 java 1.7以上 hadoop版本参见hive官网的支持版本号，并启动hadoop集群。 2.下载、解压hive安装包 Hive官网地址: http://hive.apache.org/ 下载安装包后用tar -xzvf命令解压，并用mv对文件夹重命名为hive 3.配置环境变量 vim /etc/profile，加入下面几行 HIVE_HOME=/home/ ...
hadoop 
fooler5 评论(0) 有425人浏览 2018-08-28 18:09

最近博客热门TAG

Apache(33931) Lucene(5053) Hadoop(5049) nginx(3449) vim(3262) GCC(2954) memcached(2625) jfreechart(1688) Django(1602) Zend(1413) ActiveMQ(1398) Grails(1374) ActiveRecord(1349) OpenSource(1236) Emacs(870) Glassfish(858) lighttpd(810) rubygems(716) GAE(631) Blend(516)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics