博客首页 → bigData

最新文章列表

用户体验似乎已是明日黄花，因为已经万事俱备了-是真的吗？

信必优的UX / UI设计师Margit Tennosaar 是备受赞誉的信息技术导师和主管。她认为良好的用户体验是软件业务的基本功。作为一个前端开发人员，她对优化和 ...
ui互联网iosandroidbigdata 
symbiochina 评论(0) 有527人浏览 2017-06-27 15:10

hadoop2.7.3集群搭建

Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，则MapReduce为海量的数据提供了计算             
hadoophadoop2bigdata大数据hadoop集群 
fangyong2006 评论(0) 有375人浏览 2017-06-01 14:04

十道海量数据处理面试题与十个方法大总结

第一部分、十道海量数据处理面试题 　　1、海量日志数据，提取出某日访问百度次数最多的那个IP。 　　此题，在我之前的一篇文章算法里头有所提 ...
BigData海量面试 
zhb8015 评论(0) 有585人浏览 2015-04-01 10:53

大数据十年内会成为屌丝产业

先从马云说起，马云最近几件事很闹心，阿里的股票从最高的119跌倒了81块，跌去了三分之一，年初取消了全员红包搞得民怨沸腾，天猫总裁乔峰被免职，网上传言纷纷，甚至还有小道消息是天猫团队周末不加班导致。经过前面两年吹泡泡之后，淘宝还是要终归回归企业发展的本质来，就是要赚钱。前面我写过一篇文章《泼一泼阿里的冷水，阿里几大隐忧》，我还是维持我当时的看法淘宝仍能估值太高。  
bigdata大数据 
jiezhu2007 评论(5) 有3844人浏览 2015-03-14 12:32

Automatic Management of Data and Computation in Datacenters

最近在研究数据中心的数据管理和性能优化，看了一篇2010的论文Nectar:Automatic Management of Data and Computation in Datacenters，还是有一定的启发的，简要介绍给大家。详细的建议大家download论文下来看下。 Nectar核心思路有两个：
nectardatacenterbigdatahadoop 
jiezhu2007 评论(0) 有1590人浏览 2015-01-24 12:27

Memcache和Redis比较

Today marks the day that memcached no longer has any significant advantages over redis, while redis continues to have many distinct advantages over memcached. Today, redis 3.0, which includes Redis Cl ...
memcachedredisclusterbigdata 
zhuzhiguosnail 评论(0) 有1434人浏览 2014-10-19 17:29

Spark学习-3 运行一个example

开始学习Spark了，先看看Spark能做点什么吧。 最好的方式就是先运行个例子程序。先从Spark网站下载一个运行环境(我的运行环境是Win7, 64bits) 。 我们在官方网站: http://spark.apache.org/downloads.html下载一个版本： 我选 Spark 1.0 + Prebuild for Hadoop 2.3, Link为 http://d3kbcq ...
SparkBigDatawinutils.exe 
Djava.sohu.com 评论(0) 有10781人浏览 2014-10-15 11:10

Spark的学习2-IDE

  当使用Maven构建好项目后，现在要开始学习Spark的设计及具体实现，就是源码了。     在Google上查到的比较多的IDE就是Scala + Eclipse , Scala + NetBeans和Scala ...
SparkBigDatascalamavenide 
Djava.sohu.com 评论(1) 有2117人浏览 2014-10-15 09:36

大数据处理分析的六大工具（转）

大数据是一个含义广泛的术语，是指数据集，如此庞大而复杂的，他们需要专门设计的硬件和软件工具进行处理。该数据集通常是万亿或EB的大小。这些 ...
bigdatadata mininghadoop 
zhb8015 评论(0) 有807人浏览 2014-05-19 10:34

spark源码分析--spark的任务调度（standalone模式）

原创，转载请注明出处  http://baishuo491.iteye.com/blog/1994026 ,作者邮箱：vc_java@hotmail.com,新浪微博：爱看历史的码农--白硕 在sparkContext的建立过程中(更细致的说是clientActor的preStart回调函数中)，会向master发送RegisterApplication消息master ! RegisterApp ...
sparkscalabigdataHadoop 
baishuo491 评论(0) 有8447人浏览 2013-12-23 16:38

spark源码分析--Master和worker建立连接

原创，转载请注明出处 http://baishuo491.iteye.com/blog/1990242。作者邮箱 vc_java@hotmail.com Spark的master启动后，等待work通过spark://master'ip:7077的url去连接Master.   ...
sparkscala源码分析bigdata大数据 
baishuo491 评论(1) 有8304人浏览 2013-12-16 15:55

Apache Hadoop: Shark与Impala相比(翻译)

内容来自Reynold Xin Berkeley的博士，此人领导了Shark的开发(在加州伯克利分校AMP实验室)。 本文只做翻译，不对两个系统的优劣做评价。 总体上 Shark扩展了Apache Hive，大大加快在内存和磁盘上的查询。而Impala是企业级数据仓库系统, 可以很好地使用Hive/ HDFS，从架构层来说，类似于传统的并行数据库。这两个系统有着很多共同的目标，但也有很大差异。 ...
BigDataNOSQLSharkImpalaHive 
zhousheng29 评论(0) 有5295人浏览 2013-08-22 11:28

IT几个发展趋势总结

1；PC出货量下降百分之七，平板电脑出货挤占了PC的出货。随着穿戴设备发展，职能家电等各种智能的发展。在可以遇见的未来，PC的功能会逐渐弱化，有一天PC会变成专业设备。 2；对消费者电子设备来说，硬盘死期将至。硬盘的今天就是磁带的昨天。传统硬盘，速度和体积已经严重不适合消费者电子领域使用。 3；随着云计算发展。摩尔定义已经不合时宜，云会释放终端性能增长的压力。一个更快的网络和更丰富的应用才是大家急需 ...
云计算IT数据库BIGDATA 
jiezhu2007 评论(0) 有746人浏览 2013-06-05 23:32

BigData 资料杂记

  BigData 综述 Big Data作为一个专有名词成为热点，主要应归功于近年来互联网、云计算、移动和物联网的迅猛发展。无所不在的移动设备、RFID、无线 ...
mapreducenosqlbigdata 
gebinsdyz 评论(0) 有1452人浏览 2013-01-21 22:06

Pig Hive HBase Zookeeper安装和配置

  Pig Hive HBase Zookeeper安装和配置 evernote共享链接: https://www.evernote.com/pub/xuyuantree/20_ hadoop@zqh:~$ cd /usr/local hadoop@zqh:/usr/local$ sudo mkdir pig hadoop@zqh:/usr/local$ cd /home/zq ...
BigData 
zqhxuyuan 评论(0) 有2771人浏览 2012-07-13 17:51

Google三大论文中文版 pdf

作者：JesseZhang （CNZQS|JesseZhang） 博客地址：http://www.cnzqs.com   网上找到的Google三大论文的中文版，包括：bigData、GFS、MapReduce，共享给大家 下载地址：http://t.cn/S4nMUi -----------------------------------------
googlemapreduceGFSbigData 
jessezhang1981 评论(0) 有1909人浏览 2011-11-30 11:43

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics