longxiping
- 浏览: 6712 次
- 性别:
-
最新评论
文章列表
问题：
mac系统为10.9，安装mysql server，python为2.7，在访问mysql时，报：Traceback (most recent call last):
File "tests/test_MySQLdb_capabilities.py", line 4, in <module>import MySQLdbFile "/Library/Python/2.7/site-packages/MySQL_python-1.2.4b4-py2.7-macosx-10.8-intel.egg/MySQLdb/init.py", l ...
基于Hadoop2.2.0安装spark1.0
转至元数据结尾
Created by spark.long 昨天7:33 上午
转至元数据起始
最开始关注Spark，是在csdn首页上看到一篇文件《Spark核心开发者：性能超Hadoop百倍，算法实现仅有其1/10或1/100》的，看着标题确实感觉比较年逼的。后来稍微研究了一下，其实发现，这个描述有点问题。Spark是一个基于内存的纯计算框架，而hadoop是包括计算框架的mapreduce和分布式存储hdfs，所以应该描述为Spark性能超Hadoop的mapreduce计算性能百倍。当然，这有点扣字眼了。
Spark只是一个计算框架，它本身并不包括对数据的存储，就像跟实时分布式系统Storm是一样的。它是一个可以基于hadoop的hdfs，也可以基于hbase ...