- 浏览: 162186 次
- 来自: ...
文章分类
- 全部博客 (151)
- Liferay.in.Action (3)
- 集群 (12)
- web (5)
- jna (2)
- 数据库 (7)
- Terracotta (11)
- xml (1)
- Hibernate (3)
- Jdbc (2)
- DDD (10)
- nosql (7)
- 云存储 (3)
- 云产品 (7)
- 云计算 (26)
- Hadoop (11)
- 虚拟化 (5)
- REST (3)
- 程序人生 (11)
- google (2)
- 安全应用 (5)
- LDAP (0)
- 安全技术 (5)
- android (4)
- 网络妙语 (1)
- HTML5 (1)
- 搜索引擎 (1)
- 架构设计 (5)
- redis (3)
- Cassandra (2)
最新评论
-
liwanfeng:
情况是这样的,你的文件我觉得还是比较小,我现在需要处理的XML ...
dom4j处理大文件
原文 http://www.iteye.com/news/23045
微软已经展开了他们的“大数据”蓝图,其中担当主要角色的就是Apache Hadoop。
Hadoop是一个分布式系统基础架构,由Apache基金会开发。它是一个能够对大量数据进行分布式处理的软件框架。用户可以在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力高速运算和存储。
在12日西雅图召开的微软PASS(Professional Association for SQL Server,SQL Server专家协会) Summit会议上,微软公司副总裁Ted Kumert描绘了这一蓝图。Ted Kumert表示,该蓝图“旨在帮助用户管理及分析任何大小、任何位置(包括固定地址或在私有及公共云上)的所有数据”。
Ted Kunment同时透露,下一版本的SQL Server (代号Denali)已正式命名为SQL Server 2012。在Kunment提供路线图中的一项计划就是,将SQL Server 2012并入Hadoop分布式计算平台,以及将Hadoop引入Windows Server和Azure(微软的云服务)。
也就是说,运行SQL Server的微软客户将通过Hadoop的引入获得真正的大数据处理能力。微软此前发布了早期代码,让客户可以将这个Java架构接入到SQL Server 2008 R2、SQL Server Parallel Data Warehouse以及新的SQL Server 2012数据库。SQL Server 2012将在明年上半年推出。
微软的开放源代码社交资深总监Gianugo在博客中写道:
我们一直致力提供一个简单的下载、安装及配置Hadoop相关技术的体验,包括HDFS、Hive以及Pig,以帮助企业接受Hadoop。
对于开发人员,我们则将在微软开发者工具中集成该技术,同时我们将为大数据投资JavaScript,打造它的第一流语言位置。最终将实现使用JavaScript来编写高性能的Map/Reduce作业。没错,Javascript Map/Reduce。
今天八月的Data Warehousing Institute会议上,微软曾推出了一个基于Sqoop(SQL-to-Hadoop,一个在Hadoop和关系型数据库间进行数据导入导出工具)的SQL Server Hadoop连接器的预览版本。目前该连接器也正式发布了。
发表评论
-
Hadoop学习笔记之在Eclipse中远程调试Hadoop+0700错误的处理
2012-08-01 00:15 0原文 http://www.blogjava.net/y ... -
数据网格 Data Grid和NoSQL相同和区别-异同
2012-07-31 15:21 0原文 http://www.jdon.com/4372 ... -
Google在新的内容索引系统中放弃MapReduce
2012-07-31 10:30 879原文 http://www.hadoopor.co ... -
Hadoop分布式文件系统:架构和设计要点
2012-07-31 10:07 811摘自 http://www.blogjava.net/ ... -
淘宝数据魔方技术架构解析
2012-07-31 10:09 791原文 http://www.programmer.com.c ... -
Apache Hadoop 2.0 Alpha 版发布
2012-07-30 16:10 1897原文 http://www.iteye.com/news/25 ... -
MongoDB Hadoop Connector 1.0 正式版发布
2012-07-30 16:01 925原文 http://www.iteye.com/news/24 ... -
VMware发布开源项目Serengeti,支持云中部署Apache Hadoop
2012-07-30 15:55 815原文 http://www.iteye.com/news/25 ... -
NOSQL数据库大比拼
2012-07-24 14:46 816原文 http://www.jdon.com/3971 ... -
hadoop的1TB排序
2012-07-23 11:18 704主题:hadoop的1TB排序 作者 yunsamzhang ... -
NoSQL数据库探讨之一 - 为什么要用非关系数据库?
2012-07-23 10:50 625NoSQL数据库探讨之一 - ... -
mongodb 应用场景
2012-07-23 10:29 153024 Use Cases24.1 适合场景 Archivin ... -
Hadoop概念及其用法专家讲解
2010-11-08 22:12 1239原文 http://developer.51cto.com/a ... -
开源框架Hadoop实现分布式计算
2010-11-08 22:04 896原文 http://developer.51cto ... -
用 Linux 和 Apache Hadoop 进行云计算
2010-10-31 19:53 1015原文 http://www.ibm.com/dev ... -
NoSQL数据库笔谈
2010-10-27 22:56 1238原著作者 颜开 http://www.yankay.com/w ... -
Mongo和Couch对比
2010-10-25 22:38 1098原文 http://www.jdon.com/jive ...
相关推荐
【大数据概念】 大数据是指那些在传统数据处理技术下难以捕获、管理...Hadoop作为大数据生态中的核心组件,为处理和分析大数据提供了强大支撑。随着技术的进步和应用场景的扩展,大数据将继续引领未来信息技术的发展。
大数据技术之Hadoop-HA
Hadoop是大数据技术中最重要的框架之一,是学习大数据必备的第一课,在Hadoop平台之上,可以更容易地开发和运行其他处理大规模数据的框架。尚硅谷Hadoop视频教程再次重磅升级!以企业实际生产环境为背景,增加了更...
大数据云计算技术 Hadoop集群监控与Hive高可用-暴风影音技术团队分享(共17页).ppt 大数据云计算技术 Hadoop应用浅析(共16页).pptx 大数据云计算技术 Hadoop运维杂记(共21页).pptx 大数据云计算技术 暴风集团...
### 理解大数据:企业级Hadoop与流数据分析 #### 大数据概述 随着信息技术的飞速发展,数据量呈爆炸式增长,这催生了“大数据”这一概念。大数据通常指的是那些无法用传统数据库软件工具有效处理的大型数据集。...
Hadoop大数据资料集锦Hadoop大数据资料集锦Hadoop大数据资料集锦Hadoop大数据资料集锦
大数据基础入门到企业实战 包含hadoop生态圈,数据挖掘数学基础,java基础,linux基础,spark
【尚硅谷大数据技术之Hadoop】是一门深入探讨大数据处理技术的课程,主要聚焦于开源框架Hadoop。...在大数据领域,Hadoop是不可或缺的一部分,深入学习Hadoop对于任何想要在这个领域发展的人来说都是至关重要的。
### 大数据技术之Hadoop(入门)知识点详解 #### 第1章 大数据概论 ##### 1.1 大数据概念 大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。这些数据具有体量巨大、来源多样化、格式...
标题中的“大数据教程之搭建Hadoop集群.zip_大数据环境搭建hadoop”暗示了这是一个关于如何在大数据环境中构建Hadoop集群的教程。Hadoop是Apache软件基金会的一个开源项目,主要用于处理和存储海量数据,其分布式...
大数据高级-hadoop部署
在大数据领域,Hadoop 2.0 是一个关键的分布式计算框架,它为海量数据处理提供了强大支持。本文将深入探讨Hadoop 2.0的主要组件、架构、以及其相较于Hadoop 1.0的改进。 一、Hadoop 2.0概述 Hadoop 2.0是Apache软件...
大数据之Hadoop学习教程+笔记合计_超详细完整.zip
大数据技术之Hadoop(MapReduce),详细讲解hadoop中MapReduce
大数据三、Hadoop-MapReduce
【标题】"hadoop大数据课程设计"涉及到的核心技术是Hadoop,这是一个开源的分布式计算框架,主要用于处理和存储海量数据。Hadoop的核心组件包括HDFS(Hadoop Distributed File System)和MapReduce,前者提供高容错...
大数据教程之hadoop教程.zip
《Hadoop大数据开发实战》教学教案—01初识Hadoop的内容主要涵盖了大数据的基本概念、核心需求以及Hadoop框架的初步介绍。在这个章节中,学习者将了解到大数据在当今信息化社会中的重要地位,并掌握大数据的基本特征...
如HBase(一个基于HDFS的分布式NoSQL数据库)、Hive(提供数据仓库工具,用于查询和管理大数据)、Pig(高级数据分析语言)和Spark(一种快速、通用且可扩展的大数据处理框架,它可以与Hadoop无缝集成)。...