`
tongsh6
  • 浏览: 2717 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

大数据工具清单

阅读更多

• MongoDB-一种非常流行的、跨平台、面向document的数据库。

• Elasticsearch-专为云计算设计的分布式REST风格的搜索引擎。

• Cassandra-一个开源的分布式数据库管理系统。最初是Facebook设计和开发的,部署在大量商用服务器上来处理大量的数据。高可用,无单点故障。

• Redis-开源的(BSD)内存数据结构存储、内存库、缓存、消息代理。

• Hazelcast-基于Java开发的内存数据网格。

• EHCache-广泛使用的开源Java分布式缓存、J2ee、轻量级容器。

• Hadoop-用java开发的开源分布式大数据框架,用来处理非常大规模数据,hadoop是集群化部署。

• Solr-使用java开发的开源企业级搜索平台。最初归属在Apache Lucene项目中。

• Spark-ASF中最活跃的项目,是一个开源的集群化计算框架。

• Memcached–通用分布式缓存系统。

• Apache Hive-在Hadoop支持类SQL封装,将SQL语句变成mr程序来执行。

• Apache Kafka–高吞吐量、分布式、消息发布-订阅系统,最早是Linkin开发的。

• Akka–Java开发的用来建造高并发,基于jvm弹性消息驱动的应用。

• Hbase-根据Google的BigTable论文开发的开源分布式非关系型数据库。开发语言是Java,用HDFS作为底层存储。

• Neo4j–用Java实现的开源图形数据库。

• CouchBase–面向Document的开源分布式NoSQL数据库,并且针对交互应用做过优化。

• Apache Storm–开源分布式实时计算系统。

• CouchDB–使用json来存储数据的开放源码面向文档的NoSQL数据库。

• Oracle Coherence–内存数据网格解决方案,使企业通过提供快速访问热数据来预测关键任务应用的规模。

• Titan–可扩展的图形数据库,针对集群存储和查询数千亿的图形数据做过优化。

• 亚马逊 DynamoDB – 一个快速、灵活NoSQL数据库,能够应对所有规模应用程序的需求,包括持久化、毫秒级延迟。

• Amazon Kinesis–AWS上的实时数据计算平台。

• Datomic–提供完整事务支持,云计算,分布式的数据库,开发语言用Clojure。

 

分享到:
评论

相关推荐

    智慧文旅大数据模型清单.pdf

    智慧文旅大数据模型是现代旅游业发展的重要工具,旨在利用先进的信息技术,如大数据分析、云计算和物联网,来提升旅游行业的管理效率和服务质量。智慧文旅大数据模型的建设主要包括以下几个关键方面: 1. **集约化...

    大数据平台一般功能

    ### 大数据平台一般功能详解 #### 一、租户管理 在大数据平台中,**租户管理**是一项核心功能,旨在确保不同组织或部门之间的数据隔离性和安全性。这一功能通常包括以下几个方面: 1. **租户创建**:允许管理员为...

    通用软件和工具清单.docx

    【通用软件和工具清单.docx】是一份针对全国职业院校技能大赛改革试点赛云计算赛项的软件和工具列表,由国基北盛(南京)科技发展有限公司编制。这份清单主要包含了一系列必要的工具,以满足参赛者在PC端进行云计算...

    FineReport报表工具功能清单

    【FineReport报表工具功能清单】 FineReport是一款由帆软公司开发的专业报表工具,它专为满足企业级报表设计和数据分析需求而设计。该工具凭借其强大的功能和易用性,在Java报表领域享有很高的声誉。在深入探讨...

    工业大数据白皮书V0.2.pdf

    - **标准明细表**:列出了具体的工业大数据标准清单,为相关企业提供了明确的指导。 #### 6. 我国工业大数据工作重点建议 - **加强核心基础技术研究**:加大对关键技术的研发投入,如高性能计算、数据分析算法等。...

    大数据实验报告对应我的第二篇博客

    除了Hadoop,还需要安装其他工具以增强大数据平台的功能。 (1)安装关系型数据库MySQL MySQL是一种流行的关系型数据库管理系统,可用于存储元数据或其他结构化数据。 (2)安装列族数据库HBase HBase是一个非关系...

    大数据平台规划方案.pptx

    大数据,作为数据量极其庞大的集合,已经超出了传统数据处理工具的能力范围,需要新的技术手段来实现有效的管理和利用。大数据处理技术的核心在于高速数据采集、分析和挖掘,从而在多样化数据源中快速提取有价值的...

    大数据智慧旅游.pptx

    将旅游一卡通作为收集消费清单和旅游消费轨迹数据的工具;将旅游手机应用作为游客信息关注行为、旅行轨迹数据采集和满意度调研的平台;以及将旅游资讯网转变为高效的信息采集和网络营销评估工具。此外,旅游呼叫中心...

    工程管理大数据平台建设综合解决方案.pptx

    工程管理大数据平台是一种基于现代信息技术...综上所述,工程管理大数据平台是现代工程管理的重要工具,它整合了多种信息技术,实现了从信息管理、计划编制到质量管理的全方位数字化,从而提升了工程管理的效率和质量。

    航天金税单张或多张发票免费导入工具

    对于企业来说,掌握类似的数据处理技巧是至关重要的,特别是在大数据时代,高效的数据管理和导入能力能够显著提升企业的运营效率。此外,这也提醒我们在选用第三方软件时,应关注其更新和支持情况,以确保软件的持续...

    大数据平台项目调研问卷(学习模板)

    【大数据平台项目调研问卷(学习模板)】是一个用于评估和规划大数据系统项目的工具,旨在深入了解组织内部的信息化建设现状,特别是涉及数据信息的细节和项目需求。这份问卷着重于部门结构与职能、业务数据状况以及...

    大数据应用案例分析模板范本.pdf

    例如,一家零售商通过大数据分析发现一名少女的购物清单中出现了一些孕妇用品,从而推断出她可能怀孕,并向她发送了婴儿用品的优惠券,这显示了大数据预测和理解消费者行为的能力。 在网络安全方面,大数据分析同样...

    --社会综治大数据云平台建设方案(带主要清单配置).docx

    3.1.3 基层诉求:基层治理单位需要更便捷的数据获取和分析工具,以解决日常工作中遇到的实际问题。 综上所述,社会综治大数据云平台建设方案是一项结合政策导向、现实需求和技术创新的重要工程。通过构建这样的平台...

    兖矿集团大数据平台建设.pdf

    依据问题清单对集团各业务部门流程进行优化,在此基础上,建设大数据软件平台,利用大数据技术对重点流程进行分析,为兖矿集团公司改革提供支持。 主要内容 大数据平台建设主要按照信息化高阶诊断与业务流程优化、...

    数据安全管理解决方案之大数据脱敏项目建设方案.pdf

    点的日益凸显,大数据已成为企业和组织获取竞争优势的关键资源。然而,随之而来的是数据安全问题的挑战,特别是涉及敏感信息的处理。本方案旨在探讨如何在大数据环境下实施有效的数据安全管理,尤其是通过大数据脱敏...

    大数据平台项目调研报告(示例)(学习模板)

    此外,还整理了业务系统列表和本部门数据资源清单,以便于理解现有的技术基础设施和数据资产分布,为大数据平台的设计和建设提供依据。 综上所述,大数据平台项目需兼顾市场需求的广泛性和个性化,通过深度调研了解...

    气象大数据云平台的监控系统设计.pdf

    随着大数据时代的到来,气象数据的收集、分析与应用成为支持气象预报服务业务的重要基础。本文介绍了一个监控系统的设计,该系统针对内蒙古气象部门的核心信息化支撑平台——气象大数据云平台(天擎)。目的是确保...

    《大数据时代》读后感.docx

    例如,通过购物清单可以推断出顾客可能的生活状态,而无需了解其具体原因。 其次,大数据强调数据的混杂性而非精确性。在过去,我们追求精确的数据以确保决策的准确性,但现在,大数据的包容性使得我们可以处理更...

    (南阳理工)大数据实验报告02.docx

    1. 数据库、表清单:在数据导入阶段,首先需要规划和创建所需的数据库和表,以满足数据分析的需求。 2. 数据对象的定义: - 创建数据库:根据业务需求创建不同的数据库,每个数据库包含一组相关的表。 - 创建数据...

Global site tag (gtag.js) - Google Analytics