大数据能力以云服务的形式提供出来非常普遍,国际大厂aws,azure,国内阿里,华为都有类似服务。今天讨论下大数据云服务的几种模式。
第一种,最典型的叫集群托管模式
最典型的服务就是aws的emr服务,可以访问:https://aws.amazon.com/cn/elasticmapreduce/。这种模式下云服务主要解决的是大数据组件集群的安装,监控,运维管理等,降低技术人员对大数据集群底层的技术知识门槛。云服务资源按需申请,加快了业务部署的时间,同时将一次性的采购成本转为按需使用的费用,降低了企业运营的风险。
这种模式下面,核心是减少了运维的负担。但是业务人员还需要根据不同的业务要求,去选用不同的组件,以及组合各种组件之间的使用。各个组件类似电脑城里面的配件,能不能有一种更彻底点方法,提供一个品牌机给客户呢。
第二种,server-less模式
server-less这个词来源于aws的lambda服务(https://aws.amazon.com/cn/lambda/),通过 AWS Lambda,无需配置或管理服务器即可运行代码。您只需按消耗的计算时间付费 – 代码未运行时不产生费用。借助 Lambda,您几乎可以为任何类型的应用程序或后端服务运行代码,而且全部无需管理。只需上传您的代码,Lambda 会处理运行和扩展高可用性代码所需的一切工作。您可以将您的代码设置为自动从其他 AWS 服务触发,或者直接从任何 Web 或移动应用程序调用。
这个核心是客户不用关心服务器,只需要管自己的代码即可。大数据领域也能提供类似理念的服务。
这种模式最典型的是azure的data-lake。可以访问https://azure.microsoft.com/zh-cn/solutions/data-lake/。客户不用再关心各个独立的组件。Azure Data Lake 包括了所有所需的功能,使开发人员、数据专家和分析师可以更轻松地存储任何大小、形状和速度的数据以及跨平台和语言进行各种类型的处理和分析。它消除了插入和存储所有数据的复杂性,同时启动更快,可与批量、流式、交互式分析一起运行。
这种服务底层是构建在基础的托管集群上,把各种服务组合在一起,提供统一的访问。服务本身提供自动弹性伸缩的能力,数据自动搬迁,自动保障客户的SLA。
第三种,大数据saas服务
品牌机相对电脑散件肯定更易用,但是对完全没有电脑知识的人也很难用,而去很多用电脑的人核心是要使用word之类的office软件,更不关心电脑本身其他更多的功能。所以大数据最重要能根据行业提供saas类的服务或者应用。阿里云最近推出了一个郡县图治,有点意思:
总结一下
讲到最后,客户的层次,和处于业务的情况是不一样的,所以需求也是多种的,因此这三种服务模式都有广阔的空间。第一种模式想对而已,已经陷入同质化竞争,创新的空间有限,未来更看好第二种,第三种模式的发展。
微信扫一扫
关注该公众号
相关推荐
通过对云南省道路运输业务系统和数据资源现状的深入分析,并结合不同大数据框架的优点,设计了一种融合架构的运政大数据云服务平台框架。该框架不仅能够应对海量道路运输数据的挑战,还能够满足高效、便捷、智能化的...
通过上述内容,我们可以总结出,分布式学术搜索引擎的研制及其在大数据领域应用的研究,涵盖了对现有信息检索系统的重新定义、关键技术研发、系统架构优化以及云服务模式下的大数据应用分析。这一研究不但提升了搜索...
- **源与流**:大数据的流动路径可以概括为数据入口、数据融合处理和数据应用三个阶段。 - **数据入口**:主要包括大交易数据和大交互数据两个方面,涉及企业、消费者、供应链等多个领域。 - **数据融合处理**:...
云服务模式不仅能够提高GIS的数据处理能力,还能够促进地理信息的共享与服务化,特别是在海洋基础地理信息领域。海洋基础地理信息云服务,是指利用云计算技术,将海洋地理信息数据通过网络提供给用户的一种服务模式...
除此之外,云存储技术也逐渐成为空间大数据存储的重要选择,云服务提供商如阿里云、亚马逊AWS等可以提供大规模、低成本的存储解决方案,满足企业和研究机构对空间大数据存储的需求。 空间大数据的处理与分析是...
同时,工业大数据也促进了工业云服务模式的发展和完善。 #### 三、工业大数据发展现状及趋势分析 **3.1 全球主要国家工业大数据相关战略部署** - **美国先进制造业战略**: 美国政府高度重视工业大数据在先进制造...
4. **大数据产业集群形成**:面向企业的大数据服务集群正在形成,通过云端大数据集聚为前提条件,以行业云服务平台为依托,实现企业间核心竞争力的共享。 #### 二、中国大数据市场发展模式 ##### 2.1 市场发展阶段...
MapReduce是一种典型的并行计算框架,它简化了开发者在分布式环境下的编程难度。 3. **大数据分析方法与算法**:数据的价值在于其背后隐藏的信息。因此,如何从海量数据中提取有用的信息成为了关键。这需要借助于...
超算云服务作为新兴的服务模式,通过云计算技术提供了灵活、可扩展的高性能计算资源,降低了企业获取超算能力的门槛。这种模式对于那些需要处理大量数据但又不具备自建超算设施能力的企业尤其具有吸引力。随着5G、...
云服务的分类按照服务模式主要分为三种:SaaS、PaaS、IaaS。SaaS服务模式面向企业或个人用户提供软件应用,如管理型应用、业务型应用和行业型应用,这些应用多为通用性较强的日常业务。PaaS面向开发者提供开发平台和...
- **云平台集成**: 如AWS EC2,便于访问Amazon S3等云服务。 - **存储系统支持**: 支持多种分布式存储系统,如HDFS和S3。 #### 五、HDFS读写数据的过程 **读取数据** 1. **元数据查询**: 向NameNode查询文件块的...
大数据的意义在于提供了一种新的安全思路和解决办法,而不仅仅是一种工具,单纯的海量数据就是没有意义的。如果大数据领域运用于当,可以十分便捷地与安全领域进行结合,通过对数据分析所得出的结论反映出安全领域所...
- 应用成熟期(2012-2013):典型大数据产品和服务上线,互联网企业率先应用。 - 高速发展期(2014-):市场认可度提高,新产品和服务需求稳定,细分市场竞争加剧。 5. **大数据服务模式**: - 数据存储租用:...
大数据的意义在于提供了一种新的安全思路和解决办法,而不仅仅是一种工具,单纯的海量数据是没有意义的。如果大数据领域运用得当,可以十分便捷地和安全领域进行结合,通过对数据分析所得出的结论反映出安全领域所...
IDC更多人工智能及大数据研究相关报告:中国人工智能软件及应用市场半年度研究报告-2020H2(2021年6月)中国AI云服务市场半年度研究报告-2020H2(2021年6月)中国大数据市场半年度研究报告-2020 (2021年6月)
### 典型的大数据应用场景 大数据的应用场景广泛,几乎涵盖了所有行业。例如,在媒体娱乐领域,大数据可以用来分析观众对广告的反应,优化广告效果;在教育研究中,通过分析实验传感器数据,提升研究效率;在医疗...
而对于茶叶行业来说,大数据不仅仅是一种技术,更是一种全新的运营思维和商业模式。 首先,大数据时代为茶叶行业带来的显著变化在于销售渠道的网络化。在大数据到来之前,消费者购买茶叶主要依赖于线下实体店,这...
智慧公路大数据运营中心的整体解决方案是针对当前公路行业面临的数据爆炸性增长、精细化管理需求以及互联网应用模式成熟的背景下提出的。该方案旨在构建一个高效、智能的运营中心,通过整合和利用大数据,实现公路...
文章通过对以上三种推荐方法的核心思想和算法流程的详细分析,为解决云服务环境下“信息过载”问题提供了一种有效方案。最终,文章对全文进行了总结分析,提出了未来研究的方向和可能的改进方法。 在分析推荐系统时...
"云计算与大数据技术题库1-7章节习题参考答案含原题.docx" 本文将对云计算的概念、能力类型、服务类型、典型部署模式、基本特征、发展现状与发展特点进行详细的解释和分析。 云计算的定义有多种说法,但云计算是一...