`
xylong
  • 浏览: 191278 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
社区版块
存档分类
最新评论

Elasticsearch构建企业PB级大数据应用

 
阅读更多

 

今天刚接触到Elasticsearch、在此mark一下,无意路过者,可以一睹为快。

这几个启蒙网站还是很不错的

http://www.qwolf.com/?cat=57

http://es-cn.medcl.net/guide/concepts/scaling-lucene/

https://github.com/medcl/elasticsearch-rtf

 

由于同事刚搞了一个基于Elasticsearch的多维度数据查询+分析的应用,注意,不仅仅是查询,所以在我厂搜索工具不缺少的情况下,这个项目还是启动了,当然目前还在开发阶段,且仅限我部。

 

大致看了下同事搞的应用,基本没有改动或者加强什么,只是提供了和我们具体业务结合的外套,由此可见,Elasticsearch是可以直接拿来用的,无需自己做过多的编码。

 

 

 

分享到:
评论

相关推荐

    BAT是如何承载PB级别大数据的02数据库基本架构与日志的作用

    然后,这些日志数据会被传输到数据存储系统,如HDFS或Elasticsearch,进行进一步分析。日志分析可以帮助企业洞察用户行为模式,优化服务性能,甚至预测未来趋势。 在数据库层面,日志还用于实现数据一致性。例如,...

    Elasticsearch权威指南(中文版)-.pdf

    Elasticsearch 是一个实时分布式搜索和分析引擎,它让你以前所未有的速度处理大数据成为可能。它用于全文搜索、结构化搜索、分析以及将这三者混合使用。 Elasticsearch 的优点在于将全文搜索、分析系统以及分布式...

    基于大数据的应用体系架构设计研究.zip

    在大数据应用体系架构中,数据可视化和报表工具,如Tableau、Power BI或Elasticsearch-Kibana,帮助用户直观地理解数据,支持决策制定。同时,机器学习和人工智能(AI)框架,如TensorFlow、PyTorch和Scikit-learn,...

    实战Elasticsearch、Logstash、Kibana++分布式大数据搜索与日志挖掘及可视化解决方案.pdf

    综上所述,这本书会深入讲解如何利用Elasticsearch、Logstash和Kibana构建一个强大且高效的分布式大数据搜索、日志挖掘和可视化系统,帮助读者掌握这些工具的实际应用技巧,提升在大数据环境下的问题解决能力。

    万亿级大数据平台的建设实践.pptx

    【万亿级大数据平台的建设实践】主要探讨了在构建一个能够处理海量数据的平台时所面临的挑战以及相应的解决方案。这个平台每天需要处理超过2000亿条数据,要求查询延迟低于30秒,同时处理峰值超过200万条/秒。面对...

    Blog.Core 5.0 开源框架 换掉ES 使用elasticsearch 。

    在大数据背景下,Elasticsearch能够高效地处理PB级别的数据,支持水平扩展,非常适合处理海量日志、监控数据和各种复杂搜索需求。在Blog.Core 5.0中,这一特性使得开发者能够构建一个可以处理大量博客文章和用户查询...

    阿里云大数据产品及解决方案

    8. **Elasticsearch服务**: 阿里云Elasticsearch服务提供高性能的全文检索和日志分析能力,适用于网站搜索、运营分析、日志分析等多种场景。 9. **存储与备份服务**: 包括OSS(对象存储服务)、TableStore(NoSQL...

    大数据文档整理.zip

    以上技术共同构成了大数据生态的一部分,它们各自负责不同的数据处理环节,如数据采集、存储、计算、分析和展示,为企业的大数据应用提供了全面的支持。了解并掌握这些技术,对于从事大数据领域的专业人士来说至关...

    实战Elasticsearch、Logstash、Kibana 分布式大数据搜索与日志挖掘及可视化解决方案

    Elasticsearch还具备高度可扩展的特性,可以轻松地水平扩展至数百台服务器,处理PB级别的结构化或非结构化数据。 2. Logstash:Logstash是与Elasticsearch和Kibana集成使用的日志收集引擎。它可以收集、处理和转发...

    elasticsearch-7.17.7-windows-x86-64.zip

    9. **X-Pack插件**:Elastic公司提供的X-Pack插件,包括监控、警报、安全管理、机器学习等功能,为Elasticsearch提供了更全面的企业级特性。 10. **安装与配置**:解压"elasticsearch-7.17.7"文件后,用户需按照...

    elasticsearch-8.6.2-windows-x86-64.zip

    首先,Elasticsearch 8.6.2 版本在索引构建和查询执行方面进行了大量优化,提升了整体的搜索效率。这包括对底层Lucene库的升级,使得搜索和分析的速度更快。对于大型数据集,这些改进意味着更快的响应时间和更好的...

    elasticsearch基础入门.pptx

    由于其易于使用、分布式特性以及实时性能,Elasticsearch在现代大数据应用中占据着重要地位。 ES的优势在于它的黑盒化设计,降低了使用门槛。这意味着开发者无需深入了解底层的搜索引擎技术,就能轻松地集成到自己...

    elasticsearch-5.5.1.zip

    Elasticsearch 5.5.1 是一个强大的开源搜索引擎,专为大数据环境...总的来说,Elasticsearch 5.5.1 是大数据环境中不可或缺的一部分,它以其高效、灵活和可扩展的特性,为企业级的数据搜索和分析提供了强大的解决方案。

    基于Kafka与Spark的实时大数据质量监控平台

    本文将介绍微软ASG大数据团队如何利用Kafka、Spark以及Elasticsearch来解决这个问题。微软的ASG(应用与服务集团)包含Bing,、Office,、Skype。每天产生多达5 PB以上数据,如何构建一个高扩展性的dataaudit服务来保证...

    大数据十大开源的大数据技术.rar

    与Logstash和Kibana一起,构成ELK(Elasticsearch, Logstash, Kibana)日志分析栈,广泛应用于日志管理和监控。 6. Cassandra:Cassandra是一款高度可扩展的分布式NoSQL数据库,设计用于处理大量数据分布于多个...

    PyPI 官网下载 | oceandb-elasticsearch-driver-0.1.4.tar.gz

    通过这个驱动,用户可以享受到OceanDB的数据持久性和Elasticsearch的高性能搜索特性,这对于构建大规模、高并发的搜索应用来说尤其有价值。 在oceandb-elasticsearch-driver-0.1.4.tar.gz的压缩包中,包含了驱动...

    elasticsearch-8.0.1-darwin-aarch64.tar.gz

    总的来说,Elasticsearch 8.0.1在大数据和全文检索领域展现了强大的实力,其分布式架构、实时分析和丰富的功能集使其成为现代企业的首选工具。对于开发者而言,理解并掌握Elasticsearch的使用和配置,不仅能提升工作...

Global site tag (gtag.js) - Google Analytics