1秒10亿数据! 阿里云日志服务再次升级

摘要： 日前，在“2017杭州·云栖大会”上阿里云宣布，日志服务与Splunk打通合作，同时面向亿级实时日志分析功能上线。兼容SQL92标准与JDBC协议，集中解决各类环境日志一站式需求，包括采集、存储、投递与查询分析等，将日志分析提升到全新高度，达到国内领先水平。

日常生活中人和物的活动会产生大量的数据，而日志是一种常用记录这类活动的载体。通过日志处理，分析可以帮助我们通过大数据找到背后的运作规律，做到业务的智能运维和运营。日志分析最终是拿到结果，但过程中往往需要通过软件（例如kafka、ELK、Flume）等组合搭建日志处理系统，这给使用日志分析工作带来很多问题和困扰。而阿里云日志服务是一种无托管的方案，无需用户关心琐碎的数据采集、扩容、维护、错误处理等工作，将精力集中投入在“分析”结果上。

在国外云厂商方案中，一般需要通过几个产品连接+组合才能搭建日志处理方案。就如要开一辆车，得购买几个组件，在一些连接点上还需要写一些处理程序才能运行起来，在使用过程中需要到不同产品中关注水位，以确保服务可用性。阿里云日志服务提供的是完整的解决方案，整体易用性更佳。

据了解，阿里云日志服务商业化一年内大约推出30+新功能，同时也将日志分析提升到新的高度，具备以下几个特点：1. 快：传统方案从数据产生到拿到结果往往最快需要接近分钟。今天日志服务下的LogAnalytics功能够在1秒内，完成数据采集 + 存储 + 10亿查询 + 1亿计算所有功能，这就意味着日志分析实时性达到前所未有速度。2. 强：传统方案一般只支持有限的查询+聚合分析。但LogAnaltyics完整支持SQL 92语法，可以像分析报表数据一样分析你的日志。3. 广：除了与Docker、Storm、Spark Streaming、Hadoop、Hive、Presto + 阿里云大数据对接外，还支持了Grafana等著名开源数据可视化插件，方便与上层业务系统集成。4. 省：费用接近自建10%，就是这么任性。具体情况可以参见自建费用对比，https://help.aliyun.com/document_detail/59070.html。

阿里云日志服务负责人介绍，目前主要有三个功能：LogHub，LogShipper，LogAnalytics。其中LogHub使用成本与其他方案相比，能节省60%以上时间和费用，极大节省了日志系统的投入。而目前阿里云提供的LogShipper功能也可以免费使用，能为用户提供海量、高并发、高性价比的日志处理系统。如果采集公网上用户一天10 GB压缩后的数据，如果通过自建方案需要16元/天，而使用LogHub 只需要2元，大约为前者10%，且不需要任何运维上的投入。LogAnalytics在同样规模，性能条件下，价格是自建方案10%。例如一天写入50GB数据（其中27GB 为实际的内容），保存90天，平均一个月的耗费对比如下图：

 

同样性能，使用LogSearch/Analytics与ELK（SSD）费用比为 13.6%。

阿里云日志产品使用起来也非常简单，主要分为两个步骤：一是接入日志数据；二是在控制台配置并进行分析。之后无论是对接实时计算，还是数仓，或仪表盘还是报警都非常方便。

​

据了解，该产品适合对日志处理、分析有需求的用户场景。例如电子商务，媒体直播，游戏，广告，IoT和App开发用户。这些场景上都有大量用户、设备产生的数据需要进行实时分析。而使用阿里云日志产品，则能更快更省更好地处理分析。

原文链接：https://yq.aliyun.com/articles/223453