电脑知识
少儿编程的调研报告(少儿编程市场分析)
2023-04-12 10:07

24.9K Star,ClickHouse要取代Elasticsearch的地位了?

Elasticsearch大家都不陌生,是一个近实时的分布式搜索分析引擎,以ELK套件而闻名,在日志系统领域热度很高,而ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS),近些年发展也是非常不错,目前在github上有24.9K star,在大数据处理领域应用越来越广泛,并且各大云厂商都有相关的云产品。

最近关于一个日志处理的场景与小伙伴们一起讨论,几个小伙伴提出来ClickHouse相对于Elasticsearch更加优秀,在某些场景下可以替换Elasticsearch。于是做了一下调研:

ClickHouse相对于Elasticsearch的优势有:

1、由于存储架构的差异,Elasticsearch是近实时的,写入的数据会先进入缓存,在适当的时机才刷入磁盘,并且在多副本的同步上,Elasticsearch要求实时同步,写入的请求需要写入多个副本以后才返回,而ClickHouse采用的是直接写磁盘的方式,客户端可以批量写入,并且在副本同步上,ClickHouse是依赖异步的磁盘文件同步,所以整体的写入的吞吐量高于Elasticsearch;

2、ClickHouse在大量数据的的聚合查询分心上面,对于机器资源的利用优于Elasticsearch;

3、硬件资源成本更低,同等场景下,Clickhouse占用的资源更小;

4、Clickhouse的数据压缩比要高于Elasticsearch,相同业务数据占用的磁盘空间ES占用磁盘空间是Clickhouse的3-10倍,平均在6倍;

5、ClickHouse的SQL语法比Elasticsearch的DSL语法更加简单,对于编程和运维人员更加友好。

Elasticsearch相对于ClickHouse的优势有:

1、在全文搜索的场景下表现更好,多种内置模块方便实现搜索的功能,如高亮等;

2、有完善的组件体系,从其他数据源导入到Elasticsearch非常方便;

3、有Kibana和Logstash等组件组成完善的日志系统解决方案,在这种场景下省事、好用、易维护;

4、在高并发查询的情况下,Elasticsearch的性能表现优于ClickHouse;

你在选型时做过两者的比对吗?你是如何考虑的?

#夏日生活打卡季#

发表评论
0评