Elasticsearch中怎么实现索引增量统计功能

发布时间:2021-08-09 13:47:58 作者:Leah
来源:亿速云 阅读:287

这期内容当中小编将会给大家带来有关Elasticsearch中怎么实现索引增量统计功能,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。

1、问题分解

1.1 ES集群的数据量统计

ES自带的命令行统计举例:

 curl 'localhost:9200/_cat/indices?v'

1.2 如何实现增量?

简化思路: 
1)每天的固定时间,如早晨00:00统计一次当天的数据量,形成日志文件存储如:20180228-00:00.log 
2)20180228的增量为:20180229-00:00.log的数据值-20180228-00:00.log的数据量。(下一天-前一天)

1.3 如何实现统计

简化思路: 
1)shell脚本获取每天统计的数据量 
2)Excel公式简单计算增量

1.4 如何实现定时邮件统计

简化思路: 
1)java + 邮件程序 + 读取脚本实现。 
2)crontab实现定时任务处理。

2、具体实现

2.1 单日数据量统计

Elasticsearch中怎么实现索引增量统计功能

返回结果如下: 
Elasticsearch中怎么实现索引增量统计功能

2.2 Java读取Shell脚本

Elasticsearch中怎么实现索引增量统计功能

2.3 增量数据统计

步骤1:单日数据统计。 Elasticsearch中怎么实现索引增量统计功能步骤2:增量数据统计。 Elasticsearch中怎么实现索引增量统计功能步骤1,步骤2数据可以Excel统计得出。 

其中单日数据的拷贝shell脚本如下:

Elasticsearch中怎么实现索引增量统计功能

步骤3:Excel生成图表。 
Elasticsearch中怎么实现索引增量统计功能

上述就是小编为大家分享的Elasticsearch中怎么实现索引增量统计功能了,如果刚好有类似的疑惑,不妨参照上述分析进行理解。如果想知道更多相关知识,欢迎关注亿速云行业资讯频道。

推荐阅读:
  1. Elasticsearch 索引文档
  2. Mongo-connector集成MongoDB到Solr实现增量索引

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

elasticsearch

上一篇:php怎么计算整个mysql数据库大小

下一篇:python爬虫时提取数据后跟踪到下一个链接报错怎么办

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》