前言ES集群千万不要一次性重启全部节点,会导致所有分片被置为unassigned_shards,重启后需要大量时间重新分配切片。这期间集群会处于red状态,不能写入任何新数据。这在生产环境中会导致灾难性的后果。综上,ES集群重启要采用轮流重启的方式。重启一个节点,等该节点重新加入并且集群状态变为gr...
标签:elk
15 篇文章ES导入导出工具elasticdump简单实用说明elasticdump是一款开源的es数据导入与导出工具。项目地址:elasticdump安装elasticdump基于npm实现,可以使用npm进行安装,官方也提供docker镜像。npm安装:npm i elasticdumpdocker安装:d...
logstash的date过滤插件,支持从字段里分析日期格式,然后放入@timestamp字段里。filter { date { match => ["create_at", "yyyy-MM-dd HH:mm:ss,SSS", &quo...
背景Flink支持多种部署模式,其中on Yarn模式是目前最成熟也是生产环境使用最多的部署方式。但在Flink on Yarn模式下,Flink任务会在不同的NodeManager节点上执行,所以Flink的执行日志会分散在不同机器上。我们通过FlinkWeb页面和YarnHistory页面是可以...
0 背景在生产环境中,我们先后搭建了两套ES集群,一套用于系统日志的采集,包括k8s组件的日志、网关日志、服务pod日志等;另一套用于业务系统信息的存储,如埋点信息、业务日志等。现在,我们想要统一的将两套集群管理起来,使用统一的Kibana面板对外做数据展示。在网上搜索解决方案,看到了ES的远程集群...
上一页
2/2