es 配置日志管理策略

1、准备模板配置

index_patterns: 匹配索引
settings: 索引相关配置
mappings: 字段配置（不配置这个，logstash 送进来的数据不会生成文档）

小技巧：mappings 可以从旧的索引里面直接copy一份

2、创建索引管理策略

3、将索引模板绑定至索引管理策略

PUT _template/bdo-pm-log-template
{"index_patterns": ["bdo-pm-log*"],"settings" : {"number_of_shards" : "3","number_of_replicas" : "1"},"mappings" : {"doc" : {"properties" : {"@timestamp" : {"type" : "date"},"@version" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"APP_NAME" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"BOOT_SERVER" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"HOSTNAME" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"caller" : {"properties" : {"class" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"file" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"line" : {"type" : "long"},"method" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}}}},"geoip" : {"properties" : {"city_name" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"continent_code" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"country_code2" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"country_code3" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"country_name" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"ip" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"latitude" : {"type" : "float"},"location" : {"properties" : {"lat" : {"type" : "float"},"lon" : {"type" : "float"}}},"longitude" : {"type" : "float"},"region_code" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"region_name" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"timezone" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}}}},"ip" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"level" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"levelVal" : {"type" : "long"},"logger" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"message" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"stacktrace" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"tags" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"thread" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}},"traceId" : {"type" : "text","fields" : {"keyword" : {"type" : "keyword","ignore_above" : 256}}}}}}
}

es 配置日志管理策略相关推荐

SkeyeVSS综合安防监控Onvif、RTSP、GB28181视频云无插件直播点播解决方案之系统参数配置日志管理
SkeyeVSS综合安防监控Onvif.RTSP.GB28181视频云无插件直播点播解决方案之系统参数配置日志管理 1.系统参数配置 SkeyeVSS系统参数配置页面如下图所示: 其中包括: 服务器名 ...
Nginx其他配置——日志管理、网页压缩、访问控制
一.Nginx日志切割在生产环境中每一天的日志文件都是要打包备份的,如果每天都手动的去截取日志,重命名这样就很不方便,所以我们编写一个脚本并建立一个定时任务来进行这些工作 1.编辑脚本文件,加权限 ...
Linux日志管理（日志配置、日志轮替）
Linux日志管理对运维人员来说,无论管理什么系统,对日志文件的监控.调用.管理都是其中重要的一部分.服务器问题的解决都是从查看系统(错误)日志开始的.本篇文章,我们就来了解一下Linux系统中 ...
oracle 查看日志组切换状态_Oracle 逻辑结构篇之重做日志和归档日志管理（一）...
[关键术语] Redo log file 重做日志文件 Archive log file 归档日志文件 SCN(system change number)系统改变号 Checkpoint 检查点 Lo ...
es对日志数据进行索引生命周期管理
前言在采用ELK分布式日志采集平台的时候,一般都会采用ES来存储采集的日志信息.日志信息一般都是持续增长的,是典型的时序数据. 如果不对采集的日志数据做生命周期管理,很容易导致单个索引体积持续增长. ...
防火墙（ASA）高级配置之URL过滤、日志管理、透明模式
对于防火墙产品来说,最重要的一个功能就是对事件进行日志记录.本篇博客将介绍如何对ASA进行日志管理与分析.ASA透明模式的原理与配置.利用ASA防火墙的IOS特性实施URL过滤. 一.URL过滤利用 ...
超简单的Springboot中的日志管理配置
本案例中可以了解,怎么配置日志的输出路径,输出格式(比如说zip格式),按日期进行划分(今天的日志输出为一个文件,明天的日志输出到另一个文件),在按日期划分的同时又按文件大小划分(比如说每天的日志记录 ...
Spring Boot 2.x的默认日志管理与Logback配置详解
前沿技术早知道,弯道超车有希望积累超车资本,从关注DD开始 Spring Boot在所有内部日志中使用Commons Logging,但是对底层日志的实现是开放的.在Spring Boot生态中,为 ...
Apache的配置与应用【Apache访问控制】以及apache日志管理【日志分割、awstats日志分析】
Apache的配置与应用以及日志管理文章目录 Apache的配置与应用以及日志管理一.Apache连接和访问控制 1.Apache连接 [1]KeepAlive [2]KeepAlive Time ...

es 配置日志管理策略

es 配置日志管理策略相关推荐

最新文章

热门文章