系统日志分析 之 日志的采集与查看
系统日志的采集
日志是由进程生成
1.rsyslog 服务
此服务是用来采集系统日志的,他不产生日志,只是起到采集作用
2.rsyslog服务的管理
/var/log/messages | 该文件储存服务信息日志 |
/var/log/secure | 该文件储存登陆日志 |
/var/log/cron | 该文件储存定时任务日志 |
/var/log/maillog | 该文件储存邮件日志 |
/var/log/boot.log | 该文件储存系统启动日志 |
3.指定日志采集路径
/etc/rsyslog.conf ##编辑 rsyslog 服务的配置文件
什么类型的日志 . 什么级别的日志 /var/log/filename ##日志的采集规则
日志类型分为:
auth | pam产生的日志 |
authpriv | ssh,ftp等登陆信息的验证信息 |
cron | 时间任务相关 |
kern | 内核 |
lpr | 打印 |
邮件 | |
mark(syslog)-rsyslog | 服务内部的信息,时间标识 |
news | 新闻组 |
user | 用户程序产生的相关信息 |
uucp | unix to unix copy,unix 主机之间相关的通讯 |
local 1-7 | 自定义的日志设备 |
日志级别分为:
debug | 有调试信息的,日志信息最多 |
info | 一般信息的日志,最常用 |
notice | 最具有重要性的普遍条件的信息 |
warning | 警告级别 |
err | 错误级别,组织某个功能或模块不能正常工作的信息 |
crit | 严重级别,组织整个系统或整个软件不能正常工作的信息 |
alert | 需要立刻修改的信息 |
emerg | 内核崩溃等严重信息 |
none | 什么都不记录 |
注意:从上到下,级别从低到高,记录信息越来越少
详细日志级别信息可以查看手册 :man 7 rsyslog
操作示例:
目的:
把系统中所有日志采集到/var/log/westos文件中
操作:
vim /etc/rsyslog.conf*.* /var/log/westos ##文件第57行左右systemctl restart rsyslog ##重启服务
编辑日志采集文件 将所有日志采集到/var/log/westos
测试:
systemctl restart sshd ##此命令为了生成日志cat /var/log/westos ##此文件中出现日志信息
4.日志的远程同步
在日志的发送方:
vim /etc/rsyslog.conf ##更改日志管理的配置文件*.* @172.25.254.202 ##@表示使用udp协议的发送 @@表示使用tcp协议的发送 后面跟日志的接受方ip 第57行左右systemctl restart rsyslog ##重新j加载
在日志发送方编辑配置文件 发送日志
日志的接收方:
vim /etc/rsyslog.conf
15 $MODLOAD Imudp ##开启日志的接收模块
16 $UDPSereverRun 514 ##开启日志接收端口
systemctl restart rsyslog
systemctl stop firewalld ##关闭防火墙,当防火墙打开时,日志不能传输过来
systemctl disable firewalld ##设定防火墙开机关闭
在日志接收方编辑配置文件 打开接收端口
在日志接收方关闭防火墙并重新加载服务
测试:
在发送方和接受方都清空日志:
> /var/log/messages
在日志的发送方:
logger test ## j建立日志cat /var/log/messages ##查看日志是否生成
发送方建立日志
在日志的接收方查看:
cat /var/log/messages
可以在接收方查看到建立的test日志
注意:在编辑好配置文件后需要重新加载服务 在关闭防火墙之后也需要加载服务
5.日志采集格式的设定
vim /etc/rsyslog .conf
$template WESTOS, "%timegenerated% %FROMHOST-IP% %syslogtag% %msg%\n" ##设定日志采集格式
%timegenerated% | 显示日志时间 |
%FROMHOST-IP% | 显示主机ip |
%syslogtag% | 日志记录目标 |
%msg% | 日志内容 |
\n | 换行 |
编辑日志的采集格式
当编辑配置文件出现语法错误时会出现以下内容
*.* /var/log/westos;WESTOS ##在指定的日志中采用WESTOS格式$ActionFileDefultTemlate WESTOS ##修改系统默认日志采集格式为WESTOScat /var/log/westos ##可以观察到该文件内容在设定后日志的采集格式为WESTOS格式
修改系统默认日志的采集格式为WESTOS
指定某个文件的日志采集格式
6.日志时间同步设定(主机时间的同步)
服务名称:chronyd
在服务端:
vim /etc/chrony.conf ##编辑该服务的配置文件
22 allow172.25.254.0/24 ##允许那些客户端来同步本机时间 网络号与172.25.254相同的可以同步本机时间
29 local stratum 10##本机不同步任何主机的时间,本纪作为时间源
systemctl restar chronyd
在服务端编辑配置文件 允许相应主机的ip连接
在客户端:
vim /etc/chrony.conf
server172.25.254.102 ##本机立刻同步102主机时间
systemctl restart chronyd
执行命令后如图所示 与远程主机时间同步
测试:
在客户端执行:
chronyc sources -v
执行该命令后 如图所示 ^ * 表示建立了同步关系
timedatectl 命令
管理系统时间命令 :timedatectl
timedatectl status ##显示当前时间信息 (可以加也可以不加status 不加表示默认)
timedatectl set-time 09:11 ##设定当前时间为09:11
timedatectl set-timezone Asia/Shanghai ##设定当前时区为亚洲上海
timedatectl list-timezones ##查看支持的所有时区
timedatectl set-local-rtc 0|1 ##设定是否使用utc时间 使用utc国际时间则本机时间为utc加时区差
设定当前时区为上海
设定当前时间为09:11
查看支持的时区 使用分页浏览
utc 与rtc
日志查看
- journalctl 日志的查看工具
journalctl -n 3 ##查看最近的三条日志 journalctl -p err ##查看错误日志journalctl -o verbose ##查看日志的详细参数journalctl --since ##查看从什么时间开始的日志journalctl --until ##查看到什么时间为止的日志
查看最近三条命令
查看错误日志
查看从2019-07-17 04:39:25开始的日志
查看从2019-04:39:25到04:39:27的日志
2.如何使用systemd-journald 保存系统日志
默认systend-journald是不保存系统日志到硬盘的,关机后再次开机只能看到本次开机之后的日志,上次关机之前的日志是无法查看的
保存系统日志到硬盘:
mkdir/var/log/journal
chgrp systemd-journal /var/log/journal
chmod g+s /var/log/journal
killall -1 systemd-journald
ls /var/log/journal
946cb0e817ea4ad916183df8c4fc817 ##产生的数据文件 日志信息
在设定配置文件之前 查看系统日志为
重启系统后 之前的日志丢失
设定相应可以储存系统日志地文件
再次重启系统 可以发现日志没有丢失
系统日志分析 之 日志的采集与查看相关推荐
- 日志的采集及查看(已补充)
系统日志管理 1.rsyslog 此服务是用来采集系统日志的,但不产生日志,只是起到采集的作用. 2.rsyslog的管理 /var/log/messages 服务信息日志 /var/log/secu ...
- java tomcat 日志分析工具_tomcat日志集中采集、分析与展示的几种方法
大家在做分布式web系统的时候,比如那么多个tomcat,每天都会产生很多的日志(虽然已经按小时进行日志拆分了,但日志内容还是很大,vim查日志的时候很慢),而且那么多个tomcat,每个tomcat ...
- 如何快速采集分析平台日志,并进行展示监控?
来自:DBAplus社群 作者介绍 小火牛,项目管理高级工程师,具有多年大数据平台运维管理及开发优化经验.管理过多个上千节点集群,擅长对外多租户平台的维护开发.信科院大数据性能测试.功能测试主力,大厂 ...
- linux——系统日志的信息、采集、查看、保存
为了方便查看操作记录,需要规定日志采集位置 一.日志采集规则 1.vim /etc/rsyslog.conf #打开规定采集日志的位置的配置文件,进行编辑,从而修改配置文件 *.* ...
- linux nginx 日志查看,查看nginx日志_Linux系统怎么分析Nginx日志
摘要 腾兴网为您分享:Linux系统怎么分析Nginx日志,追书神器,有信,虚拟机,天气预报等软件知识,以及云软件,东方财富股票软件,扑飞,名片扫描王,微信加人软件安卓,微主题,每日金股,电脑硬盘检测 ...
- 环境搭建之日志搜集/采集服务系统对比(logtail/hadoop/elk/splunk/appender)
随着公司日益增长的业务,日志增长较快,各种bug层出不穷.为了快速定位问题以及做告警/数据分析等问题,就针对性的查看/搭建了几种日志服务系统. 可能整理的不是那么正确或者详尽.但也记录一下,方便日后回 ...
- Solaris、Mac OS系统日志分析工具
Solaris.Mac OS系统日志分析工具 本节以PC服务器上常见的几种UNIX系统例如Solaris.Mac OS以及Sco Openserver系统为例如何在它们这些平台下查找系统日志. 一.用 ...
- 华为服务器清除系统日志,清空服务器日志
清空服务器日志 内容精选 换一换 为加强对系统数据的容灾管理,云堡垒机支持配置日志备份,提高审计数据安全性和系统可扩展性.本小节主要介绍如何在系统配置FTP/SFTP服务器参数,将日志远程备份至FTP ...
- iis日志字段解析 网站运维工具使用iis日志分析工具分析iis日志(iis日志的配置)
网站运维工具使用iis日志分析工具分析iis日志(iis日志的配置) https://www.cnblogs.com/fuqiang88/p/5870306.html 我们只能通过各种系统日志来分析网 ...
最新文章
- Silverlight 游戏开发:可重用的拖拽控件
- UITableView的优化原理
- 数字图像处理系统组成 及研究内容
- 全链路数据血缘在满帮的实践
- vue返回上级并且携带数据_前后端分离之后端返回用户角色信息(vueelementadmin+laravel)...
- LINUX系统管理与应用
- 卷积,DFT,FFT,图像FFT,FIR 和 IIR 的物理意义。
- 市场推广的及时性要素
- pandas统计样本分位数
- java控制html弹出框,Selenium+java - 弹出框处理
- DevOps Master凤凰项目沙盘总结:大美的DevOps总结
- java 抽样算法_java生成抽样随机数的多种算法
- tp5实现126邮件服务
- 为泄愤程序员攻击北京摇号网站昨受审 曾为市高考状元
- Android 百度人脸识别问题总结
- 【冰糖R语言】实现程序进度条:txtProgressBar() winProgressBar() tkProgressBar()
- 使用KMS激活软件导致浏览器呗篡改解决办法
- Joining_thread简单实现
- Linux 如何添加一个 Swap 文件
- PS简单操作快捷键,上手快
热门文章
- Ubuntu创建utf-8字符集的mysql数据库,解决 Incorrect string value: \\xE6\\x88\\x91\\xE6的问题
- 推荐一款好用的团队在线协作软件
- LTE网络的RSRQ、RSRP、SNR
- 网盘生意这么难做,为何阿里、迅雷还要争着和百度网盘抢饭碗呢?
- 【《深入理解计算机系统》读书笔记(3)】 第3章 程序的机器级表示
- openwrt - 性能监控 netdata
- Can not find java process. Try to run `jps` command lists the instrumented Java HotSpot VMs
- 关闭窗口时onunload和onbeforeunload不起作用的解决办法
- GoEasy在微信小程序中的应用
- 妙味课堂 Html5实战打怪游戏开发教程