linux日志汇总,Linux日志分析常用命令汇总(示例代码)
1、查看当天有多少个IP访问:
awk ‘{print $1}‘ log_file|sort|uniq|wc –l
2、查看某一个页面被访问的次数:
grep "/index.php" log_file | wc –l
3、查看每一个IP访问了多少个页面:
awk ‘{++S[$1]} END {for (a in S) print a,S[a]}‘ log_file
4、将每个IP访问的页面数进行从小到大排序:
awk ‘{++S[$1]} END {for (a in S) print S[a],a}‘ log_file | sort –n
5、查看某一个IP访问了哪些页面:
grep ^111.111.111.111 log_file| awk ‘{print $1,$7}‘
6、去掉搜索引擎统计当天的页面:
awk ‘{print $12,$1}‘ log_file | grep ^"Mozilla | awk ‘{print $2}‘ |sort | uniq | wc –l
7、查看2009年6月21日14时这一个小时内有多少IP访问:
awk ‘{print $4,$1}‘ log_file | grep 21/Jun/2009:14 | awk ‘{print $2}‘| sort | uniq | wc –l
8.查看访问前十个ip地址
awk ‘{print $1}‘ |sort|uniq -c|sort -nr |head -10 log_file
9.访问次数最多的文件或页面
cat log_file |awk ‘{print $11}‘|sort|uniq -c|sort -nr
10.通过子域名访问次数,依据referer来计算,稍有不准
cat log_file | awk ‘{print $11}‘ | sed -e ‘ s/http:‘ -e ‘ s//.*//‘ | sort | uniq -c | sort -rn | head -20
11. 列出传输大小最大的几个文件
cat log_file |awk ‘($7~/.php/){print $10 " " $1 " " $4 " " $7}‘|sort -nr|head -100
12. 列出输出大于200000byte(约200kb)的页面以及对应页面发生次数
cat log_file |awk ‘($10 > 200000 && $7~/.php/){print $7}‘|sort -n|uniq -c|sort -nr|head -100
13. 如果日志最后一列记录的是页面文件传输时间,则有列出到客户端最耗时的页面
cat log_file |awk ‘($7~/.php/){print $NF " " $1 " " $4 " " $7}‘|sort -nr|head -100
14. 列出最最耗时的页面(超过60秒的)的以及对应页面发生次数
cat log_file |awk ‘($NF > 60 && $7~/.php/){print $7}‘|sort -n|uniq -c|sort -nr|head -100
15. 列出传输时间超过 30 秒的文件
cat log_file |awk ‘($NF > 30){print $7}‘|sort -n|uniq -c|sort -nr|head -20
16. 列出当前服务器每一进程运行的数量,倒序排
ps -ef | awk -F ‘ ‘ ‘{print $8 " " $9}‘ |sort | uniq -c |sort -nr |head -20
17. 当前WEB服务器中联接次数最多的ip地址
netstat -ntu |awk ‘{print $5}‘ |sort | uniq -c| sort -nr
18. 查看日志中出现100次以上的IP
cat log_file |cut -d ‘ ‘ -f 1 |sort |uniq -c | awk ‘{if ($1 > 100) print $0}‘|sort -nr |less
19. 查看最近访问量最高的文件
cat log_file |tail -10000|awk ‘{print $7}‘|sort|uniq -c|sort -nr|less
20. 查看日志中访问超过100次的页面
cat log_file | cut -d ‘ ‘ -f 7 | sort |uniq -c | awk ‘{if ($1 > 100) print $0}‘ | less
21. 统计某url,一天的访问次数
cat log_file | grep ‘12/Aug/2009‘|grep ‘/images/index/e1.gif‘|wc|awk ‘{print $1}‘
22. 前五天的访问次数最多的网页
cat log_file | awk ‘{print $7}‘|uniq -c |sort -n -r|head -20
23. 从日志里查看该ip在干嘛
cat log_file | grep 219.239.157.240 | awk ‘{print $1""$7}‘ | sort | uniq -c | sort -nr | less
24. 列出最最耗时的页面(超过60秒的)
#cat log_file |awk ‘($NF > 60 && $7~/.php/){print $7}‘ |sort -n|uniq -c|sort -nr|head -100
25. 网站一天的点击量
cat log_file |grep ‘12/Nov/2011‘ | grep "******.jsp"|wc|awk ‘{print $1}‘|uniq
26. 访问网站的独立IP有多少
cat log_file |grep ‘12/Aug/2011‘ |grep "******"|wc|awk ‘{print $1}‘|uniq
通过日志查看当天ip连接数,过滤重复
cat log_file | grep "20/Oct/2008" | awk ‘{print $2}‘ | sort | uniq -c | sort –nr
27. 用tcpdump嗅探80端口的访问看看谁最高
tcpdump -i eth0 -tnn dst port 80 -c 1000 | awk -F"." ‘{print $1"."$2"."$3"."$4}‘ | sort | uniq -c | sort –nr
28. 查看某一时间段的ip连接数
grep "2006:0[7-8]" log_file | awk ‘{print $2}‘ | sort | uniq -c| sort -nr | wc -l
linux日志汇总,Linux日志分析常用命令汇总(示例代码)相关推荐
- linux驱动之系统移植-----uboot常用命令汇总
信息查询类指令 查询所有支持的命令 : help 查询命令的用法 help <其他命令> 查询板子信息 bdinfo 查看所有环境变量 printenv 查看uboot版本 version ...
- Linux学习入门: shell脚本常用命令汇总
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 前言 Linux学习最初就是要掌握shell脚本的基本命令语句,这个也是我们操作Linux操作系统的关键步骤,但是Linux的shel ...
- linux更新项目常用命令汇总
linux服务器线上更新项目常用命令汇总 因为之前nginx和uwsgi已经配好了要运行的项目位置,所以服务器上的项目文件夹建议不要变动,要变动的只是项目文件夹下的所有文件,用新的所有文件直接覆盖,可 ...
- Java常用命令汇总(笔记)
Java常用命令汇总 文章目录 Java常用命令汇总 1.javac 将文件编译成.class文件 2.java 执行 .class文件,若类中没有main函数,则不能执行. 3.jar 主要用于打包 ...
- linux常用命令汇总
linux常用命令汇总,以便需要时快速查询 中文释义 相应命令 备注 在文件中查找 grep error catalina.out 在catalina.out文件中查找error信息 重启nginx ...
- Linux常用命令汇总【思维导图】
Linux常用命令汇总[文章末尾附有完整常用命令的思维导图,建议收藏] 文章大致分为以下小节 Linux入门 Linux目录结构 VI/VIM编辑器(重点) 网络配置 常用基本命令(重点) 常用命令思 ...
- linux 常用命令汇总(面向面试)
linux 常用命令汇总 个人认为先掌握一些比较常用的,剩下的需要再学 总结了一些面试比较可能会问道的命令 文章目录 linux 常用命令汇总 基础命令 ulimit dos2unix和unix2do ...
- 史上最全的Linux常用命令汇总①收藏这一篇就够了!(超全,超详细)
史上最全的Linux常用命令汇总①(超全面!超详细!)收藏这一篇就够了! Linux命令基础 Shell Linux命令分类 Linux命令行的格式 编辑Linux命令行的辅助操作 获取命令帮助的方法 ...
- linux常用的命令shell,Linux操作系统Shell和常用命令汇总
简述 本文主要介绍Shell和Linux常用命令. Shell Shell 是一个用 C 语言编写的应用程序,提供了用户访问Linux操作系统内核服务的界面,它可以用来启动.挂起.停止.编写程序.Sh ...
最新文章
- android studio 导入库提示失败的处理方法以及androidstudio 清理缓存的方法
- Quartz1.X中CronTrigger第一次启动的问题
- 阿里一道Java并发面试题 (详细分析篇)
- CodeChef Cards, bags and coins [DP 泛型背包]
- luogu1341 无序字母对
- 《MySQL——InnoDB与Memory以及临时表》
- php查询变量类型,php判断变量类型常用方法
- 面试时被问如何进行接口测试怎么回答
- 为什么你学了 N 遍 Spring Boot,至今还是学生项目?你的问题在这里 | 原力计划...
- openssl用法详解
- ubuntu vmplayer安装vmtool
- 软件密码模块安全要求
- AC控制器和无线路由器的区别
- 用拉普拉斯变换求零状态响应_【解析几何】椭圆的仿射变换(伸缩变换)
- 为女性们点赞!Google 为女性提供更多支持
- 恢复SVN的Replacing操作
- 解决电脑软件可以上网,但是浏览器无法上网的问题
- 最小二乘法拟合二次曲线 C语言
- Oracle “ORA-00942: 表或视图不存在 “的原因和解决方法
- 找不到电脑C盘下的AppData文件夹怎么办?