nginx日志统计中经常使用到的命令

awk、uniq、sort、grep、cat、tail

1.awk(数据处理工具,将一行分割成多个“字段”来处理)

awk -F ‘文本切割符’‘{处理过程}’ 文件名称

如:cat /ect/passwd | awk -F ‘:’ ‘{print $1}’   #以:分割,打印第一列的数据;如果为$0表示整个文件内容

cat /etc/passwd | awk -F ”BEGIN {print “begin,goto”} {print $1″,”$7} END {print “end,end”}  #以空白符作为分割,打印begin,goto开始执行信息,打印1,7行,以end,end结束

2.uniq 命令用来过滤重复部分显示文件内容,这个命令读取输入文件,并比较相邻的行

参数:

-c  显示输出中,在每行行首加上本行在文件中出现的次数

-d  只显示重复行

-u  只显示文件中不重复的各行

-n  前n个字段与每个字段前的空白一起被忽略

+n 前n个字符被忽略,之前的字符被跳过(字符从0开始编号)

-f   n与-n相同,这里n是字段数

-s   n与+n相同,这里n是字符数

常用: uniq -c  首行显示文件中出现的次数

3.sort 排序

参数:

-u  在输出行中去除重复行

-r   默认的排序方式为升序,-r转换为降序排列

-n  默认按照字符来排序出现10在2前面,-n以数值来排序

-t   后面设定间隔符

-k  指定列数

如:sort -n -k 2 -t : test.txt  以数值排序,按照第二列以“:”间隔来排列顺序

此条目发表在服务器分类目录,贴了标签。将固定链接加入收藏夹。

发表评论