常用Shell命令集合和使用技巧(推荐)
一、控制台使用技巧
基于我平时的工作经验,总结出一些我常用的快捷键
1.1 操作快捷键
Ctrl+r:可以快速查找历史命令
Ctrl+a / Ctrl+e:移动光标到命令行首 / 行尾
Ctrl+w / Ctrl+k:删除光标之前 / 之后的内容
1.2 VIM文件编辑快捷键
ZZ:文件保存并退出
1.3 进程操作快捷键
Ctrl+c:强制终止程序
Ctrl+z:挂起一个进程
Ctrl+d: 终端输入exit后回车
1.4 linux命令中快捷键(top)
Shift + p: 根据CPU使用率排序
Shift + m: 根据Mem使用率排序
二、Shell命令合集
首先,我们先对Shell命令合集做一个分类,主要可分为 空间分析,指定文件操作,链接状态分析,IP信息提取
2.1 空间分析
场景1: 磁盘空间不足,需快速定位日志目录
该场景主要用在linux操作系统磁盘空间不足,需要快速定位磁盘使用情况,对文件的磁盘使用率做排序,需要用到如下组合命令:
du -x --max-depth=1 / | sort -k1 -rn #-x 表示跳过其他文件系统
-x表示跳过其他文件系统,只分析本文件系统里面的文件,排除一些额外的干扰项;--max-depth=1 表示只分析/ 目录下第一级目录下的所有文件大小;-k 表示具体按照那一列进行排序;-r是倒序排列;-n表示只对数值排序
场景2:系统产生很多碎片文件,导致 inode 资源不足
该场景主要是操作系统产生大量碎片文件,随之消耗大量innode,innode的过渡使用会导致innode资源不足无法创建文件,因为du 命令只能统计磁盘使用情况无法统计碎片文件的个数,所以统计碎片文件个数需要用到如下组合命令
find -type f | awk -F/ -v OFS=/ '{$NF="";dir[$0]++}END { for (i in dir) print dir[i] i}' | sort -k1 -rn | head
这条命令比较复杂,使用了find,awk,sort,head。
通过find找出指定文件类型的文件,然后管道给 awk,它可以把文本内容按行进行格式化输出并展示,-F / 指定处理文件时字符串之间以 / 进行分割,-v OFS=/ 表示文件显示结果时以 / 进行分割展示。对于awk命令整体规则而言有一个 {} END {} 格式,前面的 {} 表示行处理操作,END{} 表示行处理后需要进行整体结果出,在行处理操作逻辑中,设置$NF 为空表示将每一行的文件名信息去除,从而只保留目录路径,dir 是一个自增数组,用于统计结果。最后通过 for 循环进行遍历输出dir关联数组中所有行信息。
2.2 指定文件操作
场景一:批量查找文件对内容做替换
场景一适用于一个目录下有多个子目录,并且子目录下有大量文件,我们需要找到指定文件然后替换文件里面的内容,需要用到如下组合命令:
(find . -name "*.txt"|xargs tar -cvf test.tar) && cp -f test.tar /home/.
通过find命令查找当前目录下的所有子文件夹名称为 consumer.xml 的文件,然管道给 sed ,通过-i把文件内容替换。
场景二:批量查找文件作拷贝打包
场景二主要是用在对查找到的指定文件进行打包,然后拷贝到指定路径,可以使用如下组合命令:
netstat -n | awk '/^tcp/{arr[$NF]++ } END {for (i in arr) print arr[i] " " i }'
查找当前目录下的所有以 .txt结尾的文件,然后打包成test.tar,如果打包成功则把压缩包拷贝到/home目录下
2.3 网络连接状态分析
场景一:列出tcp协议下的连接,并统计所有状态的总量
场景一主要用在查看服务器当前有多少TCP类型的连接,分析TCP/IP网络状态(ESTABLISHED,TIME_WAIT)
netstat -n | awk '/^tcp/{arr[$NF]++} END {for (i in arr) print arr[i] " " i}'
对于awk命令整体规则而言有一个 {} END {} 格式,上述命令分析了TCP协议下,所有类型连接的总数,可用于分析查看当前服务器连接数。
2.4 IP信息提取
场景一:通过命令获取主机IP信息
ip a|grep "global"|awk'{print $2}'|awk -F/'{print $1}'
ip a负责查看主机上所有的网卡信息,然后过滤 global关键字,打印出第二列,再把子网掩码移除掉即可获取到主机ip
三、常见问题
问题一:Shell适不适合作多并发任务
答:不适合,Shell中一般是通过nohup的方式把需要并发执行的任务放入后台,这样做有存在一些问题,包括 进程状态不好控制,进程间信息共享一般以文件形式进行等,所以当需要进行大的并发任务执行时,建议使用Python,Go,PHP语言实现并发。
问题二:Shell适合用在什么场景中
答:Shell 适合用在追求运维高效(非性能高效)要求的简单场景中,如日志切割、进程分析、系统初始化等。
总结