Linux使用之grep,shell脚本(一)

grep

在使用Linux的过程中,场景有时候便会涉及到查找文本文件的内容,假如现在我们想要在一个三百多行的文本中找到特定的语句,或者在这其中查找是否含有特定的字段应该怎么办呢?
这里便出现了专门的文本处理工具——grep,grep是Linux中常用的文本处理工具之一。
grep的全称为“ Global search Regular Expression and Print out the line”。
全称中的“Glibal search”意思为全局搜索的意思。
全称中的“Regular Expression”意思为正则表达式。
所以从全称中就可以理解为gerp是一个可以利用正则表达式的全局搜索工具。grep会按照正则表达式的匹配原则在文本文件中按照逐行匹配处理的方法来处理文本并输出。
来看看grep的用法。

--color=auto 或者 --color:表示对匹配到的文本着色显示

-i:在搜索的时候忽略大小写

-n:显示结果所在行号

-c:统计匹配到的行数,注意,是匹配到的总行数,不是匹配到的次数

-o:只显示符合条件的字符串,但是不整行显示,每个符合条件的字符串单独显示一行

-v:输出不带关键字的行(反向查询,反向匹配)

-w:匹配整个单词,如果是字符串中包含这个单词,则不作匹配

-Ax:在输出的时候包含结果所在行之后的指定行数,这里指之后的x行,A:after

-Bx:在输出的时候包含结果所在行之前的指定行数,这里指之前的x行,B:before

-Cx:在输出的时候包含结果所在行之前和之后的指定行数,这里指之前和之后的x行,C:context

-e:实现多个选项的匹配,逻辑or关系

-q:静默模式,不输出任何信息,当我们只关心有没有匹配到,却不关心匹配到什么内容时,我们可以使用此命令,然后,使用"echo $?"查看是否匹配到,0表示匹配到,1表示没有匹配到。

-P:表示使用兼容perl的正则引擎。

-E:使用扩展正则表达式,而不是基本正则表达式,在使用"-E"选项时,相当于使用egrep。
扩展正则表达式
^ 行首
$ 行尾
\<, \b 语首
\>, \b 语尾
() 分组
后向引用:\1, \2, ...
| 或者
a|b  a或b
C|cat  C或cat
(C|c)at  Cat或cat


来看看案例。
案例1.统计出/etc/passwd文件中其默认shell为非/sbin/nologin的用户个数,并将用户都显示出来

[root@centos7 ~]# grep -v '\/sbin\/nologin' /etc/passwd | cut -d: -f1
root
sync
shutdown
halt
longge

上面的案例开始匹配了/sbin/nologin关键词,但是案例中只需要除了它之外的shell,所以讲它使用-v选项排除开就可以了。

案例2.查出用户UID最大值的用户名、UID及shell类型

[root@centos7 ~]$ grep $(cat /etc/passwd| cut -d: -f 3 | sort -rn |head -n1 ) /etc/passwd |cut -d: -f 1,3,7
longge:1000:/bin/bash

案例3.统计当前连接本机的每个远程主机IP的连接数,并按从大到小排序

[root@iz2zed4h7bg5dihzfqhmn9z ~]# ss -nt |grep '^ESTAB'|tr -s ' ' :|cut -d: -f 6|sort|uniq -c | sort -rn
      1 182.150.165.42
      1 100.100.30.25

上面的案例中ss -nt 查看连接情况,然后将EATAB状态的过滤出来,在进行处理,最后提取出结果并完成排序。

案例4:编写脚本disk.sh,显示当前硬盘分区中空间利用率最大的值

#!/bin/bash
USE=$(df -h |grep '^\/dev' | grep -Eo  "[0-9]+%" |cut -d"%" -f1 |sort -rn |head -1)
DISK=$(df -h |grep $USE\% |tr -s ' ' |cut -d ' ' -f 1)
echo  "The System disk $DISK is used $USE" 
[root@centos7 ~]# chmod +x disk.sh 
[root@centos7 ~]# ./disk.sh 
The System disk /dev/sda1 is used 14
[root@centos7 ~]# df -h
Filesystem               Size  Used Avail Use% Mounted on
devtmpfs                 475M     0  475M   0% /dev
tmpfs                    487M     0  487M   0% /dev/shm
tmpfs                    487M  7.6M  479M   2% /run
tmpfs                    487M     0  487M   0% /sys/fs/cgroup
/dev/mapper/centos-root   15G  1.4G   14G  10% /
/dev/sda1               1014M  137M  878M  14% /boot
/dev/mapper/centos-home  5.0G   33M  5.0G   1% /home
tmpfs                     98M     0   98M   0% /run/user/0

案例5.编写脚本 systeminfo.sh,显示当前主机系统信息,包括:主机名,IPv4地址,操作系统版本,内核版本,CPU型号,内存大小,硬盘大小

#!/bin/bash
HOSTNAME=$(hostname)
IP=$(ifconfig eth0 | grep -Eo '([0-9]{1,3}\.){3}[0-9]{1,3}'|head -1)
OS=$(cat /etc/centos-release)
KERNEL=$(uname -r)
CPU=$(lscpu | grep "Model name" | tr -s " "|cut -d: -f2)
MEM=$(free -h |sed -En '2p' | tr -s ":" " " |cut -d " " -f2 )
DISK=$(lsblk | sed -En '2p' |tr -s " "  |  cut -d " " -f 4)

BEGINCOLOR="\e[1;35m"
ENDCOLOR="\e[0m"
echo ----------------SYSTEM INFO---------------------------
echo -e "HOSTNAME:   $BEGINCOLOR$HOSTNAME$ENDCOLOR"
echo -e "IP:         $BEGINCOLOR$IP$ENDCOLOR"
echo -e "OS:         $BEGINCOLOR$OS$ENDCOLOR"
echo -e "KERNEL:     $BEGINCOLOR$KERNEL$ENDCOLOR"
echo -e "CPU:        $BEGINCOLOR$CPU$ENDCOLOR"
echo -e "MEM:        $BEGINCOLOR$MEM$ENDCOLOR"
echo -e "DISK:       $BEGINCOLOR$DISK$ENDCOLOR"
echo --------------------END-------------------------------


©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,445评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,889评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,047评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,760评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,745评论 5 367
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,638评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,011评论 3 398
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,669评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,923评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,655评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,740评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,406评论 4 320
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,995评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,961评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,023评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,483评论 2 342

推荐阅读更多精彩内容