SHELL_sed

一、sed工作流程

image

sed 是一種在線的、非交互式的編輯器,它一次處理一行內(nèi)容。
處理時,先把當前處理的行內(nèi)容存儲在臨時緩沖區(qū)中,稱為“模式空間”(pattern space),
之后再用sed命令處理緩沖區(qū)中的內(nèi)容,處理完成后,把緩沖區(qū)的內(nèi)容打印到屏幕。
接著處理下一行,這樣不斷重復,直到文件末尾。
注意:模式空間的內(nèi)容和 AWK 中的 $0 是一樣的,處理每行的時候,都會被重新賦值為當前行的內(nèi)容
文件內(nèi)容并沒有改變,除非你使用重定向存儲輸出。
Sed主要用來自動編輯一個或多個文件;簡化對文件的反復操作;編寫轉換程序等。

二、命令格式

先準備一個文件

[root@e5ac44e88027 ~]# head /etc/passwd |grep -n ''   > mypasswd
[root@e5ac44e88027 ~]# cat mypasswd
1:root:x:0:0:root:/root:/bin/bash
2:bin:x:1:1:bin:/bin:/sbin/nologin
3:daemon:x:2:2:daemon:/sbin:/sbin/nologin
4:adm:x:3:4:adm:/var/adm:/sbin/nologin
5:lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
6:sync:x:5:0:sync:/sbin:/bin/sync
7:shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
8:halt:x:7:0:halt:/sbin:/sbin/halt
9:mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10:operator:x:11:0:operator:/root:/sbin/nologin

處理單個文件的命令格式

sed     [options]   '[匹配模式]     sed 的內(nèi)部命令'       file1

處理多個文件的命令格式

sed     [options]   '[匹配模式]     [sed 的內(nèi)部命令]'       file1  file2

options 選項是可選的,意思就是沒有也行
匹配模式 是可選的用于在文件中每一行進行匹配到模式,模式可以是正則,也可以是文件的行號
內(nèi)部的命令也是可選的,沒想到吧,但是兩個單引號是必須的

[root@kube-master sed]# sed '' mypasswd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
...以下輸出省略...

注:
sed和grep不一樣,不管是否找到指定的模式,它的退出狀態(tài)都是0
只有當命令存在語法錯誤時,sed的退出狀態(tài)才是非0

三、支持正則表達式

與grep一樣,sed在文件中查找模式時也可以使用正則表達式(RE)和各種元字符。正則表達式是
括在斜杠間的模式,用于查找和替換,以下是sed支持的元字符。
使用基本元字符集 ^, $, ., *, [], [^], \< \>,\(\),\{\}
使用擴展元字符集 ?, +, { }, |, ( )使用擴展元字符的方式:

sed   -r

在實際使用的時候,都會加上 -r 參數(shù),即使沒有用的擴展正則也不會有任何影響。

四、sed基本用法

打印

sed 默認會輸出文件的每一行,無論這行內(nèi)容是否能匹配上匹配模式,假如被匹配到的則會再輸出一次。

sed   -r   ''     mypasswd
sed   -r   'p'    mypasswd

p 是 sed 的內(nèi)部命令,是 打印(輸出) 的作用

屏蔽默認輸出使用 -n 選項

sed -rn 'p'   mypasswd

sed -rn '/root/p'   mypasswd 顯示root的行 ^ 匹配root 開頭 ^root

搜索替換 -- 這是重點 實際中用的最多

sed會自動打印文件的每一行,同時查找模式匹配的行,找到后執(zhí)行后面的命令,默認是 p 打?。ú患?-n 的情況下)

> 搜索每一行,找到有 root 的,把第一個替換為 shark
sed  -r  's/root/shark/'   mypasswd

> 搜索每一行,找到所有的 root 字符,進行全局替換為 `shark`
sed  -r  's/root/shark/g'    mypasswd

> i  是同時忽略大小寫
sed  -r  's/root/shark/gi'    mypasswd 

> 找到含有 root 的進行刪除
sed  -r  '/root/d'    mypasswd

> 可以使用不同的 字符 作為界定符號,注意進行轉義
sed  -r  '\#root#d'   mypasswd

注意:
當在模式匹配中使用其他界定符號時,需要對其進行轉義。
其他界定符用在 s 搜索替換時不必轉義。例如:

sed  -r  's#root#shark#'      mypasswd
sed  -r  's%root%shark%'      mypasswd
sed  -r  's|root|shark|'      mypasswd

五、sed擴展

地址(定址)
地址用于決定對哪些 進行編輯。地址形式可以是數(shù)字、正則表達式或二者的結合。如果沒有指定地址,sed將處理輸入文件中的所有行。

> 全部分刪除
sed  -r  'd'        mypasswd

> 第 3 行刪除
sed  -r  '3  d'     mypasswd

> 第 1 行到第 3 行都刪除
sed  -r  '1,3  d'             mypasswd

> 含有 root 字符串的行刪除
sed  -r  '/root/  d'          mypasswd

> 從含有 root 字符串的行開始匹配,一直刪除到 第 5 行
sed  -r  '/root/,5  d'        mypasswd

> 從含有 halt 的行開始刪除,并刪除此行之后的 2 行,就是總共刪除 3 行
sed  -r  '/halt/,+2  d'      mypasswd

> 含有 root 的行不刪除,其他都刪除
sed  -r  '/root/  !d'         mypasswd

> 使用行號除以 2 ,余數(shù)是 1 的行刪除
sed  -r  '1~2  d'             mypasswd

> 使用行號除以 2, 余數(shù) 是 0 的 打印出來
sed  -rn  '0~2  p'            mypasswd

> 試試下面這個, 就是 每次處理的行號是被除數(shù),第二個數(shù)是除數(shù),第一數(shù)是 余數(shù)
sed  -rn   '0~3  p'           mypasswd 

六、sed命令

sed命令告訴 sed 對匹配到的行進行何種操作,包括打印、刪除、修改等。

sed 部分命令示例

替換命令:s

sed -rn 's/[0-9][0-9]/&.5/' mypasswd //&代表在查找串中匹配到的所有內(nèi)容

sed -r 's/(no)login/\1不可登錄/' mypasswd

部分輸出為
bin:x:1:1:bin:/bin:/sbin/no不可登錄

追加命令:a

sed -r '$a 1.1.1.1 www.qfedu.com' /etc/hosts

插入命令:i

# sed -r '2i\1111111111111' /etc/hosts
# sed -r '2i111111111\
> 2222222222\
> 3333333333' /etc/hosts

修改命令:c

# sed -r '2c\1111111111111' /etc/hosts
# sed -r '2c\111111111111\
> 22222222222\
> 33333333333' /etc/hosts

七、sed常見操作

刪除配置文件中 # 號注釋的行
sed -ri '/^#/d' file.conf

刪除開頭的一個或者多個空格或者 Tab 鍵 加上 '#' 或者開頭是 '#' 的行
sed -ri '/^[ \t]*#/d' file.conf

YUM 源修改
sudo sed -ri s/^#baseurl/baseurl/g /etc/yum.repos.d/CentOS-Base.repo
sudo sed -ri s/^mirrorlist/#mirrorlist/g /etc/yum.repos.d/CentOSBase.repo

刪除配置文件中//號注釋行

sed -ri '\#^[ \t]*//#d' file.conf

刪除無內(nèi)容空行
- 開頭和結尾之間什么都沒有的行
- 開頭和結尾之間有多個空格的行
- 開頭和結尾之間有多個  Tab 鍵的行
sed -ri '/^[ \t]*$/d' file.conf

刪除注釋行及空行:
以下 3 中效果一樣,挑一個自己喜歡的
sed -ri '/^[ \t]*#/d; /^[ \t]*$/d' /etc/vsftpd/vsftpd.conf
sed -ri '/^[ \t]*#|^[ \t]*$/d' /etc/vsftpd/vsftpd.conf
sed -ri '/^[ \t]*($|#)/d' /etc/vsftpd/vsftpd.conf

修改文件:
sed -ri '$a\chroot_local_user=YES' /etc/vsftpd/vsftpd.conf
sed -ri '/^SELINUX=/cSELINUX=disabled' /etc/selinux/config
sed -ri '/UseDNS/cUseDNS no' /etc/ssh/sshd_config
sed -ri '/GSSAPIAuthentication/cGSSAPIAuthentication no' /etc/ssh/sshd_config

給文件行添加注釋:
sed -r '2,6s/^/#/' a.txt

使用小括號進行分組,可以有多個分組, 后面可以使用 \1 獲取到第一個分組的內(nèi)容  
sed -r '2,6s/(.*)/#\1/' a.txt
sed -r '2,6s/.*/#&/' a.txt &匹配前面查找的內(nèi)容

sed -r '3,$ s/^#*/#/' a.txt 將行首零個或多個#換成一個#

sed -r '30,50s/^[ \t]*#*/#/' /etc/nginx.conf
sed -r '2,8s/^[ \t#]*/#/' /etc/nginx.conf

sed中使用外部變量
var1=11111

# 無效
sed -r '3a$var1' /etc/hosts

# 正確
sed -r "3a$var1" /etc/hosts

# 有效
sed -r 3a$var1 /etc/hosts

# 報錯
sed -r "$a$var1" /etc/hosts

# 有效,但是中間不能有空格
sed -r '$a'"$var1" /etc/hosts

# 有效, 將第一個 $ 進行轉義
sed -r "\$a  $var1" /etc/hosts

多重編輯選項:-e

[root@kube-master sed]# sed -e '1,3 d' -e 's/root/shark/' mypasswd
4:adm:x:3:4:adm:/var/adm:/sbin/nologin
5:lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
6:sync:x:5:0:sync:/sbin:/bin/sync
7:shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
8:halt:x:7:0:halt:/sbin:/sbin/halt
9:mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10:operator:x:11:0:operator:/shark:/sbin/nologin
[root@kube-master sed]#

sed -e '1,3 d' -e 's/root/shark/' mypasswd
等同于
sed '1,3 d; s/root/shark/' mypasswd

?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

友情鏈接更多精彩內(nèi)容