Linux-sed
本章內容
Sed介紹
Sed用法
Sed高級用法
處理文本的工具sed
Stream EDitor, 行編輯器
sed是一種流編輯器，它一次處理一行內容。處理時，把當前處理的行存儲在臨時緩沖區中，稱為“模式空間”（pattern space），接著用sed命令處理緩沖區中的內容，處理完成後，把緩沖區的內容送往屏幕。然後讀入下行，執行下一個循環。如果沒有使諸如'D'的特殊命令，那會在兩個循環之間清空模式空間，但不會清空保留空間。這樣不斷重復，直到文件末尾。文件內容並沒有改變，除非你使用重定向存儲輸出。
功能：主要用來自動編輯一個或多個文件,簡化對文件的反復操作,編寫轉換程序等
參考： http://www.gnu.org/software/sed/manual/sed.html
sed跟 grep相比，不僅能查看文件，還能修改文件，這點相當有用
sed工具
用法：
sed [option]... 'script' inputfile...
常用選項：
-n：不輸出模式空間內容到屏幕，即不自動打印
-e: 多點編輯
-f：/PATH/SCRIPT_FILE: 從指定文件中讀取編輯腳本
-r: 支持使用擴展正則表達式
-i.bak: 備份文件並原處編輯
script:
'地址命令'
地址定界：
(1) 不給地址：對全文進行處理
(2) 單地址：
#: 指定的行，$：最後一行
/pattern/：被此處模式所能夠匹配到的每一行
(3) 地址範圍：
#,#
#,+#
/pat1/,/pat2/
#,/pat1/
(4) ~：步進
1~2 奇數行
2~2 偶數行
編輯命令：
d: 刪除模式空間匹配的行，並立即啟用下一輪循環
p：打印當前模式空間內容，追加到默認輸出之後
a [\]text：在指定行後面追加文本
支持使用\n實現多行追加
i [\]text：在行前面插入文本
c [\]text：替換行為單行或多行文本
w /path/somefile: 保存模式匹配的行至指定文件
r /path/somefile：讀取指定文件的文本至模式空間中
匹配到的行後
=: 為模式空間中的行打印行號
!:模式空間中匹配行取反處理
s///：查找替換,支持使用其它分隔符，s@@@，s###
替換標記：
g: 行內全局替換
p: 顯示替換成功的行
w /PATH/TO/SOMEFILE
sed示例
sed '2p' /etc/passwd
sed -n '2p' /etc/passwd
sed -n '1,4p' /etc/passwd
sed -n '/root/p' /etc/passwd
sed -n '2,/root/p' /etc/passwd 從2行開始
sed -n '/^$/=' file 顯示空行行號
sed -n -e '/^$/p' -e '/^$/=' file
sed '/root/a\superman' /etc/passwd行後
sed '/root/i\superman' /etc/passwd 行前
sed '/root/c\superman' /etc/passwd 代替行
sed '/^$/d' file
sed '1,10d' file
nl /etc/passwd | sed '2,5d'
nl /etc/passwd | sed '2a tea'
sed 's/test/mytest/g' example
sed -n 's/root/&superman/p' /etc/passwd 單詞後
sed -n 's/root/superman&/p' /etc/passwd 單詞前
sed -e 's/dog/cat/' -e 's/hi/lo/' pets
sed -i.bak 's/dog/cat/g' pets
高級編輯命令
P：打印模式空間開端至\n內容，並追加到默認輸出之前
h: 把模式空間中的內容覆蓋至保持空間中
H：把模式空間中的內容追加至保持空間中
g: 從保持空間取出數據覆蓋至模式空間
G：從保持空間取出內容追加至模式空間
x: 把模式空間中的內容與保持空間中的內容進行互換
n: 讀取匹配到的行的下一行覆蓋至模式空間
N：讀取匹配到的行的下一行追加至模式空間
d: 刪除模式空間中的行
D：如果模式空間包含換行符，則刪除直到第一個換行符的模式空間中的文本，並不會讀取新的輸入行，而使用合成的模式空間重新啟動循環。如果模式空間不包含換行符，則會像發出d命令那樣啟動正常的新循環
sed示例
sed -n 'n;p' FILE 顯示偶數行
sed '1!G;h;$!d' FILE 逆向顯示文件內容
sed 'N;D' FILE 顯示最後一行
sed '$!N;$!D' FILE 顯示文件後兩行
sed '$!d' FILE 取出文件最後一行
sed 'G' FILE 每一行後面加一行空白行
sed 'g' FILE 全部行替換成空白行
sed '/^$/d;G' FILE 把空白行合成一行
sed 'n;d' FILE 顯示奇數行
sed -n '1!G;h;$p' FILE 逆向顯示文件內容
練習
1、刪除centos7系統/etc/grub2.cfg文件中所有以空白開頭的行行首的空白字符
[root@centos7 data]#sed -r "s@^[[:space:]]+@@" /etc/grub2.cfg
2、刪除/etc/fstab文件中所有以#開頭，後面至少跟一個空白字符的行的行首的#和空白字符
[root@centos7 data]#sed -r "s@^#[[:space:]]+@@" /etc/fstab
3、在centos6系統/root/install.log每一行行首增加#號
[root@centos6 ~]#sed -r "s@^@#@" /root/install.log
4、在/etc/fstab文件中不以#開頭的行的行首增加#號
(1) [root@centos6 ~]#sed -r "s@^([^#].*)@#\1@" /etc/fstab
(2) [root@centos6 ~]#sed -r "s@^[^#].*@#&@" /etc/fstab
5、處理/etc/fstab路徑,使用sed命令取出其目錄名和基名
[root@centos6 ~]#echo "/etc/fstab" | sed -r 's@^(.*/)([^/]+)/?$@\1@'
[root@centos6 ~]#echo "/etc/fstab" | sed -r 's@^(.*/)([^/]+)/?$@\2@'
6、利用sed 取出ifconfig命令中本機的IPv4地址
[root@centos7 data]#ifconfig ens33 | sed -n '2p' | sed -r 's/^.*inet (.*) net.*/\1/'
7、統計centos安裝光盤中Package目錄下的所有rpm文件的以.分隔倒數第二個字段的重復次數
[root@centos7 Packages]#ls | sed -r 's@.*\.([^.]+)\.rpm@\1@' | sort | uniq -c
8、統計/etc/init.d/functions文件中每個單詞的出現次數，並排序（用grep和sed兩種方法分別實現）
[root@centos7 data]#egrep -o "[[:alpha:]]+" functions | sort | uniq -c | sort -nr | less
[root@centos7 data]#sed -r 's@[^[:alpha:]]+@\n@g' functions | sort | uniq -c | sort -nr | sed '1d' | less
9、將文本文件的n和n+1行合並為一行，n為奇數行
[root@centos7 data]#cat f1
1
2
3
4
5
6
[root@centos7 data]#sed 'N;s@\n@@' f1
12
34
56
思考：
取ifconfig ens33的第2行
ifconfig ens33 | sed -n '2p'
取IP地址
(1) [root@centos7 data]#ifconfig ens33 | sed -n '2p' | sed -r 's/^.*inet (.*) net.*/\1/'
192.168.30.129
(2) [root@centos7 data]#ifconfig ens33 | sed -n '2p' |sed -e 's/.*inet //' -e 's/ netmask.*//'
(3) [root@centos7 data]#ifconfig ens33 | sed -r '2!d;s/^.*inet (.*) net.*/\1/'
(4) [root@centos7 data]#ifconfig ens33 | sed -n '2p' |sed 's/.*inet //' | sed 's/ netmask.*//'
把/etc/httpd/conf/httpd.conf中，#NameVirtualHost這行和#<VirtualHost/到#<\/VirtualHost>之間的行之前的#註釋掉
[root@centos6 ~]#sed -e '/^#<VirtualHost/,/^#<\/VirtualHost>/s@#@@g' -e '/#NameVirtualHost/s/#//' /etc/httpd/conf/httpd.conf
取目錄名
[root@centos7 data]#echo "/etc/sysconfig/network-scripts/" | sed -r 's@^(.*/)([^/]+)/?$@\1@'
/etc/sysconfig/
取基名
[root@centos7 data]#echo "/etc/sysconfig/network-scripts/" | sed -r 's@^(.*/)([^/]+)/?$@\2@'
network-scripts
Linux-sed