关于shell:Shell文本处理三剑客之sed

sed 是 stream editor 的缩写，流编辑器，次要用于对规范输入或文件进行解决。

语法：

• stdout | sed [option] "pattern command"
• sed [option] "pattern command" file1

<!– more –>

罕用选项（option）

# -n 只打印静默模式匹配行，而不输入原行
# p 是打印命令
➜  sed '/hello/p' helloWorld.sh
#!/bin/bash

HELLO bash
echo "hello world"
echo "hello world"
➜  sed -n '/hello/p' helloWorld.sh
echo "hello world"

# -e 追加一组编辑命令
➜  sed -n -e '/hello/p' -e '/HELLO/p' helloWorld.sh
HELLO bash
echo "hello world"

# -f 把所有编辑命令保留在文件中，实用于简单编辑操作
➜  cat edit.sed
/hello/p
➜  sed -n -f edit.sed hello.md

# -E（或 -r）反对扩大正则表达式
➜  sed -n -E '/hello|HELLO/p' helloWorld.sh
HELLO bash
echo "hello world"

# -i 间接批改源文件内容
# s 是替换命令
# 这里是吧 helloWorld.sh 文件中所有的 hello 改为 hello123
sed -n -i 's/hello/hello123/g' helloWorld.sh

匹配模式（pattern）

罕用编辑命令（command）

• 查问

  • p 打印匹配的内容

• 减少

  • a string 行后追加
  • i string 行前追加
  • r file 从内部文件读入，在匹配的行后追加
  • w newfile 将匹配的行写入内部文件

• 删除

  • d 删除

• 批改

  • s/old/new 替换行内第一个 old 为 new
  • s/old/new/g 行内所有 old 替换为 new
  • s/old/new/2g 从第 2 行开始到文件开端的所有 old 替换为 new
  • s/old/new/ig 行内所有 old 替换为 new，疏忽大小写

示例：

# 删除以 sys 结尾、并且以 /sbin/nologin 结尾的行
➜  sed -i '/^sys.*\/sbin\/nologin$/d' passwd_bak

# 删除正文行、空行
sed -i '/[:blank:]*#/d;/^$/d' passwd_bak

# 查找在以 vagrant 结尾的行，下一行追加内容
➜  sed -i '/^vagrant/a 这是追加的一行内容' passwd_bak

# 把所有的 root 替换为 root123
➜  sed -i 's/root/root123/ig' passwd_bak

# 在所有以 sys 结尾、以 nologin 结尾的行，尾部追加 _666
# 其中 & 示意后面正则匹配到的内容
➜  sed -i 's/^sys.*nologin$/&_666/g' passwd_bak

# 把所有以 sys 结尾、以 nologin_666 结尾的行 改为
# 以 SYS_ 结尾、以 _777 结尾，其中 \1 示意后面括号中匹配的两头局部内容
➜  sed -i 's/^sys\(.*\)nologin_666$/SYS_\1_777/g' passwd_bak

# 把 1 ～ 10 行所有的 sys 改为 SYS
➜  sed -i '1,10s/sys/SYS/ig' passwd_bak

# 统计 my.cnf 文件中 mysqld 的子配置项数量
# sed 查找从 [mysqld] 到 下一个 [.*] 之间的行
# grep -v 过滤正文、空行和 [.*] 行
# wc -l 统计最初的行数
sed -n "/^\[mysqld\]$/,/^\[.*\]$/p" /etc/my.cnf | grep -Ev '^$|[#;]|^\[.*' | wc -l

留神 ：如果匹配模式中存在变量，则倡议应用双引号，如 sed -i "s/$OLD_STR/$NEW_STR/g" passwd_bak