当前位置: 首页 > 编程笔记 >

Shell文本处理三剑客之sed的使用

刘松
2023-03-14
本文向大家介绍Shell文本处理三剑客之sed的使用,包括了Shell文本处理三剑客之sed的使用的使用技巧和注意事项,需要的朋友参考一下

sed 是 stream editor 的缩写,流编辑器,主要用于对标准输出或文件进行处理。

语法:

stdout | sed [option] "pattern command"
sed [option] "pattern command" file1

常用选项(option)

# -n 只打印静默模式匹配行,而不输出原行
# p 是打印命令
➜ sed '/hello/p' helloWorld.sh
#!/bin/bash

HELLO bash
echo "hello world"
echo "hello world"
➜ sed -n '/hello/p' helloWorld.sh
echo "hello world"

# -e 追加一组编辑命令
➜ sed -n -e '/hello/p' -e '/HELLO/p' helloWorld.sh
HELLO bash
echo "hello world"

# -f 把所有编辑命令保存在文件中,适用于复杂编辑操作
➜ cat edit.sed
/hello/p
➜ sed -n -f edit.sed hello.md

# -E (或 -r)支持扩展正则表达式
➜ sed -n -E '/hello|HELLO/p' helloWorld.sh
HELLO bash
echo "hello world"

# -i 直接修改源文件内容
# s 是替换命令
# 这里是吧 helloWorld.sh 文件中所有的 hello 改为 hello123
sed -n -i 's/hello/hello123/g' helloWorld.sh

匹配模式(pattern)

匹配模式 说明
10command 第 10 行
10,20command 第 10 到 20 行
10,+5command 第 10 到 16 行
/pattern1/command 匹配 pattern1 对应的行
/pattern1/,/pattern2/command 从 pattern1 对应的行开始,到 pattern2 的行
10,/pattern1/command 从第 10 行开始,到 pattern1 的行
/pattern1/,10command 从 pattern1 对应的行开始,到第 10 行

常用编辑命令(command)

查询

  • p 打印匹配的内容

增加

  • a string 行后追加
  • i string 行前追加
  • r file 从外部文件读入,在匹配的行后追加
  • w newfile 将匹配的行写入外部文件

删除

  • d 删除

修改

  • s/old/new 替换行内第一个 old 为 new
  • s/old/new/g 行内所有 old 替换为 new
  • s/old/new/2g 从第 2 行开始到文件末尾的所有 old 替换为 new
  • s/old/new/ig 行内所有 old 替换为 new,忽略大小写

示例:

# 删除以 sys 开头、并且以/sbin/nologin 结尾的行
➜ sed -i '/^sys.*\/sbin\/nologin$/d' passwd_bak

# 删除注释行、空行
sed -i '/[:blank:]*#/d;/^$/d' passwd_bak

# 查找在以 vagrant 开头的行,下一行追加内容
➜ sed -i '/^vagrant/a 这是追加的一行内容' passwd_bak

# 把所有的 root 替换为 root123
➜ sed -i 's/root/root123/ig' passwd_bak

# 在所有以 sys 开头、以 nologin 结尾的行,尾部追加 _666
# 其中 & 表示前面正则匹配到的内容
➜ sed -i 's/^sys.*nologin$/&_666/g' passwd_bak

# 把所有以 sys 开头、以 nologin_666 结尾的行 改为
# 以 SYS_ 开头、以 _777 结尾,其中 \1 表示前面括号中匹配的中间部分内容
➜ sed -i 's/^sys\(.*\)nologin_666$/SYS_\1_777/g' passwd_bak

# 把 1 ~ 10 行所有的 sys 改为 SYS
➜ sed -i '1,10s/sys/SYS/ig' passwd_bak

# 统计 my.cnf 文件中 mysqld 的子配置项数量
# sed 查找从 [mysqld] 到 下一个[.*] 之间的行
# grep -v 过滤注释、空行和 [.*] 行
# wc -l 统计最后的行数
sed -n "/^\[mysqld\]$/,/^\[.*\]$/p" /etc/my.cnf | grep -Ev '^$|[#;]|^\[.*' | wc -l

注意:如果匹配模式中存在变量,则建议使用双引号,如 sed -i "s/$OLD_STR/$NEW_STR/g" passwd_bak

到此这篇关于Shell文本处理三剑客之sed的使用的文章就介绍到这了,更多相关Shell文本处理sed内容请搜索小牛知识库以前的文章或继续浏览下面的相关文章希望大家以后多多支持小牛知识库!

 类似资料:
  • 1. Sed 概述 1.1 Sed 是什么 Sed 全名为 Stream EDitor,顾名思义是对数据流进行编辑操作的一个命令,它能够遍历文件或文件流,对读入的输入流可以将其先存储在模式空间中,并将行号记录在内存中,利用模式空间中的一系列指定命令对其进行操作,待操作完成后从模式空间输出到 stdout,类似于在一个管道在其中对数据进行加工,完成后从另一头输出,接着读取下一行,重复往返,直至将所有

  • 主要内容:sed脚本命令,sed 脚本命令的寻址方式我们知道,Vim 采用的是交互式文本编辑模式,你可以用键盘命令来交互性地插入、删除或替换数据中的文本。但本节要讲的 sed 命令不同,它采用的是流编辑模式,最明显的特点是,在 sed 处理数据之前,需要预先提供一组规则,sed 会按照此规则来编辑数据。 sed 会根据脚本命令来处理文本文件中的数据,这些命令要么从命令行中输入,要么存储在一个文本文件中,此命令执行数据的顺序如下: 每次仅读取一行内容

  • 1. awk概述 1.1 awk是什么 awk不同于grep的文本搜索与sed工具的文本处理,它更偏向于对文本的格式化处理输出,它不仅仅是一款工具,也是一门解释性语言,其名字来源于它的三位作者的姓氏:Alfred Aho, Peter Weinberger 和 Brian Kernighan,在文本处理功能非常强大,是一款Linux服务器文本报告生成器和格式化文本输出工具。 1.2 为什么用awk

  • 1. grep 概述 1.1 grep 是什么 在我们日常 Linux 运维过程中,最多的就是对 Linux 文件进行处理,grep(global search regular expression (RE) and print out the line)作为一款非常方便且强大的文本搜索工具,其能使用正则表达式搜索文本,并把匹配的行打印出来,其使用对象为 Linux 系统的所有用户,使得我们日常操

  • grep 命令 sudo grep -c '500' fielename.log #查找文件包含500的行数 sudo cat index.html | grep -o 'js' #只输出文件中匹配到的部分 ps -aux | grep sshd #查找指定访问 ps -aux | grep 80 #查找指定端口 echo hello world | grep -i "HELLO" #查找

  • 这时我们终于了解了我们的三剑客,他们也就这么可以结合到一起了,HTML+Javascript+CSS是这一切的基础。而我们用到的其他语言如PHP、Python、Ruby等等到最后都会变成上面的结果,当然还有Coffeescript之类的语言都是以此为基础,这才是我们需要的知识。 5.1 Hello,Geek 有了一些些基础之后,我们终于能试着去写一些程序了。也是时候去创建一个像样的东西,或许你在一