linux文本处理工具及正则表达式集锦

cat命令：查看文本内容

         cat [选项]... [文件]...

         -E    显示行结束符

         -n    显示文本内容时显示行号

         -A    显示所以控制符

         -b    非空行编号

         -s     压缩连续的空行成一行

[root@bogon ~]# cat -n /etc/issue > test.txt　　　　##查看文件内容并显示行号，重定向到test.txt文件中
[root@bogon ~]# cat test.txt 
  1 \S
  2 Kernel \r on an \m
  3 
[root@bogon ~]# cat > file <<EOF　　　　##创建file文件，输入内容以EOF结束
> kernel \r on an \m
> EOF
[root@bogon ~]# cat file 
kernel \r on an \m

more       分页显示

         more [OPTIONS...] FILE...

less  分页显示，是man命令使用的分页器

[root@bogon ~]# less /etc/httpd.conf
[root@bogon ~]# cat /etc/httpd.conf |more

head命令 ：

         head [OPTION]... [FILE]...

　　　　-n　　显示文件前n行，默认显示前10行

　　　　-c #　显示文件前#个字节内容

　　　　-q　　不显示包含给定文件名的文件头

[root@bogon ~]# head -5 /etc/fstab 　　　　##显示文件前5行
#
# /etc/fstab
# Created by anaconda on Mon May 1 04:49:06 2017
#
[root@bogon ~]# head -q -n 5 /etc/fstab /etc/issue　　　　##显示多个文件前5行，并且不显示文件头
#
# /etc/fstab
# Created by anaconda on Mon May 1 04:49:06 2017
#
\S
Kernel \r on an \m　　

tail命令：

tail [OPTION]... [FILE]...

         -f　　 实时查看，常用监控日志文件

　　　-c #   显示后#字节

　　　-n #  显示后#行，默认显示行10行

[root@bogon ~]# tail -2 /etc/passwd　　　　##显示文件后2行
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
[root@bogon ~]# tail -f /var/log/messages 　　　##不停地去读最新的内容，有实时监视的效果，用Ctrl＋c来终止
May 2 02:46:26 localhost systemd: Configuration file /usr/lib/systemd/system/wpa_supplicant.service is marked executable. Please remove executable permission bits. Proceeding anyway. May 2 02:46:26 localhost yum[16325]: Installed: httpd-2.4.6-45.el7.centos.4.x86_64 May 2 03:01:01 localhost systemd: Started Session 10 of user root. May 2 03:01:01 localhost systemd: Starting Session 10 of user root. May 2 03:45:49 localhost systemd-logind: Removed session 4. May 2 03:46:20 localhost systemd: Started Session 11 of user root. May 2 03:46:20 localhost systemd-logind: New session 11 of user root. May 2 03:46:20 localhost systemd: Starting Session 11 of user root. May 2 04:01:01 localhost systemd: Started Session 12 of user root. May 2 04:01:01 localhost systemd: Starting Session 12 of user root.

 cut命令：

cut [OPTION]... [FILE]...

　　-d  指明分隔符，默认tab

　　-f  第# 个字段

　　#,#[,#] ：离散的多个字段，例如1,3,6

　　#-# ：连续的多个字段,  例如1-6

　　混合使用：1-3,7

　　-c 按字符切割

　　--output-delimiter=STRING指定输出分隔符

 显示文件前10行，以“：”作为分隔符打印第1和第7个字段并分隔符换成空格输出：

[root@bogon ~]# head /etc/passwd |cut -d ":" -f1,7 --output-delimiter="  "　　##查看系统用户使用的shell
root  /bin/bash　　　　　　
bin  /sbin/nologin
daemon  /sbin/nologin
adm  /sbin/nologin
lp  /sbin/nologin
sync  /bin/sync
shutdown  /sbin/shutdown
halt  /sbin/halt
mail  /sbin/nologin
operator  /sbin/nologin
[root@bogon ~]# ip addr |tail -4 |head -1 |cut -d "/" -f1 |cut -d " " -f6　　##获取ip地址
192.168.25.102

paste命令：

　　paste [OPTION]... [FILE]...

　　-d  分隔符: 指定分隔符，默认用TAB

　　-s     所以行合并成一行显示

[root@bogon ~]# paste /etc/resolv.conf /etc/issue　　　　##合并输出两个文件的内容
# Generated by NetworkManager  \S
nameserver 202.106.46.151  Kernel \r on an \m
nameserver 202.106.195.68  
[root@bogon ~]# paste -s /etc/issue　　　　##对输出的内容独立占一行
\S  Kernel \r on an \m  

wc命令：统计文件内容

         -l      统计行数

         -w    统计单词个数

         -c     统计字节数

         -m    只计数字符总数

 　　  -L　　打印最长行的长度

[root@bogon ~]# cat /etc/passwd |wc -l　　##统计文件的行数
22
[root@bogon ~]# echo "aaa bbb ccc" |wc -w　　　　##统计输出的单词数量
3
[root@bogon ~]# echo "abcdef" |wc -m　　　　##统计输出有多少个字节
7

文本排序：sort [options] file(s)

　　-r 　　逆序排序

　　-n 　　根据字符串数值进行比较

　　-f 　　忽略字符大小写

　　-u 　　去重。配合-c，严格校验排序；不配合-c，则只输出一次排序结果

　　-t 　　使用指定的分隔符代替非空格到空格的转换

　　-k 1　在位置1 开始一个key，在位置2 终止(默认为行尾)

[root@bogon ~]# head /etc/passwd |sort -t ":" -k 3nr　　　　##以“：”分割对第三个字段数值进行倒序排列
operator:x:11:0:operator:/root:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
halt:x:7:0:halt:/sbin:/sbin/halt
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
sync:x:5:0:sync:/sbin:/bin/sync
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
root:x:0:0:root:/root:/bin/bash
[root@bogon ~]# cat /etc/passwd |sort -t':' -k 7 -u　　　　##以“：”分割对第7个字段排序，去重
root:x:0:0:root:/root:/bin/bash
sync:x:5:0:sync:/sbin:/bin/sync
halt:x:7:0:halt:/sbin:/sbin/halt
bin:x:1:1:bin:/bin:/sbin/nologin
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

uniq 命令：从输入中删除重复的前后相接的行

　　 uniq [OPTION]... [FILE]...

　　-c:  显示每行重复出现的次数；

　　-d:  仅显示重复过的行；

　　-u:  仅显示唯一的行；

　　-i：  比较时不区分大小写

[root@bogon ~]# uniq -c ip.txt 　　　　##显示重复行出现的次数，相邻行且完全一样为重复
   3 101.200.78.99
   1 103.41.52.94
   2 106.185.47.161
   1 101.200.78.99
   2 113.240.250.155
   1 13.0.782.215
   1 185.130.5.231

文件比较：

diff命令：比较两个文件之间的区别

　　-r　　递归比较

　　-u 　输出“统一的（unified ）

　　patch 命令复制在其它文件中进行的改变（要谨慎使用！）

　　-b   选项来自动备份改变了的文件

[root@bogon ~]# diff file1.txt file2.txt 
8c8　　　　　　##表示第8行有区别
< 113.240.250.155
---
> 133.240.250.155

替换和删除字符：

         tr [OPTION]... SET1 [SET2]

                   -c 或——complerment ：取字符集的补集

                   -d 或——delete ：删除所有属于第一字符集的字符；

                   -s 或—squeeze-repeats ：把连续重复的字符以单独一个字符表示

                   -t 或--truncate-set1 ：先删除第一字符集较第二字符集多出的字符

[root@bogon ~]# tr -s '\n' < file1.txt 　　　　##删除空行
103.41.52.94
106.185.47.161
\S
Kernel \r on an \m
106.185.47.161
[root@bogon ~]# tr A-Z a-z < file1.txt 　　　　##把大写字母换成小写
103.41.52.94
106.185.47.161
\s
kernel \r on an \m
106.185.47.161

grep命令：过滤文本内容

         grep [OPTIONS] PATTERN [FILE...]

         -i       查找时忽略大小写

         -v     取反

　　　 -n      显示匹配的行号

　　   -c   　　统计匹配的行数

　　  -o     仅显示匹配到的字符串；

　　  -q    静默模式，不输出任何信息

　　-A # 　　after,  后#行 行

　　-B #　　before,  前#行 行

　　-C # 　　context,  前后各#行 行

　　-e 　　实现多个选项间的逻辑or 关系

　　-w 　　整行匹配整个单词

　　-E 　　使用扩展正则表达式

正则表达式：

.     匹配任意单个字符；

[]    匹配指定范围内的任意单个字符

[^]  匹配指定范围外的任意单个字符

* 　　匹配前面的字符任意次，包括0次 次贪婪模式：尽可能长的匹配

.* 　　任意长度的任意字符

\? 　　匹配其前面的字符0 或1次

\+ 　　匹配其前面的字符至少1次

\{m\} 　　匹配前面的字符m次

\{m,n\} 　　匹配前面的字符至少m 次，至多n次

\{,n\} 　　匹配前面的字符至多n次 次

\{m,\} 　　匹配前面的字符至少m次

^ 　　行首锚定，用于模式的最左侧

$ 　　行尾锚定，用于模式的最右侧

^PATTERN$　　用于模式匹配整行

^$　　 空行

^[[:space:]]*$ 　　空白行

\< 或 或 \b 　　词首锚定，用于单词模式的左侧

\> 或 或 \b 　　词尾锚定；用于单词模式的右侧

\<PATTERN\>   匹配整个单词

\(\) 　　　将一个或多个字符捆绑在一起，当作一个整体进行处理

[:alpha:] 所有字母，包括大、小写

[:alnum:] 所有字母和数字

[:upper:] 所有大写字母

[:lower:] 所有小写字母

[:digit:] 所有数字

[:punct:] 所有标点符号

[:space:] 空格和Tab

扩展正则表达式：

.  　　任意单个字符

[] 　　 指定范围的字符

[^]　　  不在指定范围的字符

* 　　匹配前面字符任意次

?　　 0 或1次 次

+ 　　1 次或多次

{m} 　　匹配m次

{m,n} 　　至少m ，至多n次

^　　行首

$ 　　行尾

\<, \b　　语首

\>, \b 　　 语尾

分组　　()

　　后向引用：\1, \2, ...

     或者：a|b

     C|cat: C 或cat

     (C|c)at:Cat 或cat

[root@bogon ~]# grep '^\(root\|apache\)' test.txt 　　##过滤以root或apache开头的行
root:x:0:0:root:/root:/bin/bash
apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
[root@bogon ~]# grep -R /sbin/nologin　*　　　　　##递归从所以文件中查询匹配的内容
test.txt:bin:x:1:1:bin:/bin:/sbin/nologin
test.txt:daemon:x:2:2:daemon:/sbin:/sbin/nologin
[root@bogon ~]# ip addr |grep "dynamic" |tr -s " " |cut -d " " -f3 |cut -d "/" -f1　　##过滤ip地址
192.168.25.102
[root@bogon ~]# ip addr |grep -E -o "([0-9]{1,3}[\.]){1,3}[0-9]{1,3}"
127.0.0.1
192.168.25.102
192.168.25.255
[root@bogon ~]# df -Th |tr -s " " |sort -k 6nr |head -1　　##查出使用率的最大百分比值的分区
/dev/sda1 xfs 497M 125M 373M 25% /boot
[root@bogon ~]# cat /etc/passwd |sort -t ':' -k 3n |tail -1 |cut -d ":" -f1,3,7
systemd-bus-proxy:999:/sbin/nologin　　　　　　##找出uid最大值的用户，并显示用户名、UID、及shell类型

以上所述是小编给大家介绍的linux文本处理工具及正则表达式集锦，希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对网站的支持！

# linux  # 文本处理工具  # linux正则表达式  # 详解正则表达式及Linux三大文本处理工具  # Linux中文本处理工具之sort命令详解  # Linux中文本处理工具之cut命令详解  # Linux文本处理工具使用详解  # 多个  # 行号  # 分隔符  # 递归  # 分页  # 行数  # 正则表达式  # 小编  # 行尾  # 在此  # 给大家  # 第三个  # 多出  # 所述  # 给我留言  # 感谢大家  # 后向  # 有多少个  # 默认为  # 重定向 

相关文章： 股票网站制作软件,网上股票怎么开户？  如何在阿里云完成域名注册与建站？  浙江网站制作公司有哪些,浙江栢塑信息技术有限公司定制网站做的怎么样？  如何制作公司的网站链接,公司想做一个网站，一般需要花多少钱？  如何在企业微信快速生成手机电脑官网？  如何在阿里云域名上完成建站全流程？  个人网站制作流程图片大全,个人网站如何注销？  ,网页ppt怎么弄成自己的ppt？  建站之星代理费用多少？最新价格详情介绍  如何在云主机快速搭建网站站点？  css网站制作参考文献有哪些,易聊怎么注册？  网站制作的步骤包括,正确网址格式怎么写？  学校为何禁止电信移动建设网站？  上海网站制作开发公司,上海买房比较好的网站有哪些？  建站主机助手选型指南：2025年热门推荐与高效部署技巧  昆明高端网站制作公司,昆明公租房申请网上登录入口？  无锡营销型网站制作公司,无锡网选车牌流程？  南阳网站制作公司推荐,小学电子版试卷去哪里找资源好？  建站之星如何快速解决建站难题？  如何在腾讯云服务器上快速搭建个人网站？  网站制作公司排行榜,抖音怎样做个人官方网站  如何高效完成独享虚拟主机建站？  专业制作网站的公司哪家好,建立一个公司网站的费用.有哪些部分,分别要多少钱？  子杰智能建站系统｜零代码开发与AI生成SEO优化指南  免费的流程图制作网站有哪些,2025年教师初级职称申报网上流程？  如何在橙子建站上传落地页？操作指南详解  专业网站制作服务公司,有哪些网站可以免费发布招聘信息？  如何做网站制作流程,*游戏网站怎么搭建？  定制建站模板如何实现SEO优化与智能系统配置？18字教程  网站图片在线制作软件,怎么在图片上做链接？  如何续费美橙建站之星域名及服务？  如何在万网主机上快速搭建网站？  电商网站制作多少钱一个,电子商务公司的网站制作费用计入什么科目？  湖北网站制作公司有哪些,湖北清能集团官网？  高防服务器如何保障网站安全无虞？  jQuery 常见小例汇总  武清网站制作公司,天津武清个人营业执照注销查询系统网站？  相册网站制作软件,图片上的网址怎么复制？  如何通过FTP服务器快速搭建网站？  Java解压缩zip - 解压缩多个文件或文件夹实例  ,有什么在线背英语单词效率比较高的网站？  宁波自助建站系统如何快速打造专业企业网站？  Python路径拼接规范_跨平台处理说明【指导】  如何快速搭建虚拟主机网站？新手必看指南  手机网站制作平台,手机靓号代理商怎么制作属于自己的手机靓号网站？  如何基于PHP生成高效IDC网络公司建站源码？  如何通过西部数码建站助手快速创建专业网站？  如何用wdcp快速搭建高效网站？  在线制作视频的网站有哪些,电脑如何制作视频短片？  制作网站哪家好,cc、.co、.cm哪个域名更适合做网站？