0

0

Linux文本处理命令解析_Linux grep与awk综合用法讲解

舞夢輝影

舞夢輝影

发布时间:2025-12-22 23:05:22

|

626人浏览过

|

来源于php中文网

原创

grep负责快速筛选匹配行,awk负责按字段处理、计算和格式化输出;二者组合可高效解决日志分析、配置提取等实际问题。

linux文本处理命令解析_linux grep与awk综合用法讲解

Linux 中 grep 和 awk 是文本处理的两大利器,它们分工明确又常配合使用:grep 负责“找”,快速筛选匹配行;awk 负责“拆”和“算”,按字段处理、计算、格式化输出。掌握二者组合用法,能高效解决日志分析、配置提取、数据清洗等实际问题。

grep 基础与精准过滤技巧

grep 默认逐行匹配正则,但很多场景需要更稳更准:

  • -w 匹配完整单词(如 grep -w 'error' 不会误中 errorsenderror
  • -E 启用扩展正则(等价于 egrep),支持 |+? 等,例如 grep -E 'fail|error' /var/log/syslog
  • -v 反向筛选,排除干扰行(如 grep -v '^#|^$' 去掉注释和空行)
  • -n 显示行号,便于定位;-o 仅输出匹配部分(适合提取IP、邮箱等片段)

awk 核心能力:分字段、取内容、做计算

awk 默认以空白(空格/制表符)为分隔符,用 … 引用字段,<p>awk 默认以空白(空格/制表符)为分隔符,用 <code>$1$2… 引用字段,$0 表示整行:

表示整行:

拍我AI
拍我AI

AI视频生成平台PixVerse的国内版本

下载
  • 打印第2列且第3列大于100:awk '$3 > 100 {print $2}' data.txt
  • 统计某列出现次数:awk '{count[$1]++} END {for (i in count) print i, count[i]}' access.log
  • 自定义分隔符(如冒号):awk -F':' '$3 >= 500 {print $1}' /etc/passwd
  • 内置变量 NF(字段数)、NR(当前行号)很实用,比如跳过首行:awk 'NR>1 {print $1,$3}' file.csv

grep + awk 协同实战:从日志中精准提取关键信息

单独用一个命令往往不够,组合才能应对复杂需求。典型流程是:grep 快速缩小范围 → awk 精细提取或加工:

  • nginx 错误日志中状态码为 500 的请求URL:grep ' 500 ' /var/log/nginx/error.log | awk '{print $7}'
  • 提取所有 IPv4 地址并去重计数:grep -oE '([0-9]{1,3}\.){3}[0-9]{1,3}' access.log | awk '{ip[$0]++} END{for (i in ip) print i, ip[i]}'
  • 筛选含关键词且满足数值条件的行(先 awk 再 grep 更高效):awk '$5 > 200 {print $0}' app.log | grep 'timeout'

避坑提醒:常见误区与替代建议

组合使用时容易忽略细节,导致结果不准或效率低下:

  • grep 默认区分大小写,需加 -i 才匹配 Errorerror
  • awk 中正则匹配用 ~(如 $2 ~ /abc/),等于号 == 是字符串全等,别混淆
  • 大量数据时,优先用 awk 过滤再处理,比 grep 后管道传给 awk 更快(减少进程开销)
  • 若需更强大字段处理(如 JSON、CSV),可考虑 jqcsvkit,但 grep+awk 已覆盖 80% 终端日常需求

基本上就这些。熟练后你会发现,一条简洁的管道命令,就能替代几十行 Python 脚本——不复杂,但容易忽略细节。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

246

2023.07.27

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

522

2023.08.04

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

610

2023.08.04

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

244

2024.02.23

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

693

2024.07.09

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

3618

2024.08.07

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

54

2026.01.13

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

71

2026.01.13

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10.5万人学习

Git 教程
Git 教程

共21课时 | 4.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号