news 2026/8/15 23:48:15

Linux 中文本处理:cut 和 awk命令

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Linux 中文本处理:cut 和 awk命令

cutawk都是 Linux 中用于文本处理的命令行工具,常用于从文件或数据流中提取、处理和分析文本。cut偏向简单、快速的列提取,而awk是一个完整的文本处理编程语言,功能强大得多。

一、cut命令:简单列提取

cut用于按列(字段)或字符位置从文本中提取数据,适合处理结构化的表格数据(如 CSV、日志)。

1. 基本语法

cut -d 分隔符 -f 字段列表 文件 cut -c 字符范围 文件

2. 常用选项

选项含义示例
-d指定字段分隔符(默认是制表符\t-d','指定逗号分隔
-f指定要提取的字段(列)-f1,3提取第1和第3列
-c按字符位置提取-c1-5提取第1到第5个字符
--complement提取指定字段以外的字段-f2 --complement提取除第2列外的所有列

3. 使用示例

示例 1:提取 CSV 文件中的列
# 假设 data.csv 内容: # 姓名,年龄,城市 # Alice,25,北京 # Bob,30,上海 # 提取第 1 列和第 3 列 cut -d',' -f1,3 data.csv # 输出: # 姓名,城市 # Alice,北京 # Bob,上海 # 提取第 2 列(年龄) cut -d',' -f2 data.csv # 输出: # 年龄 # 25 # 30
示例 2:提取日志文件中的特定字段
# 提取 /etc/passwd 中的用户名(第1列)和 shell(第7列) cut -d':' -f1,7 /etc/passwd | head -3 # 输出: # root:/bin/bash # daemon:/usr/sbin/nologin # bin:/usr/sbin/nologin
示例 3:按字符位置提取
# 提取每行的前 10 个字符 cut -c1-10 file.txt # 提取每行的第 5 到第 15 个字符 cut -c5-15 file.txt # 提取每行的第 10 个字符 cut -c10 file.txt
示例 4:配合管道使用
# 查看占用内存前 5 的进程(提取 PID 和 CMD) ps aux --sort=-%mem | head -6 | tail -5 | cut -c10-20,50-

二、awk命令:文本处理编程语言

awk是一个强大的文本分析工具,它更像一门编程语言,支持变量、条件判断、循环、数组等,适合更复杂的文本处理任务。

1. 基本语法

awk '模式 { 动作 }' 文件
  • 模式:条件,如NR>1/error/

  • 动作:对匹配行执行的操作,如print $1sum+=$3

2. 常用内置变量

变量含义
$0整行内容
$1,$2...第1列、第2列...
NF当前行的列数(Number of Fields)
NR行号(从1开始)
FS输入字段分隔符(Field Separator)
OFS输出字段分隔符
RS输入记录分隔符(行分隔符)
ORS输出记录分隔符

3. 使用示例

示例 1:打印整行或特定列
# 打印整行 awk '{print $0}' file.txt # 打印第1列和第3列(默认以空格分隔) awk '{print $1, $3}' file.txt # 打印第2列和第5列,用逗号分隔 awk '{print $2 "," $5}' file.txt # 打印文件中的第 2 列 awk '{print $2}' data.txt
示例 2:指定分隔符
# 处理 CSV(逗号分隔) awk -F',' '{print $1, $3}' data.csv # 等价于: awk 'BEGIN{FS=","} {print $1, $3}' data.csv # 处理 /etc/passwd(冒号分隔) awk -F':' '{print $1, $7}' /etc/passwd
示例 3:条件过滤
# 打印文件头(第1行) awk 'NR==1' file.txt # 打印第 10 到第 20 行 awk 'NR>=10 && NR<=20' file.txt # 打印包含 "error" 的行 awk '/error/ {print $0}' log.txt # 打印第3列大于50的行 awk '$3 > 50 {print $0}' scores.txt # 打印第2列以 /bin/ 开头的行 awk '$2 ~ /^\/bin\// {print $0}' file.txt
示例 4:计算和统计
# 计算第3列的总和 awk '{sum += $3} END {print "总和:", sum}' data.txt # 计算行数 awk 'END {print "总行数:", NR}' file.txt # 计算第3列的平均值 awk '{sum += $3} END {print "平均值:", sum / NR}' data.txt # 统计每行的列数 awk '{print NF, $0}' file.txt
示例 5:格式化输出
# 自定义输出格式 awk '{printf "姓名: %-10s 年龄: %3d\n", $1, $2}' data.txt # 添加表头 awk 'BEGIN{print "姓名\t年龄"} {print $1"\t"$2}' data.txt

三、cutvsawk对比

特性cutawk
功能简单的列提取完整的文本处理语言
编程能力支持变量、循环、数组、条件判断
复杂计算不支持支持
分隔符单个字符支持正则表达式
学习难度中等
适用场景快速、简单的列提取复杂的文本处理和数据分析
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/8/15 23:40:08

GLM ZCode AI编程助手实战:从安装配置到项目开发全指南

最近&#xff0c;很多开发者朋友在群里讨论一个事儿&#xff1a;智谱AI的GLM大模型和ZCode编程助手&#xff0c;突然宣布对百万用户“重置用量”&#xff0c;并且伴随着新一轮的“价格战”。消息一出&#xff0c;有人欢呼“羊毛来了”&#xff0c;也有人疑惑“这是不是套路&…

作者头像 李华
网站建设 2026/8/15 23:35:37

第二十五章 个体理解工程

第二十五章 个体 第二十五章 个体理解工程 &#x1f4c5; 2026年08月14日&#x1f464; 东塬一老翁&#x1f4c2; 第一卷 个体人工智能理论基础 第二十五章 个体理解工程 ——Individual Understanding Model 25.1 个体理解的本质 在个体人工智能中&#xff0c;理解不是对…

作者头像 李华
网站建设 2026/8/15 23:29:33

Chrome Network面板全解析:从HTTP请求到性能优化的前端调试实战

1. 从“黑盒”到“透视”&#xff1a;为什么我们必须懂Network面板做前端开发或者网站性能优化&#xff0c;最怕的就是线上出问题。用户反馈“页面打不开”、“加载太慢了”&#xff0c;你这边代码看着一切正常&#xff0c;服务器日志也风平浪静。这时候&#xff0c;如果你还只…

作者头像 李华
网站建设 2026/8/15 23:18:55

基于Gemini API构建AI对话应用:从环境配置到生产部署的工程实践

在实际 AI 应用开发领域&#xff0c;谷歌的 Gemini 模型系列正成为一个无法绕开的技术选项。从最初的 Bard 到如今整合了多模态能力的 Gemini&#xff0c;其 API 和 SDK 的易用性、性能表现以及背后的技术栈&#xff0c;是许多开发者在构建智能应用时评估的重点。虽然官方会公布…

作者头像 李华