后端

cut [选项] [文件]

# 假设有一个文件data.txt，内容如下：
# name,age,city
# Alice,25,New York
# Bob,30,London

# 提取第一个字段
cut -d ',' -f 1 data.txt
# 输出:
# name
# Alice
# Bob

# 提取多个字段
cut -d ',' -f 1,3 data.txt
# 输出:
# name,city
# Alice,New York
# Bob,London

# 提取从第二个字段开始的所有字段
cut -d ',' -f 2- data.txt
# 输出:
# age,city
# 25,New York
# 30,London

# 提取前5个字符
cut -c 1-5 data.txt

# 提取第3个字符
cut -c 3 data.txt

# 提取从第3个字符开始的所有字符
cut -c 3- data.txt

# 从/etc/passwd文件中提取用户名和shell
cut -d ':' -f 1,7 /etc/passwd

# 提取IP地址的网络部分
ifconfig eth0 | grep 'inet ' | cut -d ' ' -f 10 | cut -d '.' -f 1-3

grep [选项] 模式 [文件]

# 在文件中搜索包含"error"的行
grep "error" log.txt

# 忽略大小写搜索
grep -i "error" log.txt

# 反向搜索，显示不包含"error"的行
grep -v "error" log.txt

# 显示匹配行的行号
grep -n "error" log.txt

# 搜索以"user"开头的行
grep "^user" data.txt

# 搜索以".com"结尾的行
grep "\.com$" data.txt

# 使用扩展正则表达式搜索邮箱地址
grep -E "[a-zA-Z0-9._%+-]+@[a-zA-Z0-9.-]+\.[a-zA-Z]{2,}" data.txt

# 在当前目录及其子目录中搜索包含"function"的文件
grep -r "function" .

# 只显示包含匹配的文件名
grep -rl "function" .

# 查找进程
grep "chrome" <(ps aux)

# 检查服务状态
systemctl status | grep "running"

# 统计日志中的错误数量
grep -c "ERROR" app.log

sed [选项] '命令' [文件]

# 替换文件中的"old"为"new"
sed 's/old/new/' data.txt

# 全局替换所有匹配项
sed 's/old/new/g' data.txt

# 替换第n个匹配项
sed 's/old/new/2' data.txt

# 使用不同的分隔符（适合路径等包含/的情况）
sed 's|/old/path|/new/path|g' data.txt

# 删除空行
sed '/^$/d' data.txt

# 删除包含"error"的行
sed '/error/d' data.txt

# 删除第5行
sed '5d' data.txt

# 删除第2到第5行
sed '2,5d' data.txt

# 在第一行前插入文本
sed '1i\Header line' data.txt

# 在匹配"Section"的行后追加文本
sed '/Section/a\New line after Section' data.txt

# 替换匹配"old line"的行
sed '/old line/c\New line' data.txt

# 批量重命名文件
touch file1.txt file2.txt file3.txt
ls file*.txt | sed 's/file/new_file/' | xargs -n 2 mv

# 清理日志文件中的时间戳
sed 's/\[.*\] //' log.txt

# 提取IP地址
sed -n 's/.*\([0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}\.[0-9]\{1,3\}\).*/\1/p' access.log

awk [选项] '模式 {动作}' [文件]

# 打印文件的第1和第3个字段
awk '{print $1, $3}' data.txt

# 使用自定义分隔符
awk -F ',' '{print $1, $2}' data.csv

# 打印包含"error"的行的第1个字段
awk '/error/ {print $1}' log.txt

# 打印第2个字段大于10的行
awk '$2 > 10 {print}' data.txt

# 计算第2个字段的总和
awk '{sum += $2} END {print sum}' data.txt

# 统计每个唯一值出现的次数
awk '{count[$1]++} END {for (key in count) print key, count[key]}' data.txt

# 格式化输出
awk '{printf "Name: %-10s Age: %3d\n", $1, $2}' data.txt

# 设置输出分隔符
awk 'BEGIN {OFS=","} {print $1, $2, $3}' data.txt

# 计算文件大小总和
ls -l | awk '{sum += $5} END {print sum}'

# 分析日志文件中的状态码
awk '{count[$9]++} END {for (code in count) print code, count[code]}' access.log

# 提取CSV文件中的特定列
awk -F ',' '{print $1, $4}' data.csv > new_data.csv

# 生成报告
awk 'BEGIN {print "Name\tAge\tScore"} {print $1 "\t" $2 "\t" $3}' data.txt

# 从日志文件中提取错误信息，统计出现次数
grep "ERROR" app.log | cut -d ' ' -f 5- | sort | uniq -c | sort -nr

# 查找包含特定IP的访问记录，提取URL
grep "192.168.1.1" access.log | awk '{print $7}' | sort | uniq

# 将CSV文件转换为空格分隔的文件
awk -F ',' '{print $1, $2, $3}' data.csv > data.txt

# 提取文件中的数字并计算平均值
grep -E "[0-9]+" data.txt | awk '{sum += $1} END {print sum/NR}'

# 查找占用内存最多的进程
ps aux | sort -nr -k 4 | head -5 | awk '{print $1, $2, $4, $11}'

# 监控磁盘使用情况
df -h | awk '$5 > 80 {print "Warning: " $1 " is " $5 " full"}'