linux colrm命令

命令简介

colrm（column remove）命令用于从标准输入读取文本，并移除指定列范围内的字符，然后将结果输出到标准输出。它按照字符位置（列）来处理文本，对于固定格式的文本处理特别有用。

语法格式

colrm [起始列 [结束列]]

参数说明

使用示例

示例1：基本使用 - 删除单个列

删除文本中的第5列：

# 创建测试文件
echo -e "123456789\nabcdefghi\nABCDEFGHI" > test.txt

# 查看原始内容
cat test.txt

# 删除第5列
cat test.txt | colrm 5 5

# 结果说明：
# 原始: 123456789  → 结果: 12346789  (删除第5个字符'5')
# 原始: abcdefghi  → 结果: abcdfghi  (删除第5个字符'e')
# 原始: ABCDEFGHI  → 结果: ABCDFGHI  (删除第5个字符'E')

示例2：删除列范围

删除文本中第3列到第6列之间的字符：

# 删除第3列到第6列
cat test.txt | colrm 3 6

# 结果说明：
# 原始: 123456789  → 结果: 12789     (删除第3-6个字符'3456')
# 原始: abcdefghi  → 结果: abghi     (删除第3-6个字符'cdef')
# 原始: ABCDEFGHI  → 结果: ABGHI     (删除第3-6个字符'CDEF')

示例3：从指定列删除到行尾

只指定起始列，删除从该列到行尾的所有字符：

# 删除从第4列到行尾
cat test.txt | colrm 4

# 结果说明：
# 原始: 123456789  → 结果: 123       (删除第4列到末尾'456789')
# 原始: abcdefghi  → 结果: abc       (删除第4列到末尾'defghi')
# 原始: ABCDEFGHI  → 结果: ABC       (删除第4列到末尾'DEFGHI')

示例4：处理固定格式的数据

处理固定宽度的数据文件：

# 创建固定宽度格式的数据
echo -e "Alice   25  Engineer\nBob     30  Manager\nCharlie 28  Developer" > employees.txt

# 查看原始数据
cat employees.txt

# 删除职位列（假设职位从第15列开始）
cat employees.txt | colrm 15

# 只保留姓名（第1-10列），删除其他列
cat employees.txt | colrm 11

示例5：结合其他命令使用

在管道中结合其他文本处理命令：

# 处理ls -l输出，只保留文件名和权限
ls -l | colrm 1 10 | colrm 31

# 处理ps输出，删除不需要的列
ps aux | colrm 50 80

# 结合grep过滤后处理
grep "error" logfile.txt | colrm 1 20

示例6：交互式使用

在不指定文件的情况下交互式使用colrm：

# 启动交互式模式
colrm 5 10

# 然后输入文本，按Ctrl+D结束
Hello World, this is a test
Testing colrm command
Another line of text

实际应用场景

场景1：处理系统命令输出

清理系统命令输出，只保留需要的信息：

#!/bin/bash

# 处理df输出，只保留文件系统和使用率
echo "磁盘使用情况:"
df -h | colrm 20 50 | head -5

# 处理netstat输出，只保留本地地址和状态
echo -e "\n网络连接:"
netstat -tuln | grep LISTEN | colrm 30 60

# 处理进程列表，只保留PID和命令名
echo -e "\n运行进程:"
ps aux | colrm 20 50 | head -5

场景2：数据文件预处理

预处理数据文件，移除不需要的列：

#!/bin/bash

# 处理CSV格式的日志文件（固定位置）
process_log_file() {
    local input_file=$1
    local output_file="${input_file%.*}_processed.txt"

    echo "处理日志文件: $input_file"

    # 移除时间戳列（假设时间戳在第1-20列）
    # 移除日志级别列（假设在第21-30列）
    cat "$input_file" | colrm 1 30 > "$output_file"

    echo "处理完成: $output_file"
    echo "示例内容:"
    head -3 "$output_file"
}

# 使用函数
process_log_file "application.log"

场景3：文本格式转换

将固定格式文本转换为其他格式：

#!/bin/bash

# 转换固定宽度格式为CSV格式
convert_to_csv() {
    local input_file=$1
    local output_file="${input_file%.*}.csv"

    echo "转换文件: $input_file → $output_file"

    # 提取各列并添加逗号分隔
    while IFS= read -r line; do
        name=$(echo "$line" | colrm 11 | tr -d ' ')
        age=$(echo "$line" | colrm 1 10 | colrm 4 | tr -d ' ')
        job=$(echo "$line" | colrm 1 15 | tr -d ' ')
        echo "$name,$age,$job"
    done < "$input_file" > "$output_file"

    echo "转换完成"
}

# 使用函数
convert_to_csv "employees.txt"

高级技巧

处理包含制表符的文本

处理包含制表符的文本时，先转换为空格：

# 将制表符转换为空格后再处理
cat tab_file.txt | expand | colrm 10 20

# 或者结合多个处理步骤
cat data.txt | expand -t 4 | colrm 5 15 | unexpand -t 4

与awk命令的比较

colrm与awk在列处理上的区别：

# 使用colrm删除第5-10列
cat file.txt | colrm 5 10

# 使用awk实现类似功能（按字符位置）
cat file.txt | awk '{print substr($0, 1, 4) substr($0, 11)}'

# 使用cut命令（按字段分隔）
cat file.txt | cut -c1-4,11-

处理多字节字符

注意：colrm按字节位置工作，可能不适用于多字节字符：

# 创建包含中文的测试文件
echo -e "中文测试123\nEnglish test" > multi_byte.txt

# 查看字符位置（可能不准确）
cat multi_byte.txt | colrm 3 5

# 更好的方法是使用支持Unicode的工具
cat multi_byte.txt | cut -c1-2,6-

注意事项

常见问题解决

# 方法1：先将制表符转换为空格
cat file.txt | expand | colrm 10 20

# 方法2：指定制表符宽度
cat file.txt | expand -t 8 | colrm 10 20

# 方法3：使用其他工具
cat file.txt | awk '{gsub(/\t/, "        "); print}' | colrm 10 20

# 使用cut命令（支持字符计数）
cat file.txt | cut -c1-5

# 使用awk的substr函数
cat file.txt | awk '{print substr($0, 1, 5)}'

# 使用sed（按字节模式）
cat file.txt | sed 's/^\(.\{5\}\).*/\1/'

# 删除第2-4列和第7-9列（需要多次处理）
cat file.txt | colrm 2 4 | colrm 5 7

# 或者使用cut命令
cat file.txt | cut -c1,5-6,10-

# 使用awk处理
cat file.txt | awk '{print substr($0,1,1) substr($0,5,2) substr($0,10)}'

替代命令