码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • linux awk操作汇总(忘了来这里查)


    如果说sed可以完成行级别文本处理,则awk可以处理文本的每列。

    持续扩充中...

    目录

    1,从命令输出查看指定列

    2,查看文件指定列

    3,原地修饰所查看的列

    4,输出文件指定行(按行数)

     5,内容包含或匹配查找

    查看文件中包含指定字符的行

    查看文件中包含指定字符的行数

    6、输出符合条件的列 对应的行

    输出文件中第二列大于3的行

    输出文件中第二列的值能整除2的行

    输出文件中第一列和第二列相同的行

    输出文件中第一列和第二列不相同、且第一列值大于7的行

    7,列替换

    将第一列中的v字符替换为new

    将第一列整体替换为new

    8,awk结果写入文件

    9,按需修改文件名(批量)

    10,删除空格或指定字符

    删除每行开头的所有空格

    删除每行开头的所有空格和中划线


    1,从命令输出查看指定列

    如过滤查看docker镜像指定列:仅查看镜像id。

    先查看所有镜像,如下:

    1. docker images
    2. REPOSITORY     TAG       IMAGE ID       CREATED         SIZE
    3. kindest/node   v1.27.3   89e7dc9f9131   2 months ago    932MB
    4. hello-world    latest    feb5d9fea6a5   23 months ago   13.3kB

    如果只想获得镜像id,则:

    docker images| awk '{print $3}'

    效果:

    1. IMAGE
    2. 89e7dc9f9131
    3. feb5d9fea6a5


    2,查看文件指定列

    来构造一个多个列的文件:

    docker images|  awk '{print $2,$3}' > aaa

    如上,将镜像列表的第2、3列内容写到了文件aaa中,查看一下:

    1. #cat aaa
    2. TAG IMAGE
    3. v1.27.3 89e7dc9f9131
    4. latest feb5d9fea6a5

    查看aaa文件的第2列:

    awk '{print $2}' aaa

    效果:

    1. IMAGE
    2. 89e7dc9f9131
    3. feb5d9fea6a5

    3,原地修饰所查看的列

    如查看docker镜像列表时,给每个镜像id前后都拼接一个下划线:

    docker images|  awk '$3 = "_"$3"_"'

    效果:

    1. REPOSITORY    TAG   _IMAGE_   ID    CREATED   SIZE
    2. kindest/node v1.27.3   _89e7dc9f9131_   2 months ago 932MB
    3. hello-world latest    _feb5d9fea6a5_    23 months ago 13.3kB

    可以看到原地修改$3,拼接_是实现了,可是怎样才能只显示镜像ID这一列?

    docker images|  awk '{$3 = "_"$3"_";print $3}'

    效果:

    1. _IMAGE_
    2. _89e7dc9f9131_
    3. _feb5d9fea6a5_

    即 使用print实现。


    4,输出文件指定行(按行数)

    假设有文件aaa:

    1. TAG IMAGE
    2. v1.27.3 89e7dc9f9131
    3. latest feb5d9fea6a5

    输出第3行

    awk 'NR==3' aaa

    也可以用sed实现:

    sed -n 3p aaa

     5,内容包含或匹配查找

    查看文件中包含指定字符的行

    如下,查看文件中包含hello的行:

    awk '/hello/' a

    或使用sed实现:

    sed -n '/hello/p' a

    查看文件中包含指定字符的行数

    awk '/hello/' a| wc -l

    也可以grep实现:

    grep -c "hello" a

    6、输出符合条件的列 对应的行

    常见运算符:>   <  >=   <=   ==   !=   %求余

    有文件bbb内容如下:

    1. #cat bbb
    2. a   b
    3. 1   1
    4. 4   4
    5. 5   6
    6. 8   7

    输出文件中第二列大于3的行

    awk '{if($2>3)print}' bbb

    效果:

    1. a   b
    2. 4   4
    3. 5   6

    输出文件中第二列的值能整除2的行

    awk '{if($2%2==0)print}' bbb

    效果:

    1. a   b
    2. 4   4
    3. 5   6

    输出文件中第一列和第二列相同的行

    awk '{if($1==$2)print}' bbb

    效果:

    1. 1   1
    2. 4   4

    输出文件中第一列和第二列不相同、且第一列值大于7的行

    awk '{if($1!=$2 && $1>7)print}' bbb

    效果:

    1. a   b
    2. 8   7

    输出文件中第一列值大于等于5的行数

    awk '{if($1>=5)print}' bbb| wc -l

    效果:

    3

    7,列替换

    替换主要用到gsub函数。格式:gsub(/原内容/, 修改后内容, [ 指定列,不指定则默认所有列 ] )

    假设有文件aaa;

    1. TAG IMAGE
    2. v1.27.3 89e7dc9f9131
    3. latest feb5d9fea6a5

    将第一列中的v字符替换为new

    接下来我们将第一列中的v字符替换为new:

    awk '{gsub(/v/,"new",$1);print $1}' aaa

    效果:

    1. TAG
    2. new1.27.3
    3. latest

    如果想都看到每列,则将print后的$1去掉即可。


    将第一列整体替换为new

    awk '{gsub($1,"new",$1);print}' bbb

    效果:

    1. new b
    2. new 1
    3. new 4
    4. new 6
    5. new 7

    8,awk结果写入文件

    docker images|  awk '{$3 = "_"$3"_";print $3}' > aaa

    和大多数指令用法一样,使用>完成写入。如果是>> aaa,就是追加而不覆盖。


    9,按需修改文件名(批量)

    如下,当前目录有两个文件:

    1. #ls
    2. aaa  bbb

    接下来我们将它们文件名都带一个.txt并打印出来:

    ls | awk '{print $0=$0".txt"}'

    效果:

    1. aaa.txt
    2. bbb.txt

    注意,print这里使用$1也可以($2就不行了),但如果前面是用 ll 命令查询,则后面只能用$0得到文件。

    此时仅是打印出来看看长什么样,文件名其实没有变。如果要实际更改文件名,则结合使用mv命令通过管道执行:

    ls | awk '{print "mv",$0,$0".txt"}' | bash

    效果:

    1. #ls
    2. aaa.txt  bbb.txt

    10,删除空格或指定字符

    删除每行开头的所有空格

    awk 'sub(/^ */, "")' ccc

    如果去掉*,则仅去除每行第一个空格。同时注意,此操作不会实际修改文件,仅打印展示。

    或:

    awk 'sub(/^[ ]*/, "")' ccc

    删除每行开头的所有空格和中划线

    awk 'sub(/^[ -]*/, "")' ccc

  • 相关阅读:
    点云从入门到精通技术详解100篇-基于 CRF 模型语义优化的车载激光点云分类(续)
    【idea】idea clean Process terminated
    【Pycharm中python调用另一个文件类或者函数】
    数说故事《汽车行业全场景数字化解决方案》之产品管理解决方案
    JavaEE——传输层_UDP
    IntentService 源码理解
    20220910编译ITX-3588J的Buildroot的系统2a(编译Kernel)
    一线大厂必问微服务系列——SpringCloudAlibaba整合Sleuth
    1.1 计算机组成原理----概述
    [100天算法】-最长有效括号(day 38)
  • 原文地址:https://blog.csdn.net/HYZX_9987/article/details/132734414
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号