Linux命令：awk简介

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Linux命令：awk简介，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7783字，纯文字阅读大概需要12分钟。

内容图文

awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。

备注：awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，gawk 是 AWK 的 GNU 版本。

语法：

awk [options] ‘program‘ file file ...

awk [options] ‘PATTERN{action}‘ file file ...

-F CHAR:指定分隔符

awk的输出：

print item1, item2,...

要点：

(1) 各项目之间使用逗号分隔，而输出时则使用输出分隔符分隔

[root@localhost ~]# awk -F ":" ‘/^root/ {print $1,$7}‘ /etc/passwd

root /bin/bash

(2) 输出的各item可以是字符串或数值、当前记录的字段、变量或awk的表达式；数值会被隐式转换为字符串后输出

[root@localhost ~]# cat /etc/passwd |awk -F ‘:‘ ‘BEGIN {print "name shell"} {print $1,$7}‘

name shell

root /bin/bash

bin /sbin/nologin

daemon /sbin/nologin

adm /sbin/nologin

lp /sbin/nologin

(3) print后面item如果省略，相当于print $0；输出空白，使用pirnt ""

[root@localhost ~]# awk -F ":" ‘/^root/ {print}‘ /etc/passwd

root:x:0:0:root:/root:/bin/bash

[root@localhost ~]# awk -F ":" ‘/^root/ {print $0}‘ /etc/passwd

root:x:0:0:root:/root:/bin/bash

[root@localhost ~]# awk -F ":" ‘/^root/ {print ""}‘ /etc/passwd

awk的变量：

内置变量，自定义变量

(1) 内置变量:

FS：Field Seperator, 输入时的字段分隔符(相当于-F:)

RS：Record Seperator, 输入行分隔符

OFS: Output Field Seperator, 输出时的字段分隔符

ORS: Outpput Row Seperator, 输出时的行分隔符

NF：Numbers of Field，字段数

NR：Numbers of Record, 行数；所有文件的一并计数

FNR：行数；各文件分别计数

ARGV：数组，保存命令本身这个字符，awk ‘{print $0}‘ 1.txt 2.txt，意味着ARGV[0]保存awk,

ARGC: 保存awk命令中参数的个数

FILENAME： awk正在处理的当前文件的名称

示例：

使用FS指定分隔符

[root@localhost ~]# awk ‘BEGIN{FS=":"} {print $1,$7}‘ /etc/passwd

root /bin/bash

bin /sbin/nologin

daemon /sbin/nologin

adm /sbin/nologin

lp /sbin/nologin

sync /bin/sync

统计/etc/passwd:文件名，每行的行号，每行的列数，对应的完整行内容

[root@localhost ~]# awk -F ":" ‘{print "filename:"FILENAME",linenumber:"NR",columns:"NF",linecontent:" $0 }‘ /etc/passwd

filename:/etc/passwd,linenumber:1,columns:7,linecontent:root:x:0:0:root:/root:/bin/bash

filename:/etc/passwd,linenumber:2,columns:7,linecontent:bin:x:1:1:bin:/bin:/sbin/nologin

自定义变量

-v var_name=VALUE

变量名区分字符大小写

(1) 可以program中定义变量

(2) 可以命令行中通过-v选项自定义变量

示例：统计/etc/passwd的账户人数

[root@localhost ~]# awk -F: ‘{count++;print $0} END{print "user count is", count}‘ /etc/passwd

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

daemon:x:2:2:daemon:/sbin:/sbin/nologin

adm:x:3:4:adm:/var/adm:/sbin/nologin

lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

user count is 5

printf命令

命令的使用格式：printf format, item1, item2,...

要点：

(1) 要指定format；

(2) 不会自动换行；如需换行则需要给出\n

(3) format用于为后面的每个item指定其输出格式；

format格式的指示符都%开头，后跟一个字符：

%c: 显示字符的ASCII码；

%d, %i: 十进制整数；

%e, %E: 科学计数法显示数值；

%f: 显示浮点数；

%g, %G: 以科学计数法格式或浮点数格式显示数值；

%s: 显示字符串；

%u: 显示无符号整数；

%%: 显示%自身；

修饰符：

#：显示宽度

-：左对齐

+：显示数值的符号

.#: 取值精度

示例：显示用户的UID

[root@localhost ~]# awk -F: ‘{printf "UID: %d\n",$3}‘ /etc/passwd

UID: 0

UID: 1

UID: 2

UID: 3

UID: 4

UID: 5

UID: 6

UID: 7

UID: 8

统计/etc/passwd:文件名，每行的行号，每行的列数，对应的完整行内容

[root@localhost ~]# awk -F ‘:‘ ‘{printf("filename:%10s,linenumber:%s,columns:%s,linecontent:%s\n",FILENAME,NR,NF,$0)}‘ /etc/passwd

filename:/etc/passwd,linenumber:1,columns:7,linecontent:root:x:0:0:root:/root:/bin/bash

filename:/etc/passwd,linenumber:2,columns:7,linecontent:bin:x:1:1:bin:/bin:/sbin/nologin

awk的操作符

算术操作符：

x+y

x-y

x*y

x/y

x**y, x^y

x%y

-x：负值

+x：转换为数值

字符串操作符：连接

赋值操作符：

**=

如果模式自身是=号，要写为/=/

比较操作符：

~：模式匹配，左边的字符串能够被右边的模式所匹配为真，否则为假；

!~:

逻辑操作符：

&&：与

||：或

条件表达式:

selector?if-true-expression:if-false-expression

示例：查看用户的UID大于500显示为普通用户，否则显示为管理员或系统用户

[root@localhost ~]# awk -F: ‘{$3>500?utype="Common User":utype="Admin or Syetem user";print $1, "is", utype}‘ /etc/passwd

root is Admin or Syetem user

bin is Admin or Syetem user

daemon is Admin or Syetem user

adm is Admin or Syetem user

user9 is Common User

user10 is Common User

模式：

(1) Regexp: 格式为/PATTERN/

仅处理被/PATTERN/匹配到的行

(2) Expression: 表达式，其结果为非0或非空字符串时满足条件

仅处理满足条件的行

(3) Ranges: 行范围，此前地址定界

NR 仅处理范围内的行

(4) BEGIN/END: 特殊模式，仅在awk命令的program运行之前（BEGIN）或运行之后（END）执行一次

(5) Empty:空模式，匹配任意行

示例：显示用户名以及Shell类型

[root@localhost ~]# awk -F: ‘$NF~/bash$/{print $1,$NF}‘ /etc/passwd

root /bin/bash

mk /bin/bash

bash /bin/bash

testbash /bin/bash

basher /bin/bash

显示指定范围内的用户名以及Shell类型

[root@localhost ~]# awk -F: ‘NR>=1&&NR<=5{print $1,$NF}‘ /etc/passwd

root /bin/bash

bin /sbin/nologin

daemon /sbin/nologin

adm /sbin/nologin

lp /sbin/nologin

统计某个文件夹下的文件占用的字节数

[root@localhost ~]# ll /etc/ |awk ‘BEGIN {size=0} {size=size+$5} END{print "[end]size is ",size}‘

[end]size is 1995496

统计某个文件夹下的文件占用的字节数，以M为单位显示

[root@localhost ~]# ll /etc/ |awk ‘BEGIN {size=0} {size=size+$5} END{print "[end]size is ",size/1024/1024,"M"}‘

[end]size is 1.90305 M

常用的action：

(1) Expressions

(2) Control statements

(3) Compound statements

(4) input statements

(5) output statements

控制语句：

if-else

格式：if (condition) {then body} else {else body}

判断用户UID大小并显示用户的类型

[root@localhost ~]# awk -F: ‘{if ($3>=500) {print $1 "is a Common User"} else {print $1 "is a Admin or System User"}}‘ /etc/passwd

rootis a Admin or System User

binis a Admin or System User

user9is a Common User

user10is a Common User

判断用户UID与GID是否相同

[root@localhost ~]# awk -F: ‘{if ($3=$4) {print $1 "is a good guy"} else {print $1 "is a bad guy"}}‘ /etc/passwd

rootis a bad guy

binis a good guy

daemonis a good guy

admis a good guy

lpis a good guy

syncis a bad guy

while

格式：while (condition) {while body}

显示文件的奇数行

[root@localhost ~]# awk ‘{i=1;while (i<=NF){printf "%s",$i;i+=2};print""}‘ /etc/inittab

#isusedupstarttherunlevel.

#OTHERHEREHAVEEFFECTYOUR

#initializationstarted/etc/init/rcS.conf

do-while循环

格式：do {do-while body} while (condition)

for循环

格式：for (variable assignment; condition; iteration process) {for body}

示例：查看访问web服务器的每个IP的访问次数

[root@localhost ~]# ab -n 10000 -c 100 http://192.168.111.128/index.html （网站访问压力测试）

This is ApacheBench, Version 2.3 <$Revision: 655654 $>

Licensed to The Apache Software Foundation, http://www.apache.org/

Benchmarking 192.168.111.128 (be patient)

Completed 1000 requests

Completed 2000 requests

[root@localhost ~]# awk ‘{ip[$1]++}END{for (i in ip) {print i,ip[i]} }‘ /var/log/httpd/access_log

192.168.111.128 30031

提前结束对本行的处理进而提前进入下一行的处理；

示例：打印奇数用户

[root@localhost ~]# awk -F: ‘{if($3%2==0) next;print $1,$3}‘ /etc/passwd

bin 1

adm 3

sync 5

[root@localhost ~]# awk -F: ‘{if(NR%2==0) next;print NR,$1}‘ /etc/passwd

1 root

3 daemon

5 lp

数组

传统数组：Index编号从1开始；

关联数组：

array[index-expression]

index-expression: 可以使用任意字符串; 如果某数组元素事先不存在，那么在引用时，awk会自动创建此元素并将其初始化为空串；因此，要判断某数组是否存在某元素，必须使用“index in array”这种格式；

A[first]="hello awk"

print A[second]

要遍历数组中的每一个元素，需要使用如下特殊结构：

for (var in array) {for body}

其var会遍历array的索引；

state[LISTEN]++

state[ESTABLISHED]++

示例：显示LISTEN 或ESTABLISHED等链接状态的次数

[root@localhost ~]# netstat -tan | awk ‘/^tcp/{++state[$NF]}END{for (s in state) {print s,state[s]}}‘

ESTABLISHED 1

LISTEN 11

示例：查看访问web服务器的每个IP的访问次数

[root@localhost ~]# ab -n 10000 -c 100 http://192.168.111.128/index.html （网站压力测试）

This is ApacheBench, Version 2.3 <$Revision: 655654 $>

Licensed to The Apache Software Foundation, http://www.apache.org/

Benchmarking 192.168.111.128 (be patient)

Completed 1000 requests

Completed 2000 requests

[root@localhost ~]# awk ‘{ip[$1]++}END{for (i in ip) {print i,ip[i]} }‘ /var/log/httpd/access_log

192.168.111.128 30031

删除数组元素：

delete array[index]

awk的内置函数

split(string,array[,fieldsep[,seps]])：

功能：将string表示的字符串以fieldsep为分隔符进行切片，并切片后的结果保存至array为名的数组中；数组下标从1开始；

root:x:0:0::/root:/bin/bash

user[1]="root", user[2]

此函数有返回值，返回值为切片后的元素的个数

[root@localhost ~]# netstat -tn | awk ‘/^tcp/{lens=split($5,client,":");ip[client[1]]++}END{for (i in ip) print i,ip[i]}‘

192.168.111.1 1

length(string)

功能：返回给定字串的长度

substr(string,start[,length])

功能：从string中取子串，从start为起始位置为取length长度的子串；

原文：http://zhangnan30.blog.51cto.com/2051991/1698264

内容总结

以上是互联网集市为您收集整理的Linux命令：awk简介全部内容，希望文章能够帮你解决Linux命令：awk简介所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1317322.html

来源：【匿名】

【上一篇】Linux网络编程——原始套接字能干什么？【下一篇】Linux下安装GD

更多 ►

【Linux命令：awk简介】教程文章相关的互联网学习教程文章

Linux命令的返回值对于某些监测脚本和探测命令蛮有用的；在 Linux 下，不管你是启动一个桌面程序也好，还是在控制台下运行命令，所有的程序在结束时，都会返回一个数字值，这个值叫做返回值，或者称为错误号 ( Error Number )。在控制台下，有一个特殊的环境变量 $?，保存着前一个程序的返回值，我们可以试试： $ ls *.pngDiagram1.png eqn.png peazip.pngeqn4.png Mandelbrot.png x2.png$ echo $?0 先随便执行个命...

linux命令格式--tar命令

经常用对linux命令，但是对命令的格式确不是很清楚，本文来梳理下命令的基本格式，并用tar命令做说明。linux命令的一般格式是：　　　command [options] argumentscommand 是命令。options是命令的选项，一般分为可选和必选，根据要实现的命令功能不同，选项的个数和内容也不同，大多数命令选项可以组合使用，命令选项有短格式和长格式的。短格式就是单个英文字母，选项是使用“ -”符号（半角减号符）引导开始选项，字母可以是大...

Linux命令：awk简介

awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。备注：awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，gawk 是 AWK 的 GNU 版本。语法：awk [options] ‘program‘ file file ...awk [options] ‘PATTERN{action}‘ file file ...-F CHAR:指定分隔符aw...

Linux命令：linux软链接的创建、删除和更新---ln

大家都知道，有的时候，我们为了省下空间，都会使用链接的方式来进行引用操作。同样的，在系统级别也有。在Windows系列中，我们称其为快捷方式，在Linux中我们称其为链接（基本上都差不多了，其中可能有差别，但是那又怎样呢？我们只要实现我们的效果，谁会有精力去管它茴香的茴字有几种写法呢？）。 Windows老姑娘的那几个姿势这里就不赘述了，我们今天主要说下Linux中的茴香的茴字怎么写。说错了，是Linux中的软链接怎么操作。在...

Linux命令之tcpdump

项目中常用到的抓包命令： 1. tcpdump -i eth0:1 udp poort 6015 -Xvv 2. tcpdump host 239.16.101.27 -Xvv 3. tcpdump -i eth0:1 t -s 0 -c 100 dst port !22 src net 192.168.1.0/24 -w ./target.cap 1. 命令格式 tcpdump [ -adeflnNOpqStvx ] [ -c 数量 ] [ -F 文件名 ]　　　　　　　　　 [ -i 网络接口 ] [ -r 文件名] [ -s snaplen ]　　　　　　　　　　[ -T 类型 ] [ -w 文件名 ] [表达式 ] tcpdump的...

Linux命令应用大词典-第46章其他命令

46.1 mkfontdir：创建X字体文件的索引46.2 dumpiso:转储IEEE 1394同步信道的数据包46.3 iconv:转换文件编码46.4 hash:显示和删除哈希表46.5 isb_release:显示LSB和特定版本的相关信息46.6 locale:获取特定语言环境46.7 nm:从对象中列出符号46.8 rmt:远程磁盘创术协议模块46.9 lscgroup:列出所有的cgroups46.10 cgclear:卸载cgroup文件系统原文：https://www.cnblogs.com/tqtl911/p/8661158.html

linux命令实战【图】

1cp(复制文件或目录）cp语法：cp 源文件（source）目标文件（destination）cp [options]suouce例题一：用root身份将主文件夹下的.bashrc复制到/tmp下，并更名为bashrc例题二：切换目录到/tmp。并将/var/log/wtmp复制到/tmp且查看属性例题三：复制/etc/这个目录的所有内容到/tmp下面。2rm（移除文件和目录）rm[fir]-f :就是force 的意思，忽略不存在的文件，不会发出警告-i：互动模式，在删除前会询问用户是否操作-r：递归删除。最...

每天一个Linux命令（52）telnet命令【代码】

执行telnet指令开启终端机阶段作业，并登入远端主机。 (1)用法: 用法: telnet [参数] [主机] (2)功能: 功能: telnet命令通常用来远程登录。原理: Telnet服务虽然也属于客户机/服务器模型的服务，但它更大的意义在于实现了基于Telnet协议的远程登录（远程交互式计算）。 telnet实现的远程登录: 分时系统允许多个用户同时使用一台计算机，为了保证系统的安全和记帐方便，系统要求每个用户有单独的帐号作为...

贴段脚本...Linux命令批量执行，免密码登录配置【代码】

一：贴个脚本，主要实现两个功能;配置集群免密码登录可以远程批量执行命令#!/bin/bash case $1 in # 获取option -cp | --cpoy) #判断option for ip_list in `cat $2`;do #读取$2文件每一行，将ip密码信息存入ip_list变量 ip=`echo $ip_list | cut -d: -f1` #提取ip ps=`echo $ip_list | cut -d: -f2` #提取密码 expect -c" spawn scp -r /root/.ssh/ $i...

Linux命令学习

内存目录/dev/shm查看内存、cpu使用情况top查看磁盘使用情况df -ldf -h目录跳转进入cd返回上一层 cd ..返回根 cd /清屏clear常见目录/根目录。/boot引导程序，内核等存放的目录。/sbin超级用户可以使用的命令的存放目录。/bin普通用户可以使用的命令的存放目录。/lib根目录下的所程序的共享库目录。/dev设备文件目录。/home普通用户的目录（$HOME目录）/root用户root的$HOME目录/etc全局的配置文件存放目录。/usr这个目录中包含了命...

linux命令（22）：mkdir命令

实例1：创建一个空目录mkdir test实例2：递归创建多个目录mkdir -p /home/test实例3：创建权限为777的目录mkdir -m 777 test实例4：创建新目录都显示信息mkdir -v test实例5：一个命令创建项目的目录结构mkdir -vp test/{lib/,bin/,doc/{info,product},logs/{info,product},service/deploy/{info,product}}查看目录结构：tree test/test/|-- bin|-- doc| |-- info| `-- product|-- lib|-- logs| |-- info| `-- product`-...

linux命令之chmod 2011.11.24转载于网络

使用权限 : 所有使用者使用方式 : chmod [-cfvR] [--help] [--version] mode file... 说明 : Linux/Unix 的档案调用权限分为三级 : 档案拥有者、群组、其他。利用 chmod 可以藉以控制档案如何被他人所调用。参数 : mode : 权限设定字串，格式如下 : [ugoa...][[+-=][rwxX]...][,...]，其中 u 表示该档案的拥有者，g 表示与该档案的拥有者属于同一个群体(group)者，o 表示其他以外的人，a 表示这三者皆是。 + 表示增加权限、- 表示...

linux命令：ssh scp ssh-keygen -t rsa用法

SSH远程连接命令：用法格式：ssh IPADDR 不指定用户则以当前主机登录系统的用户身份去登录远程主机 ssh USERNAME@IPADDR 通过ssh协议以某用户身份远程登录到某主机Usage: ssh root@192.168.1.100 以root身份通过ssh协议远程登录到192.168.1.100主机 ssh -l USERNAME IPADDR 相当于ssh USERNAME@IPADDR登录模式一样 ssh USERNAME@IPADDR ‘COMMOND‘ 以USERNAME用户在远程主机上执行COMMOND命令。 SCP远程复制命令： ...

Linux 命令与文件的搜寻【图】

平时会偶尔忘记一些命令或者文件，下面的这些命令能够帮我们快速的找到命令或者文件1. 命令的搜寻　　命令：which　　功能：在PATH配置的目录下搜寻命令　　用法：which [-a] [command]　　参数：　　　　-a: 把从PATH配置的目录找到找到的所有指令都列出，而不是只显示第一个被找到的指令　　例子1：查找man命令，有且仅显示一条查询结果　　例子2：查找man命令，并显示所有的查询结果　　　　由上面两个可以看出有没有参数-a的差...

自己动手写docker之Linux命令(CentOS7.7)【代码】

pstreeexample pstree -a -p-a：显示每个程序的完整指令，包含路径，参数或是常驻服务的标示； -p：显示程序识别码； -u：显示用户名称；ps+grep命令sh-4.2# ps -ef | grep 10105 // 打印和进程14029相关的所有进程信息，包括该进程本身，该进程作为父子进程的情况 root 10105 10010 0 04:40 pts/0 00:00:00 /bin/sh // bash是父进程 root 10107 10105 0 04:41 pts/0 00:00:00 ps -ef // bash的子进程 root ...

LINUX - 最热教程

Xrdp - 通过Windows的RDP连接Linux远程...VMware中Linux虚拟机挂载主机共享文件夹...Linux双网卡配置虚拟机下Linux安装好Nginx后，宿主机无...linux下安装postgresql并配置远程图形桌...Linux命令--exportfs命令详解 linux 终端printf打印显示乱码问题修正 Linux下Shell的for循环语句N种写法 Linux下创建nginx脚本-start、stop、re...SUSELinux安装MySQL

首页 / LINUX / Linux命令：awk简介

Linux命令：awk简介

内容导读

内容图文

内容总结

内容备注

内容手机端

【Linux命令：awk简介】教程文章相关的互联网学习教程文章

[转]Linux命令的返回值

linux命令格式--tar命令

Linux命令：awk简介

Linux命令：linux软链接的创建、删除和更新---ln

Linux命令之tcpdump

Linux命令应用大词典-第46章其他命令

linux命令实战【图】

每天一个Linux命令（52）telnet命令【代码】

贴段脚本...Linux命令批量执行，免密码登录配置【代码】

Linux命令学习

linux命令（22）：mkdir命令

linux命令之chmod 2011.11.24转载于网络

linux命令：ssh scp ssh-keygen -t rsa用法

Linux 命令与文件的搜寻【图】

自己动手写docker之Linux命令(CentOS7.7)【代码】

LINUX - 最新教程

LINUX - 最热教程