UDN-企业互联网技术人气社区

板块导航

浏览  : 1361
回复  : 0

[运维] Linux中sort,uniq,cut,wc命令详解

[复制链接]
呵呵燕的头像 楼主
发表于 2016-10-6 20:22:05 | 显示全部楼层 |阅读模式
  本文主要对Linux中sort,uniq,cut,wc这4个命令的使用方法进行了详细说明,希望对你有所帮助。

  sort

  sort 命令对 File 参数指定的文件中的行排序,并将结果写到标准输出。如果 File 参数指定多个文件,那么 sort 命令将这些文件连接起来,并当作一个文件进行排序。

  sort语法

  1.   [root[url=home.php?mod=space&uid=3913]@www[/url] ~]# sort [-fbMnrtuk] [file or stdin]

  2.   选项与参数:

  3.   -f :忽略大小写的差异,例如 A 与 a 视为编码相同;

  4.   -b :忽略最前面的空格符部分;

  5.   -M :以月份的名字来排序,例如 JAN, DEC 等等的排序方法;

  6.   -n :使用『纯数字』进行排序(默认是以文字型态来排序的);

  7.   -r :反向排序;

  8.   -u :就是 uniq ,相同的数据中,仅出现一行代表;

  9.   -t :分隔符,默认是用 [tab] 键来分隔;

  10.   -k :以那个区间 (field) 来进行排序的意思
复制代码


  对/etc/passwd 的账号进行排序

 
  1.  [root@www ~]# cat /etc/passwd | sort

  2.   adm:x:3:4:adm:/var/adm:/sbin/nologin

  3.   apache:x:48:48:Apache:/var/www:/sbin/nologin

  4.   bin:x:1:1:bin:/bin:/sbin/nologin

  5.   daemon:x:2:2:daemon:/sbin:/sbin/nologin
复制代码


  sort 是默认以第一个数据来排序,而且默认是以字符串形式来排序,所以由字母 a 开始升序排序。

  /etc/passwd 内容是以 : 来分隔的,我想以第三栏来排序,该如何

  1.   [root@www ~]# cat /etc/passwd | sort -t ':' -k 3

  2.   root:x:0:0:root:/root:/bin/bash

  3.   uucp:x:10:14:uucp:/var/spool/uucp:/sbin/nologin

  4.   operator:x:11:0:operator:/root:/sbin/nologin

  5.   bin:x:1:1:bin:/bin:/sbin/nologin

  6.   games:x:12:100:games:/usr/games:/sbin/nologin
复制代码


  默认是以字符串来排序的,如果想要使用数字排序:

 
  1.  cat /etc/passwd | sort -t ':' -k 3n

  2.   root:x:0:0:root:/root:/bin/bash

  3.   daemon:x:1:1:daemon:/usr/sbin:/bin/sh

  4.   bin:x:2:2:bin:/bin:/bin/sh
复制代码


  默认是升序排序,如果要倒序排序,如下

  1.   cat /etc/passwd | sort -t ':' -k 3nr

  2.   nobody:x:65534:65534:nobody:/nonexistent:/bin/sh

  3.   ntp:x:106:113::/home/ntp:/bin/false

  4.   messagebus:x:105:109::/var/run/dbus:/bin/false

  5.   sshd:x:104:65534::/var/run/sshd:/usr/sbin/nologin
复制代码


  如果要对/etc/passwd,先以第六个域的第2个字符到第4个字符进行正向排序,再基于第一个域进行反向排序。

  1.   cat /etc/passwd | sort -t':' -k 6.2,6.4 -k 1r

  2.   sync:x:4:65534:sync:/bin:/bin/sync

  3.   proxy:x:13:13:proxy:/bin:/bin/sh

  4.   bin:x:2:2:bin:/bin:/bin/sh

  5.   sys:x:3:3:sys:/dev:/bin/sh
复制代码


  查看/etc/passwd有多少个shell:对/etc/passwd的第七个域进行排序,然后去重:

  1.   cat /etc/passwd | sort -t':' -k 7 -u

  2.   root:x:0:0:root:/root:/bin/bash

  3.   syslog:x:101:102::/home/syslog:/bin/false

  4.   daemon:x:1:1:daemon:/usr/sbin:/bin/sh

  5.   sync:x:4:65534:sync:/bin:/bin/sync

  6.   sshd:x:104:65534::/var/run/sshd:/usr/sbin/nologin
复制代码


  uniq

  uniq命令可以去除排序过的文件中的重复行,因此uniq经常和sort合用。也就是说,为了使uniq起作用,所有的重复行必须是相邻的。

  uniq语法

  1.   [root@www ~]# uniq [-icu]

  2.   选项与参数:

  3.   -i :忽略大小写字符的不同;

  4.   -c :进行计数

  5.   -u :只显示唯一的行
复制代码


  testfile的内容如下

  1.   cat testfile

  2.   hello

  3.   world

  4.   friend

  5.   hello

  6.   world

  7.   hello
复制代码


  直接删除未经排序的文件,将会发现没有任何行被删除

  1.   #uniq testfile

  2.   hello

  3.   world

  4.   friend

  5.   hello

  6.   world

  7.   hello
复制代码


  排序文件,默认是去重

  1.   #cat words | sort |uniq

  2.   friend

  3.   hello

  4.   world
复制代码


  排序之后删除了重复行,同时在行首位置输出该行重复的次数

  1.   #sort testfile | uniq -c

  2.   1 friend

  3.   3 hello

  4.   2 world
复制代码


  仅显示存在重复的行,并在行首显示该行重复的次数

  1.   #sort testfile | uniq -dc

  2.   3 hello

  3.   2 world
复制代码


  仅显示不重复的行

  1.   sort testfile | uniq -u

  2.   friend
复制代码


  cut

  cut命令可以从一个文本文件或者文本流中提取文本列。

  cut语法

  1.   [root@www ~]# cut -d'分隔字符' -f fields <==用于有特定分隔字符

  2.   [root@www ~]# cut -c 字符区间 <==用于排列整齐的信息

  3.   选项与参数:

  4.   -d :后面接分隔字符。与 -f 一起使用;

  5.   -f :依据 -d 的分隔字符将一段信息分割成为数段,用 -f 取出第几段的意思;

  6.   -c :以字符 (characters) 的单位取出固定字符区间;
复制代码


  PATH 变量如下

  1.   [root@www ~]# echo $PATH

  2.   /bin:/usr/bin:/sbin:/usr/sbin:/usr/local/bin:/usr/X11R6/bin:/usr/games

  3.   # 1 | 2 | 3 | 4 | 5 | 6 | 7
复制代码


  将 PATH 变量取出,我要找出第五个路径。

  1.   #echo $PATH | cut -d ':' -f 5

  2.   /usr/local/bin
复制代码


  将 PATH 变量取出,我要找出第三和第五个路径。

  1.   #echo $PATH | cut -d ':' -f 3,5

  2.   /sbin:/usr/local/bin
复制代码


  将 PATH 变量取出,我要找出第三到最后一个路径。

 
  1.  echo $PATH | cut -d ':' -f 3-

  2.   /sbin:/usr/sbin:/usr/local/bin:/usr/X11R6/bin:/usr/games
复制代码


  将 PATH 变量取出,我要找出第一到第三个路径。

 
  1.  #echo $PATH | cut -d ':' -f 1-3

  2.   /bin:/usr/bin:/sbin:
复制代码

  将 PATH 变量取出,我要找出第一到第三,还有第五个路径。

  
  1. echo $PATH | cut -d ':' -f 1-3,5

  2.   /bin:/usr/bin:/sbin:/usr/local/bin
复制代码


  实用例子:只显示/etc/passwd的用户和shell

  1.   #cat /etc/passwd | cut -d ':' -f 1,7

  2.   root:/bin/bash

  3.   daemon:/bin/sh

  4.   bin:/bin/sh
复制代码


  wc

  统计文件里面有多少单词,多少行,多少字符。

  wc语法

  1.   [root@www ~]# wc [-lwm]

  2.   选项与参数:

  3.   -l :仅列出行;

  4.   -w :仅列出多少字(英文单字);

  5.   -m :多少字符;
复制代码


  默认使用wc统计/etc/passwd

 
  1.  #wc /etc/passwd

  2.   40 45 1719 /etc/passwd
复制代码


  40是行数,45是单词数,1719是字节数

  wc的命令比较简单使用,每个参数使用如下:

  1.   #wc -l /etc/passwd #统计行数,在对记录数时,很常用

  2.   40 /etc/passwd #表示系统有40个账户

  3.   #wc -w /etc/passwd #统计单词出现次数

  4.   45 /etc/passwd

  5.   #wc -m /etc/passwd #统计文件的字节数

  6.   1719
复制代码


原文作者:佚名  来源:开发者头条

相关帖子

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们
联系我们
  • 电话:010-86393388
  • 邮件:udn@yonyou.com
  • 地址:北京市海淀区北清路68号
移动客户端下载
关注我们
  • 微信公众号:yonyouudn
  • 扫描右侧二维码关注我们
  • 专注企业互联网的技术社区
版权所有:用友网络科技股份有限公司82041 京ICP备05007539号-11 京公网网备安1101080209224 Powered by Discuz!
快速回复 返回列表 返回顶部