linux之uniq命令

1 uniq命令参数

uniq 命令用于检查及删除文本文件中重复出现的行列，一般与 sort 命令结合使用，可检查文本文件中重复出现的行列

uniq 参数(可以忽略) file
 

参数如下

  

   

    

     

    
    

     

      -c或--count 在每列旁边显示该行重复出现的次数。
     
    
   

    

     

    
    

     

      -d或--repeated 仅显示重复出现的行列。
     
    
   

    

     

    
    

     

      -f<栏位>或--skip-fields=<栏位> 忽略比较指定的栏位。
     
    
   

    

     

    
    

     

      -s<字符位置>或--skip-chars=<字符位置> 忽略比较指定的字符。
     
    
   

    

     

    
    

     

      -u或--unique 仅显示出一次的行列。
     
    
   

    

     

    
    

     

      -w<字符位置>或--check-chars=<字符位置> 指定要比较的字符。
     
    
   

    

     

    
    

     

      --help 显示帮助。
     
    
   

    

     

    
    

     

      --version 显示版本信息。
     
    
   

    

     

    
    

     

      [输入文件] 指定已排序好的文本文件。如果不指定此项，则从标准读取数据；
     
    
   

    

     

    
    

     

      [输出文件] 指定输出的文件。如果不指定此选项，则将内容显示到标准输出设备（显示终端）。
     
    
  
 

2 基本使用

1）不加参数的情况下uniq file,当重复的行并相邻时,我们可以去重，当重复的行并不相邻时,我们不可以去重。

  

   

    

     

    
    

     

      cat c.txt
     
    
   

    

     

    
    

     

      123
     
    
   

    

     

    
    

     

      123
     
    
   

    

     

    
    

     

      234
     
    
   

    

     

    
    

     

      234
     
    
   

    

     

    
    

     

      456
     
    
   

    

     

    
    

     

      456
     
    
  
 

  

   

    

     

    
    

     

      uniq c.txt
     
    
   

    

     

    
    

     

      123
     
    
   

    

     

    
    

     

      234
     
    
   

    

     

    
    

     

      456
     
    
  
 

下面的不生效 

  

   

    

     

    
    

     

      cat d.txt
     
    
   

    

     

    
    

     

      123
     
    
   

    

     

    
    

     

      234
     
    
   

    

     

    
    

     

      3
     
    
  
 

文章来源: chenyu.blog.csdn.net，作者：chen.yu，版权归原作者所有，如需转载，请联系作者。

原文链接：chenyu.blog.csdn.net/article/details/102982601