uniq [选项] 文件

说明：这个命令读取输入文件，并比较相邻的行。在正常情况下，第二个及以后更多个重复行将被删去，行比较是根据所用字符集的排序序列进行的。
该命令加工后的结果写到输出文件中。输入文件和输出文件必须不同。如果输入文件用“- ”表示，则从标准输入读取。

该命令各选项含义如下：、

– c 显示输出中，在每行行首加上本行在文件中出现的次数。它可取代- u和- d选项。

– d 只显示重复行。

– u 只显示文件中不重复的各行。

– n 前n个字段与每个字段前的空白一起被忽略。一个字段是一个非空格、非制表符的字符串，彼此由制表符和空格隔开(字段从0开始编号)。

+n 前n个字符被忽略，之前的字符被跳过(字符从0开始编号)。

– f n 与- n相同，这里n是字段数。

– s n 与+n相同，这里n是字符数。

下面举几个uniq命令的例子，供大家学习参考。

1，看test文件的内容
 

2，uniq命令不加任何参数，仅显示连续重复的行一次
 

3，-c 参数显示文件中每行连续出现的次数。
 

4，排序后再显示
 

5，-d选项仅显示文件中连续重复出现的行。
 

6，-u选项显示文件中没有连续出现的行。
 

7，忽略 每行的前2个字段，忽略第二 个空白字符和第三个字段的首字符，结果at home
 

8，忽略 每行的第一个字段，这样boy ，girl开头的行看起来是连续重复的行。
 

9，显示所有重复的行，每个重复的行都显示
 

形如下面这样的access.log日志内容：
 

必须借助命令或脚本才可以分析、提取出有价值的内容。

编辑推荐：探讨linux下的日志分析

以下是收集的一些用于日志分析的命令或脚本，分享下，有用到的朋友参考下吧。

1，查看apache的进程数
 

2，分析日志查看当天的ip连接数
 

3，查看指定的ip在当天究竟访问了什么url
 

4，查看当天访问排行前10的url
 

5，看到指定的ip究竟干了什么
 

6，查看访问次数最多的几个分钟(找到热点)
 

7，统计一个文本中包含字符个数
 

在linux系统中，使用mkfs.ext3命令把硬盘格式化为ext3文件系统。

要使用一块新的硬盘，必须将它格式化建立合适的文件系统（linux:ext2,ext3等，windows:ntsf,fat32），并挂载到相应的目录下才可以使用。

本例中，假设有一块新硬盘/dev/sda，这块硬盘需要放web程序，mysql数据库。

下面来看下对它进行格式化后，创建文件系统的方法。

操作步骤：
 

系统启动时自动挂载/dev/sda。
编辑/etc/fstab文件
#vim /etc/fstab
 

向/data目录中写数据将会保存到/dev/sda这块硬盘中。