对于一些重复的数据，如果需要去除重复项，这里可以用两种方式：
1）SQL方式，将数据插入到table中，然后利用SQL的distinct功能去重。这种方式需要建表，比较麻烦，同时也浪费资源。最主要的是，有可能对SQL语句不熟悉的话，也比较麻烦。
2）Excel方式，强大的Office提供了很多便捷的功能，这里可以利用Excel的过滤功能进行去重处理。下面详细介绍一下这种方式。
开始Excel -> 数据（Data）-> 筛选（Filter）-> 高级筛选（Advanced）-> 出现如下所示对话框。
对各个option进行简单说明，
1）选中‘Unique record only’，需要对选中的数据进行去重处理。
2）Action -> 'Filter the list, in-place'，将去除的结果放在原处。
3）Action -> 'Copy to another location'，将去除的放在指定位置。'Copy to'即为指定的位置。