文章目录介绍了如何重新计算数据、重新计算统计数据
内容介绍
日常数据分析工作中经常遇到的一个问题是数据重复。 重复数据在进行数据分析和数据挖掘的过程中，对其输出结果有重要的影响。 例如，在逻辑回归分析中，重复数据会影响模型的适应性。 在数据分析中，重复数据会影响预测内容的正确性。 部分相关分析还存在共线性问题，需要对重复数据进行一定的处理，达到消除异常、修正错误、弥补损失的目的。
数据重新定位具有完全相同数据值的多个数据记录。 这是数据复制最常见的情况。 数据主体相同，但匹配的属性值不同。 同一事实表的主体与同一属性的多个值匹配。 重复数据删除是重复值处理的主要方法，主要目的是保留唯一可以显示其特性的数据记录。 重复记录用于分析进化规律，记录用于检测业务规则问题，用于了解实际情况。
数据重新统计DataFrame统计
#标记重复值df.duplicated (subset=