duplicated() 函数在 Pandas 库中用于检查 DataFrame 或 Series 中的重复项
以下是 duplicated() 函数的基本用法:
import pandas as pddata = pd.Series(['A', 'B', 'A', 'C', 'B'])duplicates = data.duplicated()print(duplicates)输出结果将会是:
0 False1 False2 True3 False4 Truedtype: bool对于一个 Pandas DataFrame:import pandas as pddata = {'Column1': ['A', 'B', 'A', 'C', 'B'], 'Column2': [1, 2, 1, 3, 2]}df = pd.DataFrame(data)duplicates = df.duplicated()print(duplicates)输出结果将会是:
0 False1 False2 True3 False4 Truedtype: bool你还可以使用 duplicated() 函数的参数来自定义重复项检测的行为。例如,你可以设置 keep 参数来指定保留哪个重复项。默认情况下,keep 参数设置为 'first',表示保留第一个出现的重复项,并将其他重复项标记为 True。你还可以将 keep 设置为 'last',这样最后一个出现的重复项将被保留。此外,你还可以将 keep 设置为 False,这样所有重复项都将被标记为 True。
例如:
import pandas as pddata = {'Column1': ['A', 'B', 'A', 'C', 'B'], 'Column2': [1, 2, 1, 3, 2]}df = pd.DataFrame(data)duplicates = df.duplicated(keep='last')print(duplicates)输出结果将会是:
0 True1 True2 False3 False4 Falsedtype: bool 

