Python讀取CSV 文件 去掉重複數據

安裝 xlrd 模塊 和 pandas 模塊

pip3 install xlrd
pip install pandas

Python 文件 導入pandas模塊

import pandas as pd

讀取文件 按照需要去重的列名去重數據

import csv                   #導入pandas包


data = pd.read_csv("E:/test.csv")             #讀取csv文件
   
dateMap = []

for i in range(len(data)):
    dateMap.append(data["門店編號"][i])
    
print("去重複前數量："+len(data).__str__())
formatList = list(set(dateMap))
formatList.sort(key=dateMap.index)

print("去重複後數量："+len(formatList).__str__() )

控制檯輸出爲