UnicodeDecodeError:('UTF-8'编解码器）读取csv文件时[重复]

Question

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe7 in position 7: invalid continuation byte

 import pandas as pd
 df = pd.read_csv("D:\ss.csv")
 df.columns  #o/p is Index(['CUSTOMER_MAILID', 'False', 'True'], dtype='object')
 df['True'] = df['True'] + 2     #making changes to one column of type float
 df.to_csv("D:\ss.csv")       #updating that .csv    
 df1 = pd.read_csv("D:\ss.csv")   #again trying to read that csv

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe7 in position 7: invalid continuation byte

我知道在读写CSV时，我在某个地方遗漏了“encode=某些编解码器类型”或“decode=某些类型”。

但我不知道到底应该改变什么。所以需要帮助。

Answer 1

如果知道要读入的文件的编码，可以使用

pd.read_csv('filename.txt', encoding='encoding')

以下是可能的编码:https://docs.python.org/3/library/codecs.html#standard-encodings

如果您不知道编码，您可以尝试使用chardet，但这并不能保证工作。它更多的是一个猜测工作。

import chardet
import pandas as pd

with open('filename.csv', 'rb') as f:
    result = chardet.detect(f.read())  # or readline if the file is large


pd.read_csv('filename.csv', encoding=result['encoding'])