熊猫：当一行不完整时引发错误

Question

熊猫拒绝读取逗号过多的文件（第一行后）：

正在尝试读取以下内容：

col1,col2,col3
foo,1,2
bar,2,3
zob,0,3,4

会给我一个错误吗

然而，无论我在read_csv中尝试了什么选项，熊猫都接受以下选项：

col1,col2,col3
foo,1,2
bar,2,3
zob,0

只考虑最后一行的COL3中的值为空。

当发生这种情况（一行中的字段太少）时，是否有任何方法引发异常？（在我的例子中，这意味着文件源有错误，需要再次下载文件）。

它似乎只涉及error_bad_lines逗号太多的行。

在使用read_csv之前，我可以分别计算每行的逗号数，但我想知道pandas中是否存在一个选项，因为它看起来更自然/更易于代码可读性。

Answer 1

更新：

该文件不包含任何NaN值

In [85]: pd.read_csv(fn)
Out[85]:
  col1  col2  col3
0  foo     1   2.1
1  bar     2   3.1
2  zob     0   NaN

因此，如果满足以下条件，您可以引发异常：

In [86]: pd.read_csv(fn).isnull().any().any()
Out[86]: True

旧答案：

可能的解决办法：

考虑以下输入CSV文件：

col1,col2,col3
foo,1,2.1
bar,2,3.1
zob,0

以下工作：

In [50]: pd.read_csv(fn, dtype={'col3':'float'})
Out[50]:
  col1  col2  col3
0  foo     1   2.1
1  bar     2   3.1
2  zob     0   NaN

但是，如果我们指示Pandas不要将空字符串视为NaN，那么它将抛出一个异常：

In [51]: pd.read_csv(fn, na_values=['NAN','NaN','#NA'], keep_default_na=False, dtype={'col3':'float'})
...
skipped
...
ValueError: could not convert string to float: