将csv文件导入MySQL数据库时，utf8字符串无效

Question

我使用以下命令将数据从. csv文件导入到MySQL数据库表中，就像这样：

     String loadQuery = "LOAD DATA LOCAL INFILE '" + file + "' INTO TABLE source_data_android_cell  FIELDS TERMINATED BY ','" + "ENCLOSED BY '\"'"
 + " LINES TERMINATED BY '\n'  " + "IGNORE 1 LINES(.....)" +"SET test_date = STR_TO_DATE(@var1, '%d/%m/%Y %k:%i')";

然而，由于源代码文件中的一列包含一个非常奇怪的数据，即：viva Y31L. RastaModË_Version，程序拒绝将数据导入MySQL并继续抛出此错误：

JAVAsql。SQLException:无效的utf8字符串：“viva Y31L。拉斯塔莫德

我对此进行了搜索，但无法真正理解错误到底是什么，除了字符串“viva Y31L.RastaMod¦ãu Version”的输入格式错误，并且不适合MySQL数据库中使用的utf8格式之外？

但是，我已经在MySQL数据库中做了以下操作，即设置名称UTF8MB4，因为在其他问题中有人建议UTF8MB4在接受奇怪字符时更灵活。

我通过在命令提示符下手动将这些奇怪的数据插入MySQL数据库表，对此进行了进一步的探索，效果很好。事实上，该表几乎显示了完整的条目：viva Y31L。拉斯塔莫德？ã、ãu版本。但是如果我从IDE运行我的程序，文件就会被拒绝。

如有任何解释，我将不胜感激。

与csv文件导入mySQL过程相关的第二个小问题：

我注意到我无法将同一个文件的副本导入MySQL数据库。引发的错误包括数据重复。这是因为MySQL拒绝重复的列数据吗？但是，当我更改了一列的所有数据，使复制文件中的其余数据保持不变时，它就被正确导入了。为什么会这样？

Answer 1

我不认为这个直接的错误与数据的目的地不能处理UTF-8字符有关，而是您使用LOAD DATA的方式。您可以尝试指定加载数据时应使用的字符集。考虑下面的LOAD DATA命令，它是您最初使用的，但略有修改：

LOAD DATA LOCAL INFILE path/to/file INTO TABLE source_data_android_cell
CHARACTER SET utf8
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 LINES(.....)
SET test_date = STR_TO_DATE(@var1, '%d/%m/%Y %k:%i')

也就是说，您还应该确保目标表使用一个字符集，该字符集支持您试图加载到其中的数据。