无法将aws glue dynamicframe转换为spark dataframe
有谁能帮我弥补我所缺少的东西吗？
提前道谢！
共有1个答案
当存在非UTF-8编码的字符时会出现此问题。根据此文档，Glue仅支持UTF-8编码。
基于文本的数据，如CSV，必须用UTF-8编码，AWS胶水才能成功地处理它。有关更多信息，请参见维基百科中的UTF-8。
您可以通过运行下面的命令来验证您的文件是否包含无效字符，该命令将打印这些字符。这是针对linux的，如果您使用的是其他操作系统，您也可以使用等效的字符。
iconv -f UTF-8 your_file -o /dev/null; echo $?
iconv -f ISO-8859-1 -t UTF-8 file.csv > file-utf8.csv
-
问题内容： 我正在尝试将文件保存到SQL Server数据库中，该文件将保存在其中的列是datatype 。 我目前这样做的方式是通过获取文件路径并将文件转换为字节数组。 然后，我使用插入查询和convert函数将字节插入数据库，以将转换为： 但是，在SQL Server数据库中，的值始终为 而且，无论选择哪个文件，都始终是该数字。因此，如果您能告诉我为什么会这样，以及我应该采取什么措施来防止这种
-
问题内容： 我想将SQL COUNT的结果存储在变量中，然后将它们除，但是出现错误： 注意：类mysqli_result的对象无法在----中转换为int 我曾经在测试时显示结果…我该如何解决？ 问题答案： 您需要先获取结果并将其存储在变量中，然后再进行数学运算。
-
问题内容： 我有一个数据框（df），看起来像： 对于整个时间序列，我尝试将今天的值除以昨天，并使用以下命令记录结果： 但是我得到以下错误： 我怎样才能解决这个问题？我试图使用以下方法将其转换为float： 但是什么也无法工作。 问题答案： 您可以改用numpy.log。Math.log需要一个数字，而不是数组。
-
问题内容： 我是Webpack的新手。我想我做错了。我想使用babel将ES6函数转换为ES5函数。因此，我做了一些研究，发现了babel- loader。但是，我不确定自己在做什么。 我运行npm install babel-loader –save-dev并将其添加到我的package.json中 // package.json // webpack.config.js // app / in
-
我创建了一个python脚本，并想把它给我的朋友。所以我去youtube看了这个视频（在尝试了很多其他视频之后）。我运行它，得到一个薄层色谱库错误。没问题，我找到了解决这个问题的答案，就在这里的堆栈流中。我输入这段代码（将Python35更改为36，并确保我的薄层色谱位于它所说的相同位置）。我运行它，但得到一个不同的错误，在我的cmd提示符中说 我只是想把我的游戏发送给朋友<请帮忙。我正在使用Py
-
我的customer.xsd如下所示。我正试图将它转换为pojo类schema_reference.4:未能读取模式文档“xml.xsd”，因为 1）找不到文件； 2）文件无法阅读； 3）文档的根元素不是。 我正在使用maven将XSD转换为Java clases。
-
问题内容： 您如何将此String转换为gson.JsonArray？ 这是我的代码： 这是将这个Collections字符串转换为JSonArray的方法吗？ 问题答案： 要在JSON数组中包含字符串值，必须记住在Java程序中用反斜杠转义双引号。请参见下面的声明。 您在main（）方法中的代码可以正常工作。以下只是对main（）方法中的代码的微小修改。 最后，请记住在语句“ com.googl
-
问题内容： 我有MainActivity类，该类具有实例化ApplicationBar的方法，所有其他Activity都从此继承，因此他们可以使用此方法。 但是我也有一个MapHolder类，它必须从xml中扩展，因为它使用来显示地图。问题是如果我从不显示ApplicationBar选项卡扩展它，并且从MainActivity扩展它而不显示地图，则出现此错误： 问题答案： 您正在尝试将a强制转换为