当前位置: 首页 > 知识库问答 >
问题:

com.databricks.spark.csv的inferschema问题

梁华清
2023-03-14
Name,Department
Sam,Software
1,Data Analytics

共有1个答案

米元凯
2023-03-14

inferSchema选项用于标识列的datatype,如果列数据中有一行是string,一行是int,显然会失败。

如果您仍想插入相同的数据,请尝试以下操作

Name,Department
Sam,Software
'1',Data Analytics

希望这能解决你的问题

 类似资料:
  • 参考PySpark:spark.read.format(“csv”)与spark.read.csv的性能差异 我想我需要和来打印标题,但显然我仍然可以打印带有标题的csv。 头和模式有什么区别?我不太明白“inferschema:自动推断列类型。它需要对数据进行一次额外的传递,默认情况下是false”的含义。

  • 在Spark 2.0或更高版本中,inferschema的替代方案是什么?我无法执行sqlContext.inferschema

  • 这个FAQ的最新版本总是可以从Apache主站点得到,位于<http://httpd.apache.org/docs/2.2/faq/> 如果你的问题在这里没有找到答案,你也可以看看Apache 1.3 FAQ ,看你的问题是否在那里有了答案。 主题 背景 关于 Apache HTTP Server 的背景知识。 支持 我遇到问题该怎么办? 错误信息 这些错误信息是什么意思? 背景 什么是Apac

  • 我试图在fabric rocket chat上联系,但没有得到太多帮助,因此在SO上发布了它。我有以下疑问: 我们是否可以在链码内访问块高度(我知道这在客户端是可行的,但在链码内是否可能) 可以从链码中的正在进行的事务调用新事务吗? 想知道hyperledger Fabric中存储的数据的历史记录在哪里 我们可以根据链码中的transactionid进行查询吗? 在fabric链码中编写调度程序是

  • 问题内容: 我正在尝试创建一个程序,在该程序中,用户可以使用扫描仪将值输入到数组中。 但是,当程序要求学生的近亲时,它不会让用户输入任何内容而直接结束程序。 下面是我完成的代码: 我试过使用next(); 但只会使用用户输入的第一个单词,这不是我想要的。反正有解决这个问题的方法吗? 问题答案: 当您按Enter键(换行符)时,会出现问题。仅使用整数,但跳过换行符。要解决此问题,您可能需要在阅读后添

  • 我必须回到这个论坛寻求帮助,因为我不能仍然使‘承诺.所有’工作! 第一,我有这个函数,按说是回一个承诺: 其思想是上面的函数返回一个promise,其值一旦解析,就是json对象。我已经检查了json实际上是有效的。如果我用下面的行替换“return...”行,我实际上会得到一个有效的JSON: 第二,我有这个for循环,之后我希望有一系列承诺: 最终我执行以下代码: 我希望.then部分只在所有