将spark dataframe转换为sparklyR表“tbl_spark”
我正在尝试将spark dataframeorg.apache.spark.sql.dataframe转换为sparklyr表tbl_spark。我尝试使用sdf_register，但失败了，出现以下错误。
在这里，df是spark DataFrame。
sdf_register(df, name = "my_tbl")
Error: org.apache.spark.sql.AnalysisException: Table not found: my_tbl; line 2 pos 17
at org.apache.spark.sql.catalyst.analysis.package$AnalysisErrorAt.failAnalysis(package.scala:42)
at org.apache.spark.sql.catalyst.analysis.Analyzer$ResolveRelations$.getTable(Analyzer.scala:306)
at org.apache.spark.sql.catalyst.analysis.Analyzer$ResolveRelations$$anonfun$apply$9.applyOrElse(Analyzer.scala:315)
at org.apache.spark.sql.catalyst.analysis.Analyzer$ResolveRelations$$anonfun$apply$9.applyOrElse(Analyzer.scala:310)
at org.apache.spark.sql.catalyst.plans.logical.LogicalPlan$$anonfun$resolveOperators$1.apply(LogicalPlan.scala:57)
at org.apache.spark.sql.catalyst.plans.logical.LogicalPlan$$anonfun$resolveOperators$1.apply(LogicalPlan.scala:57)
at org.apache.spark.sql.catalyst.trees.CurrentOrigin$.withOrigin(TreeNode.scala:69)
at org.apache.spark.sql.catalyst.plans.logical.LogicalPlan.resolveOperators(LogicalPlan.scala:56)
at org.apache.spark.sql.catalyst.plans.logical.LogicalPlan$$anonfun$1.apply(LogicalPlan.scala:54)
at org.apache.spark.sql.catalyst.plans.logical.LogicalPlan$$anonfun$1.apply(LogicalPlan.scala:54)
at org.apache.spark.sql.catalyst.trees.TreeNode$$anonfun$4.apply(TreeNode.scala:281)
at scala.collection.Iterator$$anon$11.next(Iterator.scala:328)
at scala.collection.Iterator$class.foreach(Iterator.scala:727)
我漏掉什么了吗？或者有没有更好的方法将其转换为tbl_spark？
谢了！
共有1个答案
使用sdf_copy_to()或dplyr::copy_to()，例如my_tbl<-sdf_copy_to(sc,df,“my_tbl”）
-
当我试图将这些值转换为逻辑值时，值将转换为和值。对如何克服这一点有什么想法吗？
-
问题内容： 我正在尝试将通过BeautifulSoup提取的表转换为JSON。 到目前为止，尽管我不确定如何从此处处理数据，但我设法隔离了所有行。任何建议将不胜感激。 （为了方便阅读，换行了） 这是我的尝试： 这给了我以下结果： 问题答案： 您的数据可能类似于： 我们可以使用以下代码从中以列表的形式获得您的结果： 要将结果转换为JSON（如果您不关心顺序）： 结果： 如果您需要相同的订单，请使用以
-
问题内容： 将a 转换为同时保持Queue顺序的最快方法是什么？ 问题答案： 最快的方法是首先使用LinkedList，它可用作列表或队列。 否则您需要复印 注意：处理PriorityQueue时，请使用循环，轮询每个元素并添加到列表中。要列出的PriorityQueue不维护堆顺序。
-
问题内容： 我正在尝试将HTML表中存在的数据转换为JSON，以便可以在服务器端进行相应的处理。我可以序列化数据，但是结果充其量只能生成不直接链接的独特数据数组。像：这是我正在使用的形式： 序列化数据的脚本是： 经过数页StackOverFlow之后，我得到了serializeFormJSON（）： 通过使用所有这些，我可以得到像这样的JSON： 我尝试了多种方法以名称-性别格式获取它们，但是每种
-
问题内容： 我正在尝试将Python字典转换为Python列表，以便执行一些计算。 那是我的尝试…但是我无法解决问题所在？ 问题答案： 你的问题是，你必须和引号使他们的字符串，即你设置包含字符串，而不是变量的值。另外，您不会清除列表，因此每次都添加到列表中，而不是仅包含两个项目。 要修复您的代码，请尝试以下操作： 你并不需要将循环变量拷贝和我放弃了出来到另一个变量在使用它们之前。同样，您无需使用a