当前位置: 首页 > 知识库问答 >
问题:

Spark dataframe insertinto配置单元表失败,因为使用用户名mapr创建了一些分段部件文件

澹台逸明
2023-03-14

我正在使用Spark dataframe插入到配置单元表中。即使应用程序是使用用户名'MyUser'提交的,一些配置单元分段部分文件还是使用用户名'Mapr'创建的。因此,在重命名临时文件时,对配置单元表的最后一次写入失败,表示访问被拒绝。命令:

ResultDf.write.mode(“append”).InsertInto(不稳定)

  • Spark 1.6.1
  • 分布图

共有1个答案

段溪叠
2023-03-14

尝试下面的内容并给出反馈

resultDF.registerTempTable("results_tbl")
sqlContext.sql("INSERT INTO TABLE insTable SELECT * FROM results_tbl")
 类似资料:
  • 我正在使用Django 1.4。1使用postgresql 9.1。 我需要添加一个配置文件给用户与认证应用程序,并允许管理员应用程序创建和编辑此配置文件。因此,我一直遵循“文档”部分存储有关用户的其他信息: 我还激活了中的和应用程序。 现在,当我运行管理应用程序并要求添加(创建)一个新用户时,我被要求通过两个步骤创建我的用户:首先,一个页面只要求输入用户名、密码(两次)和我的两个UserProf

  • 您的回应将不胜感激。谢了!

  • 问题内容: 我每天都在“测试”文件夹下写入文件。例如: 我在创建的LOGS表中看不到任何数据。 但是,我使用创建表 我可以看到那几天的记录。 我想在我的HIVE表中的/ test目录下查看所有数据,而且/ test目录每天都填充有新文件。 问题答案: 选项1 为了支持子目录 如果您的Hive版本低于2.0.0,那么 选项2 创建一个分区表 如果使用标准约定保留目录,例如,而不是保留目录,将更易于管

  • 我正在尝试在ORC文件上创建外部配置单元表。 但当我试图在创建的表上执行select操作时,会出现以下错误: 有什么建议吗??

  • 我正在尝试对我的进行测试,但是它总是说找不到用户名而失败。我已经将这个问题缩小到中检查是否找到User==null的行。 这里是我的 还有我的 而我的 失败的行是在中,它试图找到UserByEmail,因为userRepository被嘲笑了,它只是返回null并抛出username not search异常。如果我删除了Mock,那么我的测试失败了,因为它找不到中构造函数所需的UserRepos