当前位置: 首页 > 知识库问答 >
问题:

如何使用rdd.saveAsPickleFile(输出路径)自动覆盖输出路径中的文件?[副本]

霍浩皛
2023-03-14

如果目录已经存在,则通过rdd.saveAsPickleFile(输出路径)写入文件失败。虽然这是避免意外删除文件的一件好事,但我想知道是否有明确覆盖文件夹/文件的选项?与数据帧类似:

df.write.mode('overwrite')。format('json')。save(输出路径)

注:以下两个问题在这里和这里曾经问过,但没有得到明确的答案。

共有1个答案

贺靖
2023-03-14

如果希望在每次运行脚本时显式删除创建pickle文件的文件夹。您可以删除output\u path处的目录,如中所述https://stackoverflow.com/a/10840586/5671433 在你打电话之前

df.write.mode('overwrite').format('json').save(output_path)
 类似资料:
  • 我的源代码位于如下文件夹结构中: MyGitroot/MyProj/Module1/SRC/Main/Groovy/COM/MyPak/Module1 MyGitroot/MyProj/Module2/SRC/Main/Groovy/COM/MyPak/Module2 MyGitroot/MyProj/Module3/SRC/Main/Groovy/COM/MyPak/Module3 Gradle

  • 对于我目前的目的,我有一个Maven项目,它创建了一个文件,我想看看它在创建时使用了什么实际的类路径。有没有办法在一个命令中做到这一点——而不必编译整个项目? 一个想法是让Maven生成目标/classpath.properties文件,然后停止。

  • 本文向大家介绍Dijkstra算法最短路径的C++实现与输出路径,包括了Dijkstra算法最短路径的C++实现与输出路径的使用技巧和注意事项,需要的朋友参考一下 某个源点到其余各顶点的最短路径 这个算法最开始心里怕怕的,不知道为什么,花了好长时间弄懂了,也写了一遍,又遇到时还是出错了,今天再次写它,心里没那么怕了,耐心研究,懂了之后会好开心的,哈哈 Dijkstra算法: 图G 如图:若要求从顶

  • 问题内容: 我正在建立一个带有react和webpack的网站。当我使用webpack构建应用程序并尝试包含图像时,图像与其他资产一起写入了build文件夹,但是webpack输出的图像链接不正确。我可以进入构建文件夹并查看图像,因此正确复制了该图像,这是链接错误。 我的react组件看起来像这样: 我的Webpack配置如下所示: 从昨天开始,我就一直把头撞在墙上,因此,我们将不胜感激。让我知道

  • 问题内容: 因此,我创建了一个新的gradle项目,选择Java作为“其他库和框架”。 Gradle将编译并维护程序包结构, 但是项目结构->模块中的“模块编译输出路径”设置为。 这确实很烦人,并不是我每次创建新的Java项目时都要更改的东西。 我可以以某种方式更改默认设置,使其与gradle输出路径匹配吗? 问题答案: 您可以将Gradle pluigin用于INtelliJ 在: 然后,当您运