当前位置: 首页 > 知识库问答 >
问题:

获取一个数据frame的当前分区数

严言
2023-03-14

是否有任何方法可以获得一个DataFrame的当前分区数?我检查了DataFrame javadoc(spark 1.6)但没有找到一个方法,或者我只是错过了它?(对于JavaRDD,有一个getNumPartitions()方法。)

共有1个答案

曹智
2023-03-14

您需要在DataFrame的底层RDD上调用getNumPartitions(),例如df.RDD.getNumPartitions()。对于Scala,这是一个无参数方法:df.rdd.getNumPartitions

 类似资料:
  • 本文向大家介绍如何获取当前数据库版本?相关面试题,主要包含被问及如何获取当前数据库版本?时的应答技巧和注意事项,需要的朋友参考一下 使用 select version() 获取当前 MySQL 数据库版本。

  • 问题内容: 有人知道MySQL中是否有这样的功能吗? 更新 这不会输出任何有效的信息: 或者也许MySQL本身不知道确切使用了什么,那很好,我们可以在这里介入,只要我能获得不像… 问题答案: 从手册(第9.6节): 可以按以下方式检索全局时区和特定于客户时区的当前值: 编辑如果MySQL设置为系统时区的从属,则以上内容将返回,没有帮助。由于您使用PHP,如果从MySQL的答案是,你可以接着问什么时

  • 本文向大家介绍Android获取当前位置的经纬度数据,包括了Android获取当前位置的经纬度数据的使用技巧和注意事项,需要的朋友参考一下 现在有这么一个需求:开启一个Service服务,获取当前位置的经纬度数据,将获取的数据以广播的方式发送出去,注册广播的Activity接收广播信息,并将接收到的数据在当前Activity显示,如果当前位置发生变化,经纬度数据改变,获取改变后的经纬度数据,通过H

  • //MySQL,,mysql -v select version(); //Oracle select * from v$version;

  • 我读过这篇文章,我有一个这样的数组: 如果出现错误,,和将成为字符串数组,并用相等的值填充。 在我的模板中,如果设置了erreur,我将执行以下操作: 我想使用当前索引来使用另一个数组中的值,这里是:。它不工作,给我的错误: 这个怎么解决?

  • 接口说明 获取当前团队下的分组 如需调用,请访问 开发者文档 来查看详细的接口使用说明 该接口仅开放给已获取SDK的开发者 API地址 POST /api/team/1.0.0/organization 是否需要登录 是 请求字段说明 参数 类型 请求类型 是否必须 说明 token string form 是 用户登录标识 响应字段说明 参数 类型 说明 id String 分组编号 name