《hive》专题
-
Hive内部表和SparkSql中的Bucking
这些查询是:select*from t1 where col1='123'[t1由col1 bucketted]select*from t1 where col2='123'[col2不是bucketting列]我的问题是 > 如何确定在查询执行期间正在进行全表扫描还是正在进行相关的部分表扫描？ 我能从DAG或物理计划中得到任何信息吗？我两个都看过，但我看不出有什么不同，就像我在物理计划中看到的那
-
从Rstudio windows使用R rJDBC软件包连接到hive（已启用kerberoes）
当尝试使用R rjdbc连接Hive 2（kerberoes Authenticate已启用）时，会出现以下问题。使用simba驱动程序连接到hive。 hiveConnection 错误. jcall（drv@jdrv，"Ljava/sql/Connection；"，"Connec"，as.character（url）[1]，：java.sql.SQLExctive：[Simba]HiveJDB
-
python hive客户端pyhs2不识别sql语句中的“在哪里”子句
我正在使用pyhs2作为hive客户端。无法识别包含where子句的sql语句。得到 'pyhs2.error.Pyhs2Exctive：'处理语句时出错： 失败：执行错误，从组织返回代码1。阿帕奇。hadoop。蜂箱ql.exec。MapRedTask先生的 但它在蜂箱壳中运行正常。
-
如何计算hive中的累计工资
由于hive只支持从类集中的子查询，如select*from（subquery），也只支持equjo，因此我们如何从表中计算累积工资，如表员工有记录如下。 因此输出应该如下所示 我怎么能在蜂巢里做到这一点
-
使用beeline或hive2 jdbc驱动程序时的Datastax连接异常（表）
我已经在我的开发虚拟机(Centos7)上安装了Enterprise2.8。安装顺利进行，单节点群集运行良好。但是，当我试图使用beeline或hive2 jdbc驱动程序连接到集群时，我会遇到如下所示的错误。我的主要目标是使用Datastax企业驱动程序或Spark Sql驱动程序连接Tableau。 观察到的错误是： cluster_name:“cluster1” num_tokens:256
-
Spark SQL/Hive查询永远使用Join
所以我在做一些应该很简单的事情，但显然不是在Spark SQL中。 null 表有外键字段，但数据库中没有定义显式fk关系。我在用Innodb。 Spark中的执行计划： 计划： ==物理计划==TungstenProject[Address_ID#0L]
-
对于类似的查询，pyspark-hive上下文不返回结果，但SQL上下文返回结果
Spark 1.3.1（也尝试了Spark 1.5.1) Hadoop 2.6（在CDH 5.4.0上） Pyspark--主纱--num--执行者5--执行者-内存10g--驱动程序-内存4g--驱动程序-核心4 database.table有超过2k个分区 database.table在field1上分区（在where子句中使用） 占用的时间不确定--我不得不停止查询的执行，因为它很快占用了我
-
spark未下载hive_metastore jars
我通过python API使用spark V2.4.4 null null null
-
如何创建分区具有不同列的AWS胶表？('hive_partition_schema_mismatch')
根据这个AWS论坛的线程，有人知道如何使用AWS Glue创建一个AWS Athena表，该表的分区包含不同的模式（在本例中是表模式的不同列子集）吗？ 目前，当我在此数据上运行爬虫程序，然后在Athena中进行查询时，得到错误 null 如果我手动编写一个模式，我可以做得很好，因为只有一个表模式，JSON文件中缺少的键将被视为NULL。 提前感谢！
-
为什么HAProxy在TLS握手结束时关闭到HiveMQ MQTT客户机的连接？
握手结束时，服务器关闭了连接。我不知道为什么使用经过测试的证书会发生这种情况。 我将Java11与HiveMQ MQTT客户机版本1.1.2（maven repo中的最新版本）一起使用。 服务器是HAProxy，端口是8883。 如果有人对这里发生的事情以及为什么客户机没有连接到HAProxy背后的MQTT代理有一个提示或线索，我将非常感谢。 我们在haproxy配置中有一个条件:。这使我们能够只
-
如何获得HiveMQ客户机中使用的密码套件？
我将HiveMQ服务器配置为识别TLS，并创建了一个TLS通信。我想打印出正在使用的密码套件。我使用了getSslConfig()，但最后得到的输出是：
-
如何在HIVEMQ中正确使用TLS 1.3密码套件？（获取SSL异常：在接收对等方的close_notify之前关闭入站）
更新：我已经指定客户机在中使用方法的TLS1.3。我尝试手动将密码套件:添加到config.xml文件中，但是这次出现了一个SSL异常错误。更新后的产出和例外情况如下。我怀疑HiveMQ正在过滤掉我试图使用的密码套件。我尝试创建一个SSL引擎作为测试，并使用和，它指出我的JVM和TLS1.3协议本身支持上面的TLS1.3密码套件。 HiveMQ服务器控制台输出（来自文件，在中启用了调试）： Jav
-
无法连接到内核化集群中的带有火花JDBC的Hive服务器
我尝试从一个配置单元（配置单元n°1）读取数据，并将结果写入另一个配置单元（配置单元n°2）（它们来自两个不同的集群）。我不能使用单个spark会话连接到两个配置单元，因此我将使用jdbc读取数据，并使用spark配置单元上下文写入数据。 两个集群都使用kerberos，Knox，ranger。 THS批火花将在蜂巢n°2上运行 这是我的主要错误： GSSException:未提供有效凭据（机制级
-
配置单元到达最大工作者，无法连接到hiveserver2
当我使用beeline connect到hiveserver2时，err消息如下所示。我以前连接过hiveserver2。在我多次连接到hiveserver2之后，会显示此错误。我可以使用jdbc:hive2://连接 SLF4J:类路径包含多个SLF4J绑定。slf4j:在[jar:file:/usr/local/hive/lib/log4j-Slf4j-impl-2.4.1.jar！/org/
-
RDJDBC：：DbConnect无法连接到HiveServer2(kerberos+SASL)
我正在尝试使用RJDBC连接到Hive2，但它失败了，“GSS initiate Failed”。然而，同样的事情工作良好使用beeline客户端。知道在相同的节点上使用相同的凭据运行这两个节点时，是什么导致了不同的行为吗？ drv<-rjdbc::jdbc（“org.apache.hive.jdbc.hivedriver”,cp,“`”） conn<-rjdbc::dbconnect(drv,“