修正Spark SQL中抛出解析异常的Hive SQL查询
在Hive中执行以下查询很好：
ALTER TABLE schema.the_table
DROP IF EXISTS PARTITION (PARTITION_DATE<'2020-03-22')
分区日期是类型字符串，但这是可以的。目标是删除比特定日期更早的分区。
val spark = SparkSession.builder.enableHiveSupport.getOrCreate
spark.sql("""
ALTER TABLE schema.the_table
DROP IF EXISTS PARTITION (PARTITION_DATE<'2020-03-22')
""")
问题是在哪里可以找到Spark SQL中必须转义的字符，是否有任何方法可以在Spark SQL中编写与在Hive中相同的查询？
共有1个答案
由于一个已知的bug，从Spark 3.0版本开始，无法使用Spark.sql删除配置单元分区，目前正在3.1.0版本中进行修复。检查JIRA火花-JIRA。
-
我有一个包含OClass对象的列表。我想创建这个对象的JSON。下面是我的代码： com.fasterxml.jackson.databind.jsonMappingException：未发现用于com.ontotext.trree.owlim_ext.r类的序列化程序，也未发现用于创建BeanSerializer的属性（为了避免异常，禁用serializationconfig.serializa
-
假设我想在收到特定异常时恢复某个值，否则返回失败的未来。我希望是这样的： 如果函数会抛出检查过的异常，我想在链式方法中处理它。我尝试过和，但都无法编译。是否为这种情况提供了任何解决方案？我知道接口是方法的参数，它不会抛出任何异常——在这种情况下，我只想返回已经失败的未来。我想找到使用Java8的解决方案。
-
抛出异常的行为是否可能抛出不同的异常？ 为了抛出异常，必须（可选地）分配新对象，并调用其构造函数（隐式调用fillinstacktrace）。在某些情况下，听起来像addSupressed也被称为。那么如果没有足够的内存会发生什么呢？JVM是否需要预分配内置异常？例如，(1/0)会抛出OutOfMemoryError而不是ArithmeticException吗？ 此外，构造函数是一个方法调用，因
-
我正在尝试用jackson SAX解析器实现JSON数组迭代器（请不要问为什么）。我的应用程序应该处理巨大的文件（高达5 MiB)，这是一个问题。 这就是我初始化JsonParser和调用迭代器创建的方式。我创建了InputStream，使用放在\raw文件夹中的JSON初始化。 这是我的迭代器类。 它似乎运转良好...哦，等等。 我在某个巨大的文件中有3个部分（命名数组）。它首先成功解析（一个很
-
我正在尝试用NLTK中的Malt Parser解析句子。当我执行时，它给出了一个错误，退出代码为1。我在终端上执行了java命令，它给出了“未找到”类异常，我不明白现在是怎么了？ java-Xmx1024m-jar/usr/local/bin/malt。jar-w/home/abc/maltparser-1.7.2-c engmalt.linear-1.1-i/home/abc/martparse
-
这是我连接HTTP的代码。 这就是android。操作系统。NetworkOnMainThreadException 请帮忙。