《hive》专题
-
在Jax-RS rest服务-Netbeans中连接Hadoop（HiveAPI）数据库
经过一番努力，我设法使用Jersy-Jax-RS为我的Rest服务编写了一个工作代码。 我的项目包括简单的数据库操作与hadoop数据库。 org/apache/hive/service/rpc/thrift/TCLIService$Iface 使用-e开关重新运行maven 类未找到org.apache.hive.jdbc.HiveDriver 问题是： Hadoop数据库连接需要许多其他支持依
-
为什么在flink hive shim中使用reflect api
我正在阅读Flink配置单元连接器代码，查找接口，它有很多实现类。但是我发现实现类使用反射API。为什么不导入依赖项，代码太晦涩了。
-
如何排除hive-exec的所有漏洞，其中包括“阴影”依赖本身？
我必须删除“dependency-check”中的所有“高严重性”漏洞，这些漏洞是通过Maven-plugin生成的。很难删除“hive-exec”的漏洞。 我可以在每个 中使用 -tag或更改版本来删除大多数漏洞。 我还试图在我的pom文件中排除这个“parquet-hadoop”... 但是它不能删除这个“parquet-hadoop-bundle”，因为它们在“hive-exec”中被“sh
-
Pig、Hive、Hbase、Oozie、Zookeeper在Hadoop2.0中的安装是否与在Hadoop1.0中相同？
我最近安装了带有纱线配置的hadoop V2。我计划安装Hadoop生态系统堆栈，如Pig、Hive、Hbase、Oozie、Zookeeper等。我想知道我是否应该安装与Hadoop1.0配置相同的链接中的工具。如果没有，谁能请给我这些工具的Hadoop2配置的链接？。我听说Pig和Hive在Hadoop2.0中更快。因此想知道是否有更好的版本。 谢谢，高萨姆
-
如何在hive中导入mongo数据？
我面临一个问题。 因此，当我尝试使用下面的命令将mongo数据导入到hive时，它给了我一个错误。 注： 使用的工具版本如下： Java JDK 8 Hadoop:2.8.4 蜂巢：2.3.3 MongoDB:4.2 jar版本如下，已移到HADOOP_HOME/lib和HIVE_HOME/lib： mongo-hadoop-core-2.0.2。罐子 mongo-hadoop-hive-2.0.
-
如何使用serde通过hive解析xml数据？
我有一个. xml文件，具有以下数据： 我试图通过配置单元来解析xml，方法是使用serde在hdfs上的xml文件上创建外部表。请在下面找到我的代码 我先加了罐子 我得到的错误是 执行错误，返回代码1从org.apache.hadoop.hive.ql.exec.DDLTask. org/apache/hadoop/hive/serde2/SerDe（state=08S01， code=1） 我
-
Hive-DynamoDB出口在欧洲不起作用？
使用蜂巢时出现问题 我的测试用例是： 蜂巢版本-2.3.0 eu-central-1 配置单元脚本： 运行脚本后，我得到： 失败：执行错误，从组织返回代码1。阿帕奇。hadoop。蜂箱ql.exec。这是一项艰巨的任务。JAVAlang.RuntimeException:无法在DynamoDB中查找表test_输入。 根据旧胎面https://forums.aws.amazon.com/threa
-
通过Java JDBC连接Hive
这里有一个问题，从java连接到Hive，但我的问题不同 我的蜂巢运行在machine1上，我需要使用运行在machine2上的Java服务器传递一些查询。据我所知，Hive有一个JDBC接口，用于接收远程查询。我从这里获取了代码——HiveServer2客户端 我安装了文章中写的依赖项： hive jdbc*。罐子 但是我得到了java。编译时lang.NoClassDefFoundError错
-
标记为表列名的数据的HiveQL查询
我在HDP 2.6.5平台上使用Hive(1.2.1000.2.6.5.0-292)在一个简单的数据库中工作，该数据库基于以下数据:https://grouplens.org/datasets/movielens/100k/ 。我有4个表，名为：类型、电影、收视率、用户，如下所示： 我想写一个问题，返回哪种类型的电影最常被女性观看，哪种类型的电影最常被男性观看？但对我来说，问题是电影类型所在的电影
-
创建使用可以返回列名的UDF函数的hiveQL查询
我想创建一个配置单元UDF函数，它根据一些值返回特定的列名，比如retreivecol（年龄）。如果年龄是20，那么返回在选择查询中使用的列名列表，比如'name、email、fbuserid、friend list‘等。如果年龄小于20，只返回'name'。所以我希望我的配置单元QL查询看起来像 上面的查询只打印列的名称，如'name、email、fbuserid、friendslist'等，而
-
Impor恐怖Python Hive UDF
我想把一些常量放在一个Python文件中，然后导入到另一个文件中。我创建了两个文件，一个带有常量，一个导入常量，在本地一切都运行良好： constants.py： 2018-10-30新增： @serge_k的回答是有效的，但是，我最初遇到了麻烦，因为我拥有Python UDF的路径最初不能用于hive。将所有文件移动到HDFS上的后，一切都按预期进行。
-
Hive-HortonWorks沙盒中的多个SLF4J结合
在Hortonworks沙箱(HDP2.3Pig和Hive Rev6)中运行Hive查询时，我收到了这个警告。在这之后什么也没有发生。配置单元表也无法创建。怎么办？
-
名为hive.files.umask.value的HiveConf不存在
当我执行一个sql脚本时。我遇到了倾斜数据问题，所以我尝试设置参数来优化它，如下所示 Hadoop版本:v2.4.0 当我尝试时，我得到了以下错误： SLF4J:类路径包含多个SLF4J绑定。slf4j:在[jar:file:/home/www/hadoop/share/hadoop/common/lib/slf4j-log4j12-1.7.5.jar！/org/slf4j/impl/static
-
Hive：有什么方法可以自定义HiveInputFormat吗？
在创建命令如下所示的配置单元表之后，我调用hql=[]，这将花费9个映射器，与HDFS中的文件数量相同。 但我想要的是把所有的部分-I在一个分裂中，这样，应该只有三个映射器。 我尝试从继承，以测试自定义的是否可以工作。 但是当我将它挂载到配置单元中时，它返回异常： 有人能给我点线索吗？多谢！
-
HIVE0.13.1中的hive-site.xml路径
我是新手。我想知道和版本中的文件位置。 我已经从下面的位置下载了版本。http://apache.mirrors.pair.com/hive/hive-0.13.1/ 提取并配置配置单元环境变量。 我可以运行命令。 但是在目录中，我看不到和文件。 这些文件在版本中的位置？