《hive》专题
-
使用CqlStorageHandler集成Hive和Cassandra
我引用了这个git项目来使用配置单元表集成cassandra数据，我将适当的cassandra JAR复制到配置单元库文件夹中，但是在运行对cassandra的查询时，我得到了以下错误，请帮助我解决它。 https://github.com/milliondreams/hive/tree/cas-support-cql/cassandra-handler HIVE>创建外部表消息(row_key字
-
我确实通过HiveQL更改了表。那么用Spark-SQL显示表就不起作用了。错误：路径不存在
我确实通过HiveQL更改了表。 然后我打算用Spark-SQL显示我的表。 我想使用spark-sql
-
Sqoop导入到HCatalog/Hive-表不可见
HDP-2.4.2.0-258安装使用Ambari2.2.2.0 我必须导入几个SQL Server模式，这些模式应该可以通过Hive、Pig、MR和任何第三方（将来）访问。我决定在HCatalog中导入。 Sqoop提供了导入到Hive或HCatalog的方法，我想如果我导入到HCatalog，同一个表将可以从Hive CLI、MR和Pig访问（请评估我的假设）。 问题： 如果直接进口到蜂巢，猪
-
Hadoop/Hive命令无法从Crontab工作
我无法从Crontab执行hadoop/hive命令。基本上，我已经在crontab中安排了一个perl脚本，其中包含在操作之前设置路径的系统命令。 我知道，从cron运行的env可能与常规shell不同。这就是我设置如下路径的原因。有没有其他办法让它发挥作用？ 系统（“/home/ciber/.bash_profile”）； 系统（"导出JAVA_HOME=/usr/lib/jvm/java-6
-
安装hive后的Hadoop（本地和主机目的地不匹配）
我已经在运行ubuntu的笔记本电脑上安装了Hadoop2.2作为单节点集群，并运行了单词计数示例。之后，我安装了Hive，Hadoop开始给出错误，即。 我在我的主机文件中找到了以下两个条目 我的问题是，为什么配置配置单元后会出现错误？解决方案是什么？非常感谢您的帮助。 谢谢！
-
大数据开发面试题之Hive篇hive的架构 hive外部表和内部表的区别 内部表的数据由hive管理，且存储在hive.metastore.warehouse.dir配置下的路径中；外部表的数据由HDFS存储，路径可以自己指定； 删除表时，内部表会把元数据及真实数据删除；外部表不删除真实数据。 你用过hive哪些窗口函数 可参考：面试官：你用过哪些窗口函数 一般用什么文件格式 可参考：面试官：“你们实际生产中hive用什么文
-
第八章 HBASE - 7.Hive与Hbase的区别
1 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询—因为它只能够在Haoop上批量的执行Hadoop。 Apache HBase是一种Ke
-
第六章 Hive - 10 FAQ
FAQ 调试中出现的Jline版本过低的FAQ Logging initialized using configuration in jar:file:/hive/apache-hive-1.1.0-bin/lib/hive-common-1.1.0.jar!/hive-log4j.properties SLF4J: Class path contains multiple SLF4J bindi
-
第六章 Hive - 9 Hive安全
一 概述 在了解Hive的安全机制之前,我们需要首先清楚Hadoop的安全机制以及Hadoop的历史,Hadoop起源于Apache Nuch的子项目.在那个时代以及整个早期原型时代,功能性需要比安全性需求优先级要高.分布式系统的安全问题要比正常情况下更加复杂,因为不同机器上的多个组件需要相互进行通信. Hadoop的安全性近期有了许多变化,其中主要是对Kerberos安全认证的支持,还包括其他一
-
第六章 Hive - 8 Hive开发
一 Hive的Thrift服务 Hive具有一个可选的组件叫做HiveServer或者HiveThrift,其允许通过指定的端口访问Hive,Thrift是一个软件框架,其用于跨语言的服务开发.关于Thrift,可以通过链接http://thrift.apache.org获取更详细的介绍.Thrift允许客户端使用包括Java C++ Ruby和其他语言,通过编程的方式远程访问Hive. 访问Hi
-
第六章 Hive - 7 Hive综合案例实战
一 数据源的准备工作 首先我们去一个网站下载相关的数据,之后通过hive导入进行实验.http://grouplens.org/ 二 内部表 1 创建内部表并载入数据 hadoop@hadoopmaster:~$ beeline -u jdbc:hive2://hadoopmaster:10000/ Beeline version 2.1.0 by Apache Hive 0: jdbc:hive
-
第六章 Hive - 6 Hive的模式设计与事务性
一 概述 Hive看上去以及实际行为都像一个关系型数据库.用户对如表和列这类术语比较熟悉,而且Hive提供的查询语言和用户之前使用过的SQL方言非常相似.不过Hive实现和使用的方式和传统的关系型数据库是非常不同的.通常,用户视图移植关系型数据库中的模式,而事实上Hive是反模式 1 按天划分的表 按天划分表就是一种模式,其通常会在表中加入一个时间戳,例如表名为upply_2011_01_01等等
-
第六章 Hive - 5 Hive的存储架构与HQL语法
一 概述 当然，Hive和传统的关系型数据库有很大的区别，Hive将外部的任务解析成一个MapReduce可执行计划，而启动MapReduce是一个高延迟的一件事，每次提交任务和执行任务都需要消耗很多时间，这也就决定Hive只能处理一些高延迟的应用（如果你想处理低延迟的应用，你可以去考虑一下Hbase）。 同时，由于设计的目标不一样，Hive目前还不支持事务；不能对表数据进行修改（不能更新、删除、
-
第六章 Hive - 4.Hive数据类型与文件格式
一 概述 Hive支持关系型数据库中的大多数基本数据类型,同时也支持关系型数据库中很少出现的3种集合数据类型. 1 基本数据类型 Hive支持多种不同长度的整型和浮点型数据类型,支持布尔类型,也支持无长度限制的字符串类型. 数据类型 长度 例子 TINYINT 1byte 有符号整数 20 SMALLINT 2byte 有符号整数 20 INT 4byte 有符号整数 20 BIGINT 8byt
-
第六章 Hive - 3.Hive的基本使用与导入导出
Hive数据的导入 从本地文件系统中导入数据到Hive表； 从HDFS上导入数据到Hive表； 从别的表中查询出相应的数据并导入到Hive表中； 在创建表的时候通过从别的表中查询出相应的记录并插入到所创建的表中。 1、从本地文件系统中导入数据到Hive表先在Hive里面创建好表 如下： hive> create table wyp (id int, name string,age int, tel