《hbase》专题

我使用的是Spark 1.2.1、Hbase 0.98.10和Hadoop 2.6.0。在从HBase检索数据时，我遇到了一个空点异常。在下面查找堆栈跟踪。 请提供我解决这个问题的方法。

这是我的映射器代码 这是我的作业配置 有谁能帮我解决一下这个例外。

我在我大学的热图项目中，我们必须从txt文件（坐标、高度）中获取一些数据（212Go），然后将其放入HBase以在带有Express的Web客户端上检索它。 我练习使用144Mo文件，这是工作： 但是我现在使用212Go文件，我有一些内存错误，我猜收集方法会收集内存中的所有数据，所以212Go太多了。 所以现在我在尝试这个： 我得到了“org.apache.spark.SparkException

我试图使用Spark 1.0在HBase（0.96.0-hadoop2）中编写一些简单的数据，但我一直遇到序列化问题。以下是相关代码： 运行代码会导致： 用map替换foreach不会崩溃，但我也不会写。任何帮助都将不胜感激。

我从环境Hadoop、HBase、Pig开始；我会在Hbase表上存储一个数据库；以下是我的请求： hbase->create创建我的数据库。 我在HDFS文件hadoop dfs-copyFromLocal~/data.csv/user/hduser/location.csv上重新启动了我的CVS文件 我处决了我的请求猪 raw_data=使用PigStorage（“；”）加载'/user/hd

在HBase Shell中是否可以显示实际的十进制值，而不是以科学记数法显示？ 通过下面提到的Phoenix脚本创建了HBase表。通过java中的Spark job将数据（“loginTime”：0.00006444）填充到此HBase表（通过phoenix脚本创建）。 如果该字段的java数据类型是双，那么该值将以科学符号显示为“6.44443E-5”，而不是显示实际值。但是如果我使java数

换句话说，我似乎成功地“分发缓存”了我的共享库，但我不能在Map函数中加载它。 当我试图调用JNI类中的静态函数时，会抛出一个'java.lang.Exception': 我还尝试了'system.load()'。并且我考虑过在Linux系统中使用前缀'lib'和后缀'.so'。 本机库指南在hadoop reducer中加载本机库？ 我不知道我说得是否清楚，如果不清楚，请告诉我。

我遵循以下文档（特别是编写到Cloud Bigtable）：https://cloud.google.com/bigtable/docs/hbase-dataflow-java（我正在尝试1.3.0版和1.4.0版。） 在运行管道之前，此步骤会出现错误： （请注意，文档没有说明如何为“writing”部分创建此“config”实例，但我尝试了以上两种方法（从“reading”部分复制，然后删除“.

我正在努力用Hbase建立泰坦。下面是我跟踪的stteps， 下载泰坦-HBase 已下载Cygwin 已安装Hbase（请参阅http://Hbase.apache.org/cygwin.html) HBase在cygwin中运行。 5.Titan正在我的windows上运行，基本的gremlin控制台即将出现。 现在我想加载Hbase作为泰坦中的存储。我不明白如何在titan中配置，以便它将映

到目前为止，我做了一些研究和ACC。据我所知，Hadoop在HDFS中提供了处理原始数据块（文件）的框架，而HBase是Hadoop之上的数据库引擎，它基本上处理结构化数据而不是原始数据块。Hbase在HDFS上提供了一个逻辑层，就像SQL一样。正确吗？

在我们本地服务器的HDFS之上成功地安装和配置了HBase之后，我在我们的OVH VPS机器上做了同样的配置，但是我得到了一个奇怪的错误。 导出路径=$PATH:$HADOOP_HOME/bin导出HADOOP_HOME=/usr/local/HADOOP导出路径=$PATH:$HADOOP_HOME/sbin导出ath=/usr/local/hbase/lib/

我最近安装了带有纱线配置的hadoop V2。我计划安装Hadoop生态系统堆栈，如Pig、Hive、Hbase、Oozie、Zookeeper等。我想知道我是否应该安装与Hadoop1.0配置相同的链接中的工具。如果没有，谁能请给我这些工具的Hadoop2配置的链接？。我听说Pig和Hive在Hadoop2.0中更快。因此想知道是否有更好的版本。 谢谢，高萨姆

我对Apache Hadoop有些陌生。我已经看到了关于Hadoop、HBase、Pig、Hive和HDFS的这个和这个问题。两者都描述了上述技术之间的比较。 但是，我已经看到，Hadoop环境通常包含所有这些组件(HDFS、HBase、Pig、Hive、Azkaban)。 有人能以架构工作流的方式解释那些组件/技术与其在Hadoop环境中的职责之间的关系吗？最好是举个例子？

我正在通过Java API使用HBase来管理一个URL和参数列表，这些URL和参数等待一个带有多个线程的刮刀进行分析。程序还不断地向表中添加新行。 我需要连续地从表中读取一行并且只读取一行，然后原子地删除它（一行不能同时被两个线程读取），而不需要选择一行而不是另一行的条件。 编辑：我忘了提到表有一个具有单个列的单个列族