HBase

HBase

请教个问题,业务日志即要做实时查询,又要做离线分析,是只存hbase好呢,还是hbase和hdfs都存?

回复

HBase 存在 发起了问题 • 1 人关注 • 0 个回复 • 59 次浏览 • 2018-03-12 19:49 • 来自相关话题

phoenix操作hbase,对于key 位数不一致的。

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 65 次浏览 • 2018-03-12 19:49 • 来自相关话题

在phoenix中做查询

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 59 次浏览 • 2018-03-12 19:40 • 来自相关话题

有个问题,实时计算广告位曝光,使用hbase。

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 55 次浏览 • 2018-03-12 19:37 • 来自相关话题

启动hbase master 出现 Error: Could not find or load main class for谁见过

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 70 次浏览 • 2018-03-12 19:34 • 来自相关话题

指定了版本数,后面的插入数据还是会把上一条记录替换掉

回复

HBase 岗雍木措 发起了问题 • 1 人关注 • 0 个回复 • 61 次浏览 • 2018-03-12 19:29 • 来自相关话题

hbase org.apache.hadoop.hbase.mapreduce.RowCounter

回复

HBase 存在 发起了问题 • 1 人关注 • 0 个回复 • 55 次浏览 • 2018-03-12 19:16 • 来自相关话题

咨询一下啊,怎么在windiws上能编写java程序操作远程linux的hbase表?

HBase 比特币 回复了问题 • 2 人关注 • 1 个回复 • 72 次浏览 • 2018-03-11 16:55 • 来自相关话题

用的是hbase-client-0.98.6-cdh5.3.9访问hbase0.98

HBase 时间不再回头 回复了问题 • 2 人关注 • 2 个回复 • 51 次浏览 • 2018-02-23 12:49 • 来自相关话题

扫表 map阶段有GC overhead 会是什么原因

HBase 张晓慧 回复了问题 • 2 人关注 • 1 个回复 • 119 次浏览 • 2018-02-23 12:48 • 来自相关话题

有没有方法可以快速把某列数据全部读取出来

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 36 次浏览 • 2018-02-23 12:47 • 来自相关话题

Mapreduce扫描HBase全表

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 40 次浏览 • 2018-02-23 12:42 • 来自相关话题

构建hconnection的值为null

回复

HBase 时间不再回头 回复了问题 • 1 人关注 • 1 个回复 • 61 次浏览 • 2018-02-23 12:41 • 来自相关话题

hbase取数据卡住也不报错

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 41 次浏览 • 2018-02-23 12:31 • 来自相关话题

这个后面的U小版本会不会影响RPC?

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 30 次浏览 • 2018-02-23 12:29 • 来自相关话题

client做bulkload取meta表信息的时候,直接抛异常退出了

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 43 次浏览 • 2018-02-23 12:27 • 来自相关话题

​hbase的api中HBaseAdmin中没有判断snapshot表是否存在的函数是吗?

HBase 张晓慧 回复了问题 • 3 人关注 • 10 个回复 • 49 次浏览 • 2018-02-23 12:26 • 来自相关话题

/hbase/archive/data/ 的属主

HBase 史晓江 回复了问题 • 2 人关注 • 3 个回复 • 37 次浏览 • 2018-02-23 12:17 • 来自相关话题

用什么数据库

HBase 存在 回复了问题 • 2 人关注 • 5 个回复 • 46 次浏览 • 2018-02-23 12:13 • 来自相关话题

条新动态, 点击查看
vitocorleone

vitocorleone 回答了问题 • 2016-06-07 11:19 • 7 个回复 不感兴趣

4.2.1hbase用eclipse建表一直不成功

赞同来自:

[root@dx2-1 hbase-chinahadoop]# cat pom.xml
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http:/... 显示全部 »
[root@dx2-1 hbase-chinahadoop]# cat pom.xml
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  <modelVersion>4.0.0</modelVersion>
  <groupId>com.sogou</groupId>
  <artifactId>hbase-chinahadoop</artifactId>
  <version>0.0.1-SNAPSHOT</version>
  <name>testbasichbaseapi</name>
  
  <repositories>
                        <repository>
                                        <id>central</id>
                                        <name>Central Repository</name>
                                        <url>http://repo.maven.apache.org/maven2</url>
                                        <layout>default</layout>
                                        <snapshots>
                                                        <enabled>false</enabled>
                                        </snapshots>
                        </repository> 
                        <repository>
                                        <id>github-releases</id>
                                        <url>http://oss.snoatype.org/content/repositories/github-releases/</url>
                        </repository>
                        <repository>
                                        <id>clojars.org</id>
                                        <url>http://clojars.org/repo</url>
                        </repository>
                        <repository>
                                        <id>sogou.repo</id>
                                        <url>http://cloud.sogou-inc.com/nexus/content/groups/public</url>
                                        <name>Sogou Repository</name>
                        </repository>
                        <repository>
                                        <id>sogou.repo.old</id>
                                        <url>http://10.12.8.218:8080/nexus/content/groups/public</url>
                                        <name>Old Sogou Repository</name>
                        </repository>
  </repositories>
   <properties>
       <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
   </properties>

  <dependencies>

<dependency>
    <groupId>org.apache.hadoop</groupId>
    <artifactId>hadoop-client</artifactId>
    <version>2.6.0</version>
</dependency>

<dependency>
    <groupId>org.apache.hbase</groupId>
    <artifactId>hbase-client</artifactId>
    <version>1.0.0</version>
</dependency>

      <dependency>
            <groupId>junit</groupId>
            <artifactId>junit</artifactId>
            <version>3.8.1</version>
            <scope>test</scope>
      </dependency>
  </dependencies>
</project>

小米何亮亮——HBase服务化实践,DCon2015文字实录

DCon fish 回复了问题 • 18 人关注 • 4 个回复 • 6692 次浏览 • 2015-12-08 22:28 • 来自相关话题

Hbase宽表设计注意事项

回复

HBase 宗永芳gfd 回复了问题 • 4 人关注 • 4 个回复 • 970 次浏览 • 2018-05-09 21:26 • 来自相关话题

请教个问题,业务日志即要做实时查询,又要做离线分析,是只存hbase好呢,还是hbase和hdfs都存?

回复

HBase 存在 发起了问题 • 1 人关注 • 0 个回复 • 59 次浏览 • 2018-03-12 19:49 • 来自相关话题

phoenix操作hbase,对于key 位数不一致的。

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 65 次浏览 • 2018-03-12 19:49 • 来自相关话题

在phoenix中做查询

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 59 次浏览 • 2018-03-12 19:40 • 来自相关话题

有个问题,实时计算广告位曝光,使用hbase。

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 55 次浏览 • 2018-03-12 19:37 • 来自相关话题

启动hbase master 出现 Error: Could not find or load main class for谁见过

回复

HBase JVMer 发起了问题 • 1 人关注 • 0 个回复 • 70 次浏览 • 2018-03-12 19:34 • 来自相关话题

指定了版本数,后面的插入数据还是会把上一条记录替换掉

回复

HBase 岗雍木措 发起了问题 • 1 人关注 • 0 个回复 • 61 次浏览 • 2018-03-12 19:29 • 来自相关话题

hbase org.apache.hadoop.hbase.mapreduce.RowCounter

回复

HBase 存在 发起了问题 • 1 人关注 • 0 个回复 • 55 次浏览 • 2018-03-12 19:16 • 来自相关话题

咨询一下啊,怎么在windiws上能编写java程序操作远程linux的hbase表?

回复

HBase 比特币 回复了问题 • 2 人关注 • 1 个回复 • 72 次浏览 • 2018-03-11 16:55 • 来自相关话题

一个集群的HBase数据复制到另一份个HBase

回复

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 108 次浏览 • 2018-02-23 13:37 • 来自相关话题

我MR导入HFile时错误

回复

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 247 次浏览 • 2018-02-23 13:34 • 来自相关话题

MR程序扫快照表

回复

HBase 张晓慧 回复了问题 • 2 人关注 • 2 个回复 • 120 次浏览 • 2018-02-23 13:33 • 来自相关话题

你们怎么做HBase数据的异地灾备的?

回复

HBase 史晓江 回复了问题 • 2 人关注 • 3 个回复 • 93 次浏览 • 2018-02-23 13:32 • 来自相关话题

把这些region的目录下的.regioninfo写到meta表中

回复

HBase 史晓江 回复了问题 • 2 人关注 • 3 个回复 • 85 次浏览 • 2018-02-23 13:29 • 来自相关话题

region的rowkey不连续

回复

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 78 次浏览 • 2018-02-23 13:27 • 来自相关话题

日志会采用SequenceFile方式存放hdfs还是直接存在hbase表(SNAPPY压缩)

回复

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 87 次浏览 • 2018-02-23 13:26 • 来自相关话题

HBase中存储有用户的特征

回复

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 112 次浏览 • 2018-02-23 13:25 • 来自相关话题

表在HDFS上的目录被误删

回复

HBase 存在 回复了问题 • 3 人关注 • 19 个回复 • 105 次浏览 • 2018-02-23 13:24 • 来自相关话题

修复时 hbase:meta表下线老是失败

回复

HBase 史晓江 回复了问题 • 2 人关注 • 1 个回复 • 130 次浏览 • 2018-02-23 13:21 • 来自相关话题

nosql数据库比较

NOSql 唐半张 发表了文章 • 0 个评论 • 901 次浏览 • 2015-10-10 10:07 • 来自相关话题

nosql数据库比较 互联网公司常用的基本集中在以下几种,每种只举一个比较常见或者应用比较成功的例子吧。 1. In-Memory KV Store : Redis in memory key-value store,同时提供了更加丰富的数据结构和运算的能...
查看更多

HBase Client使用注意点

HBase 唐半张 发表了文章 • 0 个评论 • 854 次浏览 • 2015-10-09 10:25 • 来自相关话题

1  HTable线程不安全。    建议使用HTablePool,或者每次new一个HTable出来。     2  HTable和HConnection的关系。    注意HTable对象之间通过Configuration共享HConne...
查看更多

hbase权威指南阅读随手笔记二之过滤器

HBase 唐半张 发表了文章 • 0 个评论 • 887 次浏览 • 2015-10-08 10:18 • 来自相关话题

base过滤器的比较操作符: LESS  < LESS_OR_EQUAL <= EQUAL = NOT_EQUAL <> GREATER_OR_EQUAL >= GREATER > NO_OP no operation 比较...
查看更多

sqoop mysql\oracle数据导入到hbase 各种异常解决

Sqoop 唐半张 发表了文章 • 0 个评论 • 1131 次浏览 • 2015-10-08 09:55 • 来自相关话题

使用sqoop 导mysql的数据时 一切顺利很方便   导oracle的时候 问题就来了  --query命令: 使用这个命令的时候 需要注意的是 where后面的参数,$CONDITIONS 这个参数必须加上 而且存在单引号与双引号的区别,如...
查看更多

sqoop从关系型数据库导数据到hdfs和hbase

Sqoop 唐半张 发表了文章 • 0 个评论 • 1195 次浏览 • 2015-10-06 11:28 • 来自相关话题

最近弄了些sqoop导数据方法和命令,关于批量导入和一般导入,在本机器上linux环境运行正常; (一)Oracle导入到hdfs上            sqoop import --connect jdbcracle:thinip:端口号:database...
查看更多

hbase开启lzo压缩

HBase 唐半张 发表了文章 • 0 个评论 • 916 次浏览 • 2015-10-06 11:25 • 来自相关话题

hbase只支持对gzip的压缩,对lzo压缩支持不好。在io成为系统瓶颈的情况下,一般开启lzo压缩会提高系统的吞吐量。但这需要参考具体的应用场景,即是否值得进行压缩、压缩率是否足够等等。 要hbase支持lzo压缩,参照以下步骤: 1 首先要让系...
查看更多

hbase flushcommit使用

HBase 唐半张 发表了文章 • 0 个评论 • 960 次浏览 • 2015-10-06 10:11 • 来自相关话题

hbase数据入库程序不要手动做table.flushcommit(),而是使用hbase自带的memstore->硬盘的写入机制,只需要table.put即可。然后设置table的自动提交功能为false(如果为true的话每次调用table.put...
查看更多

使用HBase Shell 接口的注意事项

HBase 唐半张 发表了文章 • 0 个评论 • 872 次浏览 • 2015-09-30 10:36 • 来自相关话题

总结培训当天反馈的问题,新手们需要注意几点: 问题1,  HBase(可以理解为不需要建'name'列,hbase自动建立一个用于存储“行标识”的“列”),举例如下: 例一: create 'employees', 'SN', 'department', 'a...
查看更多

解读Hadoop Hbase适合存储哪类数据

HBase 唐半张 发表了文章 • 0 个评论 • 655 次浏览 • 2015-09-30 10:15 • 来自相关话题

最适合使用Hbase存储的数据是非常稀疏的数据(非结构化或者半结构化的数据)。Hbase之所以擅长存储这类数据,是因为Hbase是column-oriented列导向的存储机制,而我们熟知的RDBMS都是row- oriented行导向的存储机制(郁闷的是我看...
查看更多

Hadoop Hive与Hbase整合

Hadoop 唐半张 发表了文章 • 0 个评论 • 960 次浏览 • 2015-09-29 11:08 • 来自相关话题

用hbase做数据库,但由于hbase没有类sql查询方式,所以操作和计算数据非常不方便,于是整合hive,让hive支撑在hbase数据库层面 的 hql查询.hive也即 做数据仓库  1. 基于Hadoop+Hive架构对海量数据进行查询:htt...
查看更多

Hfile存储结构-转载

HBase 唐半张 发表了文章 • 0 个评论 • 839 次浏览 • 2015-09-29 10:15 • 来自相关话题

HBase中的所有数据文件都存储在Hadoop HDFS文件系统上,主要包括两种文件类型: 1. HFile, HBase中KeyValue数据的存储格式,HFile是Hadoop的二进制格式文件,实际上StoreFile就是对HFile做了轻量级包装,...
查看更多

hadoop2.6.0对应的hbase版本

Hadoop 唐半张 发表了文章 • 0 个评论 • 2090 次浏览 • 2015-09-25 10:46 • 来自相关话题

adoop2.6.0对应的hbase版本是       我们安装了hadoop,想学习habse,但是hbase的版本选择不正确,会造成后面不能进行下去。 那么hbase和hadoop、hive版本是如何对应的呢? 下面给大家列出来: hado...
查看更多

hadoop zookeeper hbase部署

Hadoop 夕阳丶一抹红颜 发表了文章 • 0 个评论 • 905 次浏览 • 2015-09-22 11:33 • 来自相关话题

hadoop zookeeper hbase部署 一 机器 192.168.0.203 hd203: hadoop namenode & hbase HMaster 192.168.0.204 hd204: hadoop datanode &...
查看更多

学习Hadoop2.x下安装HBase的教程

Hadoop 夕阳丶一抹红颜 发表了文章 • 0 个评论 • 867 次浏览 • 2015-09-22 09:15 • 来自相关话题

学习Hadoop已经不短时间了,今天我们来学习 Hadoop2.x下安装HBase ,我们所使用的环境:CentOS6.5  Hadoop2.5.2  HBase1.0.0,大家如果和使用的环境相符,那么,详细教程如下: 1.安装好 hadoop 集群...
查看更多

hbase源码系列(十五)终结篇&Scan续集-->如何查询出来下一个KeyValue

HBase cenyuhai 发表了文章 • 0 个评论 • 663 次浏览 • 2015-09-11 15:17 • 来自相关话题

这是这个系列的最后一篇了,实在没精力写了,本来还想写一下hbck的,这个东西很常用,当hbase的Meta表出现错误的时候,它能够帮助我们进行修复,无奈看到3000多行的代码时,退却了,原谅我这点自私的想法吧。 在讲 《Get、Scan在服务端是如何处理?》 ...
查看更多

hbase源码系列(十四)Compact和Split

Hadoop cenyuhai 发表了文章 • 1 个评论 • 737 次浏览 • 2015-09-11 15:16 • 来自相关话题

先上一张图讲一下Compaction和Split的关系,这样会比较直观一些。 http://images.cnitblog.com/i/477362/201405/250148064969869.gif Compaction把多个MemStore flus...
查看更多

hbase源码系列(十三)缓存机制MemStore与Block Cache

HBase cenyuhai 发表了文章 • 0 个评论 • 1208 次浏览 • 2015-09-11 15:16 • 来自相关话题

这一章讲hbase的缓存机制,这里面涉及的内容也是比较多,呵呵,我理解中的缓存是保存在内存中的特定的便于检索的数据结构就是缓存。 之前在讲put的时候,put是被添加到Store里面,这个Store是个接口,实现是在HStore里面,MemStore其实是它底...
查看更多

hbase源码系列(十二)Get、Scan在服务端是如何处理?

Hadoop cenyuhai 发表了文章 • 0 个评论 • 937 次浏览 • 2015-09-11 15:15 • 来自相关话题

继上一篇讲了Put和Delete之后,这一篇我们讲Get和Scan, 因为我发现这两个操作几乎是一样的过程,就像之前的Put和Delete一样,上一篇我本来只打算写Put的,结果发现Delete也可以走这个过程,所以就一起写了。Get 我们打开HRegionS...
查看更多

hbase源码系列(十一)Put、Delete在服务端是如何处理?

HBase cenyuhai 发表了文章 • 0 个评论 • 869 次浏览 • 2015-09-11 15:15 • 来自相关话题

List<Cell>> e : familyMap.entrySet()) { byte[] family = e.getKey(); List<Cell> cells = e.getValue(); //列和count的映射 M...
查看更多

hbase源码系列(十)HLog与日志恢复

HBase cenyuhai 发表了文章 • 0 个评论 • 866 次浏览 • 2015-09-11 15:14 • 来自相关话题

HLog概述 hbase在写入数据之前会先写入MemStore,成功了再写入HLog,当MemStore的数据丢失的时候,还可以用HLog的数据来进行恢复,下面先看看HLog的图。 http://images.cnitblog.com/i/477362/20...
查看更多