hbase

hbase

通过Bulkload导Hbase时,如果某列没有值,其他列有值,这样的一行该怎么写?

hbase 斯盖丸 回复了问题 • 3 人关注 • 2 个回复 • 137 次浏览 • 2017-06-20 19:56 • 来自相关话题

通过spark读取hbase数据线程池拒绝连接

hbase fish 回复了问题 • 2 人关注 • 2 个回复 • 62 次浏览 • 2017-06-20 19:35 • 来自相关话题

hbase 中被打上删除标签的数据,何时会被彻底真正删除?

hbase fish 回复了问题 • 3 人关注 • 2 个回复 • 40 次浏览 • 2017-06-15 11:17 • 来自相关话题

HBase 多条件过滤

hbase mopishv0 回复了问题 • 4 人关注 • 2 个回复 • 98 次浏览 • 2017-05-11 10:31 • 来自相关话题

regionserver.log 都是这样的警告

hbase mopishv0 回复了问题 • 3 人关注 • 2 个回复 • 89 次浏览 • 2017-03-31 00:53 • 来自相关话题

hbase regionsever 地址被占用

hbase macg 回复了问题 • 4 人关注 • 6 个回复 • 201 次浏览 • 2017-03-23 18:25 • 来自相关话题

Hbase exists 命令返回结果不正确

回复

hbase IT_Angel 回复了问题 • 1 人关注 • 1 个回复 • 91 次浏览 • 2017-03-18 19:14 • 来自相关话题

关于“电影评分”的大作业项目的CASE-2应用场景的解决方案应该如何设计?

hbase IT_Angel 回复了问题 • 2 人关注 • 2 个回复 • 84 次浏览 • 2017-03-06 09:40 • 来自相关话题

Hbase enable table 时, 时间过长,强制终止后出现问题!

hbase mopishv0 回复了问题 • 2 人关注 • 1 个回复 • 180 次浏览 • 2017-02-26 17:01 • 来自相关话题

python存取hbase的问题

python fish 回复了问题 • 2 人关注 • 1 个回复 • 154 次浏览 • 2017-02-20 09:40 • 来自相关话题

Hbase regionserver 报错然后造成 region下线,最终所有region都下线后,这个regionserver就挂掉了

hbase 数据男孩 回复了问题 • 4 人关注 • 15 个回复 • 542 次浏览 • 2017-02-04 16:08 • 来自相关话题

线上集群Hbase的 hbase.version 文件突然消失了

hbase mopishv0 回复了问题 • 3 人关注 • 14 个回复 • 279 次浏览 • 2017-01-24 17:10 • 来自相关话题

请问 我关于“movielens大数据作业表设计” 是否合理?

hbase IT_Angel 回复了问题 • 3 人关注 • 12 个回复 • 281 次浏览 • 2017-01-24 10:40 • 来自相关话题

Hbase 集群的某个region无法读取

hbase mopishv0 回复了问题 • 3 人关注 • 3 个回复 • 153 次浏览 • 2017-01-19 14:20 • 来自相关话题

Hbase drop 表失败

hbase fish 回复了问题 • 2 人关注 • 2 个回复 • 179 次浏览 • 2017-01-16 22:40 • 来自相关话题

spark 读取预分region的Hbase

spark Hagrid 回复了问题 • 3 人关注 • 3 个回复 • 262 次浏览 • 2017-01-16 09:38 • 来自相关话题

Hbaes hbase.master.wait.on.regionservers.timeout 配置多少合适

hbase mopishv0 回复了问题 • 3 人关注 • 3 个回复 • 226 次浏览 • 2017-01-15 23:28 • 来自相关话题

Hbase hbase.snapshot.enabled 如何做快照?

回复

hbase Hagrid 发起了问题 • 2 人关注 • 0 个回复 • 198 次浏览 • 2017-01-12 13:41 • 来自相关话题

HBase hbase.hregion.max.filesize 修改后重启

hbase mopishv0 回复了问题 • 3 人关注 • 2 个回复 • 201 次浏览 • 2017-01-11 13:27 • 来自相关话题

canal 导入hbase用什么方式?

hbase mopishv0 回复了问题 • 4 人关注 • 1 个回复 • 232 次浏览 • 2017-01-11 13:23 • 来自相关话题

条新动态, 点击查看
vitocorleone

vitocorleone 回答了问题 • 2016-06-07 11:19 • 7 个回复 不感兴趣

4.2.1hbase用eclipse建表一直不成功

赞同来自:

[root@dx2-1 hbase-chinahadoop]# cat pom.xml
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http:/... 显示全部 »
[root@dx2-1 hbase-chinahadoop]# cat pom.xml
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  <modelVersion>4.0.0</modelVersion>
  <groupId>com.sogou</groupId>
  <artifactId>hbase-chinahadoop</artifactId>
  <version>0.0.1-SNAPSHOT</version>
  <name>testbasichbaseapi</name>
  
  <repositories>
                        <repository>
                                        <id>central</id>
                                        <name>Central Repository</name>
                                        <url>http://repo.maven.apache.org/maven2</url>
                                        <layout>default</layout>
                                        <snapshots>
                                                        <enabled>false</enabled>
                                        </snapshots>
                        </repository> 
                        <repository>
                                        <id>github-releases</id>
                                        <url>http://oss.snoatype.org/content/repositories/github-releases/</url>
                        </repository>
                        <repository>
                                        <id>clojars.org</id>
                                        <url>http://clojars.org/repo</url>
                        </repository>
                        <repository>
                                        <id>sogou.repo</id>
                                        <url>http://cloud.sogou-inc.com/nexus/content/groups/public</url>
                                        <name>Sogou Repository</name>
                        </repository>
                        <repository>
                                        <id>sogou.repo.old</id>
                                        <url>http://10.12.8.218:8080/nexus/content/groups/public</url>
                                        <name>Old Sogou Repository</name>
                        </repository>
  </repositories>
   <properties>
       <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
   </properties>

  <dependencies>

<dependency>
    <groupId>org.apache.hadoop</groupId>
    <artifactId>hadoop-client</artifactId>
    <version>2.6.0</version>
</dependency>

<dependency>
    <groupId>org.apache.hbase</groupId>
    <artifactId>hbase-client</artifactId>
    <version>1.0.0</version>
</dependency>

      <dependency>
            <groupId>junit</groupId>
            <artifactId>junit</artifactId>
            <version>3.8.1</version>
            <scope>test</scope>
      </dependency>
  </dependencies>
</project>

小米何亮亮——HBase服务化实践,DCon2015文字实录

DCon fish 回复了问题 • 18 人关注 • 4 个回复 • 5594 次浏览 • 2015-12-08 22:28 • 来自相关话题

通过Bulkload导Hbase时,如果某列没有值,其他列有值,这样的一行该怎么写?

回复

hbase 斯盖丸 回复了问题 • 3 人关注 • 2 个回复 • 137 次浏览 • 2017-06-20 19:56 • 来自相关话题

通过spark读取hbase数据线程池拒绝连接

回复

hbase fish 回复了问题 • 2 人关注 • 2 个回复 • 62 次浏览 • 2017-06-20 19:35 • 来自相关话题

hbase 中被打上删除标签的数据,何时会被彻底真正删除?

回复

hbase fish 回复了问题 • 3 人关注 • 2 个回复 • 40 次浏览 • 2017-06-15 11:17 • 来自相关话题

HBase 多条件过滤

回复

hbase mopishv0 回复了问题 • 4 人关注 • 2 个回复 • 98 次浏览 • 2017-05-11 10:31 • 来自相关话题

regionserver.log 都是这样的警告

回复

hbase mopishv0 回复了问题 • 3 人关注 • 2 个回复 • 89 次浏览 • 2017-03-31 00:53 • 来自相关话题

hbase regionsever 地址被占用

回复

hbase macg 回复了问题 • 4 人关注 • 6 个回复 • 201 次浏览 • 2017-03-23 18:25 • 来自相关话题

Hbase exists 命令返回结果不正确

回复

hbase IT_Angel 回复了问题 • 1 人关注 • 1 个回复 • 91 次浏览 • 2017-03-18 19:14 • 来自相关话题

关于“电影评分”的大作业项目的CASE-2应用场景的解决方案应该如何设计?

回复

hbase IT_Angel 回复了问题 • 2 人关注 • 2 个回复 • 84 次浏览 • 2017-03-06 09:40 • 来自相关话题

Hbase enable table 时, 时间过长,强制终止后出现问题!

回复

hbase mopishv0 回复了问题 • 2 人关注 • 1 个回复 • 180 次浏览 • 2017-02-26 17:01 • 来自相关话题

python存取hbase的问题

回复

python fish 回复了问题 • 2 人关注 • 1 个回复 • 154 次浏览 • 2017-02-20 09:40 • 来自相关话题

Hbase regionserver 报错然后造成 region下线,最终所有region都下线后,这个regionserver就挂掉了

回复

hbase 数据男孩 回复了问题 • 4 人关注 • 15 个回复 • 542 次浏览 • 2017-02-04 16:08 • 来自相关话题

线上集群Hbase的 hbase.version 文件突然消失了

回复

hbase mopishv0 回复了问题 • 3 人关注 • 14 个回复 • 279 次浏览 • 2017-01-24 17:10 • 来自相关话题

请问 我关于“movielens大数据作业表设计” 是否合理?

回复

hbase IT_Angel 回复了问题 • 3 人关注 • 12 个回复 • 281 次浏览 • 2017-01-24 10:40 • 来自相关话题

Hbase 集群的某个region无法读取

回复

hbase mopishv0 回复了问题 • 3 人关注 • 3 个回复 • 153 次浏览 • 2017-01-19 14:20 • 来自相关话题

Hbase drop 表失败

回复

hbase fish 回复了问题 • 2 人关注 • 2 个回复 • 179 次浏览 • 2017-01-16 22:40 • 来自相关话题

spark 读取预分region的Hbase

回复

spark Hagrid 回复了问题 • 3 人关注 • 3 个回复 • 262 次浏览 • 2017-01-16 09:38 • 来自相关话题

Hbaes hbase.master.wait.on.regionservers.timeout 配置多少合适

回复

hbase mopishv0 回复了问题 • 3 人关注 • 3 个回复 • 226 次浏览 • 2017-01-15 23:28 • 来自相关话题

Hbase hbase.snapshot.enabled 如何做快照?

回复

hbase Hagrid 发起了问题 • 2 人关注 • 0 个回复 • 198 次浏览 • 2017-01-12 13:41 • 来自相关话题

HBase hbase.hregion.max.filesize 修改后重启

回复

hbase mopishv0 回复了问题 • 3 人关注 • 2 个回复 • 201 次浏览 • 2017-01-11 13:27 • 来自相关话题

canal 导入hbase用什么方式?

回复

hbase mopishv0 回复了问题 • 4 人关注 • 1 个回复 • 232 次浏览 • 2017-01-11 13:23 • 来自相关话题

nosql数据库比较

nosql 唐半张 发表了文章 • 0 个评论 • 572 次浏览 • 2015-10-10 10:07 • 来自相关话题

nosql数据库比较 互联网公司常用的基本集中在以下几种,每种只举一个比较常见或者应用比较成功的例子吧。 1. In-Memory KV Store : Redis in memory key-value store,同时提供了更加丰富的数据结构和运算的能...
查看更多

HBase Client使用注意点

hbase 唐半张 发表了文章 • 0 个评论 • 552 次浏览 • 2015-10-09 10:25 • 来自相关话题

1  HTable线程不安全。    建议使用HTablePool,或者每次new一个HTable出来。     2  HTable和HConnection的关系。    注意HTable对象之间通过Configuration共享HConne...
查看更多

hbase权威指南阅读随手笔记二之过滤器

hbase 唐半张 发表了文章 • 0 个评论 • 535 次浏览 • 2015-10-08 10:18 • 来自相关话题

base过滤器的比较操作符: LESS  < LESS_OR_EQUAL <= EQUAL = NOT_EQUAL <> GREATER_OR_EQUAL >= GREATER > NO_OP no operation 比较...
查看更多

sqoop mysql\oracle数据导入到hbase 各种异常解决

sqoop 唐半张 发表了文章 • 0 个评论 • 665 次浏览 • 2015-10-08 09:55 • 来自相关话题

使用sqoop 导mysql的数据时 一切顺利很方便   导oracle的时候 问题就来了  --query命令: 使用这个命令的时候 需要注意的是 where后面的参数,$CONDITIONS 这个参数必须加上 而且存在单引号与双引号的区别,如...
查看更多

sqoop从关系型数据库导数据到hdfs和hbase

sqoop 唐半张 发表了文章 • 0 个评论 • 705 次浏览 • 2015-10-06 11:28 • 来自相关话题

最近弄了些sqoop导数据方法和命令,关于批量导入和一般导入,在本机器上linux环境运行正常; (一)Oracle导入到hdfs上            sqoop import --connect jdbcracle:thinip:端口号:database...
查看更多

hbase开启lzo压缩

hbase 唐半张 发表了文章 • 0 个评论 • 594 次浏览 • 2015-10-06 11:25 • 来自相关话题

hbase只支持对gzip的压缩,对lzo压缩支持不好。在io成为系统瓶颈的情况下,一般开启lzo压缩会提高系统的吞吐量。但这需要参考具体的应用场景,即是否值得进行压缩、压缩率是否足够等等。 要hbase支持lzo压缩,参照以下步骤: 1 首先要让系...
查看更多

hbase flushcommit使用

hbase 唐半张 发表了文章 • 0 个评论 • 570 次浏览 • 2015-10-06 10:11 • 来自相关话题

hbase数据入库程序不要手动做table.flushcommit(),而是使用hbase自带的memstore->硬盘的写入机制,只需要table.put即可。然后设置table的自动提交功能为false(如果为true的话每次调用table.put...
查看更多

使用HBase Shell 接口的注意事项

hbase 唐半张 发表了文章 • 0 个评论 • 544 次浏览 • 2015-09-30 10:36 • 来自相关话题

总结培训当天反馈的问题,新手们需要注意几点: 问题1,  HBase(可以理解为不需要建'name'列,hbase自动建立一个用于存储“行标识”的“列”),举例如下: 例一: create 'employees', 'SN', 'department', 'a...
查看更多

解读Hadoop Hbase适合存储哪类数据

hbase 唐半张 发表了文章 • 0 个评论 • 441 次浏览 • 2015-09-30 10:15 • 来自相关话题

最适合使用Hbase存储的数据是非常稀疏的数据(非结构化或者半结构化的数据)。Hbase之所以擅长存储这类数据,是因为Hbase是column-oriented列导向的存储机制,而我们熟知的RDBMS都是row- oriented行导向的存储机制(郁闷的是我看...
查看更多

Hadoop Hive与Hbase整合

hadoop 唐半张 发表了文章 • 0 个评论 • 652 次浏览 • 2015-09-29 11:08 • 来自相关话题

用hbase做数据库,但由于hbase没有类sql查询方式,所以操作和计算数据非常不方便,于是整合hive,让hive支撑在hbase数据库层面 的 hql查询.hive也即 做数据仓库  1. 基于Hadoop+Hive架构对海量数据进行查询:htt...
查看更多

Hfile存储结构-转载

hbase 唐半张 发表了文章 • 0 个评论 • 539 次浏览 • 2015-09-29 10:15 • 来自相关话题

HBase中的所有数据文件都存储在Hadoop HDFS文件系统上,主要包括两种文件类型: 1. HFile, HBase中KeyValue数据的存储格式,HFile是Hadoop的二进制格式文件,实际上StoreFile就是对HFile做了轻量级包装,...
查看更多

hadoop2.6.0对应的hbase版本

hadoop 唐半张 发表了文章 • 0 个评论 • 1621 次浏览 • 2015-09-25 10:46 • 来自相关话题

adoop2.6.0对应的hbase版本是       我们安装了hadoop,想学习habse,但是hbase的版本选择不正确,会造成后面不能进行下去。 那么hbase和hadoop、hive版本是如何对应的呢? 下面给大家列出来: hado...
查看更多

hadoop zookeeper hbase部署

hadoop 夕阳丶一抹红颜 发表了文章 • 0 个评论 • 614 次浏览 • 2015-09-22 11:33 • 来自相关话题

hadoop zookeeper hbase部署 一 机器 192.168.0.203 hd203: hadoop namenode & hbase HMaster 192.168.0.204 hd204: hadoop datanode &...
查看更多

学习Hadoop2.x下安装HBase的教程

hadoop 夕阳丶一抹红颜 发表了文章 • 0 个评论 • 488 次浏览 • 2015-09-22 09:15 • 来自相关话题

学习Hadoop已经不短时间了,今天我们来学习 Hadoop2.x下安装HBase ,我们所使用的环境:CentOS6.5  Hadoop2.5.2  HBase1.0.0,大家如果和使用的环境相符,那么,详细教程如下: 1.安装好 hadoop 集群...
查看更多

hbase源码系列(十五)终结篇&Scan续集-->如何查询出来下一个KeyValue

hbase cenyuhai 发表了文章 • 0 个评论 • 386 次浏览 • 2015-09-11 15:17 • 来自相关话题

这是这个系列的最后一篇了,实在没精力写了,本来还想写一下hbck的,这个东西很常用,当hbase的Meta表出现错误的时候,它能够帮助我们进行修复,无奈看到3000多行的代码时,退却了,原谅我这点自私的想法吧。 在讲 《Get、Scan在服务端是如何处理?》 ...
查看更多

hbase源码系列(十四)Compact和Split

hadoop cenyuhai 发表了文章 • 1 个评论 • 435 次浏览 • 2015-09-11 15:16 • 来自相关话题

先上一张图讲一下Compaction和Split的关系,这样会比较直观一些。 http://images.cnitblog.com/i/477362/201405/250148064969869.gif Compaction把多个MemStore flus...
查看更多

hbase源码系列(十三)缓存机制MemStore与Block Cache

hbase cenyuhai 发表了文章 • 0 个评论 • 841 次浏览 • 2015-09-11 15:16 • 来自相关话题

这一章讲hbase的缓存机制,这里面涉及的内容也是比较多,呵呵,我理解中的缓存是保存在内存中的特定的便于检索的数据结构就是缓存。 之前在讲put的时候,put是被添加到Store里面,这个Store是个接口,实现是在HStore里面,MemStore其实是它底...
查看更多

hbase源码系列(十二)Get、Scan在服务端是如何处理?

hadoop cenyuhai 发表了文章 • 0 个评论 • 464 次浏览 • 2015-09-11 15:15 • 来自相关话题

继上一篇讲了Put和Delete之后,这一篇我们讲Get和Scan, 因为我发现这两个操作几乎是一样的过程,就像之前的Put和Delete一样,上一篇我本来只打算写Put的,结果发现Delete也可以走这个过程,所以就一起写了。Get 我们打开HRegionS...
查看更多

hbase源码系列(十一)Put、Delete在服务端是如何处理?

hbase cenyuhai 发表了文章 • 0 个评论 • 505 次浏览 • 2015-09-11 15:15 • 来自相关话题

List<Cell>> e : familyMap.entrySet()) { byte[] family = e.getKey(); List<Cell> cells = e.getValue(); //列和count的映射 M...
查看更多

hbase源码系列(十)HLog与日志恢复

hbase cenyuhai 发表了文章 • 0 个评论 • 565 次浏览 • 2015-09-11 15:14 • 来自相关话题

HLog概述 hbase在写入数据之前会先写入MemStore,成功了再写入HLog,当MemStore的数据丢失的时候,还可以用HLog的数据来进行恢复,下面先看看HLog的图。 http://images.cnitblog.com/i/477362/20...
查看更多