云社区云博客博客详情
云社区云博客博客详情

一条数据的HBase之旅,简明HBase入门教程6:写数据接口

Jaison 发表于 2018-04-03 17:24:2204-03 17:24
Jaison 发表于 2018-04-03 17:24:2204-03 17:24
1
1

【摘要】 本文介绍HBase写数据的几种可选接口,表服务接口的抽象,以及写数据的几种模式

可选接口

HBase中提供了如下几种主要的接口:

  • Java Client API

    HBase的基础API,应用最为广泛。

  • HBase Shell

    基于Shell的命令行操作接口,基于Java Client API实现。

  • Restful API

    Rest Server侧基于Java Client API实现。

  • Thrift API

    Thrift Server侧基于Java Client API实现。

  • MapReduce Based Batch Manipulation API

    基于MapReduce的批量数据读写API。

除了上述主要的API,HBase还提供了基于Spark的批量操作接口以及C++ Client接口,但这两个特性都被规划在了3.0版本中,当前尚在开发中。

无论是HBase Shell/Restful API还是Thrift API,都是基于Java Client API实现的。因此,接下来关于流程的介绍,都是基于Java Client API的调用流程展开的。

关于表服务接口的抽象

同步连接与异步连接,分别提供了不同的表服务接口抽象:

  • Table 同步连接中的表服务接口定义

  • AsyncTable 异步连接中的表服务接口定义

异步连接AsyncConnection获取AsyncTable实例的接口默认实现:

一条数据的HBase之旅,简明HBase入门教程-Write全流程

Create AsyncTable

同步连接ClusterConnection的实现类ConnectionImplementation中获取Table实例的接口实现:

一条数据的HBase之旅,简明HBase入门教程-Write全流程

Create Table

写数据的几种方式

  • Single Put

    单条记录单条记录的随机put操作。Single Put所对应的接口定义如下:

    在AsyncTable接口中的定义:

    CompletableFuture<Void> put(Put put);

    在Table接口中的定义:

    void put(Put put) throws IOException;
  • Batch Put

    汇聚了几十条甚至是几百上千条记录之后的小批次随机put操作。

    Batch Put只是本文对该类型操作的称法,实际的接口名称如下所示:

    在AsyncTable接口中的定义:

    List<CompletableFuture<Void>> put(List<Put> puts);

    在Table接口中的定义:

    void put(List<Put> puts) throws IOException;
  • Bulkload

    基于MapReduce API提供的数据批量导入能力,导入数据量通常在GB级别以上,Bulkload能够绕过Java Client API直接生成HBase的底层数据文件(HFile)。


【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区),文章链接,文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:huaweicloud.bbs@huawei.com进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
评论文章 1
点赞
分享文章到微博
分享文章到朋友圈

相关文章


评论 (1)


George

1楼2018-07-01 23:00:11
深入浅出,很有水平。赞。
0/1000
评论

登录后可评论,请 登录注册

评论

George

2018-07-01 23:00:11
0
深入浅出,很有水平。赞。
展开全部内容
没有评论了
温馨提示

您确认删除评论吗?

确定
取消
温馨提示

您确认删除评论吗?

删除操作无法恢复,请谨慎操作。

确定
取消
温馨提示

您确认删除博客吗?

确定
取消

确认删除

您确认删除博客吗?

确认删除

您确认删除评论吗?

温馨提示

登录超时或用户已下线,请重新登录!!!

确定
取消