Hive与HBase之间的区别及使用方式
首先要知道Hive和HBase两者的区别，我们必须要知道两者的作用和在大数据中扮演的角色
概念
Hive
1.Hive是hadoop数据仓库管理工具，严格来说，不是数据库，本身是不存储数据和处理数据的，其依赖于HDFS存储数据，依赖于MapReducer进行数据处理。
2.Hive的优点是学习成本低，可以通过类SQL语句（HSQL）快速实现简单的MR任务，不必开发专门的MR程序。
3.由于Hive是依赖于MapReducer处理数据的，因此有很高的延迟性，不适用于实时数据处理（数据查询，数据插入，数据分析），适用于离线数据的批处理。
HBase
1.HBase是一种分布式、可扩展、支持海量数据存储的NOSQL数据库
2.HBase主要适用于海量数据的实时数据处理（随机读写）
3.由于HDFS不支持随机读写，而HBase正是为此而诞生的，弥补了HDFS的不可随机读写。
共同点
hbase与hive都是架构在hadoop之上的。都是用HDFS作为底层存储。
区别
1.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统，HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 。总的来说，hive是适用于离线数据的批处理，hbase是适用于实时数据的处理。
2.Hive本身不存储和计算数据，它完全依赖于HDFS存储数据和MapReduce处理数据，Hive中的表纯逻辑。
3.hbase是物理表，不是逻辑表，提供一个超大的内存hash表，搜索引擎通过它来存储索引，方便查询操作。
4.由于HDFS的不可随机读写，hive是不支持随机写操作，而hbase支持随机写入操作。
5.HBase只支持简单的键查询，不支持复杂的条件查询
关系
在大数据架构中，Hive和HBase是协作关系，这里就举例一种常用的协作关系，
具体流程如下图：
流程：
1.Hive创建一张外部表与HBase表关联，因此只需对Hive表进行查询即可，Hive表会自动从关联的HBase表中获取数据
2.采集的数据保存到HBase表，因为HBase表支持随机写操作，这个可以根据业务需求决定
3.Hive通过HSQ语句创建MR任务去处理分析数据
3.MR将分析的结果最终存储到常用的数据库（Mysql数据库）
4.web端从数据库获取数据进行可视化
总结
以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
Netty分布式NioSocketChannel注册到selector方法解析
这篇文章主要为大家介绍了Netty分布式源码分析NioSocketChannel注册到selector方法的解析，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2022-03-03
SpringBoot框架异常处理有多种处理方式,今天就带大家了解一下常见的springboot异常处理方式,文中有非常详细的介绍及代码示例,需要的朋友可以参考下2021-06-06
这篇文章主要为大家详细介绍了java实现简单年龄计算器，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2020-05-05
这篇文章主要介绍了IDEA实用好用插件推荐及使用方法教程，本文通过实例截图相结合给大家介绍的非常详细，对大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2020-04-04
这篇文章主要介绍了Java并发编程中的synchronized关键字详细解读,在Java早期版本中,synchronized 属于 重量级锁,效率低下,这是因为监视器锁(monitor)是依赖于底层的操作系统的Mutex Lock来实现的,Java 的线程是映射到操作系统的原生线程之上的,需要的朋友可以参考下2023-12-12
SpringSecurity中的UserDetails和UserDetailsService接口详解
这篇文章主要介绍了SpringSecurity中的UserDetails和UserDetailsService接口详解,UserDetailsService 在 Spring Security 中主要承担查询系统内用户、验证密码、封装用户信息和角色权限,需要的朋友可以参考下2023-11-11
这篇文章主要介绍了 Mybatis返回插入主键id的方法，在文章底部给大家补充了Mybatis中insert中返回主键ID的方法，非常不错，需要的朋友可以参考下2017-04-04
这是一个关于Java多线程编程的例子，用多线程的思想模拟停车场管理系统，这里分享给大家，供需要的朋友参考。2017-10-10
这篇文章主要为大家详细介绍了Eclipse项目有红感叹号的解决方法，给出了Eclipse项目有红感叹号的原因，以及如何解决？，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2017-04-04
详解JAVA抓取网页的图片,JAVA利用正则表达式抓取网站图片
这篇文章主要介绍了详解JAVA抓取网页的图片,JAVA利用正则表达式抓取网站图片,非常具有实用价值，需要的朋友可以参考下。2016-12-12
最新评论