系列文章:
前面的文章中,我们搭建了一套安全的hadoop
集群,并建立了一个对应的测试。结合相关的基础知识,我们应该对安全的hadoop
集群有了一定的认识。本文主要关注如何将大数据其他组件安全地与hadoop
进行集成。我们将关注这几个组件:hive
hbase
spark
livy
。
hive
首先来看hive
,hive
是最初由facebook
发起的基于hadoop
大数据架构的数据仓库。hive
直接将hdfs
变为了一个支持sql
的数据存储。时至今日,hive
已成为企业大数据最基础的组件之一,各种上层的组件均和hive
有良好的集成。
采用跟之前同样的思路,我们先来建立一个测试,如下: