spark on hive和hive on spark的区别
1 回答
慕田峪9158850
TA贡献1794条经验 获得超7个赞
spark on hive : 是spark 通过spark-sql 使用hive 语句操作hive ,底层运行的还是 spark rdd.
*（1）就是通过sparksql，加载hive的配置文件，获取到hive的元数据信息
* （2）spark sql获取到hive的元数据信息之后就可以拿到hive的所有表的数据
* （3）接下来就可以通过spark sql来操作hive表中的数据
hive on spark: 是hive 等的执行引擎变成spark , 不再是mapreduce. 相对于上一项,这个要实现责麻烦很多, 必须重新编译你的spark. 和导入jar包,
- 1 回答
- 0 关注
- 4980 浏览
添加回答
举报
0/150
提交
取消