hive引擎疑问

电商项目默认使用mapreduce计算引擎，换成spark或者tez项目开发脚本是否一样兼容另一个问题：直播平台是否使用的是hive 基于spark建数据仓

GRdreamflying 2020-09-17

源自：综合项目：电商数据仓库之用户行为数仓 5-7 需求一之dws层开发

16

收起

1回答

徐老师回答被采纳获得+3积分 2020-09-17 07:27:42

hive底层替换引擎对sql没有影响，只是底层执行引擎变了，sql不需要调整。直播平台三度关系项目不是数仓项目，不需要使用hive，主要使用flume，kafka，spark，flink等框架

GRdreamflying 提问者 #1

spark内置的函数 hive的sql都支持么？有没有不同的

2020-09-17 07:42:41
徐老师回复提问者 GRdreamflying #2

目前我在工作中使用的时候没有遇到不一样的情况

2020-09-17 07:44:36
GRdreamflying 提问者回复徐老师 #3

电子笔记里可以更新配置hive 替换 spark引擎的相关资料么

2020-09-17 07:48:06

点开查看后面1条评论

相似问题

引擎

实际开发会用到这些模版引擎吗？

hive on spark如何配置？

请问怎么修改WAMP的数据库默认引擎？

已存在的数据库有没有办法更改数据库的存储引擎

登录后可查看更多问答，登录/注册

大数据工程师

参与学习 1166 人
提交作业 6092 份
解答问题 1170 个

不用Java初级内容充数！不用与大数据岗位无关内容占课时！我们做的就是“精华版”大数据课程

本课精华内容

问答作业

老师，每个比较大的文件都会分割成块保存在DataNode中，那就说一个datanode坏了导致整个文件不可用，这样不就减低了可靠性吗？

56 2

对多个executor并行处理，对数据进行去重，这样会不会有重复数据

32 1

数据倾斜问题

78 5

并行度调优疑问

29 9

yum install -y ntpdate执行报错

19 22

查看更多本课问答

请稍等 ...

意见反馈帮助中心 APP下载