Hive和Spark的fromjson区别

Hive和Spark的fromjson区别

CDWei 2022-06-25

源自：Spark性能优化的道与术 6-3 DataFrame的sql操作

3

收起

1回答

徐老师 2022-06-25 22:14:44

fromjson？没看明白。

Hive的sql语法和spark的sql语法是一样的，底层使用的同一个sql解析器。

提问者 CDWei #1

原来如此，就是从json文件读取数据的函数，这两个的函数功能也都一样是吗

2022-06-25 22:19:55
徐老师回复提问者 CDWei #2

Hive中没有这种函数，sparksql中有这种函数，可以直接读取json文件

2022-06-25 22:20:47
徐老师回复提问者 CDWei #3

这个不算是函数，它属于sparksql中的读取数据的一个功能，hive中没有

2022-06-25 22:21:47

点开查看后面1条评论

相似问题

hive on spark如何配置？

hive引擎疑问

关于在Spark SQL命令行中集成Hive

Spark原理疑问

Hive使用beeline怎么设置指定的用户名和密码才能连接hive？

登录后可查看更多问答，登录/注册

大数据工程师

参与学习 1167 人
提交作业 6092 份
解答问题 1170 个

不用Java初级内容充数！不用与大数据岗位无关内容占课时！我们做的就是“精华版”大数据课程

本课精华内容

问答作业

老师，每个比较大的文件都会分割成块保存在DataNode中，那就说一个datanode坏了导致整个文件不可用，这样不就减低了可靠性吗？

56 2

对多个executor并行处理，对数据进行去重，这样会不会有重复数据

32 1

数据倾斜问题

78 5

并行度调优疑问

29 9

yum install -y ntpdate执行报错

19 22

查看更多本课问答

请稍等 ...

意见反馈帮助中心 APP下载