疑问

老师我有点忘记是了

是需要checkpoint 所以在集群执行

不需要的时候就可以在本地执行？

crazycrush 2024-03-23

源自：实时数仓-Paimon(数据湖)高级进阶 5-16 管理Bucket之案例实战-3

1

收起

1回答

徐老师 2024-03-23 17:15:33

没有必然联系。

本地执行主要是为了方便调试，代码中开启了checkpoint也可以在本地执行。

但是任务重启时想要基于某一份checkpoint数据恢复的话在集群中运行更方便。

相似问题

对<%=%>有疑问

6-9选择题的疑问

大大的疑问

关于mapper的疑问

4-3的疑问

登录后可查看更多问答，登录/注册

大数据工程师

参与学习 1173 人
提交作业 6122 份
解答问题 1177 个

不用Java初级内容充数！不用与大数据岗位无关内容占课时！我们做的就是“精华版”大数据课程

本课精华内容

问答作业

老师，每个比较大的文件都会分割成块保存在DataNode中，那就说一个datanode坏了导致整个文件不可用，这样不就减低了可靠性吗？

56 2

对多个executor并行处理，对数据进行去重，这样会不会有重复数据

32 1

数据倾斜问题

78 5

并行度调优疑问

29 9

yum install -y ntpdate执行报错

19 22

查看更多本课问答

请稍等 ...

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

扫描二维码
关注慕课网微信公众号