关于重跑数据后新增用户问题

徐老师好！按照我的理解，如果重跑中间某天的数据，那么只删除history表当天的数据，那么之后的数据还是会对结果产生影响，导致计算结果不准确，实际会存在这样的问题吗？

不是毛毛虫 2022-04-15

源自：综合项目：电商数据仓库之用户行为数仓 5-9 需求一之开发脚本

8

收起

1回答

徐老师 2022-04-15 16:49:03

在重跑数据的时候，需要把用到了这份数据的需求也同步重跑一下，要不然会导致后续链路的结果不准。

提问者不是毛毛虫 #1

老师，如果现在需要计算2月3日的新增用户量，那么只删除2月3日的分区数据的话，2月3日以后的数据会对这些

2022-04-15 17:10:43
提问者不是毛毛虫 #2

只删除history表中2月3日的数据，表中还有3日之后的数据，做left join还是会有问题吧

2022-04-15 17:12:19
徐老师回复提问者不是毛毛虫 #3

会有影响，重跑的时候还需要在left join的时候限制一下将2月3日以后的数据过滤掉，只和2月3日以前的数据进行关联

2022-04-15 17:46:17

点开查看后面5条评论

相似问题

创建用户写入数据库时member_id不正常递增

点击新增用户之后，显示的并不是我新增的用户详情

关于死循环的疑问

新增字段时，能不能保留原数据库里的记录？

为什么我在locahost里面新建数据库，dev的数据库也会跟着改变，两个是不同的用户创建的

登录后可查看更多问答，登录/注册

大数据工程师

参与学习 1168 人
提交作业 6097 份
解答问题 1171 个

不用Java初级内容充数！不用与大数据岗位无关内容占课时！我们做的就是“精华版”大数据课程

本课精华内容

问答作业

老师，每个比较大的文件都会分割成块保存在DataNode中，那就说一个datanode坏了导致整个文件不可用，这样不就减低了可靠性吗？

56 2

对多个executor并行处理，对数据进行去重，这样会不会有重复数据

32 1

数据倾斜问题

78 5

并行度调优疑问

29 9

yum install -y ntpdate执行报错

19 22

查看更多本课问答

请稍等 ...

意见反馈帮助中心 APP下载