关于获取token值

token的值是在登录页面的HTML中的，那为什么获取这个值要用登录后商品列表的那个URL，直接用登录的URL不行吗？

收起

1回答

好帮手乔木 2020-02-24 10:01:54

同学你好：

爬虫是爬取指定url页面的内容，我们是要爬取商城中的内容，而不是爬取登录页面的内容，所以需要请求商城页面的url。进入商城界面是需要登录的，而token是一个验证用户是否登录的凭证。根据这个用户凭证同学才能可以有效的访问并爬取商城的数据。

如果我解决了同学的问题，请采纳！学习愉快^_^。

提问者 weixin_慕UI515575 #1

登录后不是又get请求了要爬取的页面吗，登录前获取token的值，直接在登录页面也能获取。必须要让它从目标页面自动跳转到登录页面我们再获取token值吗

2020-02-24 12:28:44
好帮手乔木回复提问者 weixin_慕UI515575 #2

同学你好：是的，token是验证我们是否登录的依据，就算同学可以获得到登录页面的token，也是没有登录的，所以我们无法根据这个token来向目标页面请求。必须选择登录后的token。学习愉快^_^。

2020-02-24 19:52:32