自定义请求头是哪一个啊

吴老师在线叛逃 2023-07-05

源自：Scrapy 高级爬虫框架与分布式爬虫 1-11 【实战】豆瓣图书：Scrapy + 伪装爬虫爬取新书速递

5

收起

1回答

好帮手慕小猿 2023-07-06 10:08:38

同学，你好！自定义请求头如下图

祝学习愉快~

提问者吴老师在线叛逃 #1

那老师在视频里定义的那个是什么呀，第一张图片那个

2023-07-06 11:12:51
好帮手慕小猿回复提问者吴老师在线叛逃 #2

同学，你好！user-agent是告诉目标网站使用的是哪个浏览器，浏览器的版本是多少，模仿浏览器访问网站，防止目标网站发现是程序访问而不让爬取数据。scrapy可以只设置user-agent

也可以在请求头中设置user-agent

请求头中不仅可以设置user-agent 也可设置其它参数到请求头中，如accept-language 设置接收语言，accept接收文件类型等
祝学习愉快~

2023-07-06 12:07:44

相似问题

老师，这个shouldoverrideUrlLoading方法好像不用重写就能看到请求头

自定义toolbar问题

老师，始终没搞懂自定义请求头的作用是啥，意义何在

老师，请问下timout为什么不是在send之后呢

老师，感觉这个没懂，能接地气的讲下不

登录后可查看更多问答，登录/注册

Python全能工程师

参与学习 1572 人
提交作业 2308 份
解答问题 865 个

8阶段5大热门领域，从入门到实战，带你从零基础晋级全能，全面提升就业力

本课精华内容

问答作业

慕慕生鲜网站及其接口在线文档无法访问

20 3

不知道为什么出错了

26 10

老师，为什么会一直显示握手失败啊，而且代码也没有运行下去

23 10

课程中老师讲的这个代码是什么意思啊，并不是很明白

16 9

当浏览器的宽度小于966px的时候，发表的框框就换行了，

21 9

查看更多本课问答

请稍等 ...

意见反馈帮助中心 APP下载