scrapy怎么爬去需要登陆的网站

2025-04-15 04:04:48
推荐回答(1个)
回答1:

经常在爬有些网站的时候需要登录,大多数网站需要你提供一个用户名和密码,在这种情况下,需要先向网站发送一个POST请求。可以使用Scrapy的FormRequest类,这个类和Request类很相似,只是多了一个extra参数,用这个参数可以传递表单数据。