遍历请求翻页的url
for i in range(3):
yield Request("http:xx/page/%s"%str(i),callback=self.parse_page)
结果response请求成功 但是每次内容都一样的没变化都是第一次请求时的内容,但是用postman分别请求分页的url就没有这问题。= = 是被ban了吗 之前就不会这样
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号
那就要分析一下用postman或者浏览器访问时请求的header头和用scrapy请求头有什么区别
被反爬识别到了