问题:在使用框架进行爬取的时候报了405错误
解决方法:
使用芝麻代理ip在框架中进行设置
1.先在芝麻代理ip中进行注册
2.联系客服会给你充值让进行测试
3.点击生成api
4.在自己爬虫的middleware中加入代理类
5.在settings文件中进行配置,在DOWNLOADER_MIDDLEWARES中加入自己写的代理
6.运行自己爬虫,问题解决
问题:在使用框架进行爬取的时候报了405错误
解决方法:
使用芝麻代理ip在框架中进行设置
1.先在芝麻代理ip中进行注册
2.联系客服会给你充值让进行测试
3.点击生成api
4.在自己爬虫的middleware中加入代理类
5.在settings文件中进行配置,在DOWNLOADER_MIDDLEWARES中加入自己写的代理
6.运行自己爬虫,问题解决