在一次真实的ip请求中，我们都会带着各种样的请求参数，如果将这些参数补全，那我们被ban的机率也会相应的减少很多。如何将这些参数在scrapy的项目补齐?在开始这个问题之前，我们回头来看

为了抓取数据方便，网络中的爬虫运用自动获取内容的程序。但是对于被爬取的网站是没有好处的，网站都会设置了反爬虫机制，来对IP进行限制。如果爬虫IP被封该怎么处理？