网页信息抓太快导致封锁IP的情况，网络爬虫如何处理？

采集一个网站太频繁，能够采集的网页越来越少，甚至会被封杀IP，只有控制好采集速度和频率才能持续地获得数据，并且，要定期清理浏览器的cookies。