爬虫把网站爬崩溃是什么样

1、恶意爬虫反复性进入网站，对是百度搜索把你判定为非正常网站流量来源或恶意破坏用户搜索规则，从而影响网站的排名，权重等。

2、网速会有影响，部分页面会显示无法预览。从用户请求的 Headers 反爬虫是最常见的反爬虫策略。很多网站都会对 Headers 的 User-Agent 进行检测，还有一部分网站会对 Referer 进行检测（一些资源网站的防盗链就是检测 Referer）。

3、我遇到的几种情况是有可能你频繁的爬取同一个网站的数据，这个网站把你的ip暂时或者永久的加入了黑名单，一段时间内或者永久限制你的访问。网站可能有最大访问频率的限制，根据这个时间来设置时延可以解决这个问题。