中文搜索引擎指南网

标题: 搜狗spider的抓取频次是怎样的？ [打印本页]

作者: sowang 时间: 2021-2-9 14:48
标题: 搜狗spider的抓取频次是怎样的？
sogou spider 对于同一个 IP 地址的服务器主机，只建立一个连接，抓取间隔速度控制在几秒一次。一个网页被收录后，最快也要过几天以后才会去更新。如果持续不断地抓取您的网站，请注意您的网站上的网页是否每次访问都产生新的链接。

如果您认为 sogou spider 对于您的网站抓取过快，请与我们联系，并最好能提供访问日志中sogou spider 访问的部分，而不要直接将搜狗spider的ua封禁。

欢迎光临中文搜索引擎指南网 (http://www.sowang.com/bbs/)