站点突然被大量抓取,是否可以通过闭站工具拒

seo优化 2018-10-12 16:39www.168986.cn长沙seo优化
站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问
  具体说我们的站点突然被大量抓取,包括百度蜘蛛和其它不知名蜘蛛,我们不想做UA封禁和IP封禁,这种情况下是否可以使用闭站工具暂时拒绝百度蜘蛛?
  答闭站保护没有这个功能,你希望达到的效果是不让蜘蛛访问;但用户可以正常访问。但闭站保护工具的要求是蜘蛛和用户都不能访问。

Copyright © 2016-2025 www.168986.cn 狼蚁网络 版权所有 Power by