问题描述
通过远程获取网页内容来生成静态页,但是每获取100页内容后就获取不到,全部页面都返回一段跳转代码<metahttp-equiv="refresh"content="0;URL=/?tads=514203695">请问是被获取站点的IIS设置的问题,还是服务器哪里设置禁止机制了?
解决方案
解决方案二:
很可能只是一段简单的代码,判断同一个IP地址短时间内请求的次数达到100次就禁止继续访问了
解决方案三:
引用1楼Z65443344的回复:
很可能只是一段简单的代码,判断同一个IP地址短时间内请求的次数达到100次就禁止继续访问了
没有,被获取的网站也是我的,程序方面没有做任何限制。是不是authentication设置为"Forms"的原因?
解决方案四:
一般的空间有可以设置,防止别人工具用的
解决方案五:
引用3楼QQ234788028的回复:
一般的空间有可以设置,防止别人工具用的
不是空间,两台服务器都是我的
解决方案六:
你的服务器是不是托管在机房的?有可能被机房的防火墙K掉了
解决方案七:
你把访问100次的时间间隔调大些再看看,如果都是你的服务器估计是服务器操作系统内部的安全机制。我以前专门采集的,碰到过各种屏蔽,但没碰到过这种。不过返回的这句话的意思到是刷新本页面。
时间: 2024-10-29 13:11:50