这个问题CSDN不能搞定就没人可以搞定了
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了这个问题CSDN不能搞定就没人可以搞定了，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7945字，纯文字阅读大概需要12分钟。
内容图文
本人做了一个采集。 在本地测试，可以正常采集。
放在服务器上，也可以采集。 但是。。。。
目标站，内容更新后，，，服务器上，要过 好几个小时才能采。 （有时要隔一天）
而本地，不用等，只要目标站有数据，就可以采到。
感觉就像采数据的时候，网页没有刷新一样。
是 服务器 问题？ 还是程序不够好？(程序上，每次刷新的时候，都是重新载入页面！ ，还加了 随机字符)，给公司的技术也看过了，都说程序没问题
我问了空间商，他说要我报错过去， 我怎么报？ 请高手中的高手帮忙解决！
到底是什么问题？
回复讨论(解决方案)
你是如何控制采集程序工作的？
你Q多少，我联系你。。
QQ288801 谢谢 帮我 看下
2888801 刚才少了一个 8
QQ288801 谢谢 帮我 看下
CSDN最忌讳留QQ了。有问题就请在贴子里说。能帮的大家会帮助你的。。
对程序 我也不是 很清楚， 。。但问了 搞技术的 同事，程序没问题 所以想让 高手 帮我 看看程序
你可以把采集部分的代码贴出来。
if($_GET["action"]=="cai")
{
$PageUrl = "http://www.xxxxx.com/?id=".time();
$Pagecontent = file_get_contents($PageUrl);
$start = strpos($Pagecontent,"");
$EndHtml = strpos($Pagecontent,"");
$lenHtml = $EndHtml - $start;
$Pagecontent = substr($Pagecontent,$start,$lenHtml);
$HtmlAll = "";
preg_match_all('/(.*?)<\/a>/',$Pagecontent,$UrlList);
for($i=sizeof($UrlList[2]);$i>=0;$i--){
$InUrl = "http://www.zhibo8.com".$UrlList[2][$i];
$TermDay = $_POST["txtdate"];
//$HtmlAll = $HtmlAll.$InUrl."-----".$TermDay."\r\n";
if(strstr($InUrl,$TermDay) && strstr($InUrl,"nba"))
{
$InContent = file_get_contents($InUrl);
//$start1 = strpos($InContent,"");
//$EndHtml1 = strpos($InContent,"");
//$lenHtml1 = $EndHtml1 - $start1;
//$InContent = substr($InContent,$start1,$lenHtml1);
preg_match('/
(.*?)<\/title>/',$InContent,$Title); <br /> <br /> <br /> $Cstart = strpos($InContent,""); <br /> $Cend = strpos($InContent,"<!-- JiaThis Button BEGIN -->"); <br /> $Lcontent = $Cend - $Cstart; <br /> $Content = substr($InContent,$Cstart,$Lcontent); </p> <p class="sougouAnswer"> if($_GET["action"]=="cai") <br /> { <br /> $PageUrl = "http://www.zhibo8.com/?id=".time(); <br /> $Pagecontent = file_get_contents($PageUrl); <br /> <br /> $start = strpos($Pagecontent,""); <br /> $EndHtml = strpos($Pagecontent,""); <br /> $lenHtml = $EndHtml - $start; <br /> $Pagecontent = substr($Pagecontent,$start,$lenHtml); <br /> <br /> $HtmlAll = ""; <br /> <br /> preg_match_all('/(.*?)<\/a>/',$Pagecontent,$UrlList); <br /> for($i=sizeof($UrlList[2]);$i>=0;$i--){ <br /> $InUrl = "http://www.zhibo8.com".$UrlList[2][$i]; <br /> $TermDay = $_POST["txtdate"]; <br /> <br /> //$HtmlAll = $HtmlAll.$InUrl."-----".$TermDay."\r\n"; <br /> <br /> if(strstr($InUrl,$TermDay) && strstr($InUrl,"nba")) <br /> { <br /> <br /> <br /> $InContent = file_get_contents($InUrl); <br /> <br /> //$start1 = strpos($InContent,""); <br /> //$EndHtml1 = strpos($InContent,""); <br /> //$lenHtml1 = $EndHtml1 - $start1; <br /> //$InContent = substr($InContent,$start1,$lenHtml1); <br /> <br /> preg_match('/<title>(.*?)<\/title>/',$InContent,$Title); <br /> <br /> <br /> $Cstart = strpos($InContent,""); <br /> $Cend = strpos($InContent,"<!-- JiaThis Button BEGIN -->"); <br /> $Lcontent = $Cend - $Cstart; <br /> $Content = substr($InContent,$Cstart,$Lcontent); </p> <p class="sougouAnswer"> 你服务器是固定IP，人家早把你的IP列入黑名单了。。。 </p> <p class="sougouAnswer"> 为什么 有时 可以采？ </p> <p class="sougouAnswer"> 其实 现在也可以采，但是最新的 内容 采不了。要等， 而本地 不用等 另外，主页昨天显示的内容，今不显示。但 我还可以采到 昨天的，好像 就是 我们看网页 没有刷新一样 </p> <p class="sougouAnswer"> 服务器有缓存？ </p> <p class="sougouAnswer"> 应该是ip被禁了 </p> <p class="sougouAnswer"> ip被禁了 我无法理解，，被禁了 就无法采了。服务器有缓存？ 我也是这样想的，可程序上做好了这方面的工作。 也不太可能了 </p> <p class="sougouAnswer"> 其实 现在也可以采，但是最新的 内容 采不了。要等， 而本地 不用等 另外，主页昨天显示的内容，今不显示。但 我还可以采到 昨天的，好像 就是 我们看网页 没有刷新一样 <br /> <br /> 对方将你的服务器ip放入黑名单，并且并不是直接禁止访问，而是让你访问他的旧数据。这就解释了你所有的问题 <br /> <br /> </p> <p class="sougouAnswer"> 所以忽悠你让你蛋痛的想半天 四处求救，也就达到了他们的目的了。哈哈哈 </p> <p class="sougouAnswer"> 对方肯定是把你的ip列入黑名单了，你可以用adsl的连接方式，定时重连网络，这样你反复更换ip，对方服务器就应付不过来了,给你一段定时重连adsl的脚本 <br /> <pre class="sycode" name="code">$i=1;while(true){ sleep(120); if(cutNet()){ sleep(10); if(connectNet()) { echo "成功连接 " .$i." 次\r\n"; } else { echo "未连接 \r\n"; } } else { echo "未成功断开连接\r\n"; } $i++;}/** * ADSL拨号 */function connectNet($cNum=0){ exec("rasdial.exe ADSL adsl_name adsl_pwd",$out1,$ars1); print_r($out1); if (preg_match('/已连接 ADSL/',$out1[3]) or preg_match('/已连接 ADSL/',$out1[4])) { return true; }else{ return false; }}function cutNet(){ if(isConnect()){ exec("Rasdial ADSL /disconnect",$out1,$ars1);//断线 if (preg_match('/已完成/',$out1[0])) { return true; } else { return false; } } else { return true; }}function isConnect(){ exec("Rasdial",$out1,$ars1);//断线 if($out1['0']=='没有连接'){ echo "没有找到连接。。。\r\n"; return false; } return true;}</pre> </p> <p class="sougouAnswer"> 服务器固定IP怎么用ADSL？ <br /> 用代理吧 <br /> 对方肯定是把你的ip列入黑名单了，你可以用adsl的连接方式，定时重连网络，这样你反复更换ip，对方服务器就应付不过来了,给你一段定时重连adsl的脚本 <br /> <br /> PHP code <br /> <br /> <br /> <br /> $i=1; <br /> while(true) <br /> { <br /> sleep(120); <br /> if(cutNet()){ <br /> sleep(10); <br /> if(connectNet()) <br /> …… </p> <p class="sougouAnswer"> 我是 虚拟主机。 日本的IP... 第一次 在这个服务器上 做采集。。。他就知道？ <br /> <br /> 还有就是 虚拟主机 上 要怎么代理？ </p> <p class="sougouAnswer"> 我是 虚拟主机。 日本的IP... 第一次 在这个服务器上 做采集。。。他就知道？ <br /> <br /> 还有就是 虚拟主机 上 要怎么代理？ <br /> <br /> 采集多少次知道 这个不是必然的。 <br /> 你是虚拟主机你也不能保证你的主机上是否有其他人采集过，或者这个ip以前是否采集过 <br /> <br /> 最后一个，检查你的虚拟主机时间，如果采集程序有用到时间函数，如果存在时差也可能会产生问题。 <br /> </p> <p class="sougouAnswer"> 我是 虚拟主机。 日本的IP... 第一次 在这个服务器上 做采集。。。他就知道？ <br /> <br /> 还有就是 虚拟主机 上 要怎么代理？ <br /> <br /> 刚刚要求 服务器换了IP 还是一样的问题。。。看来 可能是时间差、那有什么办法吗？ </p> <p class="sougouAnswer"> function isConnect() <br /> { <br /> exec("Rasdial",$out1,$ars1);//断线 <br /> if($out1['0']=='没有连接'){ <br /> echo "没有找到连接。。。\r\n"; <br /> return false; <br /> } <br /> return true; <br /> } <br /> <br /> </p> <p class="sougouAnswer"> 从描述来看，你的本机和你的服务器，不是在一个地区的吧？我是指省市地区。 <br /> <br /> 那么也有可能是CDN导致的，不同的省市运营商，虽然访问同一个域名，但访问的主机和内容会出现不一致的情况，CDN的同步需要时间。 <br /> <br /> 想解决这个问题，在你的本地搞个服务器就行了。 <br /> </p> <p class="sougouAnswer"> 从描述来看，你的本机和你的服务器，不是在一个地区的吧？我是指省市地区。 <br /> <br /> 那么也有可能是CDN导致的，不同的省市运营商，虽然访问同一个域名，但访问的主机和内容会出现不一致的情况，CDN的同步需要时间。 <br /> <br /> 想解决这个问题，在你的本地搞个服务器就行了。 <br /> <br /> 也就是 换个服务器 是吗？ </p> <p class="sougouAnswer"> 要采集国内的站点，不管从哪个角度说都适合使用国内的主机.再烂也不能烂过功夫墙外的机房了. <br /> 好歹咱们也是个局域网啊 <br /> <br /> 引用 27 楼 的回复: <br /> 从描述来看，你的本机和你的服务器，不是在一个地区的吧？我是指省市地区。 <br /> <br /> 那么也有可能是CDN导致的，不同的省市运营商，虽然访问同一个域名，但访问的主机和内容会出现不一致的情况，CDN的同步需要时间。 <br /> <br /> 想解决这个问题，在你的本地搞个服务器就行了。 <br /> <br /> <br /> 也就是 换个服务器 是吗？ </p> <p class="sougouAnswer"> 从描述来看，你的本机和你的服务器，不是在一个地区的吧？我是指省市地区。 <br /> <br /> 那么也有可能是CDN导致的，不同的省市运营商，虽然访问同一个域名，但访问的主机和内容会出现不一致的情况，CDN的同步需要时间。 <br /> <br /> 想解决这个问题，在你的本地搞个服务器就行了。 <br /> <br /> 是CDN导致 的问题 原来 电的速度不怎么快 </p> <p class="sougouAnswer"> 谢谢，，再次想到了这里<a href="http://www.laitingfm.com" /></a>
<a href="https://curl.qcloud.com/kfoLTs9R" /></a>
</article>
</div>
<div class="w310 r">
<a href="https://www.gxlcms.com/server-467421.html" target="_blank"> <img src="http://www.gxlcms.com/Public/aiod/ts.jpg" /></a>
<div class="youclmt">
<h3>PHP教程热搜</h3> </div>
<div class="langmubt">
<ul>
<li><a href="/PHPjiqiao-463369.html" target="_blank">php设置脚本最大执行时间的方法是什么</a></li><li><a href="/PHPjiqiao-463254.html" target="_blank">php中$_SESSION获取不到值怎么办</a></li><li><a href="/PHPjiqiao-463079.html" target="_blank">php 如何修改图片像素大小</a></li><li><a href="/PHPjiqiao-462514.html" target="_blank">php date如何转换时间戳</a></li><li><a href="/PHPjiqiao-388448.html" target="_blank">PHP如何替换数组中的指定元素</a></li><li><a href="/PHPjiqiao-388428.html" target="_blank">php5ts.dll找不到怎么办</a></li><li><a href="/PHPjiqiao-381403.html" target="_blank">php如何多个字符串一次替换</a></li><li><a href="/PHPjiqiao-381265.html" target="_blank">php如何判断文件是不是图片</a></li><li><a href="/PHPjiqiao-381184.html" target="_blank">php 给数组增加键值对</a></li><li><a href="/PHPjiqiao-380980.html" target="_blank">php正则如何替换a标签</a></li><li><a href="/PHPjiqiao-380978.html" target="_blank">php base64转换成图片的方法</a></li><li><a href="/PHPjiqiao-380945.html" target="_blank">php如何去除回车</a></li><li><a href="/PHPjiqiao-380870.html" target="_blank">苹果系统安装php环境的方法详解</a></li><li><a href="/PHPjiqiao-380756.html" target="_blank">php怎么实现数组随机且不重复</a></li><li><a href="/PHPjiqiao-380744.html" target="_blank">php do while用法详解</a></li><li><a href="/PHPjiqiao-380411.html" target="_blank">教你用PHP开发微信公众号文章付费阅读功能</a></li><li><a href="/PHPjiqiao-380395.html" target="_blank">php字符串太长怎么办</a></li><li><a href="/PHPjiqiao-380214.html" target="_blank">php fbclient.dll 丢失怎么办</a></li><li><a href="/PHPjiqiao-380162.html" target="_blank">php如何实现big5转utf8</a></li><li><a href="/PHPjiqiao-380160.html" target="_blank">php如何增加字段</a></li><li><a href="/PHPjiqiao-380131.html" target="_blank">php如何获取调用方法名</a></li><li><a href="/PHPjiqiao-380023.html" target="_blank">如何卸载源码安装的php</a></li><li><a href="/PHPjiqiao-379922.html" target="_blank">php smtp发送邮件失败怎么办</a></li><li><a href="/PHPjiqiao-379749.html" target="_blank">php如何把数字转成大写字母</a></li><li><a href="/PHPjiqiao-379732.html" target="_blank">php如何实现下载并修改文件名称</a></li> </ul>
</div>
<a href="https://curl.qcloud.com/I8w1gZa8" target="_blank"> <img src="http://www.gxlcms.com/ad/tx500x500.jpg" /></a>
</div>
</div>
</div>
</div>
<script type="text/javascript" src="/layui/layui.js"></script>
<script>
layui.use('code', function() {
layui.code({
elem: 'pre', //默认值为.layui-code
about: false,
skin: 'notepad',
title: '这个问题CSDN不能搞定就没人可以搞定了代码块',
encode: true //是否转义html标签。默认不开启
});
});
</script>
<link rel="stylesheet" type="text/css" href="/kan/css/basezb.css">
<script type="text/javascript" src="/kan/js/read.js"></script>
<div style="display:none">
<div class="login-box" id="login-dialog">
<div class="login-top"><a class="current" rel="nofollow" id="login1" onclick="setTab('login',1,2);" >登录</a></div>
<div class="login-form" id="nav-signin">
<!-- <div class="login-ico"><a rel="nofollow" class="qq" id="qqlogin" target="_blank" href="/?s=user-center-qqlogin.html"> QQ </a></div> -->
<div class="login-box-form" id="con_login_1">
<form id="loginform" action="/?s=user-center-login.html" method="post" onsubmit="return false;">
<p class="int-text">
<input class="email" id="username" name="username" type="text" value="用户名或Email" onfocus="if(this.value=='用户名或Email'){this.value='';}" onblur="if(this.value==''){this.value='用户名或Email';};" ></p>
<p class="int-text">
<input class="password1" type="password" id="password" name="password" value="******" onBlur="if(this.value=='') this.value='******';" onFocus="if(this.value=='******') this.value='';" >
</p>
<p class="int-info">
<label class="ui-label"> </label>
<label for="agreement" class="ui-label-checkbox">
<input type="checkbox" value="" name="cookietime" id="cookietime" checked="checked" value="2592000">
<input type="hidden" name="notforward" id="notforward" value="1">
<input type="hidden" name="dosubmit" id="dosubmit" value="1">记住我的登录 </label>
<a rel="nofollow" class="aright" href="/?s=user-center-forgetpwd.html" target="_blank"> 忘记密码？ </a></p>
<p class="int-btn"><a rel="nofollow" id="loginbt" class="loginbtn"><span>登录</span></a></p>
</form>
</div>
<form id="regform" action="/?s=user-center-reg.html" method="post">
<div class="login-reg" style="display: none;" id="con_login_2">
<input type="hidden" name="t" id="t"/>
<p class="int-text">
<input id="email" name="email" type="text" value="Email" onfocus="if(this.value=='Email'){this.value='';}" onblur="if(this.value==''){this.value='Email';};"></p>
<p class="int-text">
<input id="uname" name="username" type="text" value="用户名或昵称" onfocus="if(this.value=='用户名或昵称'){this.value='';}" onblur="if(this.value==''){this.value='用户名或昵称';};"></p>
<p class="int-text">
<input type="password" id="pwd" name="password" value="******" onBlur="if(this.value=='') this.value='******';" onFocus="if(this.value=='******') this.value='';"> </p>
<p class="int-text1"><span class="inputbox">
<input id="validate" name="validate" type="text" value="验证码" onfocus="if(this.value=='验证码'){this.value='';}" onblur="if(this.value==''){this.value='验证码';};">
</span><span class="yzm-img"><img src="/?s=user-checkcode-index" alt="看不清楚换一张" id="indexlogin"></p>
<p class="int-info">
<label>
<input value="" name="agreement" id="agreement" CHECKED="checked" type="checkbox">
我已阅读<a rel="nofollow" href="/?s=user-center-agreement.html">用户协议</a>及<a rel="nofollow" href="/?s=user-center-agreement.html">版权声明</a></label>
</p>
<p class="int-btn"><input type="hidden" name="dosubmit"/>
<a rel="nofollow" class="loginbtn" id="register"><span>注册</span></a></p>
</div>
</form>
</div>
</div>
</div>
</div>
<script type="text/javascript" src="/kan/js/foot_js.js"></script>
<div id="footer">
<div class="w1200">
<p class="tips_text">本站所有资源全部来源于网络，若本站发布的内容侵害到您的隐私或者利益，请联系我们删除！
<a href="/?s=gb-show-p-1.html" title="合作方式" target="_blank">合作方式</a></p>
<p class="tips_text">Copyright © 2004-2018 https://www.gxlcms.com/. All Rights Reserved.<script>
var _hmt = _hmt || [];
(function() {
var hm = document.createElement("script");
hm.src = "https://hm.baidu.com/hm.js?afb4873a3fbaa95f710a04306bfb4a0b";
var s = document.getElementsByTagName("script")[0];
s.parentNode.insertBefore(hm, s);
})();
</script>
<a href="http://beian.miit.gov.cn/" target="_blank">豫ICP备19030742号</a></p>
</div>
</div>
<link rel="stylesheet" href="/Public/del/css/list.css"> </body>
</html>
内容总结
以上是互联网集市为您收集整理的这个问题CSDN不能搞定就没人可以搞定了全部内容，希望文章能够帮你解决这个问题CSDN不能搞定就没人可以搞定了所遇到的程序开发问题。
如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。
内容手机端
来源：【匿名】