使用PHP CURL解析负载较重的站点?
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了使用PHP CURL解析负载较重的站点?,小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含1709字,纯文字阅读大概需要3分钟。
内容图文
我使用PHP CURL来解析负载很重的站点(这个站点甚至很少在浏览器中打开).在结果中,我有服务器响应代码503或0(没有).
也许您可以给我建议或告诉我一些CURL功能,以获得正常的服务器响应?
有我的CURL选项:
$options = array(
CURLOPT_REFERER => $url,
CURLOPT_TIMEOUT => 1800,
CURLOPT_HEADER => true,
CURLOPT_RETURNTRANSFER => true,
CURLOPT_FOLLOWLOCATION => true,
CURLOPT_SSL_VERIFYHOST => false,
CURLOPT_SSL_VERIFYPEER => false,
CURLOPT_HEADERFUNCTION => "curlHeaderCallback",
CURLOPT_COOKIE => Cookies::arrayToString(Cookies::instance()->load()),
CURLOPT_USERAGENT => "Opera/9.80 (Windows NT 6.1; U; ru) Presto/2.9.168 Version/11.50",
CURLOPT_HTTPHEADER => $headers
);
问题是我无法通过页面代码获得响应.
我有2个变种:
1.服务器没有回答;
2.在服务器的回答中,我得到代码为503的页面“服务器超载”.
CurlHeaderCallback()代码:
`function curlHeaderCallback($ch, $str)
{
if (strncmp($str, "Set-Cookie:", 11) === 0)
{
$cookie = trim(substr($str, 11));
list($cookie, $options) = explode(";", $cookie, 2);
list($key, $value) = explode("=", $cookie, 2);
Cookies::instance()->set($key, $value);
}
if (trim($str) == "")
{
curl_setopt($ch, CURLOPT_COOKIE, Cookies::arrayToString(Cookies::instance()->load()));
}
return (strlen($str));
}`
我的行动是:
$response = curl_exec($ch);
$info = curl_getinfo($ch);
我没有回复和$info [“http_code”]或第二个变体:作为回应我有第503页代码和$info [“http_code”] = 503
哦,还有一个选择是:
CURLOPT_CONNECTTIMEOUT => 30
图表在这里:http://s61.radikal.ru/i172/1212/d6/33471472ee8e.png
解决方法:
如果您刚刚使用http代码,则需要使用CURLINFO_HTTP_CODE使用curl_getinfo,例如;
$handle = curl_init($url);
curl_setopt($handle, CURLOPT_RETURNTRANSFER, TRUE);
$response = curl_exec($handle);
$httpCode = curl_getinfo($handle, CURLINFO_HTTP_CODE);
内容总结
以上是互联网集市为您收集整理的使用PHP CURL解析负载较重的站点?全部内容,希望文章能够帮你解决使用PHP CURL解析负载较重的站点?所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。