Question

PHP如何突破防采集

我想用PHP获取一些网页内容, 但对方好象设置了防采集, 如何使用HTTP_REFERER可以突破这个?
错误提示

Warning: file_get_contents(http://192.168.1.1/ext/show_tv.jsp) [function.file-get-contents]: failed to open stream: HTTP request failed! in D:\web\web\3.php on line 2
也不算采集, 就是简单的获取对方网页的内容, 不入库

Answer 1

function get_resource($url)
{
$c = curl_init();
curl_setopt($c, CURLOPT_URL, $url);
curl_setopt($c, CURLOPT_RETURNTRANSFER, 1);
echo $sourse = curl_exec($c);
curl_close($c);
return $sourse;
}

输入你想采集的网站就行了

Answer 2

可以用curl，或者试试一个叫snoopy的类，很少看到有人用file_get_contents做采集呢。

Answer 3

$option = array(
'http' => array(
'header' => "Referer:这里写referer",
)
);
$xoption = stream_context_create($option);
print_r(file_get_contents("http://192.168.1.1/ext/show_tv.jsp", false, $xoption));