使用curl怎么对远程页面的内容进行抓取

这篇文章给大家介绍使用curl怎么对远程页面的内容进行抓取,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。

最基本的操作如下

复制代码 代码如下:


$curlPost = 'a=1&b=2';//模拟POST数据
$ch = curl_init();
curl_setopt($ch, CURLOPT_HTTPHEADER, array('X-FORWARDED-FOR:0.0.0.0', 'CLIENT-IP:0.0.0.0'));  //构造IP
curl_setopt($ch, CURLOPT_REFERER, "https://www.jb51.net/");   //构造来路
curl_setopt($ch,CURLOPT_URL, 'https://www.jb51.net');//需要抓取的页面路径
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt ($ch, CURLOPT_TIMEOUT, 30);
curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);//post值

$file_contents = curl_exec($ch);//抓取的内容放在变量中
curl_close($ch)

关于使用curl怎么对远程页面的内容进行抓取就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。