php中curl、fsocket、file_get_content函数比较__file_get_contents_curl_file_get_content_curl_setopt_php_

当前位置: 编程技术>php

php中curl、fsocket、file_get_content函数比较

来源: 互联网发布时间：2014-08-30

本文导语: 最近做一个网页小偷程序的时候才发现file_get_content已经完全不能满足需求了。我觉得，在读取远程内容时，file_get_content除了使用比curl便捷以外，其他都没有curl好抓取远程内容，之前一直都在用file_get_content函数，其实早就知...

最近做一个网页小偷程序的时候才发现file_get_content已经完全不能满足需求了。
我觉得，在读取远程内容时，file_get_content除了使用比curl便捷以外，其他都没有curl好

抓取远程内容，之前一直都在用file_get_content函数，其实早就知道有curl这么一个好东西的存在，但是看了一眼后感觉使用颇有些复杂，没有file_get_content那么简单，再就是需求也不大，所以没有学习使用curl。

php中curl和file_get_content的一些比较
主要区别：
curl支持很多协议，有FTP, FTPS, HTTP, HTTPS, GOPHER, TELNET, DICT, FILE以及LDAP，也就是说，它能做到很多file_get_content做不到的事情。curl在php可以实现远程获取和采集内容；实现PHP网页版的FTP上传下载；实现模拟登陆；实现接口对接（API），数据传输；实现模拟Cookie；下载文件断点续传等等，功能十分强大。
了解curl一些基本的使用后，才发现其实并不难，只不过记住里面一些设置参数，难弄一点，但是我们记住几个常用的就可以了。
开启curl：
因为PHP默认是不支持curl功能的，因此如果要用curl的话，首先需要在php.ini中开启该功能，即去掉 ;extension= php_curl.dll 前面的分号，然后保存后重启apache/iis就好了。
基本语法：

代码示例:

$my_curl = curl_init();    //初始化一个curl对象

curl_setopt($my_curl, CURLOPT_URL, "http://www.");    //设置你需要抓取的URL

curl_setopt($my_curl,CURLOPT_RETURNTRANSFER,1);    //设置是将结果保存到字符串中还是输出到屏幕上，1表示将结果保存到字符串

$str = curl_exec($curl);    //执行请求

echo $str;    //输出抓取的结果

curl_close($curl);    //关闭url请求

最近需要获取别人网站上的音乐数据。用了file_get_contents函数，但是总是会遇到获取失败的问题，尽管按照手册中的例子设置了超时，可多数时候不会奏效：

代码示例:

$config['context'] = stream_context_create(array('http' => array('method' => "GET",

'timeout' => 5//这个超时时间不稳定，经常不奏效

)

));

这时候，看一下服务器的连接池，会发现一堆类似的错误，让我头疼万分：
file_get_contents(http://***): failed to open stream…
现在改用了curl库，写了一个函数替换：

代码示例:

function curl_file_get_contents($durl){

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, $durl);

curl_setopt($ch, CURLOPT_TIMEOUT, 5);

curl_setopt($ch, CURLOPT_USERAGENT, _USERAGENT_);

curl_setopt($ch, CURLOPT_REFERER,_REFERER_);

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

$r = curl_exec($ch);

curl_close($ch);

return $r;

}

如此，除了真正的网络问题外，没再出现任何问题。
这是别人做过的关于curl和file_get_contents的测试：
file_get_contents抓取google.com需用秒数：
2.31319094
2.30374217
2.21512604
3.30553889
2.30124092
curl使用的时间：
0.68719101
0.64675593
0.64326
0.81983113
0.63956594
差距很大？呵呵，从我使用的经验来说，这两个工具不只是速度有差异，稳定性也相差很大。
建议对网络数据抓取稳定性要求比较高的朋友使用上面的 curl_file_get_contents函数，不但稳定速度快，还能假冒浏览器欺骗目标地址哦！

说到curl与file_get_contents的用法，之前的文章中多有提及，这里推荐几篇不错的文章，大家做个参考：