php curl常用的5个经典例子-6ren

php curl常用的5个经典例子

转载作者：qq735679552 更新时间：2022-09-27 22:32:09

25

4

CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.

这篇CFSDN的博客文章php curl常用的5个经典例子由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.

我用php ，curl主要是抓取数据，当然我们可以用其他的方法来抓取，比如fsockopen,file_get_contents等。但是只能抓那些能直接访问的页面，如果要抓取有页面访问控制的页面，或者是登录以后的页面就比较困难了.

1，抓取无访问控制文件。

 
    ? 
   
         <?php  
        
         $ch 
         = curl_init();  
        
         curl_setopt( 
         $ch 
         , CURLOPT_URL,  
         "http://localhost/mytest/phpinfo.php" 
         );  
        
         curl_setopt( 
         $ch 
         , CURLOPT_HEADER, false);  
        
         curl_setopt( 
         $ch 
         , CURLOPT_RETURNTRANSFER, 1);  
         //如果把这行注释掉的话，就会直接输出  
        
         $result 
         =curl_exec( 
         $ch 
         );  
        
         curl_close( 
         $ch 
         );  
        
         ?>

2，使用代理进行抓取。

为什么要使用代理进行抓取呢？以google为例吧，如果去抓google的数据，短时间内抓的很频繁的话，你就抓取不到了。google对你的ip地址做限制这个时候，你可以换代理重新抓.

 
    ? 
   
         <pre name= 
         "code" 
         class 
         = 
         "php" 
         ><?php  
        
         $ch 
         = curl_init();  
        
         curl_setopt( 
         $ch 
         , CURLOPT_URL,  
         "http://blog.51yip.com" 
         );  
        
         curl_setopt( 
         $ch 
         , CURLOPT_HEADER, false);  
        
         curl_setopt( 
         $ch 
         , CURLOPT_RETURNTRANSFER, 1);  
        
         curl_setopt( 
         $ch 
         , CURLOPT_HTTPPROXYTUNNEL, TRUE);  
        
         curl_setopt( 
         $ch 
         , CURLOPT_PROXY, 125.21.23.6:8080);  
        
         //url_setopt($ch, CURLOPT_PROXYUSERPWD, 'user:password');如果要密码的话，加上这个  
        
         $result 
         =curl_exec( 
         $ch 
         );  
        
         curl_close( 
         $ch 
         );  
        
         ?>

3，post数据后，抓取数据。

单独说一下数据提交数据，因为用 curl的时候，很多时候会有数据交互的，所以比较重要的.

 
    ? 
   
         <?php  
        
         $ch 
         = curl_init();  
        
         /*在这里需要注意的是，要提交的数据不能是二维数组或者更高  
        
         *例如array('name'=>serialize(array('tank','zhang')),'sex'=>1,'birth'=>'20101010')  
        
         *例如array('name'=>array('tank','zhang'),'sex'=>1,'birth'=>'20101010')这样会报错的*/ 
        
         $data 
         =  
         array 
         ( 
         'name' 
         =>  
         'test' 
         ,  
         'sex' 
         =>1, 
         'birth' 
         => 
         '20101010' 
         );  
        
         curl_setopt( 
         $ch 
         , CURLOPT_URL,  
         'http://localhost/mytest/curl/upload.php' 
         );  
        
         curl_setopt( 
         $ch 
         , CURLOPT_POST, 1);  
        
         curl_setopt( 
         $ch 
         , CURLOPT_POSTFIELDS,  
         $data 
         );  
        
         curl_exec( 
         $ch 
         );  
        
         ?>

在 upload.php文件中，print_r($_POST);利用curl就能抓取出upload.php输出的内容Array ( [name] => test [sex] => 1 [birth] => 20101010 ) 。

4，抓取一些有页面访问控制的页面。

php curl常用的5个经典例子

以前写过一篇，页面访问控制的3种方法有兴趣的可以看一下.

如果用上面提到的方法抓的话，会报以下错误。

You are not authorized to view this page You do not have permission to view this directory or page using the credentials that you supplied because your Web browser is sending a WWW-Authenticate header field that the Web server is not configured to accept. 。

这个时候，我们就要用CURLOPT_USERPWD来进行验证了。

 
    ? 
   
         <?php  
        
         $ch 
         = curl_init();  
        
         curl_setopt( 
         $ch 
         , CURLOPT_URL,  
         "http://club-china" 
         );  
        
         /*CURLOPT_USERPWD主要用来破解页面访问控制的  
        
         *例如平时我们所以htpasswd产生页面控制等。*/ 
        
         //curl_setopt($ch, CURLOPT_USERPWD, 'user:password');  
        
         curl_setopt( 
         $ch 
         , CURLOPT_HTTPGET, 1);  
        
         curl_setopt( 
         $ch 
         , CURLOPT_REFERER,  
         "http://club-china" 
         );  
        
         curl_setopt( 
         $ch 
         , CURLOPT_HEADER, 0);  
        
         $result 
         =curl_exec( 
         $ch 
         );  
        
         curl_close( 
         $ch 
         );  
        
         ?>

以上这篇php curl常用的5个经典例子就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持我.

最后此篇关于php curl常用的5个经典例子的文章就讲到这里了,如果你想了解更多关于php curl常用的5个经典例子的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！。

25

4

0

文章推荐： thinkphp实现把数据库中的列的值存到下拉框中的方法

文章推荐： Java求一个分数数列的前20项之和的实现代码

文章推荐： Java两个乒乓球队比赛名单问题(判断素数)

文章推荐： php技巧小结【推荐】

curl - 将命令行 cURL 转换为 C cURL
我以前从未做过任何 curl ，所以需要一些帮助。我试图从示例中解决这个问题，但无法理解它! 我有一个 curl 命令，我可以从 Windows 命令行成功运行该命令，该命令行在 Solr 中索引 p
curl - curl -v 和 curl -I 有什么区别
curl -v有什么区别和 curl -I ? 我可以看到 -v是冗长的和 -I是标题。有什么具体的吗？最佳答案 -I (大写字母 i)在 curl 中表示“没有正文”，对于 HTTP 表示发送 H
curl - curl FTP访问被拒绝
我正在使用curl php API访问FTP链接。在特定站点上，它给出错误代码9（拒绝访问）。但是，可以从IE和Firefox访问该链接。然后，我运行curl命令行，它给出了相同的“访问拒绝”结果。
curl - cURL NTLM代理授权
我已经使用curl有一段时间了，它可以正常工作，但是使用使用用户'domain\username'来验证curl的代理时，无法请求授权。授权方法是NTLM。此代码放入批处理文件中。代码: curl
curl - 'curl' 默认使用什么证书？
“curl”默认使用哪些证书？例子: curl -I -L https://cruises.webjet.com.au 在 Ubuntu 15.04 上失败 curl: (60) SSL certi
curl - curl -输出到终端的内容是什么？
我知道终端输出的一部分是请求的持续时间，剩余时间等。但是是否有一些文档指定了curl命令的终端输出的每一列到底是什么？手册页上的内容非常稀疏。最佳答案可能不容易找到，但已在the curl boo
curl - Owncloud上传文件到特定文件夹 - curl
我想通过 curl 在我自己的云服务器上的特定文件夹中上传文件。例如:http://www.myowncloudserver.com/remote.php/webdav/{MY_FOLDER}。此时我
curl - curl 以提示用户名和密码
我的网站上有一个密码保护的Web文件夹，我正在使用Curl在另一个域上获取该文件夹，我想要的是:当我尝试打开URL时，应该问我用户名和密码，而不是让它显示“需要授权”。例: http://www.e
curl - curl 以获取Rabbitmq队列大小
有没有一种方法可以通过简单的Curl获取Rabbitmq中队列的大小（剩余消息）？类似于curl -xget http://host:1234/api/queue/test/stats 谢谢最佳答
curl - curl 免费发布库的动机是什么？
关闭。这个问题是opinion-based .它目前不接受答案。 2年前关闭。锁定。这个问题及其答案是locked因为这个问题是题外话，但具有历史意义。它目前不接受新的答案或互动。我最近开始在我的
curl - 使用带有用户名和密码的 cURL？
我想访问需要用户名/密码的 URL。我想尝试用curl 访问它。现在我正在做类似的事情: curl http://api.somesite.com/test/blah?something=123 我收
curl - 'CURL' 不被识别为内部或外部命令？
我正在尝试使用 CURL 进行查询ElasticSearch 中的命令在windows平台。例如:localhost:9200/playground/equipment/1?pretty 我收到一条
curl - 在运行容器时成功使用 curl
我正在尝试使用 Docker 构建和运行 Marklogic 实例。 Marklogic 提供了一些不错的 http api，所以，作为最终 CMD在 Dockerfile 中，我运行两个脚本，它们通
curl - 加载超时阻止使用 Curl
我正在尝试通过 cURL 检索网页的内容(比方说 http://www.foo.com/bar.php )。当我在浏览器中加载网站时，加载页面时会出现动画，页面最终会显示出来。但是使用 cURL，
curl - 带有代理和响应状态代码的命令行 curl
我正在尝试使用带代理的命令行 CURL 获取响应状态代码。这会返回整个页面，但我只想要状态代码。我怎么做？谢谢。 curl -sL -w -x IP:PORT "%{http_code}\n""ht
curl - net/http vs curl - 为什么在 curl 不超时的情况下超时？
我有一段代码检查 http/s 端点的状态和加载时间。然后我会为每个顶级页面检查 1 级 href，以检查页面引用的所有内容是否也加载了 200。 (我查了50个顶级页面，每个顶级页面平均有8个链接)
curl - curl --upload-file 和 curl --form file=@filename 有什么区别
curl --upload-file 和 curl --form file=@/path/file 有什么区别？这些 HTTP 请求有何不同？最佳答案 --上传文件 (使用 HTTP 或 HTTPS
curl - CMAKE_USE_SYSTEM_CURL 已打开但未找到 curl
我正在尝试使用 system-curl 安装 cmake，使用 ./bootstrap --system-curl，如 here 所示.这样做，我得到了: -- Could NOT find
curl - 为什么 Curl 会忽略给定的范围？
我需要使用 Curl 下载 Youtube 视频的特定部分。 (假设我想下载前 2MB)我在 Curl 中使用 -r 开关来实现这一点。它适用于非 YouTube 链接，但 Youtube 链接会忽略
curl - 在 curl 命令中为文件名添加时间戳
我希望在使用 curl 命令从远程服务器下载文件后，将时间戳或日期添加到文件名中。我知道您可以使用 -o 来指定您要为文件命名的内容。我看到过这样的建议:-o "somefile $(date +\"

首页

博学

6Ren·AI

商城

php curl常用的5个经典例子