`
javatgo
  • 浏览: 1206851 次
  • 性别: Icon_minigender_2
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

CURL的学习和应用

 
阅读更多

curl安装:

xp下面的安装

:修改php.ini文件的设置,找到php_curl.dll

//取消下在的注释
extension=php_curl.dll

linux下面安装:

# wget http://curl.haxx.se/download/curl-7.17.1.tar.gz
# tar zxvf curl-7.17.1.tar.gz //解压

#cd curl-7.17.1
# ./configure --prefix=/usr/local/curl
# make
# make install

这是安装php之前安装的方法.

***************************phpinf查看是否加载成功!

使用curl的POST数据飞信接口

用curl 写了飞信接口吧,网上有很多,这里只是做个测试

01 $username= 13800138000;
02 $password= 123456;
03 $sendto= 13912345678;
04 $message="测试一个试试看!";
05
06 $curlPost='username='.urlencode($username).'&password='.urlencode($password).'&sendto='.urlencode($sendto).'&message='.urlencode($message).'';
07
08 $ch= curl_init();//初始化curl
09 curl_setopt($ch,CURLOPT_URL,'http://sms.api.bz/fetion.php');//抓取指定网页
10 curl_setopt($ch, CURLOPT_HEADER, 0);//设置header
11 curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);//要求结果为字符串且输出到屏幕上
12 curl_setopt($ch, CURLOPT_POST, 1);//post提交方式
13 curl_setopt($ch, CURLOPT_POSTFIELDS,$curlPost);
14 $data= curl_exec($ch);//运行curl
15 curl_close($ch);
16 print_r($data);//输出结果

  

返回的结果是:短信已提交到发送队列!

飞信接口的地址是http://sms.api.bz/

飞信接口模式:

http://sms.api.bz/fetion.php?username=您的移动飞信登录手机号
&password=您的移动飞信登录密码
&sendto=接收短信的飞信好友手机号
&message=短信内容

格式:http://sms.api.bz/fetion.php?username=13800138000&password=123456&sendto=13912345678&message=短信内容

注意要保持utf-8格式的,这点我犯错了

总结一下使用curl方法:

  • 初始化curl
  • 使用curl_setopt设置目标url,和其他选项,这些选项方法详细参考:http://cn2.php.net/manual/zh/ref.curl.php
  • curl_exec,执行curl
  • 执行后,关闭curl
  • 最后一步就是输出

使用curl实现多线程

curl一般用来抓取网页,第二种就是get或者post数据,第三种应用就是实现PHP的多线程任务

下面来实现多线程的

01 <?php
02 /*
03 curl 多线程抓取
04 */
05
06 /**
07 * curl 多线程
08 *
09 * @param array $array 并行网址
10 * @param int $timeout 超时时间
11 * @return array
12 */
13 functionCurl_http($array,$timeout){
14 $res=array();
15 $mh= curl_multi_init();//创建多个curl语柄
16 $startime= getmicrotime();
17 foreach($arrayas$k=>$url){
18 $conn[$k]=curl_init($url);
19
20 curl_setopt($conn[$k], CURLOPT_TIMEOUT,$timeout);//设置超时时间
21 curl_setopt($conn[$k], CURLOPT_USERAGENT,'Mozilla/5.0 (compatible; MSIE 5.01; Windows NT 5.0)');
22 curl_setopt($conn[$k], CURLOPT_MAXREDIRS, 7);//HTTp定向级别
23 curl_setopt($conn[$k], CURLOPT_HEADER, 0);//这里不要header,加块效率
24 curl_setopt($conn[$k], CURLOPT_FOLLOWLOCATION, 1);// 302 redirect
25 curl_setopt($conn[$k],CURLOPT_RETURNTRANSFER,1);
26 curl_multi_add_handle ($mh,$conn[$k]);
27 }
28 //防止死循环耗死cpu 这段是根据网上的写法
29 do{
30 $mrc= curl_multi_exec($mh,$active);//当无数据,active=true
31 }while($mrc== CURLM_CALL_MULTI_PERFORM);//当正在接受数据时
32 while($activeand$mrc== CURLM_OK) {//当无数据时或请求暂停时,active=true
33 if(curl_multi_select($mh) != -1) {
34 do{
35 $mrc= curl_multi_exec($mh,$active);
36 }while($mrc== CURLM_CALL_MULTI_PERFORM);
37 }
38 }
39
40 foreach($arrayas$k=>$url) {
41 curl_error($conn[$k]);
42 $res[$k]=curl_multi_getcontent($conn[$k]);//获得返回信息
43 $header[$k]=curl_getinfo($conn[$k]);//返回头信息
44 curl_close($conn[$k]);//关闭语柄
45 curl_multi_remove_handle($mh,$conn[$k]);//释放资源
46 }
47
48 curl_multi_close($mh);
49 $endtime= getmicrotime();
50 $diff_time=$endtime-$startime;
51
52 returnarray('diff_time'=>$diff_time,
53 'return'=>$res,
54 'header'=>$header
55 );
56
57 }
58 //计算当前时间
59 functiongetmicrotime() {
60 list($usec,$sec) =explode(" ",microtime());
61 return((float)$usec+ (float)$sec);
62 }
63
64 //测试一下,curl 三个网址
65 $array=array(
69 );
70
71 $data= Curl_http($array,'10');//调用
72 var_dump($data);//输出
73
74 ?>

  

1

关于do while的那段解释:

1 因为$active要等全部url数据接受完毕才变成false,所以这里用到了curl_multi_exec的返回值判断是否还有数据,
1 当有数 据的时候就不停调用curl_multi_exec,暂时没有数据就进入select阶段,新数据一来就可以被唤醒继续执行。
1

这个多线程的写法步骤:

第一步:调用curl_multi_init
第二步:循环调用curl_multi_add_handle
这一步需要注意的是,curl_multi_add_handle的第二个参数是由curl_init而来的子handle。
第三步:持续调用curl_multi_exec
第四步:根据需要循环调用curl_multi_getcontent获取结果
第五步:调用curl_multi_remove_handle,并为每个字handle调用curl_close
第六步:调用curl_multi_close

多线程的测试效果图:

wps_clip_image-11562

总结:36个http请求,从执行的是时间顺序上来看,三个网站的ip交叉,说明是同时并发的!


分享到:
评论

相关推荐

    curl下载curl包下载

    `curl`是一个强大的命令行工具,用于在操作系统中下载或上传数据,支持众多网络协议,如HTTP、HTTPS、FTP、FTPS等。它在IT领域中广泛应用,特别是在自动...学习和掌握`curl`的使用,无疑能提升你在IT领域的技能和效率。

    CURL 源码和实例

    学习CURL的源码和实例,有助于提升对HTTP协议的理解,熟悉网络请求的处理流程,以及掌握客户端网络编程技巧。CURL的灵活性和广泛支持的协议使其在Web开发、自动化测试、数据抓取等领域有着广泛应用。如果你想要深入...

    curl8.2.1+openssl3.0.1.zip

    《深入理解curl与openssl在软件开发中的应用》 在IT领域,curl和openssl是两个非常重要的开源工具,...通过学习和使用curl8.2.1+openssl3.0.1,开发者可以更好地应对现代网络环境中的挑战,实现高效、安全的网络通信。

    CUrlHttp封装curl类

    总结来说,CUrlHttp类是curl库的高级封装,为开发者提供了简单易用的接口来执行HTTP请求,同时保持了curl的强大功能,降低了学习和使用的门槛,提高了开发效率。在实际项目中,它能够有效地帮助开发者处理网络通信...

    qt5使用curl实现文件下载的示例程序

    在IT行业中,网络通信是应用程序不可或缺的一部分,而文件下载则是其中常见的需求。Qt5是一个功能强大的C++开发...通过学习和实践,开发者可以更好地掌握网络通信在Qt5应用程序中的实现,提高项目开发的效率和质量。

    curl-master.zip_curl_curl-master_curlconfig-d

    10. **libcurl库**:除了命令行工具,curl还提供了一个名为libcurl的库,供其他应用程序调用,实现HTTP和其他协议的通信。 通过阅读和分析`curl-master`中的源代码,你可以学习到如何构建网络请求,如何处理各种...

    pcap2curl读取数据包捕获提取HTTP请求并将其转换为cURL命令进行重放

    在IT行业中,网络数据包分析是一项重要的技能,特别是在Web爬虫和网络安全领域。`pcap2curl`是一个实用工具...通过深入学习和应用`pcap2curl`,我们可以更好地理解和控制网络通信,从而在Web开发和爬虫项目中游刃有余。

    curl线程池多线程调用

    在IT行业中,网络请求是应用程序不可或缺的一部分,而`curl`作为一个强大的命令行工具,被广泛用于HTTP和其他协议的客户端...通过学习和应用这些知识,我们可以优化网络请求的性能,提升整体系统的响应速度和用户体验。

    简单使用curl进行get请求并将服务器返回存进本地文件

    通过学习和熟练使用`curl`的各种选项,你可以在命令行环境中高效地进行Web服务的测试和数据抓取。在实际工作中,`curl`经常被开发者用来快速验证API接口、调试网络问题,或者作为自动化脚本的一部分。希望这个简短的...

    curl 7.79.1 Demo

    通过这个示例,你可以学习如何在C++项目中利用curl进行网络数据传输,这对于开发涉及网络通信的应用程序非常有用。同时,这也是一个了解如何在VS2019中管理和配置第三方库的实例。在实际开发中,你可能需要根据具体...

    openssl+curl编译好的库和源码.zip

    这里我们关注的是"openssl+curl编译好的库和源码.zip",这是一个包含预编译的Win32静态库以及源代码的压缩包,特别针对Windows XP系统进行了兼容性优化。让我们深入探讨一下这两个关键组件——OpenSSL和cURL,以及...

    curl-curl-7_53_1 (2).zip

    这里我们将聚焦于curl库的一个特定版本——curl-7_53_1,通过分析其源代码和功能,来深入了解curl的工作原理和应用。 1. **curl库介绍** curl库是开发网络应用时的重要组件,它提供了丰富的API接口,使得开发者...

    curl curl-7.59.0 64位

    `curl`是一个强大的命令行工具,用于在...学习和熟练使用`curl`不仅可以提高工作效率,还能在处理各种网络任务时提供极大的便利。无论是开发者调试接口,还是普通用户下载文件,`curl`都是一个强大且不可或缺的工具。

    curl_自定义进度条

    在IT领域,`curl`是一个广泛使用的命令行工具,用于传输数据到或从服务器,支持多种协议如HTTP、HTTPS、FTP等。它以其强大的功能和灵活性而受到开发者的青睐。...同时,这也是一种学习libcurl API和回调机制的好方式。

    cURL的windows版本,带中文说明

    **cURL windows 版本详解** cURL 是一个强大的命令行工具,用于传输数据到或从服务器,基于...记得,多实践是学习cURL的最佳方式,尝试各种命令和选项,结合实际需求,你会发现cURL是解决网络数据传输问题的得力助手。

    curl-7.67.0.chm.zip

    通过深入学习curl的源码,不仅可以提升网络编程技能,还能掌握软件设计和跨平台开发的实践经验。同时,提供的CHM文档使得在Windows环境下使用curl更加便捷,为日常开发和问题排查提供了有力的支持。

    curl-7.79.1.rar_libcurl.lib源码,含教程说明

    源代码可以帮助我们深入理解CURL的工作原理,学习如何使用libcurl进行网络编程,以及定制和扩展CURL的功能。 "使用说明.txt"文件很可能是CURL库的安装和使用指南,它会包含编译libcurl的步骤、如何在项目中链接...

    curl在Android中使用的Demo

    通过学习如何在代码中模拟`curl`命令,开发者可以更好地控制和测试网络通信,从而优化他们的应用程序。博客文章《curl在Android中使用的Demo》提供了一个实际操作的例子,帮助开发者将这一知识应用于实际项目。

Global site tag (gtag.js) - Google Analytics