`
dcj3sjt126com
  • 浏览: 1881996 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

CURL学习一

    博客分类:
  • PHP
 
阅读更多

<?php

//初始化一个CURL对象
$curl = curl_init();

//设置你需要抓取的URL
curl_setopt($curl, CURLOPT_URL, "http://www.baidu.com");

//设置CURL参数,要求结果保存到字符串中还是输出到屏幕上
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

//运行CURL,请求网页
echo $data = curl_exec($curl); //$data为获取的内容,echo就输入内容了

//关闭URL请求
curl_close($curl);

?>
使用curl 能快捷的抓取网页、模拟POST、GET请求,当然也不仅仅是HTTP协议的一些封装,还支持FTP、代理、HTTPS、LDAP等应用。
curl并不是PHP特有的,很多语言中都有,一个东西好用,自然就会被推广开,就像很多年前的log4j一样的道理,刚开始是JAVA版本,随后也出现log4c,log4c++⋯⋯curl 也是一样的道理。curl 并非PHP默认支持,需要在配置里打开此项的加载extension= php_curl.dll 在linux 下就记得编译PHP的时候./configure 加上参数-with-curl。要查看curl 扩展是否打开,通过phpinfo(); 应该是可以看到的。

1) 基本用法(调用的一般顺序)

curl_init : 初始化,
curl_setopt :设置参数选项
curl_exec:执行当前curl对象
curl_close:关闭当前curl对象

示例:访问下面代码另存为的PHP网页,我们看到了126 邮箱的网页。

$curl = curl_init();

// 设置你需要抓取的URL
curl_setopt($curl, CURLOPT_URL, 'http://126.com');

// 设置header 是否显示头部信息
//curl_setopt($curl, CURLOPT_HEADER, 1);

// 设置cURL 参数,要求结果保存到字符串中还是输出到屏幕上。
//curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

// 运行cURL,请求网页
$data = curl_exec($curl);

// 关闭URL请求
curl_close($curl);

// 显示获得的数据
var_dump($data);

2) POST 方式发送数据
?php
$phoneNumber = '13912345678';
$message = 'This message was generated by curl and php';
$curlPost = 'pNUMBER='  . urlencode($phoneNumber. '&MESSAGE=' . urlencode($message. '&SUBMIT=Send';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'http://www.example.com/sendSMS.php');
curl_setopt($ch, CURLOPT_HEADER, 1);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);
$data = curl_exec();
curl_close($ch);
?

3) 代理服务器
?php 
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'http://www.example.com');
curl_setopt($ch, CURLOPT_HEADER, 1);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_HTTPPROXYTUNNEL, 1);
curl_setopt($ch, CURLOPT_PROXY, 'fakeproxy.com:1080');
curl_setopt($ch, CURLOPT_PROXYUSERPWD, 'user:password');
$data = curl_exec();
curl_close($ch);
?

4) 
关于SSL和Cookie

关于SSL也就是HTTPS协议,你只需要把CURLOPT_URL连接中的http://变成https://就可以了。当然,还有一个参数叫CURLOPT_SSL_VERIFYHOST可以设置为验证站点。

关于Cookie,你需要了解下面三个参数:

CURLOPT_COOKIE,在当面的会话中设置一个cookie

CURLOPT_COOKIEJAR,当会话结束的时候保存一个Cookie

CURLOPT_COOKIEFILE,Cookie的文件。

5) HTTP服务器认证
﹤?php 
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'http://www.example.com');
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_HTTPAUTH, CURLAUTH_BASIC);
curl_setopt(CURLOPT_USERPWD, '[username]:[password]')

$data = curl_exec();
curl_close($ch);
?﹥

总结:虽然后面附加了几个例子,其实顺序跟第一个介绍的都一样,只是会根据不同情况,在 curl_setopt 函数会有所不同。我们也发现这个函数的参数非常多,非常灵活。

以下关于此函数各项使用参数:

bool curl_setopt (int ch, string option, mixed value)

curl_setopt()函数将为一个CURL会话设置选项。option参数是你想要的设置,value是这个选项给定的值。

下列选项的值将被作为长整形使用(在option参数中指定):
 

* CURLOPT_INFILESIZE: 当你上传一个文件到远程站点,这个选项告诉PHP你上传文件的大小。
* CURLOPT_VERBOSE: 如果你想CURL报告每一件意外的事情,设置这个选项为一个非零值。
* CURLOPT_HEADER: 如果你想把一个头包含在输出中,设置这个选项为一个非零值。
* CURLOPT_NOPROGRESS: 如果你不会PHP为CURL传输显示一个进程条,设置这个选项为一个非零值。注意:PHP自动设置这个选项为非零值,你应该仅仅为了调试的目的来改变这个选项。
* CURLOPT_NOBODY: 如果你不想在输出中包含body部分,设置这个选项为一个非零值。
* CURLOPT_FAILONERROR: 如果你想让PHP在发生错误(HTTP代码返回大于等于300)时,不显示,设置这个选项为一人非零值。默认行为是返回一个正常页,忽略代码。
* CURLOPT_UPLOAD: 如果你想让PHP为上传做准备,设置这个选项为一个非零值。
* CURLOPT_POST: 如果你想PHP去做一个正规的HTTP POST,设置这个选项为一个非零值。这个POST是普通的 application/x-www-from-urlencoded 类型,多数被HTML表单使用。
* CURLOPT_FTPLISTONLY: 设置这个选项为非零值,PHP将列出FTP的目录名列表。
* CURLOPT_FTPAPPEND: 设置这个选项为一个非零值,PHP将应用远程文件代替覆盖它。
* CURLOPT_NETRC: 设置这个选项为一个非零值,PHP将在你的 ~./netrc 文件中查找你要建立连接的远程站点的用户名及密码。
* CURLOPT_FOLLOWLOCATION: 设置这个选项为一个非零值(象 “Location: “)的头,服务器会把它当做HTTP头的一部分发送(注意这是递归的,PHP将发送形如 “Location: “的头)。
* CURLOPT_PUT: 设置这个选项为一个非零值去用HTTP上传一个文件。要上传这个文件必须设置CURLOPT_INFILE和CURLOPT_INFILESIZE选项.
* CURLOPT_MUTE: 设置这个选项为一个非零值,PHP对于CURL函数将完全沉默。
* CURLOPT_TIMEOUT: 设置一个长整形数,作为最大延续多少秒。
* CURLOPT_LOW_SPEED_LIMIT: 设置一个长整形数,控制传送多少字节。
* CURLOPT_LOW_SPEED_TIME: 设置一个长整形数,控制多少秒传送CURLOPT_LOW_SPEED_LIMIT规定的字节数。
* CURLOPT_RESUME_FROM: 传递一个包含字节偏移地址的长整形参数,(你想转移到的开始表单)。
* CURLOPT_SSLVERSION: 传递一个包含SSL版本的长参数。默认PHP将被它自己努力的确定,在更多的安全中你必须手工设置。
* CURLOPT_TIMECONDITION: 传递一个长参数,指定怎么处理CURLOPT_TIMEVALUE参数。你可以设置这个参数为TIMECOND_IFMODSINCE 或 TIMECOND_ISUNMODSINCE。这仅用于HTTP。
* CURLOPT_TIMEVALUE: 传递一个从1970-1-1开始到现在的秒数。这个时间将被CURLOPT_TIMEVALUE选项作为指定值使用,或被默认TIMECOND_IFMODSINCE使用。

下列选项的值将被作为字符串:
 

* CURLOPT_URL: 这是你想用PHP取回的URL地址。你也可以在用curl_init()函数初始化时设置这个选项。
* CURLOPT_USERPWD: 传递一个形如[username]:[password]风格的字符串,作用PHP去连接。
* CURLOPT_PROXYUSERPWD: 传递一个形如[username]:[password] 格式的字符串去连接HTTP代理。
* CURLOPT_RANGE: 传递一个你想指定的范围。它应该是”X-Y”格式,X或Y是被除外的。HTTP传送同样支持几个间隔,用逗句来分隔(X-Y,N-M)。
* CURLOPT_POSTFIELDS: 传递一个作为HTTP “POST”操作的所有数据的字符串。
* CURLOPT_REFERER: 在HTTP请求中包含一个”referer”头的字符串。
* CURLOPT_USERAGENT: 在HTTP请求中包含一个”user-agent”头的字符串。
* CURLOPT_FTPPORT: 传递一个包含被ftp “POST”指令使用的IP地址。这个POST指令告诉远程服务器去连接我们指定的IP地址。这个字符串可以是一个IP地址,一个主机名,一个网络界面名(在UNIX下),或是‘-’(使用系统默认IP地址)。
* CURLOPT_COOKIE: 传递一个包含HTTP cookie的头连接。
* CURLOPT_SSLCERT: 传递一个包含PEM格式证书的字符串。
* CURLOPT_SSLCERTPASSWD: 传递一个包含使用CURLOPT_SSLCERT证书必需的密码。
* CURLOPT_COOKIEFILE: 传递一个包含cookie数据的文件的名字的字符串。这个cookie文件可以是Netscape格式,或是堆存在文件中的HTTP风格的头。
* CURLOPT_CUSTOMREQUEST: 当进行HTTP请求时,传递一个字符被GET或HEAD使用。为进行DELETE或其它操作是有益的,更Pass a string to be used instead of GET or HEAD when doing an HTTP request. This is useful for doing or another, more obscure, HTTP request. 注意: 在确认你的服务器支持命令先不要去这样做。下列的选项要求一个文件描述(通过使用fopen()函数获得): 
* CURLOPT_FILE: 这个文件将是你放置传送的输出文件,默认是STDOUT.
* CURLOPT_INFILE: 这个文件是你传送过来的输入文件。
* CURLOPT_WRITEHEADER: 这个文件写有你输出的头部分。
* CURLOPT_STDERR: 这个文件写有错误而不是stderr。用来获取需要登录的页面的例子,当前做法是每次或许都登录一次,有需要的人再做改进了.

常用函数:

curl_close — 关闭一个curl会话 
curl_copy_handle — 拷贝一个curl连接资源的所有内容和参数 
curl_errno — 返回一个包含当前会话错误信息的数字编号 
curl_error — 返回一个包含当前会话错误信息的字符串 
curl_exec — 执行一个curl会话 
curl_getinfo — 获取一个curl连接资源句柄的信息 
curl_init — 初始化一个curl会话 
curl_multi_add_handle — 向curl批处理会话中添加单独的curl句柄资源 
curl_multi_close — 关闭一个批处理句柄资源 
curl_multi_exec — 解析一个curl批处理句柄 
curl_multi_getcontent — 返回获取的输出的文本流 
curl_multi_info_read — 获取当前解析的curl的相关传输信息 
curl_multi_init — 初始化一个curl批处理句柄资源 
curl_multi_remove_handle — 移除curl批处理句柄资源中的某个句柄资源 
curl_multi_select — Get all the sockets associated with the cURL extension, which can then be "selected" 
curl_setopt_array — 以数组的形式为一个curl设置会话参数 
curl_setopt — 为一个curl设置会话参数 
curl_version — 获取curl相关的版本信息
分享到:
评论

相关推荐

    Curl.zip_C++ curl_DEMO_c++ curl_curl_curl c++

    通过Curl.zip中的DEMO,我们可以看到这些概念如何在实际代码中体现,学习如何将CURL库有效地融入C++项目,实现强大的网络功能。在研究DEMO时,注意观察如何初始化CURL,设置选项,处理数据,以及正确地清理资源,...

    curl下载curl包下载

    `curl`是一个强大的命令行工具,用于在操作系统中下载或上传数据,支持众多网络协议,如HTTP、HTTPS、FTP、FTPS等。它在IT领域中广泛应用,特别是在自动...学习和掌握`curl`的使用,无疑能提升你在IT领域的技能和效率。

    curl 7.79.1 Demo

    `curl 7.79.1 Demo` 是一个关于如何在Visual Studio 2019环境下使用curl库的示例项目。curl是一个开源的命令行工具和库,用于传输数据,支持多种协议如HTTP、HTTPS、FTP等。在本示例中,我们关注的是如何在C++项目中...

    CUrlHttp封装curl类

    总结来说,CUrlHttp类是curl库的高级封装,为开发者提供了简单易用的接口来执行HTTP请求,同时保持了curl的强大功能,降低了学习和使用的门槛,提高了开发效率。在实际项目中,它能够有效地帮助开发者处理网络通信...

    windows下curl工具 curl-7.71.1-win64-mingw

    curl-7.71.1-win64-mingw是针对Windows 64位系统的版本,它由mingw编译构建,为Windows用户提供了一个轻便、高效的网络数据传输解决方案。 **主要功能与特性:** 1. **多协议支持**:curl支持多种网络协议,使得...

    curl-7.64.1.zip

    【标题】"curl-7.64.1.zip" 是一个包含了 curl 工具的版本 7.64.1 的压缩包文件,通常用于在命令行环境中进行 HTTP、FTP、SMTP 等多种网络协议的数据传输。curl 是一个开源项目,由 Daniel Stenberg 创建并维护,它...

    最新版linux curl-7.71.1.tar.gz

    Linux中的curl是一个强大的命令行工具,用于传输数据,支持多种协议如HTTP、HTTPS、FTP、FTPS等。在最新的版本7.71.1中,curl提供了更多的功能和改进,...学习和掌握curl的使用,对于提升Linux系统的使用效率大有裨益。

    Curl语言学习资料

    资料仅供学习,勿作商用! Curl语言是一种编程语言,它被设计用于编写网络程序。它的目标是以一种单一的语言来取代HTML, ...Curl语言便于学习,编程效率高,是一种支持多重继承,范型等数据类型的面向对象编程语言。

    curl-7.64.1

    首先,curl-7.64.1是curl项目的某一稳定版本,提供源代码意味着用户可以查看和理解其内部工作原理,甚至根据需求进行定制和扩展。源代码的开放性使得开发者能够对软件进行调试、优化,或集成到其他项目中,充分体现...

    curl-curl-7_53_1 (2).zip

    这里我们将聚焦于curl库的一个特定版本——curl-7_53_1,通过分析其源代码和功能,来深入了解curl的工作原理和应用。 1. **curl库介绍** curl库是开发网络应用时的重要组件,它提供了丰富的API接口,使得开发者...

    curl-master.zip_curl_curl-master_curlconfig-d

    通过阅读和分析`curl-master`中的源代码,你可以学习到如何构建网络请求,如何处理各种网络协议,以及如何设计一个跨平台的命令行工具。这对于提升你的网络编程技能,特别是网络请求和响应的处理,会有很大帮助。

    CURL HTTP POST方式表单递交

    1、使用的是curl库,数据采用http post方式表单递交 2、里面有完整的注释,比较规则的代码结构,适合学习交流 3、是控制台程序 4、我也是用到了curl但网上的资料大部分比较松散,我自己实现后分享给大家,相互学习,...

    curl8.2.1+openssl3.0.1.zip

    《深入理解curl与openssl在软件开发中的应用》 在IT领域,curl和openssl是两个非常重要的开源工具,...通过学习和使用curl8.2.1+openssl3.0.1,开发者可以更好地应对现代网络环境中的挑战,实现高效、安全的网络通信。

    qt5使用curl实现文件下载的示例程序

    1. **cURL库的集成**: 在Qt5项目中使用cURL,首先需要将cURL库添加到项目中。这通常涉及到配置项目的.pro文件,指定cURL库的位置,并确保编译时能够正确链接。 2. **创建cURL对象**: 在代码中,需要创建一个...

    cURL的windows版本,带中文说明

    1. **基本请求**:`curl [URL]`,这将简单地获取指定URL的内容。 2. **POST请求**:`curl -d "key=value" [URL]`,将数据`key=value`发送到服务器。 3. **头信息**:`curl -H "Header: value" [URL]`,添加自定义...

    curl-7.49.1

    在本文中,我们将深入探讨curl-7.49.1版本,这是一个在2016年发布的稳定版本,它包含了众多的功能和改进,使得curl成为开发者和系统管理员手中不可或缺的工具。 首先,curl的核心功能是其强大的URL处理能力。它能够...

    curl_自定义进度条

    在IT领域,`curl`是一个广泛使用的命令行工具,用于传输数据到或从服务器,支持多种协议如HTTP、HTTPS、FTP等。它以其强大的功能和灵活性而受到开发者的青睐。...同时,这也是一种学习libcurl API和回调机制的好方式。

    curl curl-7.59.0 64位

    `curl`是一个强大的命令行工具,用于在...学习和熟练使用`curl`不仅可以提高工作效率,还能在处理各种网络任务时提供极大的便利。无论是开发者调试接口,还是普通用户下载文件,`curl`都是一个强大且不可或缺的工具。

    CURL 源码和实例

    1. **src目录**:这是CURL的核心源代码,包含了许多.c文件,如`curl.c`(主程序入口)、`transfer.c`(负责数据传输)、`multi.c`(处理多线程或多路复用请求)等。通过阅读这些源码,你可以了解CURL如何处理网络...

Global site tag (gtag.js) - Google Analytics