PHP 支持curl函数(允许你用不同的协议连接和沟通不同的服务器),细节参看官方Ref1. curl 是使用URL语法的传送文件工具,支持FTP、FTPS、HTTP HTPPS SCP SFTP TFTP TELNET DICT FILE和LDAP。curl 支持SSL证书、HTTP POST、HTTP PUT 、FTP 上传,kerberos、基于HTT格式的上传、代理、cookie、用户+口令证明、文件传送恢复、http代理通道和大量其他有用的技巧。Curl由于可以进行post操作,所以也可用于异步调用,应该算比较常用方法. Curl主要是curl_setopt里有很多参数,详细参数参加Ref2.
抓取网页,并保存下来
以下是一个简单例子:是把PHP的主页取回放到一个文件中。储存到文件用到CURLOPT_FILE
,然后交一个文件句柄. 有点像wget吧..
- 使用PHP的CURL模块取回PHP主页
<?php
$ch = curl_init ("http://www.php.net/");
$fp = fopen ("php_homepage.txt", "w");
curl_setopt ($ch, CURLOPT_FILE, $fp);
curl_setopt ($ch, CURLOPT_HEADER, 0);
curl_exec ($ch);
curl_close ($ch);
fclose ($fp);
?>
curl相关常用函数列表:
curl_init
— 初始化一个CURL会话
curl_setopt
— 为CURL调用设置一个选项
curl_exec
— 执行一个CURL会话
curl_close
— 关闭一个CURL会话
curl_version
— 返回当前CURL版本
curl_init
- 初始化一个CURL会话.int curl_init ([string url])
curl_init()
函数将初始化一个新的会话,返回一个CURL句柄供curl_setopt(), curl_exec(),和 curl_close()
等 函数使用。如果可选参数被提供,那么CURLOPT_URL
选项将被设置成这个参数的值。你可以使用curl_setopt()函数人工设置。curl_setopt
- 为CURL调用设置一个选项bool curl_setopt (int ch, string option, mixed value)
这是关键所在. 除了一个一个设置,也可以使用bool curl_setopt_array ( resource $ch , array $options )
关联数组来一次性指定.
setopt可选项请参考Ref2官网更新!!!!!!!curl_exec
- 执行一个CURL会话bool curl_exec (int ch)
在初始化一个CURL会话,并为这个会话设置了所有的选项后,这个函数就可以调用。它的目的仅仅是执行预先确定的CURL会话(通过给定的ch参数)(其实就是模拟打开该网页)。在CURLOPT_RETURNTRANSFER
=1后,可以返回整个网页的值. 提交后其实还是要等的…curl_close
- 关闭一个CURL会话void curl_close (int ch)
这个函数关闭一个CURL会话,并且释放所有的资源。CURL句柄(ch参数)也被删除。可以通过CURLOPT_TIMEOUT
设置超时时间,然后超时候脚本就后台了╮(╯▽╰)╭- curl_version - 返回当前CURL版本
string curl_version (void)
curl_version()函数返回一个包含CURL版本的字符串。
setopt 选项
curl_setopt()函数将为一个CURL会话设置选项。option参数是你想要的设置,value是这个选项给定的值。
//// 比较重要:
- CURLOPT_URL: 这是你想用PHP取回的URL地址。你也可以在用curl_init()函数初始化时设置这个选项。
- CURLOPT_HEADER: 如果你想把一个头包含在输出中,设置这个选项为一个非零值。
- CURLOPT_POST: 如果你想PHP去做一个正规的HTTP POST,设置这个选项为一个非零值。这个POST是普通的 application/x-www-from-urlencoded 类型,多数被HTML表单使用。
- CURLOPT_POSTFIELDS: 传递一个作为HTTP “POST”操作的所有数据的字符串。
- CURLOPT_TIMEOUT: 设置一个长整形数,作为最大延续多少秒。
- CURLOPT_RETURNTRANSFER: 将curl_exec()获取的信息以文件流的形式返回,而不是直接输出。
- CURLOPT_FILE: 这个文件将是你放置传送的输出文件,默认是STDOUT.
- CURLOPT_STDERR: 这个文件写有错误而不是stderr。
//// 下列选项的值将被作为长整形使用(在option参数中指定):
- CURLOPT_INFILESIZE: 当你上传一个文件到远程站点,这个选项告诉PHP你上传文件的大小。
- CURLOPT_VERBOSE: 如果你想CURL报告每一件意外的事情,设置这个选项为一个非零值。
- CURLOPT_NOPROGRESS: 如果你不会PHP为CURL传输显示一个进程条,设置这个选项为一个非零值。
注意:PHP自动设置这个选项为非零值,你应该仅仅为了调试的目的来改变这个选项。
- CURLOPT_NOBODY: 如果你不想在输出中包含body部分,设置这个选项为一个非零值。
- CURLOPT_FAILONERROR: 如果你想让PHP在发生错误(HTTP代码返回大于等于300)时,不显示,设置这个选项为一人非零值。默认行为是返回一个正常页,忽略代码。
- CURLOPT_UPLOAD: 如果你想让PHP为上传做准备,设置这个选项为一个非零值。
- CURLOPT_FTPLISTONLY: 设置这个选项为非零值,PHP将列出FTP的目录名列表。
- CURLOPT_FTPAPPEND: 设置这个选项为一个非零值,PHP将应用远程文件代替覆盖它。
- CURLOPT_NETRC: 设置这个选项为一个非零值,PHP将在你的 ~./netrc 文件中查找你要建立连接的远程站点的用户名及密码。
- CURLOPT_FOLLOWLOCATION: 设置这个选项为一个非零值(象 "Location: ")的头,服务器会把它当做HTTP头的一部分发送(注意这是递归的,PHP将发送形如 "Location: "的头)。
- CURLOPT_PUT: 设置这个选项为一个非零值去用HTTP上传一个文件。要上传这个文件必须设置CURLOPT_INFILE和CURLOPT_INFILESIZE选项.
- CURLOPT_MUTE: 设置这个选项为一个非零值,PHP对于CURL函数将完全沉默。
- CURLOPT_LOW_SPEED_LIMIT: 设置一个长整形数,控制传送多少字节。
- CURLOPT_LOW_SPEED_TIME: 设置一个长整形数,控制多少秒传送CURLOPT_LOW_SPEED_LIMIT规定的字节数。
- CURLOPT_RESUME_FROM: 传递一个包含字节偏移地址的长整形参数,(你想转移到的开始表单)。
- CURLOPT_SSLVERSION: 传递一个包含SSL版本的长参数。默认PHP将被它自己努力的确定,在更多的安全中你必须手工设置。
- CURLOPT_TIMECONDITION: 传递一个长参数,指定怎么处理CURLOPT_TIMEVALUE参数。你可以设置这个参数为TIMECOND_IFMODSINCE 或TIMECOND_ISUNMODSINCE。这仅用于HTTP。
- CURLOPT_TIMEVALUE: 传递一个从1970-1-1开始到现在的秒数。这个时间将被CURLOPT_TIMEVALUE选项作为指定值使用,或被默认TIMECOND_IFMODSINCE使用。
下列选项的值将被作为字符串:
- CURLOPT_USERPWD: 传递一个形如[username]:[password]风格的字符串,作用PHP去连接。
- CURLOPT_PROXYUSERPWD: 传递一个形如[username]:[password] 格式的字符串去连接HTTP代理。
- CURLOPT_RANGE: 传递一个你想指定的范围。它应该是"X-Y"格式,X或Y是被除外的。HTTP传送同样支持几个间隔,用逗句来分隔(X-Y,N-M)。
- CURLOPT_REFERER: 在HTTP请求中包含一个"referer"头的字符串。
- CURLOPT_USERAGENT: 在HTTP请求中包含一个"user-agent"头的字符串。
- CURLOPT_FTPPORT: 传递一个包含被ftp "POST"指令使用的IP地址。这个POST指令告诉远程服务器去连接我们指定的IP地址。这个字符串可以是一个IP地址,一个主机名,一个网络界面名(在UNIX下),或是'-'(使用系统默认IP地址)。
- CURLOPT_COOKIE: 传递一个包含HTTP cookie的头连接。
- CURLOPT_SSLCERT: 传递一个包含PEM格式证书的字符串。
- CURLOPT_SSLCERTPASSWD: 传递一个包含使用CURLOPT_SSLCERT证书必需的密码。
- CURLOPT_COOKIEFILE: 传递一个包含cookie数据的文件的名字的字符串。这个cookie文件可以是Netscape格式,或是堆存在文件中的HTTP风格的头。
- CURLOPT_CUSTOMREQUEST: 当进行HTTP请求时,传递一个字符被GET或HEAD使用。为进行DELETE或其它操作是有益的,更Pass a string to be used instead of GET or HEAD when doing an HTTP request. This is useful for doing or another, more obscure, HTTP request.
注意: 在确认你的服务器支持命令先不要去这样做。
下列的选项要求一个文件描述(通过使用fopen()函数获得):
- CURLOPT_INFILE: 这个文件是你传送过来的输入文件。
- CURLOPT_WRITEHEADER: 这个文件写有你输出的头部分。
通过Cookie头进行连接
<?php
/*
* url post请求地址
* post post数据
* cookie cookie数据,传递一个包含HTTP cookie的头连接
* cookie 获取到的cookie信息的保存位置
* referer 在HTTP请求中包含一个"referer"头的字符串
*/
function vcurl($url,$post='',$cookie='',$cookiejar='',$referer=''){
$tmpInfo='';
$cookiepath=getcwd().'./'.$cookiejar;
$curl=curl_init();
curl_setopt($curl,CURLOPT_URL,$url);
curl_setopt($curl,CURLOPT_USERAGENT,$_SERVER['HTTP_USER_AGENT']);
if($referer){
curl_setopt($curl,CURLOPT_REFERER,$referer);
}else{
curl_setopt($curl,CURLOPT_AUTOREFERER,1);
}
if($post){
curl_setopt($curl,CURLOPT_POST,1);
curl_setopt($curl,CURLOPT_POSTFIELDS,$post);
}
if($cookie){
curl_setopt($curl,CURLOPT_COOKIE,$cookie);
}
if($cookiejar){
curl_setopt($curl,CURLOPT_COOKIEJAR,$cookiepath);
curl_setopt($curl,CURLOPT_COOKIEFILE,$cookiepath);
}
curl_setopt($curl,CURLOPT_TIMEOUT,100);
curl_setopt($curl,CURLOPT_HEADER,0);
curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);
$tmpInfo=curl_exec($curl);
if(curl_errno($curl)){
echo '<pre><b>错误:</b><br />'.curl_error($curl);
}
curl_close($curl);
return $tmpInfo;
}
?>
一个包装好的函数直接调用curl
<?php
/*
** php分别模拟发送GET与POST请求
**
** www.phpernote.com 2012-07-28 23:02:07
*/
function httpRequest($url,$method,$params=array()){
if(trim($url)==''||!in_array($method,array('get','post'))||!is_array($params)){
return false;
}
$curl=curl_init();
curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);
curl_setopt($curl,CURLOPT_HEADER,0 ) ;
switch($method){
case 'get':
$str='?';
foreach($params as $k=>$v){
$str.=$k.'='.$v.'&';
}
$str=substr($str,0,-1);
$url.=$str;//$url=$url.$str;
curl_setopt($curl,CURLOPT_URL,$url);
break;
case 'post':
curl_setopt($curl,CURLOPT_URL,$url);
curl_setopt($curl,CURLOPT_POST,1 );
curl_setopt($curl,CURLOPT_POSTFIELDS,$params);
break;
default:
$result='';
break;
}
if(isset($result)){
$result=curl_exec($curl);
}
curl_close($curl);
return $result;
}
?>