(转) c/c++调用libcurl库发送http请求的两种基本用法
libcurl主要提供了两种发送http请求的方式,分别是Easy interface方式和multi interface方式,前者是采用阻塞的方式发送单条数据,后者采用组合的方式可以一次性发送多条数据
一、Easy interface
libcurl的easy interface是最基本的用法,简要流程为:
1、在主线程中调用curl_global_init(CURL_GLOBAL_ALL)初始化
2、调用curl_easy_init获取一个句柄;
3、调用curl_easy_setopt函数设置此次传输的一些基本参数,如url地址、http头、cookie信息、发送超时时间等,其中,CURLOPT_URL是必设的选项;
4、设置完成后,调用curl_easy_perform函数发送数据;
5、数据发送完毕后,调用curl_easy_cleanup清空句柄;
6、调用curl_global_cleanup()做清理工作。
实现代码:
- bool send_easy_hanler(char* post_url, req_t* req)
- {
- //easy handler的句柄
- CURL* curl = NULL;
- CURLcode res = CURLE_OK;
- //HTTP报文头
- struct curl_slist* headers = NULL;
- char tmp_str[256] = { 0 };
- //构建HTTP报文头
- snprintf(tmp_str, sizeof(tmp_str), "User-Agent: %s", req->user_agent_);
- headers = curl_slist_append(headers, tmp_str);
- snprintf(tmp_str, sizeof(tmp_str), "Accept-Language: %s", req->language_);
- headers = curl_slist_append(headers, tmp_str);
- snprintf(tmp_str, sizeof(tmp_str), "X-FORWORDED-FOR: %s", req->ip_.c_str());
- headers = curl_slist_append(headers, tmp_str);
- /*这个函数只能用一次,如果这个函数在curl_easy_init函数调用时还没调用,
- 它讲由libcurl库自动调用,所以多线程下最好在主线程中调用一次该函数以防止在线程
- 中curl_easy_init时多次调用*/
- curl_global_init(CURL_GLOBAL_ALL);
- //初始化easy handler句柄
- curl = curl_easy_init();
- if (curl) {
- //设置post请求的url地址
- curl_easy_setopt(curl, CURLOPT_URL, post_url);
- //设置HTTP头
- curl_easy_setopt(curl, CURLOPT_HTTPHEADER, headers);
- //设置发送超时时间
- curl_easy_setopt(curl, CURLOPT_TIMEOUT, 1);
- //执行单条请求
- res = curl_easy_perform(curl);
- if (res != CURLE_OK) {
- //curl_easy_strerror进行出错打印
- LOG(WARNING) << "curl_easy_perform() failed:" << curl_easy_strerror(res);
- }
- curl_slist_free_all(headers);
- //这个调用用来结束一个会话.与curl_easy_init配合着用
- curl_easy_cleanup(curl);
- //在结束libcurl使用的时候,用来对curl_global_init做的工作清理。类似于close的函数
- curl_global_cleanup();
- }
二、multi interface
multi interface提供了多种easy interface没有的特性,主要是
1、提供了pull接口,使用libcurl的程序能够决定何时何处调用libcurl来get/send数据
2、在同一线程中实现多条数据同时发送,且并没有使得程序更加复杂
3、程序可以在自己的文件描述符和curl的文件描述符中同时等待执行
4、提供基于事件的处理、扩大传输规模到数千个并发连接
multi接口的使用会比easy 接口稍微复杂点,毕竟multi接口是依赖easy接口的,简要流程为:
1、使用curl_multi_init创建一个multi handle,这个handler会在后续的curl_multi_*函数中使用multi handler可以同时并发传输多条数据,每一条单独的数据是由一个easy handler创建;
2、需要事先将需要传输的所有easyhandler创建好,并使用curl_easy_setopt设置各自属性,接着调用curl_multi_add_handle函数逐个添加到multi handle中;
3、调用curl_multi_perform进程数据传输,传输过程中将会调用每一个easy
handler设置的回调函数或者配置内容,程序通过函数curl_multi_fdset、select()提取信息来判断何时进行数据传输等操作,函数curl_multi_perform的一个输入参数储存仍在进行传输的数据量,通过读取该变量,可以判断multi
handles是否运行完毕,传输完毕不代表传输成功,可能有一个或多个传输失败;
4、调用函数curl_multi_info_read可以获取当前或之前传输的信息,重复调用该函数直到该消息队列为空,每一条返回信息都包含对应的easl handler的传输情况;
5、当一个easy handler传输完成,此easy handler仍然仍然停留在multi stack中,需要调用curl_multi_remove_handle将其从multi stack中移除,然后调用curl_easy_cleanup将其关闭;
6、当multi stack中的所有传输都完成时,调用 curl_multi_cleanup关闭multi handler,需要注意的是事先要调用curl_easy_cleanup逐个清空所有easy handler。
源码:
- #include <errno.h>
- #include <stdlib.h>
- #include <string.h>
- #include <curl/multi.h>
- static const char *urls[] = {
- "http://www.microsoft.com",
- "http://www.opensource.org",
- "http://www.google.com",
- "http://www.yahoo.com",
- "http://www.ibm.com",
- "http://www.mysql.com",
- "http://www.oracle.com",
- "http://www.ripe.net",
- };
- #define MAX 8 /* number of simultaneous transfers */
- #define CNT sizeof(urls)/sizeof(char*) /* total number of transfers to do */
- /*此函数读取libcurl发送数据后的返回信息,如果不设置此函数,
- 那么返回值将会输出到控制台,影响程序性能*/
- static size_t cb(char *d, size_t n, size_t l, void *p)
- {
- /* take care of the data here, ignored in this example */
- (void)d;
- (void)p;
- return n*l;
- }
- //设置单个easy handler的属性添加单个easy handler到multi handler中,
- static void init(CURLM *cm, int i)
- {
- CURL *eh = curl_easy_init();
- curl_easy_setopt(eh, CURLOPT_WRITEFUNCTION, cb);
- curl_easy_setopt(eh, CURLOPT_HEADER, 0L);
- curl_easy_setopt(eh, CURLOPT_URL, urls[i]);
- curl_easy_setopt(eh, CURLOPT_PRIVATE, urls[i]);
- curl_easy_setopt(eh, CURLOPT_VERBOSE, 0L);
- //添加easy handler 到multi handler中
- curl_multi_add_handle(cm, eh);
- }
- int main(void)
- {
- CURLM *cm;
- CURLMsg *msg;
- long curl_timeo;
- unsigned int C=0;
- int max_fd, msgs_left, still_running = -1;//still_running判断multi handler是否传输完毕
- fd_set fd_read, fd_write, fd_except;
- struct timeval T;
- curl_global_init(CURL_GLOBAL_ALL);
- cm = curl_multi_init();
- //现在multi handler的最大连接数
- curl_multi_setopt(cm, CURLMOPT_MAXCONNECTS, (long)MAX);
- for(C = 0; C < MAX; ++C) {
- init(cm, C);
- }
- do{
- curl_multi_perform(cm, &still_running);
- if(still_running) {
- FD_ZERO(&fd_read);
- FD_ZERO(&fd_write);
- FD_ZERO(&fd_except);
- //获取multi curl需要监听的文件描述符集合 fd_set
- if(!curl_multi_fdset(cm, &fd_read, &fd_write, &fd_except, &max_fd)) {
- fprintf(stderr, "E: curl_multi_fdset\n");
- return EXIT_FAILURE;
- }
- if(!curl_multi_timeout(cm, &curl_timeo)) {
- fprintf(stderr, "E: curl_multi_timeout\n");
- return EXIT_FAILURE;
- }
- if(curl_timeo == -1)
- curl_timeo = 100;
- //如果max_fd返回-1,休眠一段时间后继续执行curl_multi_perform
- if(max_fd == -1) {
- sleep((unsigned int)curl_timeo / 1000);
- }
- else {
- T.tv_sec = curl_timeo/1000;
- T.tv_usec = (curl_timeo%1000)*1000;
- /* 执行监听,当文件描述符状态发生改变的时候返回
- * 返回0,程序调用curl_multi_perform通知curl执行相应操作
- * 返回-1,表示select错误
- */
- if(0 > select(max_fd+1, &fd_read, &fd_write, &fd_except, &T)) {
- fprintf(stderr, "E: select(%i,,,,%li): %i: %s\n",
- max_fd+1, curl_timeo, errno, strerror(errno));
- return EXIT_FAILURE;
- }
- }
- }
- while((msg = curl_multi_info_read(cm, &msgs_left))) {
- if(msg->msg == CURLMSG_DONE) {
- char *url;
- CURL *e = msg->easy_handle;
- curl_easy_getinfo(msg->easy_handle, CURLINFO_PRIVATE, &url);
- fprintf(stderr, "R: %d - %s <%s>\n",
- msg->data.result, curl_easy_strerror(msg->data.result), url);
- /*当一个easy handler传输完成,此easy handler仍然仍然停留在multi stack中,
- 调用curl_multi_remove_handle将其从multi stack中移除,然后调用curl_easy_cleanup将其关闭*/
- curl_multi_remove_handle(cm, e);
- curl_easy_cleanup(e);
- }
- else {
- fprintf(stderr, "E: CURLMsg (%d)\n", msg->msg);
- }
- }
- }while(still_running);
- //当multi stack中的所有传输都完成时,调用 curl_multi_cleanup关闭multi handler
- curl_multi_cleanup(cm);
- curl_global_cleanup();
- return EXIT_SUCCESS;
- }
(转) c/c++调用libcurl库发送http请求的两种基本用法的更多相关文章
- 安卓中使用OkHttp发送数据请求的两种方式(同、异步的GET、POST) 示例-- Android基础
1.首先看一下最终效果的截图,看看是不是你想要的,这个年代大家都很忙,开门见山很重要! 简要说下,点击不同按钮可以实现通过不同的方式发送OkHttp请求,并返回数据,这里请求的是网页,所以返回的都是些 ...
- C/C++使用libcurl库发送http请求(get和post可以用于请求html信息,也可以请求xml和json等串)
C++要实现http网络连接,需要借助第三方库,libcurl使用起来还是很方便的 环境:win32 + vs2015 如果要在Linux下使用,基本同理 1,下载编译libcurl 下载curl源码 ...
- .Net Core下发送WebRequest请求的两种方式
1.使用RestSharp.NetCore 2.使用WebApi请求方式
- php发送http请求的两种常用方法
第一种:使用CURL,直接上代码,开箱即用: <?php // return file_get_contents("http://thinkphp.com/index/index/cr ...
- 『居善地』接口测试 — 5、使用Requests库发送POST请求
目录 1.请求正文是application/x-www-form-urlencoded 2.请求正文是raw (1)json格式文本(application/json) (2)xml格式文本(text ...
- PHP发送HTTP请求的几种方式
转发:https://blog.tanteng.me/2017/07/php-curl-guzzlehttp/ 1)PHP开发中我们常用CURL 方式封装 HTTP请求,什么是CURL? CURL 是 ...
- php发送post请求的三种方法示例
本文分享下php发送post请求的三种方法与示例代码,分别使用curl.file_get_content.fsocket来实现post提交数据,大家做个参考. php发送post请求的三种方法,分别使 ...
- C#中Post请求的两种方式发送参数链和Body的
POST请求 有两种方式 一种是组装key=value这种参数对的方式 一种是直接把一个字符串发送过去 作为body的方式 我们在postman中可以看到 sfdsafd sdfsdfds publi ...
- 转载]PhpCms V9调用指定栏目子栏目文章的两种方法
PhpCms V9调用指定栏目子栏目文章的两种方法 第一种.直接写子栏目id ,用cat in {pc:get sql="SELECT * from v9_news where status ...
随机推荐
- Error 20002 (severity 9):Adaptive Server connection failed
环境: Ubuntu12.10_x64 问题: 用tsql访问SQL Server >> tsql -H U sa Error (severity ): Adaptive Server c ...
- STL sort
STL的sort()算法,数据量大时采用Quick Sort,分段递归排序,一旦分段后的数据量小于某个门槛,为避免Quick Sort的递归调用带来过大的额外负荷,就改用Insertion Sort. ...
- Java复习——网络编程
Java从最开始就是支持网络编程的,也正是网络使Java得到发展繁荣.在这里我记录一下如何使用Java进行网络编程,什么是Socket以及Java实现TCP,UDP的编程模型. InetAddress ...
- html2pdf 中文支持问题
系统用的是HTML2PDF V4.0.3 版本 百度后 http://blog.sina.com.cn/s/blog_6b0ce0310101fdv6.html 发现中文支持不好 还是有乱码问题 解决 ...
- 新版Eclipse使用遇到的问题总结
1.SDK下载很慢. 配置SDK代理,速度像飞一样.建议先把20-24下完,不然后面遇到很多问题. 2.support-v7的问题 例如res\values\styles.xml:4: error: ...
- Spring实战之切面编程
如果要重用通用功能的话,最常见的面向对象技术是继承(inheritance)或委托(delegation).但是,如果在整个应用中都使用相同的基类,继承往往会导致一个脆弱的对象体系:而使用委托可能需要 ...
- “C# 未在本地计算机上注册microsoft.Jet.OLEDB.12.0”的解决方案
在进行Access数据库进行操作时,连接字符串为: OleDbConnection cn = new OleDbConnection("Provider=Microsoft.Jet.OLED ...
- DataMatrix二维条码源码分析检测识别图像位置
发布时间:2014-10-31 DataMatrix的代码结构和QR码基本相同: 其中Detector的功能还是从原始图像中找出符号码的部分,并且进行透视转换纠正扭曲. 其解码流程与QR码差不多,关键 ...
- 4.redis 键
转自:http://www.runoob.com/redis/redis-tutorial.html Redis 键(key) Redis 键命令用于管理 redis 的键. 语法 Redis 键命令 ...
- 关于 Apache Shiro 详解
1.1 简介 Apache Shiro是Java的一个安全框架.目前,使用Apache Shiro的人越来越多,因为它相当简单,对比Spring Security,可能没有Spring Securi ...