分享一个自己封装且一直在维护的依赖.net4.5的http异步组包工具类(支持get,post( 表单 ,json, 包含图片等文件的流提交) ,cookie管理,自动跳转,代理IP,https的支持,高并发的配置等等
1.)Nuget安装:
搜索 ConfigLab.Comp, 安装最新版即可.
2.)组包示例.
2.1)模拟post表单提交并包含普通参数和一个图片文件(基于HttpFileUploadAssisterAsync这个核心类).
private async Task<string> GetPostResultForFile_Async()
{
string sRspResult = "";
IWebProxy eWebProxy = this.getWebProxy();//代理IP的设置
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
dictHeader["Accept-Encoding"] = "gzip, deflate";
dictHeader["Accept-Language"] = "zh-CN,zh;q=0.9";
dictHeader["Upgrade-Insecure-Requests"] = "1";
dictHeader["Cache-Control"] = "max-age=0";
dictHeader["Origin"] = "null";
Dictionary<string, string> dictImg = new Dictionary<string, string>();//待和参数一起提交的文件信息, key=FullFileName, value=Post内容中的参数Name名的字典
if (this.tbxImgUrl.Text.IndexOf(":") > -1 && this.tbxImgName.Text.Trim().Length > 0)
{
dictImg[this.tbxImgUrl.Text] = this.tbxImgName.Text.Trim();
}
else
{
if (this.tbxImgName.Text.Trim().Length > 0)
{
dictImg[""] = this.tbxImgName.Text.Trim();
}
}
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
string sFile_ContentType = "image/jpeg";
ResponseResult result = new ResponseResult();
string sUrl = this.tbxUrl.Text.Trim();//输入的请求地址
string sPostData = this.tbxPostData.Text.Trim();//同步提交的文本参数 : u=1&a=2这种格式
string sAccess = "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3";
//异步模式
HttpFileUploadAssisterAsync htool = new HttpFileUploadAssisterAsync();//关键的类
Task<ResponseResult> tsk_rrs = htool.SendRequest(new RequestParamsWithFile()
{
URL = sUrl,
Method = "POST",
Timeout = 10,
PostData = sPostData,
DictFileName2PostName = dictImg,//可同时传递多个文件
WriteEnc = Encoding.UTF8,
ReaderEnc = GetEncoding(),
WithCookie = this.btnWithCookie.Checked,//是否自动维护cookie
DictRequestHeaderKeyValues = dictHeader,//自定义包头
Accept = sAccess,
UserAgent = sUserAgent,
KeepAlive = true,
EnableExpect100Continue = false,
File_ContentType = sFile_ContentType,//传输的文件类型
WebProxy = eWebProxy//代理IP
});
await tsk_rrs;
ResponseResult rrs_rspData = tsk_rrs.Result;
sRspResult = rrs_rspData.ResponseData;
return sRspResult;
}
2.2)模拟post表单提交并包含普通参数(基于HttpClientAssisterAsync这个核心类).
private async Task<string> GetPostResult_Async()
{
IWebProxy eProxy = this.getWebProxy();
HttpClientAssisterAsync htool = new HttpClientAssisterAsync();
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
dictHeader["Content-Type"] = "application/x-www-form-urlencoded";
dictHeader["Accept-Language"] = "zh-cn";
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
Task<ResponseResult> tsk_result = htool.SendRequest(new RequestParams() {
URL = this.tbxUrl.Text.Trim(),
Method = "POST",
Timeout = 30, //单位秒
PostData = this.tbxPostData.Text,//表单数据,u=1&p=2这种
WriteEnc = Encoding.UTF8,
ReaderEnc = GetEncoding(),
WithCookie = this.btnWithCookie.Checked,//是否自动管理cookie
DictRequestHeaderKeyValues = dictHeader, //自定义的包头信息
Accept = "*/*",
UserAgent = sUserAgent,
KeepAlive = false,
EnableP3P = false,
AllowRedrect=false,//是否允许自动跳转
EnableExpect100Continue=true,
WebProxy = eProxy //代理IP
});
await tsk_result;
ResponseResult result = tsk_result.Result;
return string.Format("optime={0}\r\nhttpstatucode={1}\r\nerror={2}\r\nresult={3}", DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), result.CurrHttpStatuCode, result.ExceptionMsg, result.ResponseData);
}
2.3)模拟post提交一个json数据并包含普通参数(基于HttpClientAssisterAsync这个核心类).
private async Task<string> getResultForPostJson_Async()
{
IWebProxy eProxy = this.getWebProxy();
HttpClientAssisterAsync htool = new HttpClientAssisterAsync();
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
dictHeader["Content-Type"] = "application/json;charset=UTF-8";//重点!!!!
dictHeader["Accept-Language"] = "zh-cn";
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
Task<ResponseResult> tsk_result = htool.SendRequest(new RequestParams()
{
URL = this.tbxUrl.Text.Trim(),
Method = "POST",
Timeout = 30,
PostData = this.tbxPostData.Text,//Json数据
WriteEnc = Encoding.UTF8,
ReaderEnc = GetEncoding(),
WithCookie = this.btnWithCookie.Checked,//自动管理cookie
DictRequestHeaderKeyValues = dictHeader,//自定义包头
Accept = "*/*",
UserAgent = sUserAgent,
KeepAlive = false,
EnableP3P = false,
AllowRedrect = false,
EnableExpect100Continue = true,
WebProxy = eProxy
});
await tsk_result;
ResponseResult result = tsk_result.Result;
string sResult = string.Format("optime={0}\r\nhttpstatucode={1}\r\nerrors={2}\r\nresult={3}", DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), result.CurrHttpStatuCode, result.ExceptionMsg, result.ResponseData);
return sResult;
}
2.4)模拟get提交一个数据并包含普通参数(基于HttpClientAssisterAsync这个核心类).
private async Task<string> GetGetResult_Async()
{
IWebProxy eProxy = this.getWebProxy();
HttpClientAssisterAsync htool = new HttpClientAssisterAsync();
Dictionary<string, string> dictHeader = new Dictionary<string, string>();
string sUserAgent = this.tbxUserAgent.Text.Trim();
if (!string.IsNullOrEmpty(this.tbx_Hedaer_Key.Text) && !string.IsNullOrEmpty(this.tbx_Hedaer_Value.Text))
{
dictHeader[this.tbx_Hedaer_Key.Text.Trim()] = this.tbx_Hedaer_Value.Text.Trim();
}
Encoding eEncode = this.GetEncoding();
dictHeader["Accept-Language"] = "zh-CN,zh;q=0.8";
dictHeader["Cache-Control"] = "max-age=0";
string sAccess = "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8";
Task<ResponseResult> tsk_rsp = htool.SendRequest(new RequestParams() {
URL=this.tbxUrl.Text,
Method="GET", //在这里设置Get
Timeout=30,
PostData= this.tbxPostData.Text,
WriteEnc=Encoding.Default,
ReaderEnc=eEncode,
WithCookie = this.btnWithCookie.Checked,
DictRequestHeaderKeyValues=dictHeader,
Accept=sAccess,
UserAgent=sUserAgent,
KeepAlive=false,
EnableP3P=false,
AllowRedrect=false,
WebProxy=eProxy
});
await tsk_rsp;
ResponseResult result = tsk_rsp.Result;
return string.Format("optime={0}\r\nhttpstatucode={1}\r\nerror={2}\r\nresult={3}", DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), result.CurrHttpStatuCode, result.ExceptionMsg, result.ResponseData);
}
分享一个自己封装且一直在维护的依赖.net4.5的http异步组包工具类(支持get,post( 表单 ,json, 包含图片等文件的流提交) ,cookie管理,自动跳转,代理IP,https的支持,高并发的配置等等的更多相关文章
- 什么是请求参数、表单参数、url参数、header参数、Cookie参数?一文讲懂
最近在工作中对 http 的请求参数解析有了进一步的认识,写个小短文记录一下. 回顾下自己的情况,大概就是:有点点网络及编程基础,只需要加深一点点对 HTTP 协议的理解就能弄明白了. 先分享一个小故 ...
- 黄聪:Pjax无刷新跳转页面实现,支持超链接与表单提交
什么是pjax? 当你点击一个站内的链接的时候,不是做页面跳转,而是只是站内页面刷新.这样的用户体验,比起整个页面都闪一下来说, 好很多. 其中有一个很重要的组成部分, 这些网站的ajax刷新是支持浏 ...
- Pjax无刷新跳转页面实现,支持超链接与表单提交
什么是pjax? 当你点击一个站内的链接的时候,不是做页面跳转,而是只是站内页面刷新.这样的用户体验,比起整个页面都闪一下来说, 好很多. 其中有一个很重要的组成部分, 这些网站的ajax刷新是支持浏 ...
- 自动爬取代理IP例子
import time import json import datetime import threading import requests from lxml import etree from ...
- 一个表单里,如果有<button>标签存在,它会自动提交表单
可以用button代替input type=”submit”吗? 在ie下,<button>标记恐怕还存在几个不大不小的问题. 在一个表单里,如果有一个以上"submit&quo ...
- 【C#】对异步请求处理程序IHttpAsyncHandler的理解和分享一个易用性封装
在asp.net项目中,添加一个[一般处理程序]来处理请求是很自然的事,这样会得到一个实现自IHttpHandler的类,然后只需在ProcessRequest方法中写上处理逻辑就行了.但是这样的一个 ...
- 项目经验分享——Java常用工具类集合 转
http://blog.csdn.net/xyw591238/article/details/51678525 写在前面 本文涉及的工具类部分是自己编写,另一部分是在项目里收集的.工具类涉及数 ...
- Python网络爬虫之cookie处理、验证码识别、代理ip、基于线程池的数据爬去
本文概要 session处理cookie proxies参数设置请求代理ip 基于线程池的数据爬取 引入 有些时候,我们在使用爬虫程序去爬取一些用户相关信息的数据(爬取张三“人人网”个人主页数据)时, ...
- Go/Python/Erlang编程语言对比分析及示例 基于RabbitMQ.Client组件实现RabbitMQ可复用的 ConnectionPool(连接池) 封装一个基于NLog+NLog.Mongo的日志记录工具类LogUtil 分享基于MemoryCache(内存缓存)的缓存工具类,C# B/S 、C/S项目均可以使用!
Go/Python/Erlang编程语言对比分析及示例 本文主要是介绍Go,从语言对比分析的角度切入.之所以选择与Python.Erlang对比,是因为做为高级语言,它们语言特性上有较大的相似性, ...
- Charles 抓包发现自动跳转为https 问题梳理
今天遇到个有点意思的问题.特此记录. 业务场景: 做了一个页面,但是对外是挂载在京东主站上.如:www.jd.com/yifu/123456.html. 现场情况: 在本地/测试环境/预发环境中,每次 ...
随机推荐
- 空 Maven项目转成 Web项目 & SpringMVC调用其他 Module中的方法可能会遇到的小问题
SpringMVC调用其他 模块内的方法的 坑 下次别在阴沟里翻船啦.. 一共花费 4个小时,解决项目中的这个问题 OMG 1. 首先是 Maven新建工程 一般使用 Maven都是先创建 空工程 当 ...
- Sqoop 之 安装
Sqoop 之 安装 前言 安装 Sqoop 的前提是已经具备 Java 和 Hadoop 的环境. 一.下载并解压 1) 下载地址:http://mirrors.hust.edu.cn/apache ...
- 【强烈推荐】用glob库的一行命令显著加速批量读取处理数据
在我们气象领域,对数据进行批处理随处可见,尤其是在处理模式数据的时候.为了能让这个过程加速,很多大佬们提出了不同的方法,比如使用numba库进行计算.使用dask库进行并行等等,都是非常好的加速手段. ...
- capability参数配置
前言 本文为在霍格沃兹测试开发学社的学习经历分享 简介 功能:配置 Appium 会话,告诉 Appium 服务器需要自动化的平台的应用程序 形式:键值对的集合,键对应设置的名称,值对应设置的值 主要 ...
- HTTP缺点有哪些,如何解决
前言 大家好,我是蜗牛,在上一篇中,我们介绍了不同版本的HTTP区别和发展背景,这篇文章我们来聊聊HTTP的缺点,HTTP缺点大致总结有以下三点: 通信使用明文(不加密),内容可能会被窃听. 不验证通 ...
- Linux基础_3_文件/文件夹权限管理
注:权限遮罩码: 控制用户创建文件和文件夹的默认安全设置,文件默认权限为666-umask的值,文件夹默认权限为777-umask的值. root默认0022,普通用户默认0002. 文件的默认权限不 ...
- Shell揭秘——程序退出状态码
程序退出状态码 前言 在本篇文章当中主要给大家介绍一个shell的小知识--状态码.这是当我们的程序退出的时候,子进程会将自己程序的退出码传递给父进程,有时候我们可以利用这一操作做一些进程退出之后的事 ...
- 文本转语音TTS(文本阅读和视频配音制作)MP3
DL-TTS 通过AI驱动引擎可将文本转化为逼真的语音,它可以:(1)生成逼真的合成语音实现与人声的语调和情感匹配的流畅.发音自然的文本转语音.(2)细化的文本转语音控制支持多种语言,并可调整语速.语 ...
- Bob 的生存概率问题
Bob 的生存概率问题 作者:Grey 原文地址: 博客园:Bob 的生存概率问题 CSDN:Bob 的生存概率问题 题目描述 给定五个参数 n , m , i , j , k,表示在一个 n*m 的 ...
- 高性能MySQL(第4版) 第一章 MySQL架构 读书笔记
这本书去年11月出的,今年中文版也出了,并且直接上了微信读书,之后有空就读一读,分享下读书笔记~ 原文内容比较充实,建议有时间可以读一下原文. 第一章主要是个概览. MySQL的逻辑架构 默认情况下, ...