一个httpwebrequest异步下载的例子

     最近经常要用到模拟网页的登录,网页的抓取。一开始都是用同步的方法获取,同步在请求量比较小的情况下还可以接受。但是比如我一下子请求上百个,上千个页面就显得力不从心了。昨天终于狠下心来研究了一下异步的获取方式。虽说没有同步的方法简单,不过效率上真的提高了很多。现在记下来,以便以后查阅吧。

代码
namespace 异步调用方法
{
class Program
{

static void Main(string[] args)
{
for (int i = 0; i < 1111; i++)
{
HttpWebRequest request
= (HttpWebRequest)WebRequest.Create("http://www.cnblogs.com/qianlifeng/");
request.BeginGetResponse(
new AsyncCallback(OnResponse), request);
Console.WriteLine(
"请求" + i + "完成");
}
Console.Read();
}

static void OnResponse(IAsyncResult ar)
{
HttpWebRequest request
= (HttpWebRequest)ar.AsyncState;
HttpWebResponse response
= (HttpWebResponse)request.EndGetResponse(ar);
Stream stream
= response.GetResponseStream();
StreamReader sr
= new StreamReader(stream, Encoding.UTF8);
Console.WriteLine( sr.ReadToEnd());
}
}
}
原文地址:https://www.cnblogs.com/qianlifeng/p/1718343.html