A股上市公司传智教育(股票代码 003032)旗下技术交流社区北京昌平校区

 找回密码
 加入黑马

QQ登录

只需一步,快速开始

© 刘云东 中级黑马   /  2013-10-15 09:42  /  4036 人查看  /  6 人回复  /   0 人收藏 转载请遵从CC协议 禁止商业使用本文

本帖最后由 刘云东 于 2013-10-16 00:13 编辑

如题,还望大神说明用到的类,以及你有几种方法实现。不胜感激。

评分

参与人数 1技术分 +1 收起 理由
haxyek + 1

查看全部评分

6 个回复

倒序浏览
网页自动登录和提交POST信息的核心就是分析网页的源代码(HTML),在C#中,可以用来提取网页HTML的组件比较多,常用的用WebBrowser、WebClient、HttpWebRequest这三个。

以下就分别用这三种方法来实现:
1、WebBrowser是个"迷你"浏览器,其特点是Post时不用关心Cookie、内置JS等问题
WebBrowser是VS2005新提供的组件(其实就是封装了IE接口),实现POST功能一般在webBrowser的DocumentCompleted中分析HtmlDocument 来实现,代码如下:
  1. HtmlElement ClickBtn =null;
  2.            if (e.Url.ToString().ToLower().IndexOf("http://hi.baidu.com/srxljl") > 0)   //登陆页面
  3.             {
  4.                 HtmlDocument doc = webBrowser1.Document;
  5.                 for (int i = 0; i < doc.All.Count ; i++)
  6.                 {
  7.                     if (doc.All[i].TagName.ToUpper().Equals("INPUT"))
  8.                     {
  9.                         switch (doc.All[i].Name)
  10.                         {
  11.                             case "userCtl":
  12.                                 doc.All[i].InnerText = "user01";
  13.                                 break;
  14.                             case "passCt1":
  15.                                 doc.All[i].InnerText = "mypass";
  16.                                 break;
  17.                             case "B1":
  18.                                 ClickBtn = doc.All[i]; //提交按钮
  19.                                 break;
  20.                         }
  21.                     }
  22.                 }
  23.                 ClickBtn.InvokeMember("Click");   //执行按扭操作
  24.             }
复制代码
2、WebClient封装了HTTP的一些类,操作简单,相较于webBrowser,特点是可以自设代理,缺点是对COOKIE的控制
WebClient的运行全在后台,并且提供了异步操作的能力,这样很方便并发多个任务,然后等待结果的返回,再逐个处理。多任务异步调用的代码如下:
  1. private void StartLoop(int ProxyNum)
  2.         {
  3.            WebClient [] wcArray = new WebClient[ProxyNum]; //初始化
  4.              for (int idArray = 0; idArray< ProxyNum;idArray++)
  5.             {
  6.                  wcArray[idArray] = new WebClient();
  7.                 wcArray[idArray].OpenReadCompleted += new OpenReadCompletedEventHandler(Pic_OpenReadCompleted2);
  8.                 wcArray[idArray].UploadDataCompleted += new UploadDataCompletedEventHandler(Pic_UploadDataCompleted2);
  9.                 try
  10.                 {
  11.                   
  12.                     wcArray[idArray].Proxy = new WebProxy(proxy[1], port);
  13.                     wcArray[idArray].OpenReadAsync(new Uri("http://hi.baidu.com/srxljl")); //打开WEB;
  14.                     proxy = null;
  15.                 }
  16.                 catch
  17.                 {
  18.                 }
  19.             }
  20.         }

  21.         private void Pic_OpenReadCompleted2(object sender, OpenReadCompletedEventArgs e)
  22.         {
  23.                 if (e.Error == null)
  24.                 {
  25.                             string textData = new StreamReader(e.Result, Encoding.Default).ReadToEnd(); //取返回信息
  26.                              ..
  27.                               String cookie = ((WebClient)sender).ResponseHeaders["Set-Cookie"];
  28.                              ((WebClient)sender).Headers.Add("Content-Type", "application/x-www-form-urlencoded");
  29.                             ((WebClient)sender).Headers.Add("Accept-Language", "zh-cn");
  30.                             ((WebClient)sender).Headers.Add("Cookie", cookie);

  31.                             string postData = ""
  32.                             byte[] byteArray = Encoding.UTF8.GetBytes(postData); // 转化成二进制数组
  33.                            ((WebClient)sender).UploadDataAsync(new Uri("http://hi.baidu.com/srxljl"), "POST", byteArray);
  34.                 }
  35.          }

  36.         private void Pic_UploadDataCompleted2(object sender, UploadDataCompletedEventArgs e)
  37.         {
  38.                  if (e.Error == null)
  39.                 {
  40.                     string returnMessage = Encoding.Default.GetString(e.Result);
  41.                   
  42.                 }
  43.        }
复制代码
3、HttpWebRequest较为低层,能实现的功能较多,Cookie操作也很简单:
  1. private string PostWebRequest(string postUrl, string paramData, Encoding dataEncode)
  2.         {
  3.            string ret = string.Empty;
  4.             try
  5.             {
  6.                 byte[] byteArray = dataEncode.GetBytes(paramData); //转化
  7.                 HttpWebRequest webReq = (HttpWebRequest)WebRequest.Create(new Uri(postUrl));
  8.                 webReq.Method = "POST";
  9.                 webReq.ContentType = "application/x-www-form-urlencoded";

  10.                 webReq.ContentLength = byteArray.Length;
  11.                 Stream newStream = webReq.GetRequestStream();
  12.                 newStream.Write(byteArray, 0, byteArray.Length);//写入参数
  13.                 newStream.Close();
  14.                 HttpWebResponse response = (HttpWebResponse)webReq.GetResponse();
  15.                 StreamReader sr = new StreamReader(response.GetResponseStream(), Encoding.Default);
  16.                 ret = sr.ReadToEnd();
  17.                 sr.Close();
  18.                 response.Close();
  19.                 newStream.Close();
  20.             }
  21.             catch (Exception ex)
  22.             {
  23.                 MessageBox.Show(ex.Message);
  24.             }
  25.             return ret;
  26.         }
复制代码

评分

参与人数 1技术分 +1 收起 理由
haxyek + 1

查看全部评分

回复 使用道具 举报
常用的WebBrowser、WebClient、HttpWebRequest
回复 使用道具 举报
吴彤辉 发表于 2013-10-15 09:53
网页自动登录和提交POST信息的核心就是分析网页的源代码(HTML),在C#中,可以用来提取网页HTML的组件比较 ...

                newStream.Close();
                HttpWebResponse response = (HttpWebResponse)webReq.GetResponse();
                StreamReader sr = new StreamReader(response.GetResponseStream(), Encoding.Default);
                ret = sr.ReadToEnd();
                sr.Close();
                response.Close();
                newStream.Close();
回复一楼,你这代码是错的吧。下面的newSream.Close();应该是webReq.Abort();
上面的时候,已经关闭了流,下面不用关闭了,倒是应该终止webReq。

评分

参与人数 1技术分 +1 收起 理由
haxyek + 1

查看全部评分

回复 使用道具 举报
刘云东 发表于 2013-10-15 10:10
newStream.Close();
                HttpWebResponse response = (HttpWebResponse)web ...

:)楼主正解
回复 使用道具 举报

一个态度决定一切,复制答案,也要自己看看并学习,这样才能进步。{:3_64:}
回复 使用道具 举报
刘云东 发表于 2013-10-15 10:29
一个态度决定一切,复制答案,也要自己看看并学习,这样才能进步。 ...

一起加油:lol
回复 使用道具 举报
您需要登录后才可以回帖 登录 | 加入黑马