至顶网›软件频道 ›应用软件›获取远程网页的内容之二（downmoon原创）

获取远程网页的内容之二（downmoon原创）

扫一扫
分享文章到微信
扫一扫
关注官方公众号
至顶头条

获取远程网页的内容之二（downmoon原创），主要针对AD环境！·　目前用于vs2003! 很快就会有vs2005的版本！　呵呵！

作者：邀月来源： CSDN 2008年3月29日

关键字：内容网页获取 Web开发软件

本机直接上网时，请参看
获取远程网页的内容之一（downmoon原创）

本文仅针AD下代理上网的情况：
代码如下：
1、定义变量：

定义变量

方法：
获取指定远程网页内容

/// <summary>

/// 获取指定远程网页内容

/// </summary>

/// <param name="strUrl">所要查找的远程网页地址</param>

/// <returns></returns>

//[WebMethod(Description = "获取指定远程网页内容。")]

public string getPageContent(string strUrl)

{

string strResult = "";

this.CurrentUrl = strUrl;

if(this.CurrentUrl.ToLower().StartsWith("http://")==false)

this.CurrentUrl = "http://"+this.CurrentUrl;

try

{

contentBytes = GetHtmlByte(CurrentUrl);

}

catch(Exception err)

{

strResult = "请求错误：" + err.Message;

}

if(contentBytes==null)

{

throw new Exception("没有获得返回值");

}

strResult = getStringFromByteArray(contentBytes,Encoding.UTF8);

return strResult;

}

获取指定远程网页元素字节数组::

获取指定远程网页元素字节数组#region 获取指定远程网页元素字节数组

/// <summary>

/// 获取指定远程网页元素字节数组

/// </summary>

/// <param name="strUrl">所要查找的远程网页地址</param>

/// <returns></returns>

private byte[] GetHtmlByte(string strUrl)

{

string strPara=(strUrl.IndexOf("?")>=0?strUrl.Substring(strUrl.IndexOf("?")+1):"");

System.Text.Encoding encoding = new UTF8Encoding();

byte[] byte1 = encoding.GetBytes(strPara);

byte[] byteReturn = new byte[10000000];

if(strUrl.Trim().ToLower().StartsWith("http://")==false)

{

strUrl = "http://"+strUrl;

}

HttpWebRequest myHttpWebRequest = (HttpWebRequest)WebRequest.Create(strUrl);

myHttpWebRequest.AllowAutoRedirect = true;

myHttpWebRequest.KeepAlive = true;

myHttpWebRequest.UserAgent = "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0; .NET CLR 1.1.4322)";

System.Net .WebProxy proxy = new WebProxy(strFireWallIP+":"+strFireWallPort,true);

//proxy=(WebProxy)System.Net.GlobalProxySelection.Select;

System.Net.NetworkCredential myCredential = new NetworkCredential(strUID,strPWD,strDomain);

proxy.Credentials =myCredential;

myHttpWebRequest.Proxy = proxy;

HttpWebResponse myHttpWebResponse = (HttpWebResponse)myHttpWebRequest.GetResponse();

byte[] bRead = new byte[1024];

int lngCount = 1;

int totalLen = 0;

Stream recWeb = myHttpWebResponse.GetResponseStream();

lngCount = recWeb.Read(bRead,0,1024);

while(lngCount>0)

{

Array.Copy(bRead,0,byteReturn,totalLen,lngCount);

totalLen += lngCount;

lngCount = recWeb.Read(bRead,0,1024);

}

recWeb.Close();

byte[] byteGets = new byte[totalLen];

Array.Copy(byteReturn,0,byteGets,0,totalLen);

byteReturn = null;

bRead = null;

return byteGets;

}

#endregion

转换指定字节数组为字符串::

转换指定字节数组为字符串

借用这个，写了个抽取中国天气网预报的服务！很爽！

获取远程网页的内容之二（downmoon原创）

业界热点: