• 设为首页
  • 点击收藏
  • 手机版
    手机扫一扫访问
    迪恩网络手机版
  • 关注官方公众号
    微信扫一扫关注
    公众号
登陆 注册

[转]C#(ASP.net)从其他网站抓取内容并截取有用信息

原作者: [db:作者] 来自: [db:来源] 收藏 邀请

本文转自：http://www.cnblogs.com/henw/archive/2011/09/23/2186387.html

1. 需要引用的类库

?
1
2
3
4
using System.Net;
using System.IO;
using System.Text;
using System.Text.RegularExpressions;

 

2. 获取其他网站网页内容的关键代码

?
1
2
3
4
5
WebRequest request = WebRequest.Create("http://目标网址.com/");
WebResponse response = request.GetResponse();
StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));
//reader.ReadToEnd() 表示取得网页的源码
TextBox1.Text = reader.ReadToEnd();

 

3. 获取其他网站网页源码之后通过{正则表达式}帅选有用信息

 

?
1
2
3
4
5
6
MatchCollection TitleMatchs = Regex.Matches(reader.ReadToEnd(), @"发表评论</a></p></div><div class=""body"">([\s\S]*?)</div><div class=""share"">", RegexOptions.IgnoreCase | RegexOptions.Multiline);
foreach (Match NextMatch in TitleMatchs)
{
    s += "<br>" + NextMatch.Groups[1].Value;
    TextBox1.Text += "\n" + NextMatch.Groups[1].Value;
}

RegexOptions.IgnoreCase: 表示不区分大小写, 一般网站源码大小写不敏感所以取消之.

 

RegexOptions.Multiline: 表示对多行内容进行帅选.

4. 大功告成

不上图了! 影响不好! 见谅见谅

 

欢迎大家一起讨论!

示例源码下载

1. 需要引用的类库

?
1
2
3
4
using System.Net;
using System.IO;
using System.Text;
using System.Text.RegularExpressions;

 

2. 获取其他网站网页内容的关键代码

?
1
2
3
4
5
WebRequest request = WebRequest.Create("http://目标网址.com/");
WebResponse response = request.GetResponse();
StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));
//reader.ReadToEnd() 表示取得网页的源码
TextBox1.Text = reader.ReadToEnd();

 

3. 获取其他网站网页源码之后通过{正则表达式}帅选有用信息

 

?
1
2
3
4
5
6
MatchCollection TitleMatchs = Regex.Matches(reader.ReadToEnd(), @"发表评论</a></p></div><div class=""body"">([\s\S]*?)</div><div class=""share"">", RegexOptions.IgnoreCase | RegexOptions.Multiline);
foreach (Match NextMatch in TitleMatchs)
{
    s += "<br>" + NextMatch.Groups[1].Value;
    TextBox1.Text += "\n" + NextMatch.Groups[1].Value;
}

RegexOptions.IgnoreCase: 表示不区分大小写, 一般网站源码大小写不敏感所以取消之.

 

RegexOptions.Multiline: 表示对多行内容进行帅选.

4. 大功告成

不上图了! 影响不好! 见谅见谅

 

欢迎大家一起讨论!

示例源码下载

鲜花
握手
雷人
路过
鸡蛋
该文章已有0人参与评论

请发表评论

全部评论

专题导读
More+
上一篇：
C#基础总结发布时间：2022-07-10
下一篇：
C#获取oracle存储过程输出参数值发布时间：2022-07-10
热门推荐
More+
热门话题
More+
阅读排行榜

扫描微信二维码

查看手机版网站

随时了解更新最新资讯

139-2527-9053

在线客服（服务时间 9:00～18:00）

在线QQ客服
地址：深圳市南山区西丽大学城创智工业园
电邮：jeky_zhao#qq.com
移动电话：139-2527-9053

Powered by 互联科技 X3.4© 2001-2213 极客世界.|Sitemap