ASP.net(C#)从其他网站抓取内容并截取有用信息的实现代码
更新时间：2011年09月24日 20:06:17 作者：
ASP.net(C#)从其他网站抓取内容并截取有用信息的实现代码,需要的朋友可以参考下。
1. 需要引用的类库
using System.Net;
using System.IO;
using System.Text;
using System.Text.RegularExpressions;
2. 获取其他网站网页内容的关键代码
WebRequest request = WebRequest.Create("http://目标网址.com/");
WebResponse response = request.GetResponse();
StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));
//reader.ReadToEnd() 表示取得网页的源码
TextBox1.Text = reader.ReadToEnd();
3. 获取其他网站网页源码之后通过{正则表达式}帅选有用信息
MatchCollection TitleMatchs = Regex.Matches(reader.ReadToEnd(), @"发表评论</a></p></div><div class=""body"">([\s\S]*?)</div><div class=""share"">", RegexOptions.IgnoreCase | RegexOptions.Multiline);
foreach (Match NextMatch in TitleMatchs)
{
s += "<br>" + NextMatch.Groups[1].Value;
TextBox1.Text += "\n" + NextMatch.Groups[1].Value;
}
RegexOptions.IgnoreCase: 表示不区分大小写, 一般网站源码大小写不敏感所以取消之.
RegexOptions.Multiline: 表示对多行内容进行帅选.
4. 大功告成
不上图了! 影响不好! 见谅见谅
文中代码打包下载
复制代码 代码如下:
using System.Net;
using System.IO;
using System.Text;
using System.Text.RegularExpressions;
2. 获取其他网站网页内容的关键代码
复制代码 代码如下:
WebRequest request = WebRequest.Create("http://目标网址.com/");
WebResponse response = request.GetResponse();
StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));
//reader.ReadToEnd() 表示取得网页的源码
TextBox1.Text = reader.ReadToEnd();
3. 获取其他网站网页源码之后通过{正则表达式}帅选有用信息
复制代码 代码如下:
MatchCollection TitleMatchs = Regex.Matches(reader.ReadToEnd(), @"发表评论</a></p></div><div class=""body"">([\s\S]*?)</div><div class=""share"">", RegexOptions.IgnoreCase | RegexOptions.Multiline);
foreach (Match NextMatch in TitleMatchs)
{
s += "<br>" + NextMatch.Groups[1].Value;
TextBox1.Text += "\n" + NextMatch.Groups[1].Value;
}
RegexOptions.IgnoreCase: 表示不区分大小写, 一般网站源码大小写不敏感所以取消之.
RegexOptions.Multiline: 表示对多行内容进行帅选.
4. 大功告成
不上图了! 影响不好! 见谅见谅
文中代码打包下载
相关文章
这篇文章主要给大家介绍了关于如何给asp.net core写个简单的健康检查的相关资料，文中通过示例代码介绍的非常详细，对大家学习或者使用asp.net core具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧2019-05-05
asp.net Repeater 数据绑定代码2010-03-03
web.config配置 前后台文件等代码2009-01-01
这篇文章介绍了Asp.net core利用dynamic简化数据库访问的方法，文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-07-07
这篇文章主要给大家介绍了关于ASP.NET Core Mvc中空返回值的处理方法，文中通过示例代码介绍的非常详细，对大家学习或者使用ASP.NET Core Mvc具有一定的参考学习价值，需要的朋友们下面来一起看看吧2018-10-10
这篇文章介绍了ABP框架中的事件总线功能，文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-02-02
这篇文章介绍了Entity Framework中执行sql语句的方法，文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2022-03-03
有Access，SQL Server，Oracle，MySQL，IBM DB2 ，SyBase 等6种数据库的连接方法，有需要的朋友请往下看2013-03-03
ASP .NET调用javascript中Response.Write和ClientScript.RegisterSta
最近在用ASP .NET的code behind 调用javascript中发现Response.Write不能拿到form的值，而ClientScript.RegisterStartupScript可以。2010-12-12
这篇文章介绍了.net 6项目实现压缩发布的方式，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2021-12-12
最新评论