社区
C#
帖子详情
如何自动采集网页上的数据
RuntimeError
2010-06-15 10:35:02
我在网上搜索说用.NET可以实现类似于采集软件的功能。
比如我想把网上每一期彩票的开奖号码采集下来。某个某个网站上有一个下拉列表,在里面选择期数,然后点击右边的查询,就显示该期的中奖号码。我想把所有的号码都采集下来。这用用C#或者VB.NET是怎么实现的?
...全文
1125
7
打赏
收藏
如何自动采集网页上的数据
我在网上搜索说用.NET可以实现类似于采集软件的功能。 比如我想把网上每一期彩票的开奖号码采集下来。某个某个网站上有一个下拉列表,在里面选择期数,然后点击右边的查询,就显示该期的中奖号码。我想把所有的号码都采集下来。这用用C#或者VB.NET是怎么实现的?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
7 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
blotusland
2011-09-17
打赏
举报
回复
顶下,同求
RuntimeError
2010-06-16
打赏
举报
回复
嗯,很好,谢谢~
hjx398
2010-06-16
打赏
举报
回复
学习了
hhao12
2010-06-16
打赏
举报
回复
顶下。
sxldfang
2010-06-15
打赏
举报
回复
不知对你是否有帮助
:
http://blog.csdn.net/sxldfang/archive/2010/04/12/5478078.aspx
wuyq11
2010-06-15
打赏
举报
回复
HttpWebrequest抓取网页内容,再用正则根据html格式获取数据
System.Net.HttpWebRequest request = (System.Net.HttpWebRequest)System.Net.WebRequest.Create(url);
request.UserAgent = "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727; .NET CLR 3.0.04506.648; .NET CLR 3.5.21022)";
System.Net.WebResponse response = request.GetResponse();
System.IO.Stream resStream = response.GetResponseStream();
System.IO.StreamReader sr = new System.IO.StreamReader(resStream, encoding);
string html = (sr.ReadToEnd());
resStream.Close();
http://topic.csdn.net/u/20090819/10/8b3d325c-5c9e-4e17-b344-a26f13e20aba.html?seed=2057216004&r=59199023
自动
采集
网页
数据
,8个实用技巧!
在这个背景下,
网页
数据
自动
采集
技术应运而生。本文将从8个方面详细介绍
网页
数据
自动
采集
技术,帮助读者更好地掌握这一技术。一、什么是
网页
数据
自动
采集
?
网页
数据
自动
采集
是指通过计算机程序,在不需要人工干预的...
数据
采集
:如何
自动
化
采集
数据
?
上一节中我们讲了如何对用户画像建模,而建模之前我们都要进行
数据
采集
。
数据
采集
是
数据
挖掘的基础,没有
数据
,挖掘也没有意义。很多时候,我们拥有多少
数据
源,多少
数据
量,以及
数据
质量如何,将决定我们挖掘产出的...
如何
采集
网页
数据
采集
网页
数据
是从互联网上获取信息的过程,通常通过
自动
化或手动方式实现。目的和法规合规性确保明确了解您
采集
数据
的目的。遵守相关法规,包括版权、隐私和
数据
保护法律。尊重目标网站的服务条款,以确保合法合规的...
08 |
数据
采集
:如何
自动
化
采集
数据
?
上一节中我们讲了如何对用户画像建模,而建模之前我们都要进行
数据
采集
。
数据
采集
是
数据
挖掘的基础,没有
数据
,挖掘也没有意义。很多时候,我们拥有多少
数据
源,多少
数据
量,以及
数据
质量如何,将决定我们挖掘产出的...
网页
信息
采集
-
网页
数据
采集
方法
而K一般优化不优化都不重要了,随着谷歌算法的不断完善已经不需要keywords tag的标记来了解
网页
的总体内容了。解决学术研究或生活,工作等方面的
数据
信息需求,彻底解决没有素材的问题,同时也告别了手动复制粘贴的...
C#
110,571
社区成员
642,565
社区内容
发帖
与我相关
我的任务
C#
.NET技术 C#
复制链接
扫一扫
分享
社区描述
.NET技术 C#
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
让您成为最强悍的C#开发者
试试用AI创作助手写篇文章吧
+ 用AI写文章