多任务多线程带进度条采集,支持Cookie采集 支持人工登陆采集
这是一款用 C# 编写网页采集器。能够有效地从互联网上抓取、处理、分析,挖掘用户感兴趣的数据。小说、新闻、文章、图片等都能有效采集。本程序采用SQLite存储数据,实现多线程断点采集。
这是一款用 C# 编写网页采集器。能够有效地从互联网上抓取、处理、分析,挖掘用户感兴趣的数据。
该软件是一款对“失信人口网”的数据采集软件,主要采集里面所有失信人口的信息到数据库,可以用于2次开发
所运用技术:C#的网络编程、采集(正则表达式实现)、多线程功能。使用方法:首先在顶点小说网站上找到你要下载的小说,点击全文阅读,然后复制网址粘贴到窗体运行的文本框中,然后输入小说名,点击采集。
,不足之处大家还得见谅,多提意见,单页采集只是对一个页面进行采集,多页采集可以添加多个页面地址进行采集(一个模板,有多个页面时,需把对应的地址输入进去)注意:开发环境为VisualStudio2010
预留了些接口,提供IAnalyzer和IGatherSaver,只要实现这两个接口,即可实现从其他网站,以其他方式保存采集结果。
如果有需要将会陆续奉上采集此网站的所有信息,例如:电影名称、作者、出产日期、电影地址等。如果有技术问题请发送信息至邮箱wdxgdiy@126.com源码内含有安装部署文件