通过C#语言.net winform框架实现的网络爬虫软件,网页大数据抓取工具。
我们在用C# 开发程序时,经常会使用的多线程,实现多任务的处理。一般常用的方法是新建多个线程,进行处理。 今天我分享一个采用线程池的方式来实现的实例。对有需要的朋友做个借鉴。
该软件可以自动从网上爬取小说到软件中,软件分为 我的书架,书城,搜索和阅读界面。
多任务多线程带进度条采集,支持Cookie采集 支持人工登陆采集
这是一款用 C# 编写网页采集器。能够有效地从互联网上抓取、处理、分析,挖掘用户感兴趣的数据。
所运用技术:C#的网络编程、采集(正则表达式实现)、多线程功能。使用方法:首先在顶点小说网站上找到你要下载的小说,点击全文阅读,然后复制网址粘贴到窗体运行的文本框中,然后输入小说名,点击采集。