通过C#语言.net winform框架实现的网络爬虫软件,网页大数据抓取工具。
在百度贴吧做SEO推广时,输入百度网盘的分享短链,总会被系统删除,那么就可以使用此工具来对短链进行批量转换为长链,转换后,链接更易于推广及收录。
这是一款用 C# 编写网页采集器。能够有效地从互联网上抓取、处理、分析,挖掘用户感兴趣的数据。小说、新闻、文章、图片等都能有效采集。本程序采用SQLite存储数据,实现多线程断点采集。
通用网页下载器,悬浮在浏览器上方,主要用于手工摘选、下载网页信息,可以按规则或者自动提取算法获取文章主要信息;正文部分,运用正则表达式进行了处理,过滤了大部分标签,留下的是最干净的网页。
这是一款用 C# 编写网页采集器。能够有效地从互联网上抓取、处理、分析,挖掘用户感兴趣的数据。
网络抓包、分析处理返回数据、界面UI控制(线程和委托)、分析腾讯空间接口协议,Cookie获取处理,身份验证等等
QQ好友相册下载辅助源码功能介绍:可以批量下载qq好友空间相册的辅助,前提是好友相册对自己开放。图片文件保存在bin/debug/users文件夹中。可以获取指定QQ好友相册图片。
3、在邮箱采集时,首先在地址栏中输入网页地址并访问,然后需设置网页中“下一页”的关键词,例如天涯贴吧的“下一页”关键词是“下页”,等待网页加载完毕,才能开始采集。