通过C#语言.net winform框架实现的网络爬虫软件,网页大数据抓取工具。
参照知乎网做的一个简易版问答网站,后台采用Java语言,及Spring,SpringMVC,MyBatis等框架,模版引擎使用FreeMarker。 数据库用到MySQL,Redis。
微信机器人源码,是采用C#封装的仿微信网页协议的机器人,支持同时登录多个微信号
在百度贴吧做SEO推广时,输入百度网盘的分享短链,总会被系统删除,那么就可以使用此工具来对短链进行批量转换为长链,转换后,链接更易于推广及收录。
通用网页下载器,悬浮在浏览器上方,主要用于手工摘选、下载网页信息,可以按规则或者自动提取算法获取文章主要信息;正文部分,运用正则表达式进行了处理,过滤了大部分标签,留下的是最干净的网页。
这是一款用 C# 编写网页采集器。能够有效地从互联网上抓取、处理、分析,挖掘用户感兴趣的数据。
3、在邮箱采集时,首先在地址栏中输入网页地址并访问,然后需设置网页中“下一页”的关键词,例如天涯贴吧的“下一页”关键词是“下页”,等待网页加载完毕,才能开始采集。