通过C#语言.net winform框架实现的网络爬虫软件,网页大数据抓取工具。
本系统是一套基于TCP的远程数据采集系统,支持GPRS、TCP、串口等多种通讯方式;核心采用异步多线程技术,支持多并发处理;通讯协议可根据需求灵活配置,完美支持modbus协议、188水表通讯协议,RTU
多任务多线程带进度条采集,支持Cookie采集 支持人工登陆采集
1、多线程分析TXT文本中的数据2、支持大文件读取分析(测试最大文件500M)3、内容自动存储到SQLite数据库中
winform多线程传输数据,传输内容可以在配置文件中配置,刷屏显示已传输数据,欢迎大家来下载哦!
程序支持高并发Socket通讯及处理,串口通讯的数据采集,Modbus通讯多线程定时发送采集指令,自定义的漂亮的UI,Log4net 日志记录文件数据已验证,验证数据是否正确。
IP代码服务器IP功能,多线程获取,目前支持四个主流IP代理网站。
使用多线程、线程池技术,使用最新.NET4.0开发配合MSSQL2005数据库提高IO读写速度,保存蜘蛛爬过的历史,能避免采集到重复的Email,避免爬行重复的URL。