SpiderManager

数据库课程设计-爬虫管理系统

###爬虫管理系统说明

将平时所作爬虫做以归纳管理

提供方便与用户配置的接口

引用微博API使用Oauth协议进行登陆操作

前端供用户操作，提交的配置将存入数据库

服务端将定期进行数据库扫描，读取用户对应应用的配置文件

按照配置规则进行数据抓取，抓取结束后通过邮件服务告知用户数据下载链接