链接抓取推送系统
咨询(QQ:1217179982)
网站地图
-
链接长度过滤 -
链接nofollow过滤 -
按目录过滤 -
按后缀过滤 -
按关键词过滤,排除指定关键词或者抓取包含指定关键词,支持正则匹配 -
定位抓取异常链接首次出现的页面 -
自定义抓取线程 -
自定义XML地图文件链接数量 -
XML地图文件 -
TXT地图文件 -
HTML地图文件 -
异常链接csv报表
网页监控
网页监控,分钟级的扫描粒度,快速发现新链接,第一时间做推送处理。
链接推送
-
百度普通推送 -
百度快速收录推送 -
神马MIP推送 -
对于大型网站几十万几百万甚至更多的链接数,一天不可能推送完成,我们支持断点续传,今天没推送完成的,
明天第一时间接着继续推送。
部署方式
云服务,使用微视界俱乐部提供的云服务,按量使用
私有部署方式,程序安装在您的服务器上,无限制使用;支持终身授权与按年授权两种方式,私有部署支持二次分发,可在设置用户的使用权限,包含网站数量,抓取数量等。