一米URL外链资源批量抓取工具 2016-08-10 版

三大模式抓取url,搜索引擎,全网蜘蛛,C段旁站抓取,大批量采集URL外链资源,支持国内外多种搜索引擎(谷歌、百度、雅虎等),支持多脚本+关键词抓取,自带匹配关键词库。

软件特点

　　谷歌百度等绝大多数搜索引擎脚本(footprint)抓取URL;

　　支持手工浏览器获取url，自动过滤重复url或域名;

　　全网段蜘蛛爬取分析过滤URL，全球海量url资源爬取;

　　同IP段网站批量扫描(C段扫描);

　　多种方式外链资源整理(去重/识别/过滤);

更新日志

　　2015-04-23一米URL外链资源批量抓取工具发布上线●一米URL外链资源批量抓取工具正式发布上线

　　2015-07-22新增haosou及sogou等搜索引擎●新增了haosou和sogou相关关键词提取...

　　2015-08-17新增了专属代理功能●由于谷歌等国外搜索引擎对国内的屏蔽，新增了专属高匿名代理功能，可更好的抓取谷歌相关关键词

　　2015-06-17改进了蜘蛛抓取效率●修复了蜘蛛抓取特殊链接出错的bug，改进了抓取线程流程，提高了抓取效率

　　2016-04-08新增了本地切换IP轮换抓取功能●除了使用代理IP外抓取外，新增了使用本地切换IP，断点续抓的功能

　　2016-08-10解决了手工模式下IE8以下版本不能抓取的问题●更新了IE8一下版本内核抓取，解决了手工模式下IE8以下版本不能抓取的问题