[重保小助手]Hawkeye鹰眼web监测
功能介绍
—
[*]
关键页面监测
特殊期间关键页面监测,监测页面连通性、长度变化以及标题变化。
部分页面每次访问会存在较小的长度变化,所以--range参数可指定忽略x个字符内的变化。
[*]
违规信息检测
这个和之前的差不多了,正则匹配关键词、页面特征。之前就仅仅对首页来一发就结束,这次重新改了下,加入了爬虫功能,可自定义深度。顺带加了一下可选user-agent,针对一些黑猫seo的隐藏手法。
较之前不太一样的就是之前直接拿requests返回的内容,针对如webpack之类 的就不行了,所以这次换成了无头浏览器去渲染。
optional arguments:
-h, --helpshow this help message and exit
-monitor 对关键页面进行监控
--time 60 监控时间间隔,默认60秒
-check 对目标网站进行爬虫并检测违规信息
--deep 5 爬虫的深度,默认5
--ua baiduuser-agent,可选(pc,baidu,google,360,bing,sm,sogou),默认使用百度蜘蛛
下载
页:
[1]