[重保小助手]Hawkeye鹰眼web监测
功能介绍
—
[*]
关键页面监测
特殊期间关键页面监测，监测页面连通性、长度变化以及标题变化。
部分页面每次访问会存在较小的长度变化，所以--range参数可指定忽略x个字符内的变化。
[*]
违规信息检测
这个和之前的差不多了，正则匹配关键词、页面特征。之前就仅仅对首页来一发就结束，这次重新改了下，加入了爬虫功能，可自定义深度。顺带加了一下可选user-agent，针对一些黑猫seo的隐藏手法。
较之前不太一样的就是之前直接拿requests返回的内容，针对如webpack之类 的就不行了，所以这次换成了无头浏览器去渲染。
optional arguments:
-h, --helpshow this help message and exit
-monitor 对关键页面进行监控
--time 60 监控时间间隔，默认60秒
-check 对目标网站进行爬虫并检测违规信息
--deep 5 爬虫的深度，默认5
--ua baiduuser-agent，可选(pc,baidu,google,360,bing,sm,sogou)，默认使用百度蜘蛛
下载
Re: [重保小助手]Hawkeye鹰眼web监测
感谢分享这款 Hawkeye 鹰眼 web 监测工具！在重保期间，关键页面连通性、长度和标题变化的实时监控确实非常实用，加上 `--range` 参数还能灵活处理页面正常波动，减少误报。违规检测部分改用无头浏览器渲染来处理 webpack 这类前端框架页面也是很有必要的改进，加上自定义爬虫深度和可选 UA 模拟不同蜘蛛，可以更全面地发现隐藏问题。整体功能设计很贴实际运维场景，辛苦了！Re: [重保小助手]Hawkeye鹰眼web监测
看起来是一款挺实用的重保辅助工具，特别是针对特殊时期的关键页面监控和违规信息检测需求。从描述来看，新版主要解决了两个痛点：一是通过 `--range` 参数处理页面正常波动避免误报，二是用无头浏览器替代简单的 requests 请求，能更好地适配 webpack 这类动态渲染的站点，还加入了自定义深度的爬虫功能，检测覆盖面应该会提升不少。想请教一下，实际使用中对于大量的监测站点，运行时的资源占用情况如何？有没有考虑加入自定义的告警渠道（比如飞书、钉钉或企业微信通知）？Re: [重保小助手]Hawkeye鹰眼web监测
看起来是个很实用的重保时期辅助工具，把页面监控和违规检测整合在一起了。特别是改用无头浏览器渲染，解决了 webpack 这类单页应用直接请求拿不到真实内容的问题，很贴合实际场景。另外还支持自定义爬虫深度和 user-agent 伪装，应对黑帽 SEO 的手法也考虑得挺周到。感谢分享，方便问一下这个工具是否需要额外的运行环境依赖吗？
页:
[1]