一种基于设备指纹和动态防护的Web爬虫防护方法

    公开(公告)号:CN120046146A

    公开(公告)日:2025-05-27

    申请号:CN202510022459.X

    申请日:2025-01-07

    Abstract: 本发明涉及爬虫防护领域,尤其涉及一种基于设备指纹和动态防护的Web爬虫防护方法,包括:根据目标网站的页面链接分布值以及相关页面差异值确定目标网站的特征状态;基于目标网站的特征状态确定爬虫分析防护方式为针对用户操作指纹进行分析防护或针对目标网站进行动态防护;针对用户操作指纹进行分析防护中,根据链接信息差异度与预设链接信息差异度的比对结果确定根据信息相关参考值以及搜索深度参考值或根据鼠标轨迹异常参考值以及鼠标滑动异常参考值确定是否进行爬虫防护预警;针对目标网站进行动态防护中,根据敏感访问页面数量以及资源利用率确定动态防护需求状态并根据动态防护需求状态确定动态防护策略;本发明提高了爬虫防护准确性。

Patent Agency Ranking