信息记录材料

首页 > 刊期 > 2023 > 6期 > 信息：技术与应用

基于 Selenium 框架的反爬虫程序设计与实现

王帅

【摘要】大数据时代数据的重要性受到了人们的广泛重视。如何有效保护网络数据资源，精准防控网络爬虫程序对数据进行不当收集和对服务器资源造成破坏，适当的反爬虫程序的设计与实现尤为重要。反爬虫程序能够实现自动监控网络爬虫程序带来的破坏，提高人工监控数据的效率。本文实现了基于 Selenium 框架的反爬虫程序设计，经过实际的数据测试，融合了 Selenium 框架的反爬虫程序设计能够在一定程度上提高网站的反爬虫效率。

【关键字】大数据；爬虫程序；Selenium 框架；反爬虫