当前位置:首页 > 技术 > 正文内容

Selenium自动化测试中的用户数据持久化、反检测策略与多窗口管理

访客 技术 2026年7月15日 1

1. 使用持久化用户配置启动Chrome浏览器

通过加载本地已存在的Chrome用户配置目录,可以让Selenium驱动的浏览器携带真实的用户环境(如缓存、Cookie、登录状态等),从而降低被目标网站识别为自动化脚本的风险。该方法相比默认启动方式更接近真实用户行为。

from selenium import webdriver
from selenium.webdriver.chrome.service import Service

# 指定Chrome用户数据目录(注意路径需根据实际系统调整)
user_profile_path = r'C:\Users\YourUsername\AppData\Local\Google\Chrome\User Data'

# 配置Chrome选项
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument(f'--user-data-dir={user_profile_path}')

# 启动带用户数据的浏览器实例
service = Service(executable_path='chromedriver.exe')
driver = webdriver.Chrome(service=service, options=chrome_options)
driver.get('https://www.baidu.com')

2. 借助调试模式绕过自动化检测机制

某些网站会检测navigator.webdriver等属性来识别Selenium行为。一种有效规避手段是复用一个通过命令行启动的独立Chrome进程,使Selenium连接到已有浏览器实例而非创建新进程,从而隐藏自动化特征。

import os
from selenium import webdriver
from selenium.webdriver.chrome.options import Options

# 切换至Chrome安装目录并启动远程调试模式
os.chdir(r"C:\Program Files\Google\Chrome\Application")
os.popen('chrome.exe --remote-debugging-port=9527 --user-data-dir="D:\\selenium_debug"')

# 配置选项连接到已运行的浏览器
chrome_options = Options()
chrome_options.add_experimental_option("debuggerAddress", "127.0.0.1:9527")

# 创建WebDriver对象连接现有浏览器
driver = webdriver.Chrome(options=chrome_options)

此方法的核心优势在于:浏览器由外部命令启动,不带有典型Selenium标记,极大提升了反检测能力,适用于高强度反爬场景。

3. 无头模式执行后台任务

在无需图形界面的环境中(如服务器部署),可启用Headless模式运行浏览器。它不会弹出可视化窗口,节省资源且适合长时间后台运行。

from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.chrome.service import Service

# 设置无头模式
chrome_options = Options()
chrome_options.add_argument('--headless')  # 不显示浏览器界面
chrome_options.add_argument('--disable-gpu')  # 禁用GPU加速(部分系统需要)

service = Service(executable_path='chromedriver.exe')
driver = webdriver.Chrome(service=service, options=chrome_options)
driver.get('https://www.baidu.com')
print(driver.page_source)

driver.quit()

4. 多标签页间的句柄切换控制

当页面操作触发新窗口或标签页打开时,Selenium默认仍停留在原上下文。必须手动切换至新句柄才能操作新页面内容,并在完成后返回原始页面继续交互。

# 记录初始窗口句柄
main_handle = driver.current_window_handle

# 执行点击操作触发新页面打开
# ... 如 driver.find_element(By.LINK_TEXT, "打开新页").click()

# 获取所有当前窗口句柄
all_handles = driver.window_handles

# 遍历找到新窗口并切换
for handle in all_handles:
    if handle != main_handle:
        driver.switch_to.window(handle)
        break

# 在新页面上进行操作
# ... 如元素定位、数据提取等

# 完成后关闭当前页并切回主窗口
driver.close()  # 关闭当前标签页
driver.switch_to.window(main_handle)  # 返回主窗口

该流程确保了跨窗口操作的准确性和连续性,常用于处理广告弹窗、跳转链接或多步骤表单场景。

推荐工具资源

相关文章

Linux crontab 详解

1) crontab 是什么cron 是 Linux 的定时任务守护进程;crontab 是用来编辑/查看“按时间周期执行命令”的表(cron table)。常见两类:用户 crontab:每个用户一份(crontab -e 编辑)系统级 crontab / cron.d:可指定执行用户(/etc/crontab、/etc/cron.d/*)2) crontab 时间...

富文本里可以允许的 HTML 属性

一、所有标签默认允许的安全属性(极少)class        (可选)id           (通常建议禁用)title️ 注意:id 容易被滥用做锚点注入,很多系统直接禁用class 允许的话最好只允许固定前缀(如 editor-*)二、a 标签允许属性<a href="" t...

Mac 安装 Node.js 指南

方法一:通过官网安装包(最简单,适合初学者)如果你只是想快速安装并开始使用,这是最直接的方法。访问 Node.js 官网。页面会显示两个版本:LTS (Recommended For Most Users):长期支持版,最稳定。建议选这个。Current:最新特性版,包含最新功能但可能不够稳定。下载 .pkg 安装包并运行。按照安装向导点击“下一步”即可完成。方法二:使用 Homebrew 安装(...

Dom\HTML_NO_DEFAULT_NS 的副作用:自动加闭合标签

在使用Dom\HTMLDocument时,Dom\HTML_NO_DEFAULT_NS 将禁止在解析过程中设置元素的命名空间, 此设置是为了与DOMDocument向后兼容而存在的。当使用它时,已知的一个副作用就是:自动加闭合标签例如 </img> 为什么会这样?当你使用:Dom\HTML_NO_DEFAULT_NS文档会变成 无命名空间模式,此时内部更接近 XML...

Laravel 事件和监听器创建

在 Laravel 中,使用 Artisan 命令创建 Events(事件) 和 Listeners(监听器) 是非常高效的。你可以通过以下几种方式来实现:1. 手动创建单个 Event如果你只想创建一个事件类,可以使用 make:event 命令:Bashphp artisan make:event UserRegistered执行后,文件将生成在 app/Even...

自定义域名解析神器 dnsmasq

什么是 dnsmasq?dnsmasq 是一个轻量级、功能强大的网络服务工具,专为小型和中等规模网络设计。它是一个综合的网络基础设施解决方案[1]。dnsmasq 能做什么?功能说明应用场景DNS 转发与缓存将 DNS 查询转发到上游服务器(ISP、Google DNS 等),并在本地缓存结果加快 DNS 查询速度,减少外部 DNS 流量本地 DNS解析本地网络设备的主机名,无需编辑&n...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。