获取重定向前的URL：三种实用方法及代码示例

java

2024-11-07 17:51:40

获取重定向前的 URL

在 Web 测试中，经常需要获取页面重定向前的 URL。由于重定向速度很快，直接使用 driver.getCurrentUrl() 往往只能获取到最终的 URL。本文将介绍几种获取重定向前 URL 的方法，并分析其原理和适用场景。

问题分析

页面重定向通常通过 HTTP 状态码 301、302、307 或 JavaScript 实现。浏览器接收到这些指令后会立即跳转到新的 URL，导致 driver.getCurrentUrl() 难以捕捉到原始 URL。

解决方案

1. 禁用自动重定向

部分浏览器驱动提供了禁用自动重定向的选项。这种方法可以让浏览器停留在初始 URL，从而方便获取。

Selenium (Java)

ChromeOptions options = new ChromeOptions();
options.addArguments("--disable-site-engagement-checks");
options.addArguments("--disable-notifications");
Map<String, Object> prefs = new HashMap<String, Object>();
prefs.put("profile.managed_default_content_settings.popups", 0);
prefs.put("profile.default_content_setting_values.notifications", 2);
prefs.put("profile.managed_default_content_settings.javascript", 1);

// 禁用重定向
prefs.put("network.http.redirection-limit", 0);


options.setExperimentalOption("prefs", prefs);

WebDriver driver = new ChromeDriver(options);
driver.get("your_url");

String originalUrl = driver.getCurrentUrl();
// 执行后续操作，例如手动触发重定向或提取所需信息
// ...
driver.quit();

操作步骤:
1. 创建 ChromeOptions 对象。
2. 使用 addArguments 方法添加必要的参数，以避免不必要的干扰。
3. 通过 setExperimentalOption 方法将设置应用到浏览器驱动。
原理: 通过设置 network.http.redirection-limit 为 0，浏览器将停止处理重定向请求，停留在原始 URL。

2. 使用网络请求拦截

利用浏览器驱动的网络拦截功能，可以捕获所有发出的 HTTP 请求，包括重定向请求。通过分析请求头信息，即可获取原始 URL 和目标 URL。

Selenium (Java)

// 使用 BrowserMob Proxy 或其他类似工具
// ...设置代理...

driver.get("your_url");

// 从代理获取 HAR 文件或直接分析请求信息
// ... 获取重定向前的 URL ...

// ...

操作步骤:
1. 设置网络代理，例如 BrowserMob Proxy。
2. 使用代理拦截所有 HTTP 请求。
3. 分析请求头信息，找到状态码为 3xx 的重定向请求，提取其中的 Location 字段，即为目标 URL。同时记录原始 URL。
原理: 代理服务器充当中间人，记录所有进出的网络请求。通过分析这些请求，可以获取重定向前后的 URL。

3. JavaScript 执行

使用 JavaScript 可以监控页面 URL 的变化，并在重定向发生前获取原始 URL。

Selenium (JavaScript)

const originalUrl = await driver.executeScript(() => {
  return new Promise(resolve => {
    const initialUrl = window.location.href;
    const observer = new MutationObserver(() => {
      if (window.location.href !== initialUrl) {
        observer.disconnect();
        resolve(initialUrl);
      }
    });
    observer.observe(document, { subtree: true, childList: true, attributes: true });
  });
});

console.log('Original URL:', originalUrl);

操作步骤:
1. 使用 driver.executeScript() 执行 JavaScript 代码。
2. 代码中使用 MutationObserver 监听页面 URL 的变化。
3. 当 URL 发生变化时，返回原始 URL。
原理: 利用 MutationObserver API 可以实时监控 DOM 的变化，包括 URL 的变化。这样就能在重定向发生之前获取到原始 URL。