利用PHP和Selenium实现爬虫数据采集

<?php
require 'vendor/autoload.php';
use Facebook\WebDriver;
use Facebook\WebDriver\Remote;
 
// 设置Selenium服务器参数
$host = 'http://localhost:4444'; // 默认的Selenium服务器地址和端口
$capabilities = WebDriver\WebDriver::browserName('firefox');
$driver = Remote\WebDriver\WebDriver::create($host, $capabilities);
 
// 打开目标网页
$driver->get('http://example.com');
 
// 模拟用户操作：点击登录按钮
$login_button = $driver->findElement(WebDriver\WebDriver::CSS, "a[href='/login']");
$login_button->click();
 
// 等待登录表单加载完成
$driver->wait()->until(WebDriver\WebDriverExpectedCondition::presenceOfElementLocated(
    WebDriver\WebDriver::CSS, "input[name='username']"
));
 
// 输入用户名和密码
$username = $driver->findElement(WebDriver\WebDriver::CSS, "input[name='username']");
$password = $driver->findElement(WebDriver\WebDriver::CSS, "input[name='password']");
$username->sendKeys('your_username');
$password->sendKeys('your_password');
 
// 模拟用户操作：点击登录按钮
$login_button = $driver->findElement(WebDriver\WebDriver::CSS, "input[type='submit']");
$login_button->click();
 
// 等待登录后的页面加载完成
// ...
 
// 抓取需要的数据
// ...
 
// 关闭浏览器
$driver->quit();
?>

这个代码实例展示了如何使用PHP和Selenium WebDriver来打开一个网页，模拟用户的登录操作，并在登录后抓取所需的数据。这个流程是爬虫数据采集的一个常见场景。